TactStyle veut donner du relief et du toucher aux modèles 3D

Voir un objet en trois dimensions ne suffit pas toujours à le comprendre. Une surface peut sembler rugueuse, lisse, veinée ou granuleuse à l’écran, sans que l’on puisse savoir ce qu’elle procurerait réellement sous les doigts. Or cette information compte dans de nombreux objets du quotidien : la prise en main d’un support de téléphone, le fini d’un accessoire, la lisibilité d’un support pédagogique ou l’impression de matière donnée par une décoration.

C’est précisément l’écart que cherche à réduire TactStyle, un système développé par des chercheurs du Laboratoire d’intelligence artificielle et d’informatique du MIT. Présenté en avril 2025, l’outil propose de styliser un modèle 3D à partir d’une image, tout en générant le relief nécessaire pour que sa surface suggère aussi une texture au toucher. L’ambition n’est pas d’ajouter un simple effet visuel à une forme numérique, mais de rapprocher deux dimensions habituellement dissociées : ce que l’on voit et ce que l’on ressent.

Pourquoi les modèles 3D restent-ils surtout visuels ?

Les outils de modélisation 3D sont désormais présents dans des secteurs très variés, du cinéma à la conception de produits. Ils permettent de définir la forme d’un objet, sa couleur et son apparence de surface. Certains systèmes s’appuient sur du texte ou sur une image pour guider cette création. Mais, dans la plupart des cas, le résultat est pensé d’abord pour les yeux.

Cette priorité donnée au visuel laisse de côté une composante importante de l’expérience matérielle. Lorsque nous touchons une pierre, du bois, un tissu ou une surface plastique, nous évaluons intuitivement sa rugosité, les variations de son relief, ses aspérités et sa texture. Ces signaux ne sont pas accessoires : ils influencent la manière dont nous identifions un matériau et dont nous utilisons un objet.

Une image de marbre, par exemple, peut reproduire fidèlement ses veines et ses contrastes. Elle ne crée pas pour autant les micro-reliefs qui donnent une sensation de surface. À l’inverse, un relief ajouté sans cohérence avec l’apparence visuelle peut produire une impression déroutante. La difficulté est donc double : créer une géométrie suffisamment détaillée pour être perceptible, et faire en sorte que cette géométrie corresponde à ce que l’utilisateur s’attend à toucher.

Les méthodes traditionnelles demandent souvent des compétences avancées en conception assistée par ordinateur. Modifier précisément la surface d’un objet, sans altérer sa fonction ou sa structure, suppose de maîtriser des logiciels spécialisés. Cette barrière technique limite la personnalisation pour les personnes qui voudraient simplement adapter un modèle téléchargé à leurs préférences.

TactStyle : une image pour l’apparence, un relief pour le toucher

Le projet TactStyle part d’un principe simple : une image de texture peut inspirer à la fois l’apparence d’un objet et la manière dont il devrait être perçu au toucher. Le système permet à un utilisateur de partir d’un modèle 3D existant, par exemple un support de casque, puis de lui appliquer un style issu d’une image.

Sa particularité est de dissocier la stylisation visuelle et la stylisation géométrique. La première concerne ce que l’on voit : le motif, la texture apparente, les détails de surface. La seconde concerne ce que l’on touche : les irrégularités, les creux et les bosses susceptibles de produire une sensation de relief.

Pour cela, TactStyle génère une « carte de hauteur », parfois désignée par le terme anglais heightfield. Il s’agit d’une représentation numérique de la microgéométrie d’une surface : chaque zone indique une élévation relative. Cette carte peut ensuite servir à inscrire du relief sur le modèle 3D.

Cette séparation est importante. L’apparence et le toucher sont liés dans notre perception, mais ils ne sont pas la même information. Une photographie donne des indices sur une matière, sans fournir directement sa géométrie de surface. TactStyle cherche donc à produire un relief cohérent avec les attentes suscitées par l’image, plutôt qu’à se limiter à plaquer un motif sur un objet.

Des capteurs tactiles à l’IA générative

Jusqu’ici, reproduire une texture tactile nécessitait fréquemment de disposer de l’objet réel ou, au minimum, d’un enregistrement détaillé de sa surface. Des capteurs tactiles spécialisés, tels que GelSight, peuvent recueillir ce type d’information. Leur usage est précieux pour mesurer finement des surfaces, mais il suppose l’accès à un matériau physique et à un équipement adapté.

L’approche de TactStyle est différente : le système produit directement une carte de hauteur depuis une image de texture grâce à l’IA générative. En théorie, cela rend le processus plus accessible lorsqu’aucun objet réel n’est disponible pour être mesuré. Une photo ou une image de référence devient le point de départ d’une exploration tactile.

Cette évolution ne signifie pas qu’une image peut révéler avec certitude toutes les propriétés d’une matière. Le toucher ne dépend pas uniquement du relief. La dureté, la température, l’élasticité ou encore le frottement influencent aussi la sensation éprouvée. TactStyle se concentre ici sur un aspect précis, la géométrie de surface, qui est particulièrement pertinent pour des textures et des reliefs perceptibles.

Les chercheurs ne présentent donc pas l’outil comme une copie parfaite de n’importe quel matériau. Le système vise plutôt à créer une correspondance convaincante entre une apparence donnée et le relief tactile que les utilisateurs s’attendent à rencontrer.

Une personnalisation plus simple des objets 3D

L’intérêt pratique de TactStyle tient aussi à la simplification de la personnalisation. Des plateformes telles que Thingiverse donnent accès à de nombreux modèles 3D, mais leur modification peut être difficile pour un public non technique. Retoucher manuellement une surface, modifier ses motifs ou créer un relief sans compromettre la fonctionnalité d’un objet demande du savoir-faire.

TactStyle adopte au contraire une logique de personnalisation à haut niveau. L’utilisateur part d’une forme existante et exprime une intention esthétique à travers une image. Le système doit ensuite associer cette image au relief adapté, tout en préservant la forme générale et l’usage prévu de l’objet.

Faraz Faruqi, doctorant et auteur principal d’une publication consacrée au projet, envisage plusieurs terrains d’application. La décoration intérieure et les accessoires personnels figurent parmi les usages évoqués. Un support de casque ou un support de téléphone pourrait ainsi recevoir une finition plus complexe, à la fois visible et palpable.

Pour les concepteurs de produits, cette approche pourrait accélérer certaines phases de prototypage. Avant de choisir une finition, il est utile de comparer plusieurs sensations de surface. La possibilité de modifier plus facilement le relief d’un objet peut aider à explorer ces options sans reconstruire intégralement le modèle à chaque essai.

Quel rôle pour l’éducation et l’apprentissage tactile ?

Le projet ouvre également des perspectives pour les outils pédagogiques. Certaines notions se prêtent particulièrement bien à une exploration par le toucher : reliefs topographiques, formes géométriques, structures biologiques ou différences entre matériaux. Pouvoir proposer diverses textures dans une salle de classe, sans exiger un échantillon réel de chacune, peut enrichir l’apprentissage.

Cette dimension ne concerne pas seulement les élèves ayant recours au toucher. Manipuler un objet donne souvent une compréhension plus concrète d’une forme ou d’une surface qu’une image seule. Dans un contexte de design, cela peut permettre d’apprendre à relier une intention esthétique à une expérience physique.

La promesse est particulièrement intéressante pour la conception inclusive. Des supports pensés pour être manipulés peuvent contribuer à rendre certaines informations plus accessibles. Toutefois, la pertinence pédagogique dépendra toujours du contenu, de la qualité de fabrication du relief et de la façon dont l’objet est intégré à une activité d’apprentissage.

Que montrent les premiers tests ?

Les chercheurs ont évalué TactStyle au moyen de tests psychophysiques, une méthode qui consiste à étudier la façon dont des personnes perçoivent des stimuli. Ici, l’enjeu était de vérifier si les textures générées évoquaient effectivement les propriétés tactiles attendues par les participants.

Selon les expérimentations rapportées, TactStyle apporte des améliorations par rapport à des méthodes de stylisation plus classiques. Les utilisateurs ont perçu les textures produites comme similaires aux sensations tactiles auxquelles ils pouvaient s’attendre en regardant leur apparence. Une expérience a également montré que ces surfaces pouvaient proposer une expérience visuelle et tactile unifiée.

Ce résultat est essentiel, car il mesure davantage qu’une qualité graphique. Une texture réussie dans ce cadre doit éviter le décalage entre la vue et le toucher. Si un objet semble fait d’un matériau à gros grains, mais se révèle entièrement lisse, ou si son relief évoque une autre matière que celle suggérée par son image, l’expérience perd en cohérence.

Les résultats doivent néanmoins être lus comme ceux d’un travail de recherche sur une approche nouvelle. Ils montrent un potentiel et une direction technique, non une solution universelle déjà prête à reproduire toutes les sensations matérielles. La fidélité finale dépendra notamment de la texture choisie, du relief généré et des conditions dans lesquelles l’objet est fabriqué et manipulé.

Ce qu’il faut surveiller

La prochaine étape annoncée par les chercheurs consiste à étendre TactStyle afin de générer de nouveaux modèles 3D intégrant directement des textures à l’aide de l’IA générative. Aujourd’hui, le projet repose notamment sur la stylisation d’un modèle de base. À terme, la génération de forme et la génération de surface tactile pourraient être plus étroitement associées.

L’équipe s’intéresse aussi aux incohérences visuo-tactiles. L’idée consiste à concevoir volontairement des objets dont l’apparence et le toucher déjouent les attentes. Un objet ayant l’aspect du marbre pourrait ainsi procurer une sensation plus proche du bois. Ce type d’expérience pourrait intéresser le design, l’art ou la recherche sur la perception.

Pour que cette piste trouve une place durable dans les usages, plusieurs questions resteront déterminantes : la facilité de prise en main pour les non-spécialistes, la préservation de la fonction des objets personnalisés, la précision des reliefs obtenus et la capacité à produire des textures réellement utiles plutôt que purement décoratives. TactStyle ne transforme pas encore la modélisation 3D en expérience sensorielle complète, mais il rappelle une évidence souvent oubliée par les outils numériques : les objets ne se regardent pas seulement, ils se touchent aussi.