DS0302 - 2016

Toucher Artificiel pour la Perception et la Manipulation – Phase

Toucher Artificiel pour la Perception et la Manipulation

Capteurs tactiles inspirés de la perception humaine.

Enjeux et objectifs

Tous les jours, nous manipulons des dizaines, voire des centaines d’objets, et pour chaque interaction, les mouvements des doigts sont informés par les sensations tactiles. Lorsque l’on positionne un crayon dans sa main ou que l’on cherche une clef dans notre poche, les mécanorécepteurs enfouis dans notre peau nous renseigne sur l’état de l’objet touché et guide les doigts vers une prise stable. Cependant, le rôle exact du sens du toucher reste mal compris. L’objectif du projet Phase est donc d’étudier comment la perception tactile influence la manipulation dextre. Cette connaissance permet de développer des capteurs tactiles robotiques qui s’inspire de la perception humaine. Au cours du projet, les membres ont découvert quels sont les indices tactiles qui encodent la perception du frottement. Le frottement entre les doigts et l’objet est un des éléments clés de la manipulation et sa perception est essentielle pour savoir quelle force les doigts doivent appliquer. Un capteur tactile développé dans le projet Phase est désormais capable de mesurer le coefficient de frottement d’objets arbitraires par une simple pression du doigt sur l’objet. Grâce à cela, il est possible de contrôler finement des pinces robotiques pour appliquer l’effort nécessaire pour prendre et manipuler une large variété d’objets de la vie courante, mais aussi des fruits et légumes pour la robotique agricole ou des tissues biologiques dans le contexte de la robotique chirurgicale.

La majorité des mains et pinces robotiques attrapent des objets avec une force préprogrammée. Cette force est décidée par avance et est suffisamment forte pour soulever le poids de l’objet par l’intermédiaire de l’adhérence fournie par les doigts. Si l’objet est trop glissant –son coefficient de frottement est trop faible– le contact est mis à défaut et l’objet échappe la prise. Pour cette raison il est nécessaire de connaitre à l’avance le coefficient de frottement que le doigt applique sur l’objet. Le capteur tactile que nous avons développé dans le projet PHASE est capable de mesurer le coefficient de frottement d’objets arbitraires par une simple pression du doigt sur l’objet. Il est sensible à une déformation radiale qui est directement relié au frottement de la surface. Grâce à des algorithmes d’intelligence artificielle, l’image tactile peut être décodée pour découvrir la forme de l’objet et son frottement. Avec ces informations essentielles il est possible de contrôler finement les pinces robotiques pour appliquer un effort faible pour ne pas endommager l’objet, mais suffisamment élevé pour éviter le glissement de l’objet et maintenir une préhension stable.

Le premier résultat majeur du projet est la découverte de l’indice tactile du frottement. Avec l’aide d’un instrument optique innovant, le projet Phase a montré que la perception du frottement lors des premiers instants de contact était liée à une déformation radiale de la peau lors de la compression du doigt. Cette déformation radiale est créée par l’interaction des tissues et de la surface. Lorsque le frottement est élevé, la déformation est bloquée, donnant lieux à des minuscules mouvements radiaux de la peau et vice-versa. Le second résultat majeur du projet est que ce concept de déformation radiale a pu être distillé dans un nouveau capteur tactile, breveté, sensible à la déformation et capable de mesurer ce motif de déformations radiales, et par conséquent capable de détecter des zones de faible adhérence pour réajuster la prise des pinces robotiques. Ces nouvelles pinces tactiles peuvent alors appliquer une force suffisante pour soulever le poids de l’objet mais suffisamment faible pour ne pas l’endommager. Si l’objet est trop glissant (coefficient de frottement est trop faible), le contact est mis à défaut et l’objet échappe la prise. Des algorithmes d’intelligence artificielle décode le mouvement du capteur tactile pour retrouver le relief de l’objet touché et son adhérence. Ces recherches permettront d’améliorer les préhenseurs robotiques et leur permettre de manipuler des objets délicats tel que les fruits et les légumes.

/

Willemet, L.; Huloux, N.; Wiertlewski, M. Efficient tactile encoding of object slippage. Sci Rep. 2022, 12, 13192.

Willemet, L.; Kanzari, K.; Monnoyer, J.; Birznieks, I.; Wiertlewski, M. Initial contact shapes the perception of friction. Proceedings of the National Academy of Sciences of the United States of America. 2021, 118(49), e2109109118.

Scharff, R.B.N.; Boonstra, D.; Willemet, L.; Lin, X.; Wiertlewski, M. «Rapid manufacturing of color-based hemispherical soft tactile fingertips«. 2022 IEEE 5th International Conference on Soft Robotics (RoboSoft). IEEE. 2022, 896-902.

Lin, X.; Willemet, L.; Bailleul, A.; Wiertlewski, M. Curvature sensing with a spherical tactile sensor using the colorinterference of a marker array. In 2020 IEEE International Conference on Robotics and Automation (ICRA). May 2020, 603-609.

Workshop organisé à la conférence internationale Eurohaptics 2022 sur les sujets de la mécanique du toucher

Nous percevons par le sens du toucher des propriétés physiques qui sont difficilement accessibles par la vision, tel que le centre de gravité d’un objet ou la micro-géométrie de ses surfaces. La perception de ces propriétés est indispensable à une manipulation stable. En effet, l’absence d’informations cutanées rend la préhension et la manipulation dextre difficile. On peut s’en rendre compte en hiver lorsque nos doigts sont anesthésiés par le froid et que placer une clef dans une serrure devient laborieux.
En dépit de son rôle central dans la manipulation, les systèmes robotiques actuels sont rarement équipés de capteurs tactiles qui capturent les informations pertinentes de la scène tactile. En compensation, ils s’appuient majoritairement sur la vision artificielle pour effectuer ces tâches avec les limitations sur leur robustesse. Plusieurs raisons motivent ce choix technologique. En premier lieu, contrairement aux caméras, les doigts et la peau artificiels avec suffisamment de re´solution et de fiabilité ne sont pas encore largement accessibles aux chercheurs et industriels. Dans un deuxième temps, même les meilleurs capteurs tactiles artificiels souffrent d’un cadre théorique pour le traitement du signal et la reconnaissance de la scène tactile. Les rares développements qui abordent ce sujet sont souvent liés à des algorithmes de traitement d’images qui omettent les propriétés de frottement et d’adhésion, essentielle pour le contrôle précis des mains robotiques et la caractérisation des surfaces.
Ce programme de recherche a pour but de combler ces limitations sur la conception de doigts artificiels souple et de mise en œuvre du toucher computationnel pour donner le sens du toucher à de nombreuses applications. Les capteurs feront appel aux récents développements en mécanique et électronique souple pour construire un doigt artificiel dont les capacités perceptuelles et mécaniques se rapproche de son homologue humain. Les données produites par ces capteurs permettront d’inférer l’état des contraintes au contact entre le doigt et l’objet, à travers un cadre théorique basé sur la tribologie et la mécanique des milieus continus.
La recherche sur le sens du toucher est encore jeune en comparaison a celle sur la vision et l’audition. Construire un cadre théorique et pratique autour du toucher artificiel a un potentiel innovant comparable à celui de la vision par ordinateur il y a 30ans de cela.

Coordination du projet

Michael Wiertlewski (Institut des Sciences du Mouvement)

L'auteur de ce résumé est le coordinateur du projet, qui est responsable du contenu de ce résumé. L'ANR décline par conséquent toute responsabilité quant à son contenu.

Partenariat

AMU (ISM) Institut des Sciences du Mouvement

Aide de l'ANR 288 777 euros
Début et durée du projet scientifique : septembre 2016 - 42 Mois

Liens utiles

Explorez notre base de projets financés

 

 

L’ANR met à disposition ses jeux de données sur les projets, cliquez ici pour en savoir plus.

Inscrivez-vous à notre newsletter
pour recevoir nos actualités
S'inscrire à notre newsletter