Étiquette : Une main robotique adroite intègre des capteurs thermiques

Vue arrière (à gauche) et avant (à droite) de la main MOTIF proposée. Les principaux composants de la main MOTIF sont étiquetés. L’image montre également un exemple de données des caméras RVB et thermique. Crédit : arXiv (2025). DOI : 10.48550/arxiv.2506.19201

Bien que les roboticiens aient introduit des systèmes de plus en plus perfectionnés au cours des dernières décennies, la plupart des robots existants ne sont pas encore capables de manipuler des objets avec la même dextérité et la même sensibilité que les humains. Cela nuit à leurs performances dans diverses tâches du quotidien, allant des tâches ménagères au déblaiement des décombres après des catastrophes naturelles, en passant par les tâches d’assemblage ou de maintenance, notamment dans les environnements de travail à haute température tels que les aciéries et les fonderies, où les températures élevées peuvent considérablement dégrader les performances et compromettre la précision requise pour des opérations sûres.

Des chercheurs de l’Université de Californie du Sud ont récemment développé la main MOTIF (Multimodal Observation with Thermal, Inertial, and Force sensors), une nouvelle main robotisée qui pourrait améliorer les capacités de manipulation d’objets des robots humanoïdes. Cette innovation, présentée dans un article publié sur le serveur de prépublications arXiv , combine des capteurs tactiles, un capteur de profondeur, une caméra thermique , des capteurs d’unité de mesure inertielle (IMU) et un capteur visuel.

« Notre étude est née de la nécessité de faire progresser la manipulation robotique au-delà des détections visuelles et tactiles traditionnelles », ont déclaré Daniel Seita, Hanyang Zhou, Wenhao Liu et Haozhe Lou. « Les mains robotisées multi-doigts actuelles manquent souvent des capacités de détection intégrées nécessaires aux tâches complexes impliquant la perception thermique et la rétroaction réactive au contact. »

L’objectif principal de la récente étude menée par Seita et ses étudiants était de développer une nouvelle main robotique polyvalente et multimodale, inspirée de la main humaine, capable de manipuler des objets avec précision et sécurité. Grâce à des capteurs plus complets, la main créée pouvait réaliser des interactions plus nuancées avec les objets dans divers environnements, des foyers aux usines.

« L’idée la plus intuitive au départ était d’explorer comment concevoir des systèmes plus en phase avec les expériences perceptuelles quotidiennes humaines. Nous nous sommes inspirés des activités comportementales humaines », ont expliqué Zhou et Liu.

« Nous avons déjà utilisé plusieurs mains robotiques agiles disponibles dans le commerce. Nous avons constaté que de nombreuses conceptions matérielles existantes se concentraient sur des structures de transmission mécanique, et que les produits que nous pouvions acheter directement ne répondaient pas à nos besoins de détection pour nombre de nos projets de recherche. Cette expérience nous a poussés à rechercher une plateforme matérielle extensible en interne qui nous permettrait de concevoir et d’améliorer des appareils selon notre propre vision.« 

« La main MOTIF est une main robotisée avancée qui intègre plusieurs capteurs – thermique, de profondeur, RVB (visuel), inertiel (IMU) et tactile – sur une seule plateforme agile », explique l’équipe de recherche. « Elle étend le concept de main LEAP, largement répandu, en offrant des capacités de détection améliorées. Ses principaux avantages incluent une perception globale de l’environnement, la capacité à manipuler en toute sécurité des objets chauds et la différenciation d’objets d’apparence similaire mais de propriétés physiques différentes. »

La main MOTIF, la main robotisée développée par les chercheurs. Crédit : Zhou et al.

Pour évaluer le potentiel de la main MOTIF, les chercheurs ont mené deux expériences distinctes en laboratoire. La première visait à évaluer la capacité de la main à saisir des objets tout en tenant compte de leur température, afin d’éviter de toucher des zones particulièrement chaudes de leur surface.

La deuxième expérience consistait à manipuler des objets de même forme, mais de poids différents. Pour classer la masse des objets, la main effectuait de simples mouvements du bout des doigts tout en les manipulant.

« Le résultat le plus remarquable de notre étude est l’intégration de divers capteurs dans une seule main robotique agile, améliorant considérablement ses capacités de manipulation », a déclaré Lou. « Nos résultats montrent que la détection thermique combinée à la reconstruction 3D guide efficacement la préhension en toute sécurité, et que la détection inertielle permet une classification précise de la masse des objets. »

Lors des premiers tests, la main robotisée développée par cette équipe de chercheurs s’est montrée remarquablement performante, saisissant divers objets en toute sécurité et prédisant leur masse avec une bonne précision. À l’avenir, la main MOTIF pourrait être encore améliorée et testée dans un plus large éventail d’expériences afin de valider son potentiel pour des applications spécifiques.

Seita et ses étudiants pensent que ce système pourrait être particulièrement prometteur pour les tâches manuelles dans les environnements domestiques, les cuisines professionnelles et les environnements industriels. La main pouvant manipuler des objets chauds en toute sécurité et avec une grande précision, il pourrait surpasser les autres systèmes existants pour la cuisson de plats chauds, mais aussi pour le soudage ou le serrage de vis, ces tâches nécessitant une estimation précise des forces et l’adaptation des stratégies de manipulation en fonction de la température de l’objet.

« À l’avenir, nous prévoyons d’améliorer encore la main MOTIF en intégrant des capteurs digitaux haute résolution supplémentaires (par exemple, Digit 360) pour un retour tactile encore plus précis », a ajouté Liu. « Nous souhaitons également affiner nos algorithmes de détection multimodale et explorer de nouvelles applications dans des environnements réels complexes, tels que les tâches de manipulation manuelle avancées et les environnements nécessitant des interactions thermiques et de force sophistiquées. »

« Cet article présente un système de plateforme. Nous avons présenté ces travaux la semaine dernière à la conférence ISER 2025 à Santa Fe et avons échangé nos idées avec de nombreux chercheurs de renom. Nous espérons sincèrement qu’ils inciteront la communauté à envisager davantage de modalités de détection dans ses recherches », assure Zhou.

https://dx.doi.org/10.48550/arxiv.2506.19201

https://techxplore.com/news/2025-07-dexterous-robotic-thermal-inertial-sensors.html