Ces chiens guides dotés d'intelligence artificielle ne se contentent pas de guider – ils parlent
infohightech ·
Les chiens guides sont de précieux alliés, conduisant les personnes malvoyantes en toute sécurité à destination, mais ils ne pouvaient pas communiquer avec leurs maîtres — jusqu'à présent. À l'aide de grands modèles de langage, une équipe de chercheurs de l'Université de Binghamton, Université d'État de New York, a créé un système de chien guide robotique parlant qui détermine un itinéraire idéal et guide les utilisateurs en toute sécurité jusqu'à leur destination, en leur fournissant un retour d'information en temps réel tout au long du trajet.
« Ce projet met en évidence un aspect du chien guide robotisé plus avancé que celui des chiens guides biologiques », explique Shiqi Zhang, professeur associé à l’École d’informatique du Thomas J. Watson College of Engineering and Applied Science . « Les chiens humains comprennent au mieux une vingtaine de commandes. En revanche, pour les chiens guides robotisés, il suffit d’intégrer GPT-4 aux commandes vocales. On obtient alors des capacités linguistiques très performantes. »
Zhang et son équipe avaient déjà entraîné des robots guides à accompagner les personnes malvoyantes en réagissant à une légère traction sur la laisse. Ce nouveau système va plus loin, en instaurant un dialogue verbal entre l'utilisateur et le chien, et en offrant un meilleur contrôle et une conscience accrue de l'environnement. Le robot fournit des informations sur l'itinéraire avant le départ (ce que les chercheurs appellent la verbalisation du plan) et des informations pendant le trajet (verbalisation de la scène).
« C’est très important pour les personnes malvoyantes ou aveugles, car la perception de l’environnement et de la situation est relativement limitée sans la vue », a déclaré Zhang.
Pour tester le système, l'équipe a recruté sept participants malvoyants afin de les faire évoluer dans un vaste environnement de bureaux composé de plusieurs pièces. Le robot demandait à l'utilisateur où il souhaitait se rendre (dans cette expérience, une salle de conférence), puis lui présentait les itinéraires possibles et le temps de trajet estimé. Une fois l'itinéraire choisi, le robot le guidait jusqu'à la salle de conférence, en décrivant verbalement l'environnement et les obstacles rencontrés (par exemple : « ce couloir est long ») jusqu'à destination.
À l'issue du test, les utilisateurs ont rempli un questionnaire sur leur expérience, évaluant l'utilité du système, sa facilité de communication et son efficacité globale. De manière générale, une approche combinée, incluant des explications planifiées et une narration en temps réel par le robot, a été privilégiée par les participants. Une étude de simulation du système a également démontré la réussite de cette approche.
À l'avenir, l'équipe prévoit de mener davantage d'études auprès des utilisateurs, d'accroître l'autonomie du système et de faire en sorte que les robots parcourent de plus longues distances, aussi bien à l'intérieur qu'à l'extérieur.
Cette recherche vise à faciliter l'intégration des chiens guides robotisés dans la vie quotidienne. Les participants à l'étude se sont montrés enthousiastes face à cette perspective.
« Ils étaient vraiment enthousiastes à propos de cette technologie, des robots », a déclaré Zhang. « Ils ont posé beaucoup de questions. Ils perçoivent vraiment le potentiel de cette technologie et espèrent la voir fonctionner. »
https://www.binghamton.edu/news/story/6168/these-ai-powered-guide-dogs-dont-just-lead-they-talk