Facebook développe des lunettes AR pour aider les personnes sourdes à mieux entendre
Facebook développe des lunettes AR pour aider les personnes sourdes à mieux entendre

Habituellement, l’annonce qu’un laboratoire de recherche est transformé en bar laisse entendre qu’il a échoué et que ses chercheurs jettent l’éponge. Mais dans le cas de Facebook Reality Labs Research, un laboratoire consacré (en partie) à la recherche de nouvelles méthodes créatives pour améliorer l’audition des membres de la communauté des sourds et des malentendants, il a montré que son travail portait ses fruits.
La mission déclarée de Facebook est d’aider les gens à se connecter et à communiquer les uns avec les autres. C’est pourquoi, même si ce projet peut sembler hors mission, il s’inscrit en fait parfaitement dans les compétences de base de l’entreprise.
Le problème auquel Facebook s’est attaqué est de savoir comment améliorer la captation audio pour les personnes dans des environnements bruyants. Bien que de nombreuses personnes malentendantes, en fonction de la gravité de leur déficience, puissent entendre et interagir en tête-à-tête dans des endroits calmes, les environnements bruyants comme les bars ou les lieux de rencontre très fréquentés peuvent être beaucoup plus difficiles. Dans cette optique, Facebook a étudié comment combiner la technologie de formation de faisceau, le deep learning, l’annulation du bruit et – ce qui est peut-être le plus surprenant – la réalité augmentée (RA) pour améliorer cette situation.
Dans un projet récent, des scientifiques de Facebook ont étudié comment les lunettes de réalité augmentée pourraient aider à déterminer quels sons les gens veulent amplifier en regardant, eh bien, où ils regardent. En faisant correspondre l’attention d’une personne, en termes de ce qu’elle regarde, aux entrées audio, les lunettes de réalité augmentée peuvent déterminer les sons qu’une personne veut entendre et ceux qu’elle ne veut pas entendre – et ensuite composer les canaux sonores en conséquence. Dans le cadre de ses expériences dans ce domaine, Facebook a transformé l’espace de travail où une grande partie de cette enquête est menée en un faux bar pour explorer comment il fonctionnerait dans un endroit avec de multiples entrées sonores bruyantes.
« De nombreuses personnes malentendantes n’utilisent pas d’appareils auditifs – en partie – parce qu’ils ne fonctionnent pas bien dans des situations quotidiennes comme un restaurant bruyant, une conversation impliquant plusieurs personnes lors d’une fête bruyante ou dans une voiture en mouvement », a déclaré Thomas Lunner, responsable de recherche pour le laboratoire Hearing Science de Facebook, à Digital Trends.
« En menant nos recherches approfondies sur l’audition pour les lunettes AR, nous avons réalisé que certaines des découvertes que nous faisions pouvaient être pertinentes pour résoudre ce problème. Dans [notre nouvelle recherche], nous montrons comment la réalité augmentée pourrait compléter l’aide auditive, grâce à un système qui comprend ce que vous voulez écouter, isole et améliore les sons que vous voulez entendre, et réduit les bruits de fond gênants. En envoyant ensuite le signal traité par la réalité augmentée à l’aide auditive, vous obtenez également un système qui s’ajuste à votre capacité auditive unique ».
Jouer sur les points forts de Facebook Research
Thomas Lunner n’est pas un novice dans ce domaine de recherche. C’est un scientifique renommé dans le domaine de l’audition dont les travaux ont jeté les bases de ce qui est devenu la première aide auditive numérique au monde en 1995. Cette recherche, bien qu’encore à ses débuts, s’appuie sur un certain nombre de domaines de recherche pour Facebook, tels que la reconnaissance d’images, le traitement du langage naturel, et bien d’autres encore.
« Les sciences de l’audition sont un domaine que nous commençons à peine à explorer, cette technologie n’est donc disponible sur aucun de nos produits, mais nous sommes très enthousiastes quant aux possibilités offertes par les lunettes AR », a poursuivi Thomas Lunner. « Nous pensons qu’elles pourraient un jour permettre d’apporter toutes sortes d’améliorations, notamment aider toute personne souffrant d’une perte auditive ou ayant simplement du mal à comprendre les gens lors d’une fête ».
Michael Abrash, scientifique en chef des Facebook Reality Labs, a déclaré qu’il pense que la réalité augmentée et la réalité virtuelle pourraient avoir de profondes implications (et des applications) dans l’espace de l’accessibilité.
« La RA et la RV ont un énorme potentiel pour profiter à tout le monde, mais elles ont un potentiel particulièrement élevé pour les personnes ayant des capacités physiques variées », a déclaré Michael Abrash. « Par exemple, les lunettes de RA pourraient un jour être capables d’améliorer le contraste afin d’aider les personnes ayant une mauvaise vision à mieux voir, et pourraient être capables de fournir un retour visuel sur les sons ambiants et la parole aux malentendants. Comme autre exemple, nous pensons que la RV – et éventuellement la RA – pourront un jour créer des espaces virtuels et des avatars ultraréalistes qui permettront à ceux qui ont des difficultés de mobilité de se téléporter au bureau ou dans le salon de leur grand-mère ».
Facebook est, bien sûr, surtout connu pour son réseau social. Mais tout comme Alphabet, la société mère de Google, qui explore les voitures en libre-service, les systèmes de cartographie et les livraisons par drone en plus de la recherche, Facebook s’intéresse à bien plus qu’aux flux d’informations et aux calendriers. Dans le passé, il a montré un intérêt considérable pour la RV et la RA – avec tout, de son acquisition d’Oculus à la création du Spark AR Studio. Facebook n’a toujours pas montré son intérêt pour une grande partie de cette technologie. Pourtant, si l’on en croit ce travail, il semble que Facebook pourrait utiliser son pouvoir considérable pour le bien quand il s’agit de l’avenir de la connexion des gens.
https://www.digitaltrends.com/features/facebook-ar-glasses-deaf/