Grâce à des capteurs d’ondes cérébrales et à l’IA, le nouveau projet Halo d’Unbabel entend les messages et génère des réponses silencieuses. Pensez-y et la machine fait tout le travail.
Dites adieu à la saisie au clavier et bonjour à la réflexion. La société de technologie neuronale Unbabel a donné mardi une étonnante démonstration en direct de son projet Halo lors de la conférence Web Summit. Cette technologie vise à permettre une communication silencieuse et fondée sur la pensée entre les humains et les machines.
Le projet Halo combine une interface neuronale non invasive avec une IA générative pour transformer des modèles de signaux bioélectriques en langage.
« Il existe un langage universel qui se produit dans notre cerveau », a déclaré Vasco Pedro, PDG d’Unbabel. « Ce que je veux dire par là, c’est que lorsque vous regardez des images IRMf de personnes qui parlent des langues différentes, mais qui pensent au même objet, elles activent essentiellement les mêmes zones du cerveau. »
Vasco Pedro a montré comment le projet Halo permet aux utilisateurs de recevoir un message émis via des écouteurs, puis d’envoyer une réponse de manière totalement silencieuse en pensant simplement à ce qu’ils veulent dire.
Fournir une méthode de réponse aux messages qui ne nécessite pas de parler ou de taper a de nombreux cas d’utilisation potentiels, a noté Vasco Pedro, allant de scénarios banals comme répondre discrètement à des textes dans une salle de cinéma sombre à des situations plus qui changent la vie : donner aux personnes atteintes d’amyotrophie latérale sclérose (SLA ou Maladie de Charcot) la capacité de communiquer par texte ou même par notes audio.
En entraînant un modèle de synthèse vocale avec sa voix, il peut même parler.
Vasco Pedro a montré un exemple réconfortant de la façon dont le projet Halo a permis à un patient atteint de SLA de communiquer silencieusement sa commande de déjeuner à sa femme. Le système a décodé la réponse souhaitée à partir de signaux neuronaux, puis a synthétisé la réponse textuelle dans une approximation numérique de sa voix originale, qui a été enregistrée avant qu’il ne perde la capacité de parler.
Unbabel n’est pas la première IA qui lit dans les pensées. Comme Decrypt l’a signalé précédemment, Meta a récemment développé un système capable d’analyser l’activité cérébrale et de visualiser les images perçues dans l’esprit humain. L’IA a accompli cet exploit en capturant des mesures de résonance magnétique pendant que les participants regardaient des images et reconstruisaient les représentations des images originales.
De plus, Neuralink, un autre acteur majeur dans le domaine, travaille sur des interfaces neuronales avancées et a été autorisé à commencer à tester son implant cérébral chez l’homme.
Cependant, le principal différenciateur du projet Halo réside dans sa capacité à lire dans les pensées et à générer des réponses en langage naturel. Comme l’a noté Vasco Pedro, cela nécessitait l’intégration d’un modèle de langage capable de connaître le contexte personnel, les relations, les préférences, etc. d’un utilisateur, afin de créer des messages qui reflètent fidèlement ce qu’il souhaite communiquer.
Il ne s’agit pas d’une technologie de lecture de pensées incontrôlée : pour que l’appareil réponde, les utilisateurs doivent vraiment vouloir saisir la réponse.
« Essentiellement, ce qui se passe, c’est que la question est lue via mes AirPod, puis j’utilise une interface neuronale qui se trouve en fait dans mon bras ici – c’est un EMG », a expliqué Vasco Pedro. « Il capture des signaux biologiques, et ce qui se passe, c’est qu’un grand modèle de langage qui en sait beaucoup sur moi essaie de créer la réponse que je voudrais donner. »
Le modèle traite également environ 15 mots par minute, ce qui constitue une amélioration majeure par rapport aux méthodes traditionnelles qui peuvent être deux fois plus lentes.
Vasco Pedro a déclaré que le projet Halo en est actuellement à ses débuts, mais que la société prévoit de le lancer commercialement en 2024. Il envisage que Halo permette une communication transparente pour tous, quelles que soient leurs capacités physiques.
« Notre objectif est de faire de l’IA une bonne chose et de permettre à chacun de communiquer dans toutes les langues, en éliminant véritablement le manque de langue comme barrière », conclut-il.
https://decrypt.co/206004/mind-reading-ai-turns-thoughts-into-text-gives-als-patient-his-voice-back
https://decrypt.co/202258/meta-has-an-ai-that-can-read-your-mind-and-draw-your-thoughts
