Des étudiants de Harvard abandonnent leurs études pour lancer des lunettes intelligentes à intelligence artificielle « toujours actives » qui écoutent et enregistrent chaque conversation
infohightech ·
Deux anciens étudiants de Harvard ont lancé une paire de lunettes intelligentes « toujours actives » alimentées par l’IA qui écoutent, enregistrent et transcrivent chaque conversation, puis affichent les informations pertinentes au porteur en temps réel.
« Notre objectif est de fabriquer des lunettes qui vous rendent super intelligent dès que vous les mettez », a déclaré AnhPhu Nguyen, cofondateur de Halo , une startup qui développe cette technologie.
Ou, comme le dit son cofondateur Caine Ardayfio, les lunettes « vous offrent une mémoire infinie ».
« L'IA écoute chacune de vos conversations et utilise ces connaissances pour vous dire quoi dire... un peu comme dans la vraie vie Cluely », a déclaré Ardayfio, faisant référence à la startup qui prétend aider les utilisateurs à « tricher » sur tout, des entretiens d'embauche aux examens scolaires.
« Si quelqu'un dit un mot complexe ou vous pose une question, comme : « Combien font 37 à la puissance trois ? » ou quelque chose comme ça, alors cela apparaîtra sur les lunettes », a ajouté Ardayfio.
Ardayfio et Nguyen ont levé 1 million de dollars pour développer ces lunettes, menées par Pillar VC, avec le soutien de Soma Capital, Village Global et Morningside Venture. Les lunettes seront vendues au prix de 249 $ et seront disponibles en précommande dès mercredi. Ardayfio a qualifié ces lunettes de « premier pas concret vers une réflexion sur les vibrations ».
Les deux étudiants de l'Ivy League, qui ont depuis emménagé dans leur propre version du Hacker Hostel dans la baie de San Francisco, ont récemment fait sensation après avoir développé une application de reconnaissance faciale pour les lunettes connectées Ray-Ban de Meta, prouvant ainsi que cette technologie pouvait servir à doxer des personnes . En tant que concurrent potentiel des lunettes connectées de Meta, Ardayfio a déclaré que Meta, compte tenu de son historique de scandales en matière de sécurité et de confidentialité, devait maîtriser son produit afin que Halo puisse en tirer profit.
« Meta n'a pas la réputation de se soucier de la confidentialité des utilisateurs, et le fait qu'ils publient quelque chose qui est toujours là avec vous - ce qui apporte évidemment une tonne d'utilité - représente simplement un énorme risque de réputation pour eux qu'ils ne prendront probablement pas avant qu'une startup ne le fasse à grande échelle en premier », a ajouté Nguyen.
Et même si Nguyen a raison, les utilisateurs n’ont peut-être pas encore de bonnes raisons de faire confiance à la technologie d’un couple d’étudiants qui prétendent envoyer des gens dans le monde avec un équipement d’enregistrement secret.
Alors que les lunettes de Meta disposent d'un voyant lumineux lorsque leurs caméras et leurs microphones regardent et écoutent comme un mécanisme pour avertir les autres qu'ils sont enregistrés, Ardayfio a déclaré que les lunettes Halo, surnommées Halo X, n'ont pas d'indicateur externe pour avertir les gens de l'enregistrement de leurs clients.
« Pour le matériel que nous fabriquons, nous voulons qu'il soit discret, comme des lunettes normales », a déclaré Ardayfio, qui a ajouté que les lunettes enregistrent chaque mot, le transcrivent, puis suppriment le fichier audio.
Les défenseurs de la vie privée mettent en garde contre la normalisation des appareils d’enregistrement secrets dans les lieux publics.
« Les petits appareils d’enregistrement discrets ne sont pas nouveaux », a déclaré Eva Galperin, directrice de la cybersécurité à l’Electronic Frontier Foundation.
« D'une certaine manière, cela ressemble à une variante du stylo-micro espion », a déclaré Galperin. « Mais je pense que la normalisation de l'utilisation d'un appareil d'enregistrement permanent, qui, dans de nombreuses circonstances, nécessiterait l'obtention du consentement de toutes les personnes se trouvant à distance d'enregistrement, compromet notre attente de confidentialité pour nos conversations, quel que soit l'espace. »

Aux États-Unis, plusieurs États interdisent l'enregistrement secret de conversations sans le consentement de l'autre personne. Ardayfio a déclaré être conscient de cette situation, mais qu'il incombe à ses clients d'obtenir le consentement avant d'utiliser les lunettes.
« Nous faisons confiance à nos utilisateurs pour obtenir le consentement s’ils se trouvent dans un État à consentement bipartite », a déclaré Ardayfio, faisant référence aux lois d’une douzaine d’États américains qui exigent le consentement de toutes les parties enregistrées.
« Je serais également très préoccupé par l’endroit où les données enregistrées sont conservées, la manière dont elles sont stockées et qui y a accès », a ajouté Galperin.
Ardayfio a déclaré que Halo s'appuie sur Soniox pour la transcription audio, qui affirme ne jamais stocker d'enregistrements. Nguyen a affirmé que lorsque le produit final sera mis à la disposition des clients, il sera chiffré de bout en bout, mais n'a fourni aucune preuve de son fonctionnement. Il a également précisé que Halo vise la conformité SOC 2, ce qui signifie qu'il a fait l'objet d'un audit indépendant et démontre une protection adéquate des données clients. Aucune date de mise en conformité SOC 2 n'a été communiquée.
Pourtant, les deux étudiants ne sont pas novices en matière de projets controversés portant atteinte à la vie privée.
Alors qu'ils étaient encore à Harvard l'année dernière, Ardayfio et Nguyen ont développé I-XRAY , un projet de démonstration qui a ajouté des capacités de reconnaissance faciale aux lunettes intelligentes Meta Ray-Ban, démontrant avec quelle facilité la technologie pouvait être intégrée à un appareil non destiné à identifier les personnes.
Le duo n'a jamais dévoilé le code source d'I-XRAY, mais ils ont testé les lunettes sur des passants sans leur consentement . Dans une vidéo de démonstration, Ardayfio a montré les lunettes détectant les visages et récupérant les informations personnelles d'inconnus en quelques secondes. La vidéo présentait les réactions de personnes qui avaient été exposées.
Dans une interview avec 404 Media, ils ont reconnu les risques : « Un type pourrait simplement trouver l'adresse d'une fille dans le train et la suivre jusqu'à chez elle », a déclaré Nguyen au site d'actualités technologiques.
Pour l'instant, les lunettes Halo X n'ont qu'un écran et un microphone, mais pas de caméra, bien que les deux explorent la possibilité de l'ajouter à un futur modèle.
Les utilisateurs doivent toujours avoir leur smartphone à portée de main pour alimenter les lunettes et obtenir des « informations et des réponses en temps réel à leurs questions », explique Nguyen. Fabriquées par une autre entreprise que la startup n'a pas nommée, les lunettes sont connectées à une application intégrée sur le téléphone de l'utilisateur. Les lunettes externalisent ainsi les calculs, faute de puissance suffisante pour le faire sur l'appareil lui-même.
Sous le capot, les lunettes intelligentes utilisent Gemini et Perplexity de Google comme moteur de chatbot, selon les deux cofondateurs. Gemini est plus performant pour les mathématiques et le raisonnement, tandis qu'ils utilisent Perplexity pour explorer Internet, ont-ils précisé.