Skip to main content

31 Oct, 2023

La technologie BrushLens pourrait rendre les écrans tactiles accessibles à tous

La technologie BrushLens pourrait rendre les écrans tactiles accessibles à tous

BrushLens est conçu pour aider les personnes qui, autrement, ne pourraient pas utiliser les interfaces à écran tactile.

Pour les personnes aveugles ou qui n’ont pas un contrôle fin de leurs doigts, les interfaces tactiles telles que celles utilisées sur les kiosques en libre-service peuvent être pratiquement impossibles à utiliser. Le nouveau dispositif expérimental BrushLens, en revanche, utilise le smartphone de l’utilisateur pour faire le travail.

Actuellement à l’état de prototype fonctionnel, BrushLens est développé à l’université du Michigan par une équipe dirigée par les professeurs adjoints Anhong Guo et Alanson Sample.

Il s’agit essentiellement d’un étui high-tech pour smartphone, qui laisse l’écran du téléphone visible et accessible sur le dessus, et dispose d’une fenêtre permettant de voir l’appareil photo arrière du téléphone sur le dessous. Cette fenêtre est entourée d’un anneau d' »autoclickers », qui modifient la capacité d’un écran tactile pour simuler le toucher d’un doigt.

Le dessous du dispositif BrushLens, avec les autoclickers entourant la fenêtre de l’appareil photo du téléphone – une autre version utilise des boutons-poussoirs mécaniques à la place des autoclickers.

Lorsqu’un téléphone équipé de BrushLens est déplacé sur la surface d’un grand écran tactile, il est capable de lire le texte affiché grâce à son appareil photo. Une application d’accompagnement prononce les mots au fur et à mesure que le téléphone passe dessus.

Lorsque l’utilisateur souhaite cliquer sur l’un des mots affichés, il peut soit appuyer sur un gros bouton facile à presser sur l’écran de l’application de son téléphone, soit utiliser la fonction de lecture d’écran existante du téléphone (dans laquelle les sélections peuvent être effectuées par de simples glissements ou d’autres gestes). Une fois le système perfectionné, l’utilisateur pourrait également se contenter d’énoncer une commande verbale.

Dans tous les cas, le BrushLens réagit en activant le(s) autoclicker(s) approprié(s), provoquant l’enregistrement d’un toucher sur cette partie de l’écran tactile sous-jacent. En outre, une fois que la disposition de l’affichage sur cet écran a été cartographiée, l’application peut guider verbalement l’utilisateur à travers l’écran.

Pour ce faire, elle divise l’écran en une grille et utilise l’unité de mesure inertielle (IMU) du téléphone pour suivre la position du téléphone dans cette grille. En comparant l’emplacement du bouton souhaité à l’écran avec l’emplacement actuel du téléphone, l’application est en mesure d’indiquer à l’utilisateur dans quelle direction il doit déplacer son téléphone, jusqu’à ce qu’il atteigne le bouton en question.

L’application BrushLens guide les utilisateurs sur l’écran en le divisant en grille

La technologie a été testée sur dix volontaires, dont quatre souffraient de tremblements ou de spasmes et six de déficience visuelle. Dans tous les cas, après une courbe d’apprentissage initiale, le dispositif a amélioré leur capacité à utiliser les écrans tactiles.

La fabrication du prototype a coûté moins de 50 dollars, et une version commerciale perfectionnée devrait coûter beaucoup moins cher. Parmi les autres mesures de réduction des coûts et de la taille, la version finale pourrait être alimentée par la batterie du téléphone et utiliser le téléphone pour effectuer tout le traitement des données.

« De nombreuses technologies qui nous entourent nécessitent des hypothèses sur les capacités des utilisateurs, mais les interactions apparemment intuitives peuvent en fait représenter un défi pour les personnes », a déclaré Chen Liang, étudiant en doctorat et premier auteur d’un article sur l’étude. « Les gens doivent pouvoir utiliser ces écrans tactiles inaccessibles dans le monde. Notre objectif est de rendre cette technologie accessible à tous ».

https://news.umich.edu/new-phone-case-provides-workaround-for-inaccessible-touch-screens/

https://liangchenlc.com/files/uist2023_BrushLens.pdf