Un diagramme du système de suivi de la main
Lorsqu’il s’agit de suivre les positions de la main d’une personne en mouvement, on utilise souvent des gants équipés de capteurs. Un nouveau système expérimental, cependant, utilise une caméra montée sur le poignet … qui ne « voit » même pas les doigts de l’utilisateur.
Le prototype a été conçu par des scientifiques de l’Institut de technologie de Tokyo, en collaboration avec des collègues de l’Université Carnegie Mellon (États-Unis), de l’Université de St. Andrews (Écosse) et de l’Université de Nouvelle-Galles du Sud (Australie).
Il comprend une petite caméra vidéo reliée à un ordinateur, qui est fixée au haut d’un brassard au poignet de l’utilisateur. Cette caméra est dirigée vers l’avant et permet d’obtenir une vue dorsale (arrière) de la main. Dans la plupart des cas, les doigts ne sont même pas dans le champ de vision.
A mesure que la vidéo est analysée par un réseau neuronal appelé DorsalNet, des changements subtils mais distincts dans les contours du dos de la main sont mis en correspondance avec les mouvements correspondants des doigts. De cette façon, le système est capable de déterminer la « pose de la main » en trois dimensions de l’utilisateur en temps réel.
Jusqu’à présent, la technologie s’est avérée précise à 75 % pour la détection de 11 positions de préhension différentes. Ce chiffre devrait augmenter au fur et à mesure du développement du système, ce qui pourrait inclure l’augmentation de sa sensibilité en utilisant une caméra avec une fréquence d’images plus élevée.
À terme, le système pourrait être intégré à un dispositif tel qu’une montre intelligente. Il pourrait alors être utilisé dans des applications telles que le contrôle d’une seule main des ordinateurs, ou le suivi des mains des utilisateurs dans les environnements de RV.
