Une nouvelle technologie d'affichage en réalité augmentée améliore la visibilité du monde réel tout en conservant un aspect réaliste aux objets virtuels.
infohightech ·
Les lunettes de réalité augmentée (RA) à vision optique transparente sont conçues pour superposer des informations numériques au monde réel, mais l'amélioration du réalisme des objets virtuels a souvent un coût. Les technologies d'occlusion actuelles bloquent physiquement une partie de la lumière incidente, réduisant ainsi la luminosité de l'environnement réel et compliquant les tâches quotidiennes. Trouver le juste équilibre entre réalisme virtuel et visibilité dans le monde réel représente un défi majeur pour les systèmes de RA de nouvelle génération.
Pour relever ce défi, une équipe de recherche comprenant Xiaodan Hu, professeur adjoint à l'Institut de technologie de Shibaura au Japon et contributeur clé au projet, a collaboré avec le Dr Yan Zhang et le professeur Xubo Yang de l'Université Jiao Tong de Shanghai en Chine et le professeur Kiyoshi Kiyokawa de l'Institut des sciences et technologies de Nara au Japon pour développer une stratégie d'affichage axée sur la perception qui prend en compte conjointement la perception visuelle humaine et les conditions d'éclairage du monde réel.
Au lieu de se fier uniquement à des améliorations matérielles, les chercheurs ont introduit une méthode d'équilibrage des masques qui ajuste dynamiquement la visibilité des scènes réelles et virtuelles en fonction de la perception réelle des utilisateurs. L'étude a été publiée dans IEEE Transactions on Visualization and Computer Graphics .
Fusion de l'optique et de la perception
La méthode proposée combine un composant polarisé, capable de gérer l'occlusion au niveau du pixel, avec un autre composant polarisé qui contourne le système optique et préserve la luminosité naturelle du monde réel. En ajustant l'angle d'intersection entre un séparateur de faisceau polarisant et un polariseur linéaire, le système fusionne dynamiquement ces deux images. Le suivi oculaire en temps réel et l'analyse de la scène estiment la visibilité de l'environnement et des objets virtuels, permettant ainsi à l'affichage d'optimiser en permanence l'équilibre entre eux.
Des chercheurs ont mis au point une méthode d'équilibrage de masque basée sur la perception, qui ajuste la transmission de la vision réelle, de la vision masquée et de l'image virtuelle en contrôlant l'angle d'intersection entre un séparateur de faisceau polarisant et un polariseur linéaire d'équilibrage. Cette méthode améliore la visibilité dans le monde réel tout en préservant la qualité du contenu virtuel. Crédit : Maître de conférences Xiaodan Hu, Institut de technologie de Shibaura, Japon. Lien : https://doi.org/10.1109/TVCG.2026.3679903
Les tests utilisateurs définissent les seuils
Pour établir les seuils de perception, les chercheurs ont mené une série d'études auprès d'utilisateurs. Des expériences impliquant 12 participants ont permis de quantifier le contraste nécessaire à la reconnaissance des textures dans les objets virtuels, tandis qu'une autre étude, menée auprès de 24 participants, a évalué la perception des effets lumineux. L'équipe a ensuite intégré ces résultats dans une stratégie d'équilibrage dynamique et l'a validée à l'aide d'un prototype de laboratoire.
Une étude finale menée auprès de 12 utilisateurs a démontré que le système améliorait la visibilité dans le monde réel tout en conservant une apparence convaincante pour le contenu virtuel dans différentes conditions d'éclairage.
« Nos recherches démontrent que la perception visuelle humaine peut être utilisée pour équilibrer dynamiquement la visibilité du monde réel et du contenu virtuel », a déclaré Hu. « En adaptant l'affichage en fonction de ce que les utilisateurs peuvent réellement percevoir, notre méthode améliore la visibilité du monde réel tout en préservant l'apparence des objets virtuels dans différentes conditions d'éclairage. »
Un changement de conception plus large
L'étude met également en lumière une évolution plus globale dans la conception des écrans de réalité augmentée. Plutôt que d'optimiser uniquement le matériel optique, les chercheurs démontrent que la compréhension de la perception visuelle permet d'élaborer des stratégies de contrôle d'affichage plus efficaces. Cette approche, fondée sur la perception, pourrait permettre aux futures lunettes de réalité augmentée d'afficher des objets virtuels s'intégrant plus naturellement au monde réel, tout en garantissant la sécurité et le confort de l'utilisateur.
Les applications potentielles dépassent largement le cadre de l'électronique grand public. Les futurs systèmes de réalité augmentée à vision optique transparente pourraient faciliter la maintenance industrielle, l'assistance médicale, l'éducation, la navigation et la collaboration à distance, où les utilisateurs doivent simultanément surveiller leur environnement et interagir avec des informations numériques. En préservant à la fois la perception du monde réel et la qualité de l'image virtuelle, cette technologie pourrait rendre les dispositifs de réalité augmentée plus adaptés aux environnements réels exigeants.
« Dans nos recherches précédentes, intitulées "Perception-driven soft-edge occlusion for optical see-through head-mounted displays" ou « Occlusion douce basée sur la perception pour les écrans de réalité augmentée optiques montés sur la tête », nous avons constaté que la perception humaine des écrans de réalité augmentée peut différer considérablement des prédictions basées uniquement sur des mesures optiques », a déclaré Hu. « Cela nous a incités à explorer les écrans de réalité augmentée d'un point de vue perceptif, car les futures lunettes de réalité augmentée devraient être conçues non seulement en fonction de leurs performances optiques, mais aussi en fonction de la façon dont les humains perçoivent réellement l'information visuelle. »
Globalement, les chercheurs estiment que l'intégration des sciences de la perception et de l'ingénierie des écrans pourrait contribuer à lever l'un des principaux obstacles à la généralisation de la réalité augmentée. En exploitant les caractéristiques visuelles humaines plutôt que de dépendre uniquement des améliorations matérielles, les futurs systèmes pourraient offrir des expériences de réalité augmentée plus naturelles, photoréalistes et conviviales.
https://www.shibaura-it.ac.jp/en/headline/detail/20260717_7070_51.html