Un avatar multilingue réduit le stress des patients lors d'un examen échographique autonome
infohightech ·
Les patients ont davantage confiance dans les systèmes d'échographie robotisés autonomes lorsqu'un avatar les guide tout au long du processus. C'est ce qu'a découvert le professeur Nassir Navab de l'Université technique de Munich (TUM). L'agent virtuel explique son travail, répond aux questions et parle toutes les langues. Ces systèmes sont particulièrement adaptés aux régions où il y a pénurie de médecins.
Un grand écran, des lunettes de réalité virtuelle, un bras robotisé équipé d'une tête à ultrasons et un ordinateur puissant : voilà l'équipement dont a besoin Tianyu Song, chercheur à la chaire d'applications informatiques en médecine de la TUM, pour l'examen autonome de l'aorte, de la carotide ou des artères de l'avant-bras. Pour dissiper les doutes potentiels concernant ce système technique autonome, les chercheurs ont créé un environnement virtuel dans lequel un avatar guide les patients tout au long de la procédure d'examen. Après avoir enfilé les lunettes de réalité virtuelle, les patients voient un avatar mener la conversation et répondre aux questions. « Cela rend le processus plus humain et convivial », explique le professeur Nassir Navab, directeur de la chaire de recherche. « Et il a été prouvé que cela réduit le stress chez les utilisateurs de systèmes autonomes. »
L'environnement virtuel réduit le niveau de stress des patients
Pour en savoir plus, les chercheurs ont comparé les niveaux de stress de 14 patients, hommes et femmes, d'âges différents. Trois des quatre scénarios étaient plus ou moins assistés virtuellement. Dans l'un, un avatar était utilisé dans un environnement réel, dans un autre dans un environnement virtuel avec superposition d'éléments réels, et dans le troisième dans un environnement entièrement virtuel. Ces scénarios ont été comparés à une variante purement réelle, sans avatar. Les chercheurs ont relié les sujets à des capteurs pour un électrocardiogramme (ECG) afin d'enregistrer la variabilité de la fréquence cardiaque.
« Plus cette valeur diminue pendant le traitement, plus le niveau de stress de la personne traitée est élevé », explique Tianyu Song. Résultat : les trois scénarios assistés virtuellement se sont révélés significativement moins stressants que le traitement non virtuel. Lorsqu'on leur a demandé lequel des trois scénarios assistés virtuellement leur semblait le plus fiable et le plus agréable, l'avatar en environnement réel est arrivé en tête. « C'est pourquoi nous l'utilisons désormais pour des démonstrations », explique le professeur Navab, dont les recherches sont soutenues par la Fondation bavaroise pour la recherche dans le cadre du projet de recherche ForNeRo (Réseau de recherche - Intégration transparente et ergonomique de la robotique dans les flux de travail cliniques).
Un grand modèle de langage maîtrise les accents
La principale raison de la réduction du stress des patients traités est l'avatar, qui utilise généralement une voix féminine lors des démonstrations du service et guide le patient tout au long de l'examen. Il tient la sonde d'échographie et la guide jusqu'au bras. Il communique également avec le patient. Pour ce faire, un logiciel convertit les questions du patient en texte avant qu'un modèle linguistique complet ne trouve des réponses adaptées à partir d'instructions préformulées, qui sont ensuite retranscrites oralement.
« Un facteur important pour instaurer la confiance est le fait que l'avatar parle non seulement plusieurs langues, mais peut même le faire avec des accents régionaux », explique le chercheur Song.
Par exemple, le modèle linguistique peut parler avec un accent autrichien ou même allemand avec un accent américain. L'avatar peut également communiquer de manière non verbale. Il fait des gestes, marque de brèves pauses entre les phrases et se tourne vers les patients lorsqu'ils parlent.