Étiquette : mais elles pourraient également contribuer à faire de la réalité virtuelle et de la réalité augmentée des outils efficaces pour l’éducation et l’IA

Des chercheurs de Northeastern ont eu recours aux escape games pour apprendre à intégrer l’IA dans des environnements d’apprentissage immersifs. Illustration de Renee Zhang.

L’apprentissage en réalité virtuelle et augmentée est plus populaire que jamais, mais il présente encore des failles. Des chercheurs de Northeastern se sont tournés vers les escape games pour comprendre comment l’IA pourrait aider les étudiants à mieux apprendre grâce à des technologies immersives.

Au cours des dernières années, la réalité virtuelle et augmentée est devenue de plus en plus populaire dans l’éducation, mais une question centrale et persistante demeure : comment les étudiants peuvent-ils apprendre avec cette technologie ?

Il est toujours difficile pour les enseignants de trouver un moyen d’inciter les élèves à réfléchir à ce qu’ils apprennent avec un appareil fixé sur leur tête. Comment les amener à réfléchir de manière plus critique à la leçon sans interrompre leur immersion dans une expérience éducative virtuelle ? Des chercheurs de l’Université Northeastern ont trouvé la solution dans un lieu inattendu : les escape games.

Les escape games, jeux de réflexion immersifs et interactifs qui placent les joueurs dans un espace physique et les invitent à trouver des indices pour s’en sortir, connaissent un engouement mondial . Ils pourraient également permettre de comprendre comment intégrer plus efficacement des technologies comme la réalité virtuelle et l’IA dans les salles de classe, selon une étude récente publiée par des chercheurs de Northeastern et financée par la National Science Foundation. 

« Au lieu de consulter des spécialistes de l’apprentissage pour discuter de la façon dont les gens réfléchissent et comment les aider à résoudre des problèmes, nous nous sommes dit : « Les escape games le font déjà, en quelque sorte. Discutons avec les animateurs d’escape games de la façon dont ils gèrent l’expérience et la résolution de problèmes, des indices qu’ils observent, de ce qu’ils font et de leurs processus » », explique Casper Harteveld , professeur de conception de jeux vidéo à Northeastern.

Les animateurs d’escape games, ou maîtres de jeu, observent, interagissent et s’adaptent en permanence pour rendre l’expérience stimulante et accessible aux joueurs. Leur approche devrait servir de référence en matière de développement d’IA, affirme Casper Harteveld, professeur de conception de jeux à l’Université Northeastern. Photo : Matthew Modoono/Université Northeastern

Les chercheurs du projet, qui comprenaient également Seth Cooper , professeur agrégé de conception de jeux, et Eileen McGivney , professeure adjointe d’art, de design et de communication, ont interrogé 13 animateurs d’escape games, ou maîtres de jeu (MJ ou GM en anglais, Game Masters), afin de découvrir leurs meilleures pratiques et la manière dont ils guident leurs joueurs dans une expérience immersive comme celle-ci. Ces échanges leur ont permis d’acquérir de précieuses connaissances sur la manière d’optimiser le déploiement de l’éducation immersive, avec pour objectif final de créer des « agents d’IA » d’assistance capables d’aider les étudiants dans les environnements d’apprentissage en réalité virtuelle et augmentée.

Les maîtres de jeux d’escape game font généralement deux choses lorsqu’ils guident les joueurs à travers une énigme, précise Caper Harteveld. Ils observent leurs joueurs grâce à des caméras dissimulées dans la salle, s’assurant qu’ils progressent et trouvent des indices. Si les joueurs sont bloqués, les maîtres de jeux interviennent en leur fournissant des indices.

« Nous disposons d’un modèle d’assistance des MJ : ils observent en permanence les actions des joueurs et décident ensuite d’intervenir ou non en fonction de leurs observations », assure Erica Kleinman, chercheuse postdoctorale sur le projet. « Ils adaptent constamment leurs actions en fonction de la réaction des joueurs à la salle, de leurs réactions et de leur aide. »

Certains joueurs pourraient ne jamais vouloir recevoir d’aide, tandis que d’autres pourraient en demander davantage. C’est au MJ de déterminer quand et comment amener les joueurs à réfléchir à l’énigme, sans perturber l’immersion et en s’adaptant à leur situation.

« Les escape games intègrent naturellement une forme de réflexion, car le MJ intervient pour vous aider », met en avant Erica Kleinman. « C’est naturel d’entendre quelqu’un dire : « Hé, j’ai remarqué que vous étiez bloqué. Avez-vous pensé à ce que vous avez fait la dernière fois que vous étiez bloqué ? » »

Les MJ doivent constamment réfléchir à la progression des joueurs, à leur ressenti et à la manière de déployer l’aide nécessaire en cas de difficulté. Une méthode courante utilisée par les MJ est ce que les chercheurs appellent un « échafaudage progressif de l’aide », qui consiste à proposer une indication vague, puis à fournir progressivement des indications plus précises si les joueurs ont encore besoin d’aide.

« La personnalisation, l’adaptation, c’est là que nous voulons que l’éducation aille, et les animateurs d’escape room le font déjà », renchérit Casper Harteveld.

Bien qu’il y ait des leçons à tirer pour les éducateurs, Casper Harteveld affirme que l’objectif final de cette recherche est de concevoir un modèle d’IA capable de rendre l’apprentissage en RV et en RA plus productif pour les étudiants.

En adaptant les méthodes utilisées par les MJ des salles d’évasion, ils espèrent créer un outil qui aidera l’apprentissage d’un étudiant, et non le raccourcira. 

« L’IA doit accroître notre intelligence, et cela nécessite une IA qui nous accompagne, nous aide et nous guide, plutôt que de nous dire : « Donnez-moi la réponse et vous l’obtiendrez », explique Casper Harteveld. « En fait, ce que nous développons, c’est une réflexion de soutien, car nous voulons que l’IA nous aide à réfléchir à ce que nous faisons pour nous améliorer et nous orienter dans la bonne direction. »

Casper Harteveld explique que son équipe travaille actuellement à la création d’un escape game qui leur permettra de tester leur modèle d’IA. Ce dernier est encore en développement, mais Casper Harteveld espère que leurs travaux influenceront non seulement l’utilisation future de l’apprentissage immersif, mais aussi notre façon de concevoir notre relation avec l’IA.

« L’aide doit donner aux joueurs le sentiment d’avoir trouvé la solution eux-mêmes », conclut Caspter Harteveld. « Cela leur donne vraiment du pouvoir, et c’est un atout transposable à l’IA. Il faut que les humains fassent le travail. »

par Cody Mello-Klein

https://news.northeastern.edu/2025/05/14/ai-escape-room-education