Skip to main content

14 Mar, 2024

La dernière IA de DeepMind veut votre manette de jeu vidéo, pas votre travail

La dernière IA de DeepMind veut votre manette de jeu vidéo, pas votre travail

L’IA ne s’attaque pas seulement à votre travail, mais aussi à votre manette de jeu PlayStation.

Google DeepMind affirme avoir créé un agent d’IA « multi-monde » capable de suivre vos instructions en langage naturel pour effectuer une série de tâches à votre place dans divers environnements virtuels en 3D. En d’autres termes, il effectuera les tâches fastidieuses des jeux vidéo à votre place.

Il s’agit d’un retour aux sources pour DeepMind, qui a commencé à développer l’intelligence artificielle en lui apprenant à jouer à de vieux jeux d’arcade comme Pong et Breakout, après quoi elle a rapidement conquis les meilleurs humains du monde à des jeux comme le Go, les échecs, le Stratego, le Shogi, StarCraft II et d’autres. Aujourd’hui fusionnée avec Google Brain, DeepMind a revêtu son costume d’entreprise ces dernières années, se concentrant sur des activités telles que son prédicteur de structure protéique AlphaFold et sa technologie de découverte de matériaux cristallins GNoME.

Mais aujourd’hui, avec le projet SIMA, les IA de DeepMind ont l’occasion de se défouler et de rejouer à des jeux vidéo. Le nouveau modèle a été entraîné et testé sur neuf jeux 3D à monde ouvert, dont No Man’s Sky, Teardown et Goat Simulator, mais l’idée est ici de créer un agent IA généralisé capable de prendre les commandes de pratiquement n’importe quel jeu 3D et de faire des choses en réponse à des commandes vocales.

Dans le cadre du processus d’apprentissage, SIMA a simplement observé les sorties vidéo et audio du jeu, ainsi que les commandes du clavier et de la souris d’un utilisateur humain, tout en écoutant cet utilisateur recevoir des ordres d’une autre personne. Il a été formé et évalué sur environ 600 compétences de base et peut actuellement effectuer des tâches courtes, à une seule étape, d’une durée d’environ dix secondes. DeepMind affirme qu’il sera bientôt capable de s’attaquer à des tâches plus importantes qui comprennent « une planification stratégique de haut niveau et de multiples sous-tâches ».

L’aspect généralisé fonctionne bien : SIMA est presque aussi performant dans les jeux pour lesquels il n’a pas été spécifiquement formé que dans ceux pour lesquels il a été formé, ce qui indique qu’il a effectivement acquis une capacité générale à se plonger dans un jeu en 3D, à comprendre ce qui s’y passe et à se mettre au travail.

À quoi cela sert-il ? Il s’avère qu’un grand nombre de jeux vidéo pour lesquels nous dépensons notre argent durement gagné ressemblent beaucoup à du travail, nous obligeant à travailler pour obtenir des pièces, des points d’amélioration, des boucliers fantaisistes ou toutes sortes d’autres conneries. SIMA sera bientôt en mesure de prendre les commandes et de s’acharner pendant que vous dormez ou que vous êtes au travail, et vous reviendrez avec un tas de… Vous reviendrez avec une abondance de… richesses, quelles qu’elles soient, que vous lui avez demandé d’aller chercher. Votre château sera construit. Vos ressources seront rassemblées. Votre jeu sera prêt pour la partie la plus amusante.

Ce qui est hilarant : les IA ne sont pas seulement en train de s’emparer de nos emplois et de nos créations artistiques, nous allons bientôt devoir nous battre contre ces salauds pour la manette de la PS5. C’est aussi un gaspillage de ressources sombrement amusant : tout le codage qui a été utilisé dans votre jeu vidéo, ainsi que toutes les puces à haute puissance et l’électricité nécessaires pour entraîner les modèles d’IA, montés les uns contre les autres dans une gigantesque boucle inutile de travail à valeur nulle pour que vous puissiez sauter les parties ennuyeuses.

En effet, pourquoi diable y a-t-il des parties ennuyeuses de toute façon ? Des torches ont été allumées et des fourches brandies pour moins que cela.

Le modèle SIMA a été entraîné sur une poignée de jeux en 3D, et il a développé une compréhension suffisamment large pour fonctionner tout aussi bien sur des jeux qu’il ne connaît pas

Les modèles d’IA apprennent à naviguer dans le monde physique et à effectuer des tâches utiles, tout en étant incorporés dans toutes sortes de robots, humanoïdes ou autres. Ces machines « voient » le monde par l’intermédiaire d’images vidéo et de capteurs, et bien que leurs schémas de contrôle soient beaucoup plus complexes que ceux de votre souris et de votre ZQSD, il existe une autre grande similitude : on leur dira verbalement ce qu’ils doivent faire, et ils devront élaborer un plan de haut niveau, rassembler des ressources et exécuter les choses étape par étape.

En ce sens, l’agent du jeu vidéo SIMA pourrait être un élément constitutif d’une robotisation réelle des tâches complexes et ennuyeuses que les humains ne veulent pas accomplir. Et ce ne sont pas les tâches qui manquent.

https://deepmind.google/discover/blog/sima-generalist-ai-agent-for-3d-virtual-environments/?utm_source=twitter&utm_medium=social&utm_campaign=SIMA/