Surpasser les humains n’est qu’une longueur d’avance pour les joueurs de jeux vidéo IA

Faites le tour d’un village français dans le jeu vidéo Gran Turismo et vous apercevrez peut-être une Corvette derrière vous essayant d’attraper le lit d’une rivière.

utiliser la technique Projet de voiture de course à prix réduit Accélérer et dépasser est l’une des choses préférées des joueurs expérimentés dans le jeu de course réel sur PlayStation.

Mais ce pilote Corvette n’est pas contrôlé par un humain – c’est un GT Sophy, un puissant agent d’intelligence artificielle fabriqué par le fabricant de PlayStation Sony.

Les joueurs de Gran Turismo courent avec des voitures de course générées par ordinateur depuis le lancement de la franchise dans les années 1990, mais le nouveau pilote IA lancé la semaine dernière dans Gran Turismo 7 est plus intelligent et plus rapide car il a été formé à l’aide des dernières méthodes d’IA.

« Gran Turismo a une IA intégrée qui est là depuis le début du jeu, mais elle a une gamme de performances très étroite et ce n’est pas très bon », a déclaré Michael Spranger, directeur de l’exploitation de Sony AI. . Une fois que vous aurez passé un certain niveau, cela ne vous tentera plus vraiment. »

Mais maintenant, il a dit: « Cette IA va se battre. »

visite Laboratoire d’intelligence artificielle Dans les universités et les entreprises telles que Sony, Google, Meta, Microsoft et Créateur de chat OpenAI Et il n’est pas rare de trouver des agents de l’IA comme les voitures de course Sophy, de lancer des oiseaux en colère sur des cochons, de mener des batailles interstellaires épiques ou d’aider des joueurs humains à construire de nouveaux mondes Minecraft – tout cela fait partie de la description de poste pour les systèmes informatiques essayant d’apprendre à devenir plus intelligent. aux jeux.

Mais dans certains cas, ils essaient également d’apprendre à devenir plus intelligents dans le monde réel. Dans un article publié en janvier, un chercheur de l’Université de Cambridge qui a construit un agent d’IA pour contrôler les personnages de Pokémon a déclaré qu’il pourrait « inspirer toutes sortes d’applications qui nécessitent une gestion d’équipe dans des conditions de grande incertitude, y compris la gestion d’une équipe de médecins ou de robots ou de personnel ». dans un environnement en constante évolution, comme une pandémie ou une zone de guerre.

Et bien que cela puisse ressembler à un enfant qui plaide pour jouer pendant trois heures de plus Pokémon VioletteL’étude des jeux est utilisée pour faire avancer la recherche sur l’intelligence artificielle – et pour former des ordinateurs à la résolution de problèmes complexes – depuis le milieu du XXe siècle.

Initialement, l’IA dans des jeux tels que les dames et les échecs était utilisée pour tester des jeux de stratégie gagnants. Il existe maintenant une nouvelle branche de recherche qui se concentre davantage sur l’exécution de tâches ouvertes dans des mondes complexes et sur l’interaction avec les humains, plutôt que dans le seul but de les battre.

« La réalité est comme un jeu très complexe », a déclaré Nicholas Sarantinos, auteur de The Pokemon Paper et qui a récemment refusé une offre de doctorat à l’Université d’Oxford pour créer une société d’IA qui vise à aider les entreprises à créer des équipes plus collaboratives.

Dans la simulation de combat Pokémon Showdown basée sur le Web, Sarantinos a développé un algorithme pour analyser une équipe de six Pokémon – prédire comment ils se comporteraient en fonction de tous les scénarios de combat possibles devant eux et de leurs forces et faiblesses relatives.

Microsoft, qui possède la populaire franchise de jeux Minecraft ainsi que le système de jeu Xbox, a chargé des agents d’intelligence artificielle d’une variété d’activités – du nettoyage de la lave à la coupe d’arbres et à la fabrication de fours. Les chercheurs espèrent qu’une partie de ce qu’ils ont appris finira par jouer un rôle dans la technologie du monde réel, par exemple comment faire faire un travail à un robot domestique sans avoir à le programmer pour le faire.

Sarantinos a déclaré que même s’il « ne mentionne pas » que les vrais humains agissent très différemment des créatures fictives du jeu vidéo, « il est toujours possible d’utiliser des idées de base. Si vous utilisez des tests de psychologie, vous pouvez utiliser ces informations pour déduire à quel point ils peuvent fonctionner. ensemble. » « 

« Il y a vraiment une raison d’étudier les jeux », a déclaré Amy Hoover, professeur agrégé d’informatique au New Jersey Institute of Technology qui a conçu des algorithmes pour le jeu de cartes numérique Hearthstone, mais ce n’est pas toujours facile à expliquer.

« Les gens ne comprennent pas toujours qu’il s’agit de la méthode d’amélioration, pas du jeu », a-t-elle déclaré.

Les jeux fournissent également des tests utiles pour l’IA – y compris certaines applications du monde réel dans la robotique ou les soins de santé – qu’il est plus sûr d’expérimenter dans un monde virtuel, a déclaré Vanessa Volz, chercheuse et cofondatrice de la startup danoise Modl.ai, qui construit des systèmes d’IA pour développer les jeux.

Mais, ajoute-t-elle, « cela peut être exagéré ».

« Ce ne sera probablement pas une énorme percée et tout va basculer dans le monde réel », a déclaré Falls.

Le géant japonais de l’électronique Sony a lancé sa propre division de recherche sur l’IA en 2020 dans un souci de divertissement, mais a néanmoins suscité un intérêt académique plus large. son mémoire de recherche Sophy a fait la couverture l’année dernière de la prestigieuse revue scientifique Nature, qui a déclaré qu’elle pourrait avoir des implications pour d’autres applications telles que les drones et Véhicules autonomes.

La technologie derrière Sophy est basée sur une méthode algorithmique connue sous le nom d’apprentissage par renforcement, qui entraîne le système en le récompensant lorsqu’il réussit quelque chose tout en l’exécutant dans des courses virtuelles des milliers de fois.

« La récompense vous dira que vous faites des progrès. C’est bien », ou « Vous êtes hors cours. » Eh bien, ce n’est pas bon, a déclaré Springer.

Les joueurs PlayStation ne pourront affronter Sophy que jusqu’au 31 mars, sur un nombre limité d’épisodes, afin qu’ils puissent obtenir des retours et revenir au test. Peter Wermann, directeur de Sony AI America et chef de projet GT Sophy, a déclaré que la formation des agents d’IA sur la PlayStation 20 prend environ deux semaines.

« Pour le diffuser à travers le jeu, il faut plus de réalisations et un peu de temps avant que nous soyons prêts pour cela », a-t-il déclaré.

Et pour le faire dans de vraies rues ou sur des circuits de Formule 1 ? Cela peut prendre beaucoup plus de temps.

Entreprises de voitures autonomes Adoptez des techniques d’apprentissage automatique similaires, mais elles « ne donnent pas le contrôle complet du véhicule comme nous le pouvons », a déclaré Wurman. « Dans un monde simulé, aucune vie n’est en danger. Vous savez exactement le genre de choses que vous allez voir dans l’environnement. Il n’y a personne qui traverse la route ou quelque chose comme ça. »

Matt O’Brien, Associated Press