Une IA piratée signifie que le meilleur pilote Gran Turismo au monde n’est pas humain

Sony Gran Turismo C’est l’une des plus grandes séries de jeux de course de tous les temps, et elle a été épuisée Plus de 80 millions d’exemplaires globalement. Mais aucun de ces millions de joueurs n’est le plus rapide.

Dans une nouvelle percée, une équipe dirigée par Sony AI – la société L’intelligence artificielle (IA) Research Department – Développer un lecteur entièrement synthétique propulsé par apprentissage automatiquecapable non seulement d’apprendre et de maîtriser le jeu, mais aussi de rivaliser avec les meilleurs joueurs humains du monde.

Agent d’IA, appelé Gran Turismo Sophieutilisé Apprentissage par renforcement profond jouer le jeu ( Gran Turismo Sport edition), et contrôlez jusqu’à 20 voitures simultanément pour accélérer et améliorer le processus de collecte de données.

Après seulement quelques heures à apprendre à contrôler la physique du jeu – à maîtriser à la fois la vitesse et le freinage pour rester sur la bonne voie – l’IA était plus rapide que 95 % des joueurs humains dans un ensemble de données de référence.

Pour ne pas être en reste avec ces 5% embêtants, la GT Sophy a doublé.

« Elle s’est entraînée pendant encore neuf jours ou plus – elle avait accumulé plus de 45 000 heures de conduite – et a diminué de quelques dixièmes de secondes, jusqu’à ce que ses temps au tour cessent de s’améliorer », L’équipe s’explique Dans un nouveau document de recherche décrivant le projet.

« Grâce à cette procédure d’entraînement, GT Sophy a réalisé une performance contre la montre phénoménale sur les trois pistes… avec un temps au tour moyen à peu près égal au meilleur temps au tour humain jamais enregistré. »

Ce n’est pas la première fois que nous voyons l’IA apprendre à surpasser les joueurs humains dans les jeux. Au fil des ans, les conquêtes se sont accumulées, avec une variété d’agents découvrant les meilleurs moyens pour les simples mortels dans toutes sortes de jeux.

Échecs Atari starcraftPoker and Go a peut-être été conçu par des humains, mais les mains humaines ne sont plus les meilleures pour y jouer.

Bien sûr, ces jeux sont tous soit des jeux à vocation stratégique, soit relativement simplifiés dans leur mode de jeu (cas des jeux Atari). Gran Turismo – salué par ses fans non seulement comme un jeu vidéo, mais aussi comme un simulateur de conduite réaliste – c’est un autre type de monstre.

« De nombreuses applications potentielles de l’IA impliquent de prendre des décisions en temps réel dans des systèmes physiques tout en interagissant avec les humains », ont déclaré les chercheurs. écrire dans leurs études.

« La course automobile est un exemple frappant de ces conditions ; les conducteurs doivent effectuer des manœuvres tactiques complexes pour dépasser ou repousser leurs adversaires tout en conduisant leurs voitures dans leurs limites de traction. »

Pour le test GT Sophy, le défi n’était pas seulement de maîtriser et de faire glisser les tactiques du jeu. L’IA devait également exceller dans l’étiquette de course – apprendre à battre ses adversaires selon les principes de l’esprit sportif, en respectant les lignes de conduite des autres voitures et en évitant les collisions accidentelles.

En fin de compte, rien de tout cela ne s’est avéré être un problème. Dans une série d’événements de course organisés en 2021, l’intelligence artificielle a capturé certaines des meilleures courses au monde Gran Turismo Des joueurs, dont le triple champion Takuma Miyazono.

Lors de la compétition de juillet, l’IA a surpassé les joueurs humains dans les contre-la-montre, mais n’a pas remporté les courses en tête-à-tête. Après quelques améliorations par les chercheurs, l’agent a appris à améliorer encore ses performances et a facilement remporté le match revanche en octobre.

Malgré toutes les réalisations, les inventeurs de GT Sophy reconnaissent qu’il existe de nombreux domaines dans lesquels l’IA peut s’améliorer, notamment en termes de prise de décision stratégique.

Cependant, dans l’un des jeux de course les plus avancés jamais sortis, elle est déjà un meilleur pilote que le meilleur d’entre nous.

Ce que cela signifie pour l’avenir est encore inconnu, mais il est très probable que des systèmes comme ceux-ci seront un jour utilisés pour contrôler des véhicules du monde réel avec une meilleure maniabilité que les conducteurs humains experts. Dans le monde virtuel, il existe déjà.

« La course automobile simulée est un domaine qui nécessite un contrôle continu en temps réel dans un environnement à la physique très complexe », Les chercheurs ont conclu.

« Le succès de GT Sophy dans cet environnement montre, pour la première fois, qu’il est possible de former des agents IA qui sont meilleurs que les meilleurs coureurs humains sur une gamme de types de véhicules et de pistes. »

Les résultats sont rapportés dans tempérer la nature.