Valve Corporation
OpenAI a annoncé aujourd'hui avoir développé un nouveau bot basé sur un réseau de neurones capable de vaincre des adversaires humains dans un jeu de Dota 2. Bien que beaucoup de presse ait été donnée aux réseaux de neurones capables de vaincre les humains dans une variété de jeux de stratégie abstraits comme Weiqi, c'est la première fois qu'une IA peut véritablement se défendre dans un jeu vidéo complexe conçu avec une interface utilisateur humaine.
Les représentants du laboratoire espéraient faire participer les robots à une série de matchs lors d'un événement de championnat en août pour jouer contre les pros. Ceci en dépit du fait que les joueurs IA ont traditionnellement eu du mal à maîtriser des jeux comme Dota 2.
Les joueurs doivent prendre énormément de décisions à tout moment. Une bonne partie de Weiqi peut se terminer en aussi peu que 150 coups. OpenAI a dû concevoir des robots capables de faire plus de 20000 coups au cours d'un seul jeu Dota 2 de 45 minutes.
Les ingénieurs ont démontré l'année dernière qu'un des robots pouvait affronter un seul professionnel humain jouant une version abrégée du jeu. Ils ont admis, cependant, qu'ils n'étaient pas sûrs de pouvoir un jour faire évoluer l'IA pour jouer un vrai match à cinq contre cinq.
Les chercheurs déclarent avoir compris qu'une IA peut explorer et apprendre si elle dispose de suffisamment de temps pour le faire, et ils ont configuré un environnement d'auto-jeu pour que les robots puissent apprendre en conséquence. Deux joueurs IA dans le système s'affronteront et apprendront des échecs de l'autre. Finalement, ils ont pu apprendre de ce qui équivaut à environ 180 ans de jeu pour chaque jour qu'ils s'entraînaient.
Cela a été accompli en utilisant une pile massive de 256 GPU différents contenant 128 000 cœurs. Bien que peu de joueurs puissent espérer assembler une plate-forme comme celle-ci, OpenAI n'aurait probablement pas pu le faire avec quelque chose de moins puissant.
Certains joueurs critiques ont déclaré que ce n’était pas vraiment un exemple d’intelligence, car une véritable intelligence émerge et peut apprendre sans formation. L'entraînement ne fait que peaufiner les compétences d'un joueur humain.
Là encore, quelle que soit la façon dont les joueurs de robots ont appris, ils sont certainement des adversaires coriaces pour les organiques qui ont à la fois des compétences innées et un entraînement à leur actif.
