Les progrès de l'intelligence artificielle d'OpenAI dans la maîtrise de Dota 2 sont la meilleure illustration de "ici ... alors nous verrons." Maintenant, nous sommes dans un endroit où l'IA a déjà battu les meilleurs joueurs un à un, appris à jouer en équipe avec des joueurs ordinaires, surmonté des limites importantes, battu une équipe semi-professionnelle.
La prochaine étape - "ici battra la meilleure équipe du monde, alors nous verrons." Cela fonctionnera-t-il? Qui croit.
Comment se passe la préparation?
L'International 2018 a commencé le 15 août. Maintenant, il y a une étape par équipe du tournoi. Le jeu avec l'IA ira au-delà du cadre du tournoi principal, il ne s'agira que de matchs de démonstration. Les dates et conditions n'ont pas encore été annoncées, mais elles seront certainement connues dans un avenir proche. Pendant que les gens se battent pour avoir accès aux séries éliminatoires, «l'équipe de bots» s'entraîne.
La dernière fois qu'OpenAI a
parlé en détail des préparatifs après avoir remporté un match de démonstration début août:
Notre approche de développement standard consiste à former chaque révision majeure du système à partir de zéro. Cependant, la version actuelle d'OpenAI Five prend en compte les paramètres de formation entre les six révisions majeures du système, qui ont été effectuées depuis le 9 juin. Chaque révision ultérieure a été lancée en tenant compte des paramètres de la précédente.
Le 16 août, le CTO d'OpenAI a tweeté qu'il cherchait des équipes pour former la dernière version.
Mais pour l'instant, comme il le dit, même les technologies d'IA les plus avancées ne corrigeront pas les bugs pour elles-mêmes.
OpenAI Five peut-il gagner
L'argument principal de la plupart des sceptiques est que ce que Five joue n'est pas Dota 2. Les restrictions nécessaires pour jouer avec l'IA font de Dota un jeu presque différent. En jouant avec Five, les gens se retrouvent dans des conditions auxquelles ils n'ont pas encore eu le temps de s'adapter.
«Les robots sont trop simples en ce moment», explique William Blitz, l'un des perdants de l'intelligence artificielle, «cela devient un peu prévisible. On dirait que si nous avions joué quelques matchs de plus, nous aurions appris à le gérer assez facilement. »
La publication Cybersport.ru dans ses
conclusions après le match était d'accord avec cet argument.
Les restrictions semblent insignifiantes, mais en raison de leur combinaison, le jeu a acquis un caractère complètement différent de celui des matchs habituels dans DotA. Selon les développeurs, l'intelligence artificielle joue chaque jour avec elle-même tant de correspondances que leur durée totale est d'environ 180 ans. Les lanceurs n'avaient pas d'expérience dans ce mode, ils ont donc perdu la première carte de façon dévastatrice, et seulement sur la seconde ils ont pu rivaliser avec un adversaire.
La publication note que les bots utilisent activement le terrain, trouvent de nouvelles tactiques imprévisibles que même les gens peuvent bien adopter. Dans le même temps, à leur avis, les bots sont facilement menés à l'arrêt, ils font de nombreuses erreurs et les tactiques acquises s'avèrent souvent inappropriées.
On
Habré a également analysé une correspondance indicative et tiré des conclusions positives en faveur de l'IA:
3-4 personnages de l'IA ont systématiquement brisé les tours des adversaires humains, «chargeant» magistralement la tour à son tour pour sauver leur propre chair de poule et détruire rapidement la structure. En outre, les robots ont été notés pour le fait qu'ils utilisaient des salles non standard, qui leur réservaient également des tours. En conséquence, dans l'un des jeux avec les invités de l'événement, les bots sont déjà entrés dans la base ennemie à 9 minutes (arriver à la base ennemie même à 15-18 minutes est considéré comme un timing extrêmement précoce).
De plus, les bots ont redistribué efficacement l'expérience entre eux, évitant le retrait de personnages de 4 à 5 positions, se sont distingués dans le calcul des dégâts (lors du dernier coup, le bot n'a pas continué à rattraper la cible, comprenant clairement qu'il y avait suffisamment de dégâts à tuer) et a utilisé activement certains éléments. ''
L'un des points les plus discutés dans les caractéristiques de l'IA était le moment de sa réaction. OpenAI a augmenté les 80 millisecondes initiales à 200, mais, comme certains commentateurs l'ont noté, même ce chiffre est trop élevé. À leur avis, il ne tient pas compte du temps qu'une personne - ayant déjà réagi - passe à viser avec la souris et à combattre le doute si quelque chose ne va pas.
Il est probable que dans la version Five pour le match de démonstration à l'International OpenAI sera en mesure de surmonter encore plus de restrictions.
Qu'adviendra-t-il des eSports si OpenAI gagne
Après la victoire de Five lors du match de démonstration du 5 août, une discussion intéressante a éclaté sur
Facebook avec Sergey Orlovsky , le chef de Nival (qui utilise également le réseau de neurones AI dans sa stratégie Blitzkrieg 3). Sergey a écrit:
Tout d'abord, c'est magnifique. Deuxièmement, c'est la fin du eSport, et la raison pour laquelle je n'y ai pas investi. Troisièmement, cela fera réfléchir à nouveau le problème de la coexistence avec l'IA.
Il y avait de nombreux contre-arguments à ce point de vue.
Par exemple, Victor Zakharchenko de FunCubator le
pense :
Je suis sûr que l'eSport sera un sport avec la plus forte pénétration de la technologie dans le joueur. Mais pas un substitut pour lui. Le sport est une question de propriété (je parle en tant que fan de sports fantastiques). Et être impliqué dans des lignes de code est en quelque sorte difficile.
Quoi qu'il en soit, tout cela se produira sous nos yeux. Et le jeu de l'IA avec une équipe professionnelle, et la vie des e-sports avec les conséquences de ce jeu.
La mort et la vie sportives, la coexistence avec l'IA semblent être des choses relativement éloignées. Pour l'instant, nous attendrons de surmonter toutes les restrictions et la participation de Five au tournoi avec les participants humains.