OpenAI avança no Dota 2: equipes semi-profissionais derrotadas


A batalha está em pleno andamento

Programas de computador abrangentes estão capturando novos postos avançados da humanidade, se esses puderem ser considerados áreas onde as pessoas tradicionalmente superam a máquina. Anteriormente, era xadrez, então - vá, depois disso - muitos outros jogos de computador, incluindo jogos muito antigos .

Agora, o computador ainda não pode derrotar profissionais de e-sportsmen - jogadores em jogos multiplayer de um gênero especial - arena de batalha online multiplayer (MOBA). Um deles é o Dota 2, e aqui ainda se sente a superioridade de uma pessoa sobre uma máquina (desde que ambas sejam colocadas em pé de igualdade). Mas o computador já está seguindo os passos do homem - jogadores semiprofissionais já estão começando a dar lugar à inteligência artificial (sua forma fraca, é claro).

As equipes profissionais ainda aguentam - mas por quanto tempo esse equilíbrio de poder permanecerá? Em agosto do ano passado, a equipe da OpenAI se ofereceu para lutar com um computador para o ciber-desportista profissional Dendi (Daniil Ishutin).


Então o computador derrotou o homem em duas das três partidas. Mas isso não pode ser chamado de vitória total, pois o computador foi colocado em condições muito limitadas, que geralmente não existem em um jogo normal. Você pode ler sobre como tudo isso aconteceu no blog dos desenvolvedores .

Depois de apenas um ano, a IA da OpenAI aprendeu a tocar mais profissionalmente em um ambiente normal. Esquema de jogo tradicional - 5 * 5. E agora a plataforma de software está conquistando quase todos os novatos (não muito ridículos, é claro) e jogadores semi-profissionais. É verdade que existem algumas restrições agora. Portanto, todos os cinco personagens que compõem o time devem ser os mesmos para os dois oponentes.


Qualquer um dos personagens tem suas próprias habilidades, habilidades, armas, habilidades. Tudo isso torna o jogo Dota2 um pouco difícil para o computador - afinal, mesmo no Dota 2, existem movimentos baseados em uma lógica relativamente simples. O xadrez não merece ser lembrado aqui - o computador está jogando melhor que os humanos há muito tempo.

O OpenAI AI é chamado OpenAI Five. Ele conseguiu vencer equipes de e-sportsmen semi-profissionais. A vitória foi relativamente fácil para o computador, como evidenciado por uma série de vitórias de máquinas sobre seres humanos nos últimos meses.

O OpenAI Five superou um time amador com o MMR 4200 em dois dos três jogos. Aconteceu que o time ganhou o time de semi-profissionais de e-sportsmen com o MMR 5500 quase o tempo todo - a proporção de vitórias e o número total de jogos é de 99%. Para ser justo, vale dizer que nas condições dos jogos também havia certas restrições - por exemplo, os jogadores não podiam ficar invisíveis.

Bots de IA treinados jogando sozinhos e por meio do programa Proximal Policy Optimization. No momento, os bots jogam há cerca de 180 anos, isto é, muito mais que a vida humana. No entanto, enquanto o jogo de bots deixa muito a desejar, embora esteja melhorando gradualmente. Naturalmente, esse trabalho requer recursos e eles estão lá - o hardware para AI possui 128 mil núcleos de processador e 256 GPUs Nvidia P100. É claro que os desenvolvedores não criaram esse monstro, mas alugaram o poder do serviço em nuvem do Google Cloud.

Em agosto, a OpenAI ainda planeja vencer os profissionais de e-sports, os preparativos para a partida já estão em andamento. Se o computador conseguir fazer isso, os desenvolvedores de IA poderão se orgulhar de outra conquista.

A Open AI é uma organização sem fins lucrativos envolvida em pesquisas no campo da inteligência artificial. Suas principais tarefas são o desenvolvimento e a promoção da IA. A organização foi criada através de doações de empresários conhecidos do Vale do Silício. Entre outras, esta organização inclui Ilon Musk, Peter Thiel, Sam Altman, Amazon, Microsoft e outros.

Muitos cientistas expressaram seu apoio ao OpenAI, incluindo Stephen Hawking. A organização começou a trabalhar em 2016, quando a OpenAI lançou uma plataforma reforçada de pesquisa de aprendizado de máquina. Provavelmente, a organização ainda será capaz de atingir seu objetivo - criar uma IA que derrote uma pessoa em um jogo puramente humano. E com um alto grau de probabilidade, isso acontecerá este ano. A propósito, a equipe vencedora, que se mostra a mais forte em Dota 2 no campeonato de classe mundial, recebe vários milhões de dólares como prêmio. Gostaria de saber se o prêmio de IA será concedido se o computador participar de um desses campeonatos e derrotar todos os rivais.

Source: https://habr.com/ru/post/pt415461/


All Articles