Danil 'Dendi' Ishutin ataca a posição do bot da OpenAI no torneio The International, 11 de agosto de 2017. Screenshot do torneio ao vivoOntem, no Campeonato
Internacional do
Dota 2 em Seattle, um bot criado pelo
OpenAI derrotou um dos melhores jogadores do Dota 2 do mundo,
Danil Ishutin , um conhecido profissional sob o apelido de Dendi (US $ 735.449 em prêmios de carreira). O ucraniano de 27 anos se rendeu no meio do segundo jogo.
De acordo com as regras de uma partida individual, o vencedor em cada jogo foi o jogador que cometeu duas mortes ou destruiu a torre do inimigo. No primeiro jogo, o OpenAI dominou e venceu em menos de 10 minutos, e Ishutin pareceu surpreso com as capacidades do bot. No início do segundo jogo, o bot matou e Dendi logo parou o jogo, admitindo a derrota. "Isso é assustador", disse Dendi na frente de uma enorme multidão de espectadores. Elon Musk
se alegrou .
Assim, o bot OpenAI permaneceu imbatível ao enfrentar os melhores jogadores do mundo no Dota 2. Ele já comemorou a vitória sobre Arthur 'Arteezy' Babaev (nº 1 no ranking geral) e
Sayed 'Suma1L' Hassan (nº 1 na classificação 1v1).
Dendi vs OpenAI botDota 2 é um jogo complexo com informações ocultas, onde os jogadores precisam planejar ações, atacar, enganar e enganar o inimigo. Não há correlação óbvia entre as habilidades do jogador e o número de ações por minuto, embora o bot tenha aproximadamente o mesmo número de ações por minuto que os humanos. No entanto, os jogadores
observam que o bot ganhou uma vantagem devido a uma reação mais rápida e movimentos excepcionalmente precisos, em comparação com uma pessoa viva que clica no mouse.
O membro da equipe de manutenção do International Championships levantou a mão com uma unidade flash USB na qual o bot está gravado. Um profissional da Dendi está em segundo plano, esperando o início da luta. Foto: OpenAI via YouTube"O que mostramos aqui é chamado de sistema de aprendizado comum",
explica Greg Brockman, co-fundador e CTO da OpenAI. - Ela ainda tem várias limitações, mas já é capaz de derrotar os melhores profissionais de Dota. Este é um passo em direção à construção de sistemas mais gerais que podem aprender as tarefas mais complexas, confusas e importantes do mundo real, como a profissão do cirurgião. ”
O bot OpenAI aprendeu a jogar Dota 2, tendo passado um grande número de sessões de jogo contra si mesmo. O treinamento levou duas semanas. Durante esse tempo, o caminho foi percorrido de ações aleatórias aleatórias no jogo até habilidades suficientes para derrotar os melhores profissionais. Os desenvolvedores não colocaram nenhuma estratégia no programa, não usaram a ajuda de especialistas. O bot simplesmente começou do zero e jogou sozinho, fazendo pequenas melhorias no jogo passo a passo até alcançar um nível profissional.
No entanto, no estado atual, é improvável que o bot consiga competir em um grande jogo, onde equipes de cinco jogadores geralmente jogam. Mesmo assim, as partidas individuais são uma versão simplificada do Dota, mas nos jogos em equipe há muito mais estratégias e técnicas específicas. Em um blog oficial, a OpenAI
disse que criar um grupo de bots para jogar contra uma equipe de pessoas é o próximo objetivo.
Para o OpenAI, essa é uma conquista definitiva. Esta organização sem fins lucrativos foi
fundada em dezembro de 2015 pelos conhecidos empresários Ilon Mask e Sam Altman, diretor executivo da incubadora de startups Y Combinator. Os patrocinadores incluem vários líderes influentes do Vale do Silício, incluindo empresários Peter Thiel e Jessica Livingston. A organização visa criar uma Inteligência Artificial segura (pública e aberta).
Em dezembro de 2016, a OpenAI
introduziu o middleware
Universe para treinar e aprender uma IA forte. Teoricamente, o treinamento pode ser realizado com todas as informações da humanidade, acessíveis via Internet. Estes são jogos, sites e outros aplicativos.
A OpenAI acredita que o aprendizado por reforço é uma maneira importante de aprendizado de máquina que melhorará bastante a IA. No processo de aprendizagem por esse método, o sistema de teste (agente) aprende interagindo com um determinado ambiente. Ao contrário do ensino tradicional com um professor, a resposta às decisões da IA tomadas são sinais de reforço, enquanto algumas regras de reforço são formadas dinamicamente e difíceis de entender, ou seja, com base na atividade simultânea de neurônios formais.
"Nosso objetivo final é desenvolver um único agente inteligente capaz de aplicar com flexibilidade a experiência adquirida no Universo para resolver novos problemas e obter rapidamente uma nova experiência, o que será um passo importante para uma IA forte", afirmou o comunicado da OpenAI.
Atualmente, a IA está sendo desenvolvida por empresas comerciais como Google, Facebook e Microsoft. Obviamente, eles colocam seus ganhos financeiros acima dos interesses da humanidade. As IAs que eles criaram agirão de acordo. A OpenAI, uma organização sem fins lucrativos com uma alternativa de código aberto à IA, está tentando combater as empresas. Todos os estudos do OpenAI Institute são publicados em domínio público. O
anúncio oficial da fundação da organização dizia: “Em conexão com a história imprevisível da IA, é difícil prever quando a IA do nível humano pode aparecer. Quando isso acontecer, será importante ter à disposição da humanidade um instituto de pesquisa líder capaz de priorizar o ganho para todos os seus próprios interesses. ”