Libratus bot de pôquer estratégico adaptado para simulações militares

Em 2017, o bot de poker Libratus chegou às manchetes quando venceu quatro profissionais no hold'em ilimitado a uma distância de 120.000 mãos. Agora a tecnologia foi adaptada para uso militar .

Os desenvolvedores de sistemas de IA fracos costumam comparar a eficácia de seus programas no confronto de jogos contra seres humanos. Em jogos com informações completas a qualquer momento durante o jogo, todos os jogadores têm informações completas sobre o estado do jogo, ou seja, sobre a posição e todos os movimentos possíveis de qualquer um dos jogadores. Diferentemente de situações determinísticas, em jogos com informações incompletas, parte das informações sobre o estado do jogo fica oculta do jogador - por exemplo, a carta do oponente. No limit hold'em é apenas um desses jogos. Além das cartas do oponente, um elemento de incerteza é adicionado aqui devido ao tamanho arbitrário de cada aposta. Com isso em mente, o número de resultados possíveis é estimado em 10 ¹⁶¹ . O desenvolvimento de uma estratégia ótima diante da incerteza, levando em consideração as táticas do oponente, é exatamente o que os militares precisam.

O Libratus ("equilibrado" da língua latina) foi criado por pesquisadores da Universidade Carnegie Mellon para testar as idéias de tomada de decisão automatizada com base na teoria dos jogos. No início do ano passado, após uma vitória esmagadora sobre os profissionais, o principal autor do programa, o professor Tuomas Sandholm, fundou uma startup chamada Strategy Robot para adaptar a tecnologia de jogos ao uso do governo. Por exemplo, em jogos de guerra e simulações para estudar estratégia e planejamento militar. No final de agosto, segundo registros públicos, a empresa firmou um contrato de dois anos com o Exército dos EUA no valor de US $ 10 milhões.O financiamento foi fornecido pela Unidade de Inovação em Defesa, que o Pentágono formou em 2015 para melhorar os contatos com empresas do Vale do Silício e introduzir mais ativamente novas tecnologia.


Estratégia Libratus em vários estágios de distribuição. Com base nos resultados da distribuição, o modelo do jogo contra um oponente específico é especificado

O Libratus é construído sobre a teoria algorítmica dos jogos (computacional). No heads-up com profissionais, o bot ganhou mais de 1,8 milhão de dólares convencionais: durante o torneio, ele desenvolveu estratégias poderosas de apostas e até demonstrou a possibilidade de blefar.

Sandholm está confiante de que essa abordagem é aplicável a muitos outros jogos, bem como a simulações militares. Atualmente, os exercícios militares de jogo geralmente testam apenas um pequeno número de estratégias para oponentes imaginários: "Isso abre muitas oportunidades de exploração, porque um oponente real pode não jogar de acordo com suas suposições " , diz o professor.

Sandholm se recusa a discutir as especificidades dos projetos da Strategy Robot, embora a empresa tenha firmado pelo menos um outro contrato do governo. Ele diz que o programa ajuda nas tarefas de simulação, que incluem a tomada de decisões em um espaço físico simulado, por exemplo, onde colocar unidades militares.

A técnica de pôquer Libratus sugere que o bot estratégico pode dar aos militares algumas recomendações surpreendentes. Jogadores profissionais que se opuseram ao bot, durante o torneio, ficaram surpresos ao descobrir que ele inesperadamente muda de tática rígida para tática agressiva, de modo que suas ações são quase impossíveis de prever - mas todas as ações do bot destinam-se estritamente à vitória. "Isso é estranho, porque não há impressão de que ele jogue melhor que você, mas então você olha para o placar e entende o que aconteceu", diz Sandholm.

Segundo especialistas, essas tecnologias podem tornar os jogos e simulações de guerra mais úteis, embora os resultados ainda permaneçam apenas um dos componentes do planejamento estratégico. O mundo real é muito mais complicado e confuso do que cenários capazes de dominar até as melhores tecnologias de IA.

O bot estratégico Libratus não é a única tentativa do Pentágono de aplicar a teoria moderna dos jogos e a IA fraca em assuntos militares. A agência de pesquisa da DARPA lançou um programa especial chamado "Interação consistente em jogos com informações incompletas sobre a adoção de decisões militares complexas (SI3-CMD)" . Michael Wellman, professor da Universidade de Michigan, diz que o exemplo do Libratus mostra: a tecnologia está quase pronta para uso no mundo real: “A inovação no poker foi simplesmente surpreendente, e as coisas estão indo rápido com outros jogos. É hora de experimentá-lo em mais áreas da vida real ”, disse ele.

Além do Strategy Robot, o professor Sandholm fundou outra startup estratégica de máquinas, onde adapta um bot estratégico para tarefas comerciais, como mercados de eletricidade, esportes e jogos de computador.

As tecnologias de IA são de interesse para os militares, não apenas nos Estados Unidos, mas também na Rússia e na China , escreve Wired . O professor Sandholm não compartilha preocupações sobre isso. Ele acredita que a IA "tornará o mundo muito mais seguro".