Libratus strategischer Poker Bot angepasst für militärische Simulationen

2017 machte der Libratus Poker Bot Schlagzeilen, als er vier Profis in unbegrenztem Hold'em in einer Entfernung von 120.000 Händen besiegte. Jetzt wurde die Technologie für den militärischen Einsatz angepasst .

Entwickler schwacher KI-Systeme vergleichen häufig die Wirksamkeit ihrer Programme bei der Spielkonfrontation gegen Menschen. In Spielen mit vollständigen Informationen zu jeder Zeit während des Spiels haben alle Spieler vollständige Informationen über den Status des Spiels, dh über die Position und alle möglichen Bewegungen eines Spielers. Im Gegensatz zu solchen deterministischen Situationen ist bei Spielen mit unvollständigen Informationen ein Teil der Informationen über den Status des Spiels vor dem Spieler verborgen - beispielsweise die Karte des Gegners. No Limit Hold'em ist nur eines dieser Spiele. Zusätzlich zu den geschlossenen Karten des Gegners wird hier aufgrund der willkürlichen Größe jeder Wette ein Element der Unsicherheit hinzugefügt. Vor diesem Hintergrund wird die Anzahl der möglichen Ergebnisse auf 10 ¹⁶¹ geschätzt. Die Entwicklung einer optimalen Strategie angesichts der Unsicherheit unter Berücksichtigung der Taktik des Gegners ist genau das, was das Militär braucht.

Libratus („ausgewogen“ aus der lateinischen Sprache) wurde von Forschern der Carnegie Mellon University entwickelt, um Ideen für automatisierte Entscheidungen auf der Grundlage der Spieltheorie zu testen. Anfang letzten Jahres gründete der Hauptautor des Programms, Professor Tuomas Sandholm, nach einem Erdrutschsieg über Profis ein Startup namens Strategy Robot, um die Spieltechnologie für den Einsatz durch die Regierung anzupassen. Zum Beispiel in Kriegsspielen und Simulationen, um militärische Strategie und Planung zu studieren. Laut öffentlichen Aufzeichnungen schloss das Unternehmen Ende August einen Zweijahresvertrag mit der US-Armee über bis zu 10 Millionen US-Dollar ab. Die Finanzierung erfolgte durch die Defence Innovation Unit, die das Pentagon 2015 gegründet hatte, um die Kontakte zu Silicon Valley-Unternehmen zu verbessern und neue aktiv einzuführen Technologie.


Libratus-Strategie in verschiedenen Phasen der Verbreitung. Basierend auf den Verteilungsergebnissen wird das Modell des Spiels gegen einen bestimmten Gegner festgelegt

Libratus basiert auf der algorithmischen (rechnerischen) Spieltheorie. In Heads-Ups mit Profis gewann der Bot mehr als 1,8 Millionen konventionelle Dollar: Während des Turniers entwickelte er leistungsstarke Wettstrategien und demonstrierte sogar die Möglichkeit des Bluffen.

Sandholm ist zuversichtlich, dass dieser Ansatz auf viele andere Spiele sowie auf militärische Simulationen anwendbar ist. Heutzutage testen militärische Spielübungen normalerweise nur eine kleine Anzahl von Strategien für imaginäre Gegner: „Dies eröffnet viele Möglichkeiten zur Ausbeutung, da ein echter Gegner möglicherweise nicht nach Ihren Annahmen spielt “, sagt der Professor.

Sandholm weigert sich, die Besonderheiten von Strategy Robot-Projekten zu erörtern, obwohl das Unternehmen mindestens einen weiteren Regierungsvertrag abgeschlossen hat. Er sagt, dass das Programm bei Simulationsaufgaben hilft, zu denen das Treffen von Entscheidungen in einem simulierten physischen Raum gehört, beispielsweise wo militärische Einheiten platziert werden sollen.

Die Libratus-Pokertechnik legt nahe, dass der strategische Bot dem Militär einige überraschende Empfehlungen geben könnte. Professionelle Spieler, die sich während des Turniers dem Bot widersetzten, stellten überrascht fest, dass er unerwartet von einer engen zu einer hyperaggressiven Taktik wechselt, sodass seine Aktionen kaum vorherzusagen sind - aber alle Aktionen des Bots zielen ausschließlich auf den Gewinn ab. "Das ist seltsam, weil es keinen Eindruck gibt, dass er besser spielt als Sie, aber dann schauen Sie sich die Partitur an und verstehen, was passiert ist", sagt Sandholm.

Experten zufolge können solche Technologien Kriegsspiele und Simulationen nützlicher machen, obwohl die Ergebnisse nur eine der Komponenten der strategischen Planung bleiben werden. Die reale Welt ist viel komplizierter und verwirrender als Szenarien, die selbst die besten KI-Technologien beherrschen.

Der strategische Bot Libratus ist nicht der einzige Versuch des Pentagon, moderne Spieltheorie und schwache KI in militärischen Angelegenheiten anzuwenden. Die DARPA-Forschungsagentur hat ein spezielles Programm mit dem Titel „Konsistente Interaktion in Spielen mit unvollständigen Informationen zur Annahme komplexer militärischer Entscheidungen (SI3-CMD)“ gestartet . Michael Wellman, Professor an der University of Michigan, sagt, das Libratus-Beispiel zeige: Die Technologie ist fast reif für den Einsatz in der Praxis: „Der Durchbruch beim Poker war einfach erstaunlich und bei anderen Spielen geht es schnell. Es ist Zeit, es in realeren Bereichen zu versuchen “, sagte er.

Neben Strategy Robot gründete Professor Sandholm ein weiteres strategisches Maschinen-Startup, bei dem er einen strategischen Bot für kommerzielle Aufgaben wie Strommärkte, Sport und Computerspiele anpasst.

KI-Technologien sind nicht nur in den USA, sondern auch in Russland und China für das Militär von Interesse, schreibt Wired . Professor Sandholm teilt diesbezüglich keine Bedenken. Er glaubt, dass KI "die Welt viel sicherer machen wird".