OpenAI Bot besiegt drei Top-Profis in Dota 2

Danil 'Dendi' Ishutin greift die Position des OpenAI-Bots beim internationalen Turnier am 11. August 2017 an. Turnier Live Screenshot

Bei der gestrigen Dota 2 International Championship in Seattle besiegte ein von OpenAI entwickelter Bot einen der besten Dota 2-Spieler der Welt, Danil Ishutin , einen bekannten Profi unter dem Spitznamen Dendi ($ 735.449 in Karrierepreisen). Der 27-jährige Ukrainer ergab sich mitten im zweiten Spiel.

Nach den Regeln eines Einzelspiels war der Gewinner in jedem Spiel der Spieler, der zwei Kills begangen oder den Turm des Feindes zerstört hat. Im ersten Spiel dominierte OpenAI und gewann in weniger als 10 Minuten, und Ishutin schien über die Fähigkeiten des Bots erstaunt zu sein. Zu Beginn des zweiten Spiels machte der Bot einen Kill und Dendi stoppte das Spiel bald und gab eine Niederlage zu. "Dieses Ding ist beängstigend", sagte Dendi vor einer riesigen Menge von Zuschauern. Elon Musk freute sich .

Somit blieb der OpenAI-Bot unschlagbar, als er in Dota 2 gegen die besten Spieler der Welt antrat. Zuvor feierte er den Sieg über Arthur 'Arteezy' Babaev (Nr. 1 in der Gesamtwertung) und Sayed 'Suma1L' Hassan (Nr. 1 in der Wertung 1 gegen 1).

Dendi gegen OpenAI Bot


Dota 2 ist ein komplexes Spiel mit versteckten Informationen, in dem Spieler Aktionen planen, angreifen, betrügen und den Feind täuschen müssen. Es gibt keine offensichtliche Korrelation zwischen den Fähigkeiten des Spielers und der Anzahl der Aktionen pro Minute, obwohl der Bot ungefähr die gleiche Anzahl von Aktionen pro Minute hat wie Menschen. Die Spieler bemerken jedoch, dass der Bot aufgrund einer schnelleren Reaktion und außergewöhnlich genauer Bewegungen einen Vorteil gegenüber einer lebenden Person hat, die mit der Maus klickt.


Der Wartungsmitarbeiter der International Championships hob seine Hand mit einem USB-Stick, auf dem der Bot aufgezeichnet ist. Ein Dendi-Profi steht im Hintergrund und wartet auf den Beginn des Kampfes. Foto: OpenAI über YouTube

„Was wir hier gezeigt haben, wird als gemeinsames Lernsystem bezeichnet“, erklärt Greg Brockman, Mitbegründer und CTO von OpenAI. - Sie hat immer noch eine Reihe von Einschränkungen, kann aber bereits die besten Profis in Dota besiegen. Dies ist ein Schritt zum Aufbau allgemeinerer Systeme, mit denen die komplexeren, verwirrenderen und wichtigeren Aufgaben der realen Welt wie der Beruf des Chirurgen erlernt werden können. “

Der OpenAI-Bot lernte Dota 2 zu spielen, nachdem er eine große Anzahl von Spielsitzungen gegen sich selbst verbracht hatte. Das Training dauerte zwei Wochen. Während dieser Zeit wurde der Weg von zufälligen zufälligen Aktionen im Spiel zu Fähigkeiten zurückgelegt, die ausreichen, um die besten Profis zu besiegen. Die Entwickler haben keine Strategien in das Programm aufgenommen, nicht die Hilfe von Experten verwendet. Der Bot fing einfach von vorne an und spielte mit sich selbst, wobei er das Spiel Schritt für Schritt geringfügig verbesserte, bis es ein professionelles Niveau erreichte.


Im gegenwärtigen Zustand ist es jedoch unwahrscheinlich, dass der Bot in einem großen Spiel antreten kann, in dem normalerweise Teams mit fünf Spielern spielen. Trotzdem sind Eins-zu-Eins-Spiele eine vereinfachte Version von Dota, aber in Teamspielen gibt es viel mehr unterschiedliche Strategien und spezifische Techniken. In einem offiziellen Blog sagte OpenAI , dass das Erstellen einer Gruppe von Bots, um gegen ein Team von Menschen zu spielen, das nächste Ziel ist.

Für OpenAI ist dies eine definitive Leistung. Diese gemeinnützige Organisation wurde im Dezember 2015 von den bekannten Unternehmern Ilon Mask und Sam Altman, Geschäftsführer des Startup-Inkubators Y Combinator, gegründet. Zu den Sponsoren zählen eine Reihe einflussreicher Führungskräfte aus dem Silicon Valley, darunter die Geschäftsleute Peter Thiel und Jessica Livingston. Die Organisation zielt darauf ab, eine sichere (dh öffentliche und offene) künstliche Intelligenz zu schaffen.

Im Dezember 2016 führte OpenAI die Universe Middleware ein, um eine starke KI zu trainieren und zu lernen. Theoretisch kann ein Training zu allen Informationen der Menschheit stattfinden, die über das Internet verfügbar sind. Dies sind Spiele, Websites und andere Anwendungen.

OpenAI glaubt, dass das verstärkte Lernen ein wichtiger Weg des maschinellen Lernens ist, der die KI erheblich verbessern wird. Im Lernprozess mit dieser Methode lernt das Testsystem (Agent) durch Interaktion mit einer bestimmten Umgebung. Im Gegensatz zum traditionellen Unterricht mit einem Lehrer besteht die Antwort auf die getroffenen KI-Entscheidungen in Verstärkungssignalen, während einige Verstärkungsregeln dynamisch und schwer zu verstehen sind, dh auf der gleichzeitigen Aktivität formaler Neuronen beruhen.

"Unser oberstes Ziel ist es, einen einzigen intelligenten Agenten zu entwickeln, der die im Universum gesammelten Erfahrungen flexibel anwenden kann, um neue Probleme zu lösen und schnell neue Erfahrungen zu sammeln. Dies wird ein wichtiger Schritt auf dem Weg zu einer starken KI sein", heißt es in der OpenAI-Erklärung.

AI wird derzeit von kommerziellen Unternehmen wie Google, Facebook und Microsoft entwickelt. Natürlich stellen sie ihren finanziellen Gewinn über die Interessen der Menschheit. Die von ihnen erstellten AIs handeln entsprechend. OpenAI, eine gemeinnützige Organisation mit einer Open-Source-Alternative zu AI, versucht, Unternehmen entgegenzuwirken. Alle Studien am OpenAI Institute werden öffentlich veröffentlicht. In der offiziellen Ankündigung der Gründung der Organisation heißt es: „Im Zusammenhang mit der unvorhersehbaren Geschichte der KI ist es schwierig vorherzusagen, wann eine KI auf menschlicher Ebene auftreten wird. In diesem Fall wird es wichtig sein, der Menschheit ein führendes Forschungsinstitut zur Verfügung zu haben, das in der Lage ist, den Gewinn für alle seine eigenen Interessen zu priorisieren. “