Open AI Five, eine mit Reinforcement Learning trainierte Künstliche Intelligenz, hat in einem Livematch die aktuell weltbeste Mannschaft von Dota-2-Spielern besiegt.

Das Open-AI-Projekt macht einmal mehr Schlagzeilen. Nach längerem Training ist die in dem Projekt entwickelte künstliche Intelligenz Open AI Five in der Lage, die aktuell wohl weltbesten Dota-2-Spieler vom Team OG zu schlagen. Dafür trainierten die Bots schlappe 45 000 Jahre.

Das Open-AI-Projekt erforscht Deep-Learning-Algorithmen, die sich neue Fähigkeiten selbstständig aneignen. Sie bekommen also keine Vorgaben von Außen, sondern sollen durch Beobachten Probleme selbst entdecken und lösen. Dazu trainieren die KIs hauptsächlich mit Spielen, unter anderem dem beliebten Online-Echtzeit-Strategiespiel Dota 2.

Nun berichtet das Projekt von einem weiteren Meilenstein: Ihre KI namens Open AI Five hat das aktuell wohl beste Dota-2-Team der Welt namens OG in einem Livespiel geschlagen. Dazu wurde das Spiel allerdings ein wenig optimiert, sowohl zugunsten der Menschen als auch der KI. Die Zahl der einsetzbaren Helden wurde reduziert, die Helfer (Minions) abgeschaltet.

45000 Jahre Training

Das Turnier war nicht der erste Versuch, gegen Dota-2-Profis zu gewinnen: Bei “The International” 2018 verloren die Herausforderer und haben ihre KI nun einfach deutlich länger trainieren lassen.

Entsprach das Training vor dem Event 2018 auf Menschen übertragen einem Zeitraum von 10 000 Jahren (das die AI in 1,5 Monaten absolvierte), trainierte Open AI Five nun 45 000 Jahre (innerhalb von zehn Monaten). Das Transfer Learning funktionierte in diesem Fall auch. Das heißt, die Projektmitarbeiter waren in der Lage, das Modell auch bei Änderungen an der Modellgröße und den Spielregeln zu erhalten und erfolgreich zu übertragen. Nach Wissen des Projekts sei es das erste Mal, dass ein Reinforcement Learning (RL) so viel Training am Stück erhalten habe.

Eine Überraschung war, dass die Agenten auch sehr gut mit Menschen zusammenspielten. Anders als das Projekt erwartet hatte, war dafür kein Extra-Training nötig und die RL-Agenten erledigten ihren Job nach Aussage der menschlichen Spieler sehr gut. Zuvor hatten die RL-Agenten lediglich gegen Kopien ihrer selbst gespielt.

Offen für alle

Noch im April 2019 soll Open AI Five Arena starten. Dabei dürfen menschliche Spieler aus aller Welt gegen die AI antreten. Es sei ein öffentliches Experiment, um herauszufinden, ob die künstlich trainierten Bots irgendwelche Schwachpunkte haben, also in bestimmten Situationen nicht reagieren können. Interessierte Dota-2-Spieler finden mehr zu diesen Sessions im Blogpost mit der Ankündigung heraus.