Deepminds neueste Spiele-KI schafft etwas, das noch keiner vor ihr gelang: Sie besiegt Profispieler im komplexen PC-Strategiespiel "Starcraft II". Das ist ein größerer Erfolg als AlphaGos Triumph über Go-Champion Lee Sedol vor rund drei Jahren - auch wenn die Live-Premiere misslang.
Merkbar stolz kündigt Deepmind im eigenen Blog das neueste neuronale Wundernetz aus der eigenen KI-Schmiede an: Es hört auf den Namen "Alphastar" und kann besonders gut das komplexe PC-Strategiespiel "Starcraft II" steuern. Sogar besser als menschliche Profis.
Laut Deepmind ist Starcraft ein Lackmustest für KI-Cleverness, da es Künstliche Intelligenz vor besondere Herausforderungen stellt:
- Es gibt keine eindeutige Siegesstrategie: Das Vorgehen muss permanent justiert und das Wissen über den Spielverlauf erweitert werden.
- Teile des Spielfeldes sind in künstlichen Nebel verhüllt und müssen zunächst erforscht werden.
- Entscheidungen können sich erst viel später im Spiel auswirken - das erfordert Planung.
- Im Unterschied zum Brettspiel Go laufen viele Prozesse parallel und in Echtzeit: Spieler handeln permanent, Hunderte Einheiten und Gebäude müssen gleichzeitig kontrolliert werden. Millionen Entscheidungen sind möglich.
Trainiert wurde Alphastar im ersten Schritt mit aufgezeichneten Partien menschlicher Profispieler. So lernte sie zunächst, die Handlungen der Profis zu imitieren.
Im zweiten Schritt traten dann Variationen der vortrainierten Künstlichen Intelligenz in einem Liga-System gegeneinander an.
Hier setzte Deepmind auf bestärkendes Lernen nach dem Versuch-und-Irrtum-Prinzip: Zielführende Handlungen werden belohnt, alle anderen bestraft. Mit der Methode werden beispielsweise auch selbstfahrende Autos verkehrssicher gemacht. Rund 200 Jahre Lerneinheiten führte sich jede einzelne KI in der Liga über 14 Tage hinweg zu Gemüte.
Die Liga-Gewinnerin durfte sich dann im vergangenen Dezember mit den Profispielern Grzegorz "MaNa" Komincz und Dario "TLO" Wünsch messen. Champions League, sozusagen.
Das Ergebnis: Alphastar macht seinem Namen alle Ehre und fegte die menschlichen Profis mit zehn zu null vom digitalen Spielfeld.
"Alphastar nimmt bekannte Strategien und stellt sie auf den Kopf", kommentiert der Starcraft-Profi Wünsch sein KI-Scharmützel. "Der Agent demonstrierte Strategien, an die ich noch nie gedacht hatte, was bedeutet, dass es immer noch neue Spielweisen geben kann, die wir noch nicht vollständig erforscht haben."
KI klickt weniger als Menschen
Die Besonderheit im Vergleich zu ähnlichen Tests: Starcraft II wurde für die KI nicht künstlich eingeschränkt, beispielsweise auf eine bestimmte Auswahl an Gebäuden oder Einheiten. Alphastar spielte also fast unter menschlichen Wettbewerbsbedingungen - und war dennoch erfolgreich.
Fast deshalb, da die KI direkt mit dem Spieleinterface verbunden war und den Spielverlauf so nicht umständlich über eine Karte visuell ablesen musste.
Komincz und Wünsch hingegen mussten wie üblich die Kamera manuell über das Spielfeld führen, um den Spielverlauf überall im Blick zu haben. Alphastar sah allerdings nicht mehr - nur alles gleichzeitig.
Eben diesen Vorteil entfernten die Deepmind-Wissenschaftler im aktuellsten Test, der live übertragen wurde - und prompt war Alphastar dem Profi Komincz unterlegen. Allerdings, rechtfertigt sich Deepmind, sei die Variante ohne Kartensehbonus erst sieben Tage im Training gewesen. Der nächste Test kommt bestimmt.
Interessant: Alphastar führte signifikant weniger Aktionen pro Minute durch als ihre Gegner. Mit 350 Millisekunden war außerdem die Reaktionsgeschwindigkeit überdurchschnittlich lang.
Die Anzahl Klicks pro Minute und die Reaktionsgeschwindigkeit wurden von den Deepmind-Forschern zwar künstlich auf menschliche Augenhöhe beschränk. Dennoch hätte Alphastar am oberen Limit menschlicher Fähigkeiten agieren können. Wollte sie aber offenbar nicht.
Dass Alphastar mit weniger Aktionen dennoch gewann, ist laut Deepmind ein Zeichen, dass die Künstliche Intelligenz aufgrund der besseren Strategie und Planung siegreich war.
Was bringt's?
Als "großen Durchbruch" feiert Deepmind Alphastars Siege in einem "der komplexesten Videospiele aller Zeiten".
Starcraft sei zwar nur ein Computerspiel, räumt die Google-Schwester ein, die Technologie hinter Alphastar könne aber womöglich auch andere Probleme lösen. Die ausgeprägte Planungsfähigkeit der KI könne zum Beispiel der langfristigen Wettervorhersage und somit der Klimaforschung dienen oder um Sprache zu verstehen.
Das ligabasierte Training sei außerdem eine Möglichkeit, fehleranfällige KIs von verlässlichen Systemen zu trennen. In der Zukunft könne sich das als Sicherheitsfaktor erweisen.
Deepminds Fazit: Alphastar sei "ein großer Schritt nach vorne auf dem Weg zu intelligenten Systemen, die einzigartige Lösungen finden für die wichtigsten und fundamentalsten wissenschaftlichen Probleme der Welt".
