Abo
  • Services:
Anzeige
Data Scientist Dr. Matthias Platho auf der Quo Vadis 16
Data Scientist Dr. Matthias Platho auf der Quo Vadis 16 (Bild: Peter Steinlechner/Golem.de)

Neuronale Netze: Weniger Bugs und mehr Spielspaß per Deep Learning

Data Scientist Dr. Matthias Platho auf der Quo Vadis 16
Data Scientist Dr. Matthias Platho auf der Quo Vadis 16 (Bild: Peter Steinlechner/Golem.de)

Besser ausbalancierte Schwierigkeitsgrade und mehr Spaß: Spielentwickler könnten mit neuronalen Netzen ihre Produkte optimieren, sagt der Data Scientist Matthias Platho. Allerdings dürfte das nicht allen Spielern gefallen.
Von Peter Steinlechner

Wann braucht ein Computerspieler eine Belohnung in einem Online-Rollenspiel? Es gibt Entwicklerstudios, in denen sich riesige Teams mit dieser Frage beschäftigen. Manche gehen nach ihrem Bauchgefühl vor, andere verwenden sogenannte A-B-Tests: Ein Teil der Spieler bekommt ein besonderes Schwert nach fünf Minuten, ein anderer Teil erst nach 30 Minuten. Die Gruppe, die anschließend länger dabeibleibt, gilt als zufriedener - und alle Spieler bekommen das Schwert dann nach der optimierten Zeitdauer.

Anzeige

"A-B-Tests funktionieren, aber sie haben ein paar Probleme", sagt der Data Scientist Matthias Platho auf der Spielemesse Quo Vadis 16 in Berlin. "Ein paar der unzufriedenen Spieler können verloren gehen, und bei komplexeren Fragestellungen wird es kompliziert". Sobald es etwa um das Überprüfen von acht Optionen gehe - Schwert plus Schild plus Diamant und mehr -, müssten die Entwickler 256 Gruppen bilden und ihre Daten auswerten. In der Praxis ist das schon nicht mehr sinnvoll durchführbar.

Platho schlägt einen anderen Ansatz vor: Per Deep Learning könnte dieses Problem schneller und zuverlässiger gelöst werden. Diese Art des Maschinenlernens basiert auf neuronalen Netzen mit mehreren Schichten. "Die Algorithmen haben im Idealfall möglichst umfangreiche Informationen über den Spieler: sein Alter, das Geschlecht, seine Aktionen im Spiel sowie den Level und die bisherigen Belohnungen." Mit den neuronalen Netzen lasse sich dann erstaunlich präzise voraussagen, wann er im Idealfall eine Belohnung bekommen muss - etwa das Schwert.

Das System braucht klare Ziele

Laut Platho müssen die Entwickler ihrem neuronalen Netz präzise sagen, in welchem Sinne es optimieren soll. Dabei könne es ums schlichte Weiterspielen gehen, aber auch ums Geldausgeben. Die Algorithmen wüssten dann also mit einer recht hohen Trefferquote, wann der Spieler ein Schwert angeboten bekommen sollte oder wann er besonders empfänglich für einen kleinen Rabatt wäre - nicht jedem dürfte es gefallen, derart gezielt zum Geldausgeben verführt zu werden.

Derlei Deep-Learning-Systeme könnten bereits heute gut funktionieren, sagt Platho. Sie benötigen nicht einmal besonders aufwendige Hardware: Ein einfacher PC mit einer GDX 970 reiche für den Anfang. Die Software, meist von Wissenschaftlern an Universitäten entwickelt, liegt als Open Source vor; gemeint sind Programme wie Torch, Tensor Flow, Caffeine oder Pylearn 2.

Deep Learning lässt sich in Spielen aber auch für andere Zwecke verwenden als nur die Optimierung. In vielen Games könnte damit das Balancing verbessert werden. Platho nennt als besonders gut geeignetes Beispielprogramm das Prügelspiel Street Fighter 5: "Die Algorithmen werden mit sehr ungewöhnlichen Aktionen anfangen und dann nach und nach grundlegende Probleme deutlich machen". Wenn die KI etwa nur noch Highkicks verwendet, bedeutet das ziemlich sicher, dass dieser Tritt übertrieben effektiv ist.

Das neuronale Netz als Spieler

Neuronale Netze sind nach Angaben von Platho mittlerweile recht gut darin, Spiele zu spielen. Dazu benötigen sie lediglich Zugriff auf den "Gamestate", etwa über eine API - aber im Grunde würde in vielen Fällen das Bild reichen, das auch ein Spieler auf dem Monitor sieht.

Beschränkungen gebe es lediglich in Spielen mit viel Handlungsfreiheit: In einem GTA, Tomb Raider oder Assassin's Creed seien neuronale Netze überfordert, sehr viel mehr als die ersten paar Minuten könnten sie in der Praxis beim aktuellen Stand der Technik selbst mit großem Aufwand kaum bewältigen.

Die Systeme könnten aber inzwischen noch mehr: Zum einen könnten Entwickler sie für die Suche nach echten Bugs einsetzen, mit denen sich Spieler etwa besonders viele Erfahrungspunkte oder andere Extras verschaffen. Sie könnten in Verbindung mit Systemen zur Textanalyse aber auch die Foren und sozialen Medien auswerten, so Platho. Dann könnten Entwickler an alle Kunden, die sich etwa über ein unfaires Kampfsystem beschwert haben, automatisch eine persönlich wirkende Mail mit einer Einladung für eine neue Runde mit einem Patch schicken.


eye home zur Startseite
Baron Münchhausen. 21. Apr 2016

100 Punkte dafür.



Anzeige

Stellenmarkt
  1. thyssenkrupp AG, Essen
  2. Deloitte, verschiedene Standorte
  3. Sky Deutschland GmbH, Unterföhring bei München
  4. Robert Bosch GmbH, Stuttgart, Vaihingen


Anzeige
Top-Angebote
  1. 48,00€
  2. 29,00€
  3. 239,00€ inkl. Versand (Vergleichspreis ab 273,59€)

Folgen Sie uns
       


  1. Private Division

    Rockstar-Games-Firma gründet Ableger für AAA-Indiegames

  2. Klage erfolgreich

    BND darf deutsche Metadaten nicht beliebig sammeln

  3. Neuer Bericht

    US-Behörden sollen kommerzielle Cloud-Dienste nutzen

  4. Übernahme

    Walt Disney kauft Teile von 21st Century Fox

  5. Deep Learning

    Googles Cloud-TPU-Cluster nutzen 4 TByte HBM-Speicher

  6. Leistungsschutzrecht

    EU-Staaten uneins bei Urheberrechtsreform

  7. E-Ticket Deutschland bei der BVG

    Bewegungspunkt am Straßenstrich

  8. Star Wars

    The-Last-Jedi-Update für Battlefront 2 veröffentlicht

  9. Airport mit 802.11n und neuere

    Apple sichert seine WLAN-Router gegen Krack-Angriff ab

  10. Bell UH-1

    Aurora Flight Sciences macht einen Hubschrauber zur Drohne



Haben wir etwas übersehen?

E-Mail an news@golem.de


Anzeige
Kingdom Come Deliverance angespielt: Und täglich grüßt das Mittelalter
Kingdom Come Deliverance angespielt
Und täglich grüßt das Mittelalter

E-Golf auf Tour: Reichweitenangst oder: Wie wir lernten, Lidl zu lieben
E-Golf auf Tour
Reichweitenangst oder: Wie wir lernten, Lidl zu lieben
  1. Sattelschlepper Thor ET-One soll Teslas Elektro-Lkw Konkurrenz machen
  2. Einkaufen und Laden Kostenlose Elektroauto-Ladesäulen mit 50 kW bei Kaufland
  3. Uniti One Schwedisches Unternehmen Uniti stellt erstes Elektroauto vor

Alexa-Geräte und ihre Konkurrenz im Test: Der perfekte smarte Lautsprecher ist nicht dabei
Alexa-Geräte und ihre Konkurrenz im Test
Der perfekte smarte Lautsprecher ist nicht dabei
  1. Alexa und Co. Wirtschaftsverband sieht Megatrend zu smarten Lautsprechern
  2. Smarte Lautsprecher Google unterstützt indirekt Bau von Alexa-Geräten
  3. UE Blast und Megablast Alexa-Lautsprecher sind wasserfest und haben einen Akku

  1. Re: in japan sind alle züge max 1min. verspätet

    serra.avatar | 21:43

  2. Re: Nutzung bezahlen alle Kunden

    User_x | 21:39

  3. Uploadfilter

    Cok3.Zer0 | 21:36

  4. Re: Ausgewiesener Parkplatz nur für E-Autos?

    User_x | 21:31

  5. Re: Das ist das ENDE von Star Citizen

    maxule | 21:30


  1. 16:10

  2. 15:30

  3. 15:19

  4. 14:50

  5. 14:44

  6. 14:43

  7. 14:05

  8. 12:55


  1. Themen
  2. A
  3. B
  4. C
  5. D
  6. E
  7. F
  8. G
  9. H
  10. I
  11. J
  12. K
  13. L
  14. M
  15. N
  16. O
  17. P
  18. Q
  19. R
  20. S
  21. T
  22. U
  23. V
  24. W
  25. X
  26. Y
  27. Z
  28. #
 
    •  / 
    Zum Artikel