Abo
  • Services:

Deep Learning: Forscher von Uber bringen ihrer KI das Spiel Pitfall bei

Anhand von Spieleklassikern wie Montezuma's Revenge haben Wissenschaftler von Uber neue Algorithmen zur Wegfindung ausprobiert - und dabei nach eigenen Angaben in Pitfall erstmals überhaupt Punkte für eine KI eingefahren.

Artikel veröffentlicht am ,
Die KI von Uber spielt Pitfall.
Die KI von Uber spielt Pitfall. (Bild: Uber)

Der traurige Rekord einer künstlichen Intelligenz im Klassiker Pitfall: Null Punkte - bislang. Das haben jedenfalls Wissenschaftler des Fahrdienstleisters Uber herausgefunden, nachdem sie ihrer eigenen KI das Spiel erfolgreich beigebracht haben. Auch in Montezuma's Revenge haben sie Bestleistungen erzielt, allerdings konnten KIs dieses Spiel von Atari schon bisher einigermaßen gut lösen.

Stellenmarkt
  1. ASYS Group - ASYS TECTON GmbH, Mönchweiler
  2. MULTIVAC Sepp Haggenmüller SE & Co. KG, Wolfertschwenden

Die Forscher wollten anhand der beiden Games neue Ansätze zur Problemlösung und Wegfindung ausprobieren, wie sie in ihrem Blog schreiben. Die Erkenntnisse könnten unter anderem in der Robotik weiterhelfen.

Besonders herausfordernd seien die Probleme bei Pitfall gewesen. Dessen Spielablauf funktioniere schlecht mit klassischem Deep Learning, weil es nur wenige klar erkennbare Belohnungen gebe, für deren Erlangung sich die Algorithmen in immer neuen Durchgängen optimieren könnten. Gerade mal 32 solcher Gaben seien in den über 255 Umgebungen versteckt.

Stattdessen würden "viele Aktionen zu kleinen negativen Belohnungen führen, wodurch die Algorithmen von der Erkundung der Umgebung abhalten", schreiben die Wissenschaftler. Gemeint ist etwa, dass die Hauptfigur in einem Sumpf versinkt oder von einem Krokodil gefressen wird. Aus diesem Grund seien bisher alle Versuche einer echten KI in Pitfall direkt nach dem Start gescheitert - ohne einen einzigen Punkt.

Um zu besseren Ergebnissen zu kommen, haben die Forscher bei Uber ein paar neue Ansätze kombiniert. So sei ihrer KI - die sie Go-Explore nennen - beigebracht worden, sich bei der Erkundung neuer Umgebungen besser an bereits erkundete Levels zu erinnern, die Ergebnisse zu kombinieren und dann immer wieder nach frischen Lösungsansätzen zu suchen.

Zusätzlich haben die Programmierer neue Wege gefunden, der KI einen schnellen Überblick über noch unbekanntes Terrain zu geben, indem sie deren Aufbau auf eine bewusst simple Art herunterskalieren und das Ergebnis ins Archiv übernehmen.

Außerdem habe es sich bewährt, "zuerst die Aufgaben zu lösen und - falls nötig - die Lösung erst später robuster machen", statt zu früh mit dem Optimieren zu beginnen. Das alles habe dazu geführt, dass Go-Explore in Pitfall über 21.000 Punkte sammeln konnte, was deutlich mehr sei als das, was sehr gute menschliche Spieler schaffen würden.



Anzeige
Hardware-Angebote
  1. 349,00€ (inkl. Call of Duty: Black Ops 4 & Fortnite Counterattack Set)
  2. (reduzierte Überstände, Restposten & Co.)

ko3nig 28. Nov 2018

Na du Schlaumeier, dann verrat mir mal wie solche 'menschenähnliche' Imitationen bisher...

Flexor 28. Nov 2018

https://www.youtube.com/watch?v=qv6UVOQ0F44 Hier ist es sehr interessant erklärt, wie...

Lefteous 28. Nov 2018

und dann kommen die scheiss Krokodile und bei dem Schock ist man dann meistens tot. Ist...

krangerich 27. Nov 2018

Ich denke, so eine stark abstrahierte und vermenschlichte Betrachtungsweise entfernt...

Akaruso 27. Nov 2018

Natürlich muss eine KI auch erstmal von einem Programmierer entwickelt und programmiert...


Folgen Sie uns
       


Der Mars-Maulwurf des DLR erklärt

Ulrich Köhler vom DLR erläutert die Funktionsweise des Mars-Maulwurfes.

Der Mars-Maulwurf des DLR erklärt Video aufrufen
Alienware m15 vs Asus ROG Zephyrus M: Gut gekühlt ist halb gewonnen
Alienware m15 vs Asus ROG Zephyrus M
Gut gekühlt ist halb gewonnen

Wer auf LAN-Partys geht, möchte nicht immer einen Tower schleppen. Ein Gaming-Notebook wie das Alienware m15 und das Asus ROG Zephyrus M tut es auch, oder? Golem.de hat beide ähnlich ausgestatteten Notebooks gegeneinander antreten lassen und festgestellt: Die Kühlung macht den Unterschied.
Ein Test von Oliver Nickel

  1. Alienware m17 Dell packt RTX-Grafikeinheit in sein 17-Zoll-Gaming-Notebook
  2. Interview Alienware "Keiner baut dir einen besseren Gaming-PC als du selbst!"
  3. Dell Alienware M15 wird schlanker und läuft 17 Stunden

Elektromobilität: Der Umweltbonus ist gescheitert
Elektromobilität
Der Umweltbonus ist gescheitert

Trotz eines spürbaren Anstiegs zum Jahresbeginn kann man den Umweltbonus als gescheitert bezeichnen. Bislang wurden weniger als 100.000 Elektroautos gefördert. Wenn der Bonus Ende Juni ausläuft, sind noch immer einige Millionen Euro vorhanden. Die Fraktion der Grünen will stattdessen Anreize über die Kfz-Steuer schaffen.
Eine Analyse von Dirk Kunde

  1. Nissan x Opus Concept Recycelte Autoakkus versorgen Campinganhänger mit Strom
  2. NXT Rage Elektromotorrad mit Kohlefaser-Monocoque vorgestellt
  3. Elektrokleinstfahrzeuge Verkehrsminister Scheuer will E-Scooter zulassen

Mac Mini mit eGPU im Test: Externe Grafik macht den Mini zum Pro
Mac Mini mit eGPU im Test
Externe Grafik macht den Mini zum Pro

Der Mac Mini mit Hexacore-CPU eignet sich zwar gut für Xcode. Wer eine GPU-Beschleunigung braucht, muss aber zum iMac (Pro) greifen - oder eine externe Grafikkarte anschließen. Per eGPU ausgerüstet wird der Mac Mini viel schneller und auch preislich kann sich das lohnen.
Ein Test von Marc Sauter

  1. Apple Mac Mini (Late 2018) im Test Tolles teures Teil - aber für wen?
  2. Apple Mac Mini wird grau und schnell
  3. Neue Produkte Apple will Mac Mini und Macbook Air neu auflegen

    •  /