Autonomes Fahren: Entwickler baut selbstfahrendes Auto für GTA V

Das Auto: ein Notebook mit Webcam. Die Fahrstrecke: die Autobahn von Los Santos in GTAV. Die Basis: Selbstfahrsoftware eines Honda Civic.

Artikel veröffentlicht am ,
In GTA V fahren normalerweise die Spieler selbst.
In GTA V fahren normalerweise die Spieler selbst. (Bild: Rockstar/Techspot)

Der Entwickler und Blogger Littlemountainman hat ein selbstfahrendes Auto für das Actionspiel GTA V entwickelt. Die Grundlage stellt das Machine-Learning-Modell Openpilot, das vom Unternehmen Comma.ai entwickelt wird. Dessen Ausgaben sind quelloffen, so dass der Entwickler diese mit Googles Tensorflow auslesen und analysieren konnte. Mehrere Wochen hat er sich überlegt, wie er den Input, der eigentlich für echte Fahrzeuge mit CAN-Bus gedacht ist, auf ein mit Tastatur oder Controller gesteuertes Spiel übertragen kann. Den Prozess dokumentiert Littlemountainman in einem Blogpost.

Stellenmarkt
  1. Facharchitektur-Analystin / Analyst (m/w/d)
    Bundeskriminalamt, Wiesbaden
  2. IT-Mitarbeiter (m/w/d) Anwendungsbetreuung
    Helios IT Service GmbH, Freital
Detailsuche

Um dies zu erreichen, hat der Entwickler das trainierte Modell für einen Honda Civic, Baujahr 2018, umgeschrieben. Das Problem: GTA V übermittelt keine Sensordaten, die vom Steuerungselement der Software für die Entscheidungsfindung benötigt werden. Littlemountainman musste deshalb eine Schnittstelle und Zwischenebene entwickeln, die zunächst die Tasten W, A, S und D für die Fahrzeugsteuerung verwendet. Die Sensorebene des Machine-Learning-Modells hat der Entwickler simuliert, indem er diese auf einen separaten Computer ausgelagert hat. Dieser sendet dem System die simulierten Daten per Netzwerk. "Das umzuschreiben, hat mich etwa zwei Wochen gekostet", schreibt er. Allerdings war ihm die Tastatureingabe zu ungenau.

Notebook fährt mit Webcam auf virtueller Autobahn

Daher hat er sich entschieden, die Schnittstelle auf den analogen Input eines Controllers zu übertragen, die präzisere Eingaben von Geschwindigkeiten und Lenkmanävern ermöglicht. Das finale Ergebnis ist ein Windows-PC, auf dem GTA V läuft und Xbox-Controller-Treiber installiert sind. Daneben hat der Entwickler ein Notebook gestellt, auf dem Openpilot ausgeführt wird. Eine Webcam hat den Bildschirminhalt des Windows-PCs, in diesem Fall GTA V, aufgenommen. Damit weiß die Software auch, wo sie sich auf der Straße befindet. Littlemountainman gibt zu, dass die Bildübertragung auch über das Netzwerk möglich gewesen wäre. "Aber alles war schon so kompliziert genug", begründet er seine finale Entscheidung, dies nicht zu tun.

Der Entwickler hat seinen funktionierenden Prototyp in einem kurzen Video auf Twitter gezeigt. Tatsächlich ist dort GTA V auf einem PC und ein Notebook mit Openpilot und angeschlossener Webcam zu sehen. In der Praxis dürfte das der Entwicklung autonomer Fahrzeuge wenig helfen. Allerdings war dies sicherlich ein produktiver persönlicher Lernprozess für den Entwickler.

Golem Akademie
  1. Docker & Containers - From Zero to Hero
    5.-7. Oktober 2021, online
  2. Einführung in die Programmierung mit Rust
    21.-24. September 2021, online
Weitere IT-Trainings

Kommentatoren unter dem Video äußern zudem Wünsche: "Rally-Games wie Dirt Rally 2.0 kommen mir in den Sinn", schreibt etwa Yinglai Yang. Ein so dynamisches Spiel ohne klare Fahrbahnmarkierungen könnte eine ziemliche Herausforderung sein - für Software und Entwickler.

Bitte aktivieren Sie Javascript.
Oder nutzen Sie das Golem-pur-Angebot
und lesen Golem.de
  • ohne Werbung
  • mit ausgeschaltetem Javascript
  • mit RSS-Volltext-Feed


Aktuell auf der Startseite von Golem.de
Glasfaser
Berliner Senat blamiert sich mit Gigabitstrategie

Der Berliner Senat ist nach Jahren aus dem Dämmerzustand hochgeschreckt und hat nun eine Gigabitstrategie. Warum haben sie nicht einfach geschwiegen?
Ein IMHO von Achim Sawall

Glasfaser: Berliner Senat blamiert sich mit Gigabitstrategie
Artikel
  1. Selbständige: Vodafone mit neuen Tarifen ohne Preissteigerung
    Selbständige
    Vodafone mit neuen Tarifen ohne Preissteigerung

    Vodafone wird seine Preise in neuen Tarifen für Selbständige nach 24 Monaten nicht mehr anheben.

  2. Gorillas-Chef: Entlassungen sind im Interesse der Community
    Gorillas-Chef
    Entlassungen sind "im Interesse der Community"

    Der Chef des Gorillas-Lieferdienstes rechtfertigt die Kündigung eines Arbeiters. Eine Fahrerin mit blauen Flecken am Rücken bewertet das anders.

  3. Coronapandemie: Einige Microsoft-Admins schliefen direkt in Rechenzentren
    Coronapandemie
    Einige Microsoft-Admins schliefen direkt in Rechenzentren

    Um weite Arbeitswege und Verspätungen zu vermeiden, hatten es sich einige Microsoft-Mitarbeiter in den eigenen Rechenzentren bequem gemacht.

dura 14. Mai 2020

Und was ist die Neuigkeit? Dass es noch einen gibt, der das gemacht hat? Wenn das reicht...

ap (Golem.de) 14. Mai 2020

Unser Foren-Event mit Jan Rähm geht jetzt los! Stellt ihm eure Fragen zu Lego Education...

quineloe 14. Mai 2020

Gerade bei Starcraft gibt es durchaus jetzt schon möglichkeiten, die AI durch perfektes...

subjord 14. Mai 2020

Man hat GTA als Datenquelle für Bildmaterial verwendet um selbstfahrende Autos zu...

robinx999 13. Mai 2020

So etwas ähnliches habe ich auch schon an einer anderen Stelle hier im Forum geschrieben...


Folgen Sie uns
       


Du willst dich mit Golem.de beruflich verändern oder weiterbilden?
Zum Stellenmarkt
Zur Akademie
Zum Coaching
  • Schnäppchen, Rabatte und Top-Angebote
    Die besten Deals des Tages
    Schnäppchen • Dualsense 59,99€ • Battlefield 2042 PC 53,99€ • XXL Sale bei Alternate • Rainbow Six Extraction Limited PS5 69,99€ • Sony Pulse 3D-Headset PS5 99,99€ • Snakebyte Gaming Seat Evo 149,99€ • Bethesda E3 Promo bei GP [Werbung]
    •  /