Neuronale Netze: KI-System vermehrt sich selbst, um effizienter zu werden

Berechnen, verdoppeln, besser berechnen: Zwei Forscher entwickeln ein neuronales Netz, das sich selbst repliziert. Die Hoffnung ist, dass sich das System selbstständig verbessert - ganz wie in der Natur. Allerdings ist das wohl noch nicht ganz der Fall.

Artikel veröffentlicht am ,
Die replizierende KI lehnt sich an die natürliche Vermehrung an.
Die replizierende KI lehnt sich an die natürliche Vermehrung an. (Bild: Pixabay.com/Montage: Golem.de)

"Selbstvermehrung ist ein primärer Aspekt biologischen Lebens, der größtenteils bei künstlichen Intelligenzen übersehen wurde". Mit diesen Worten beginnt die wissenschaftliche Arbeit der Forscher Oscar Chang und Hod Lipson der Columbia Unviversity. Sie entwickeln ein neuronales Netzwerk, das sich selbst repliziert. Sie wollen herausfinden, ob und wie sich ein Algorithmus kopiert und dabei von allein verbessert. Das Vorbild ist die Natur und die natürliche Auslese, wie sie einst Charles Darwin definierte. Das Dokument steht im Universitätsarchiv arxiv zum Download zur Verfügung.

Stellenmarkt
  1. (Senior) Plattform Manager (m/w/d)
    Lidl Digital, Neckarsulm
  2. Java Developer (m/w/d)
    Governikus GmbH & Co. KG, Bremen, Berlin, Erfurt, Köln (Home-Office möglich)
Detailsuche

Zum Test bauten die zwei Forscher ein relativ kleines neuronales Netzwerk auf, das anhand von 21.100 Parametern Bilder erkennt. Dabei hielten sie sich an zwei etablierte Open-Source-Algorithmen Draw und Dcgan. Allerdings nutzen diese eine Million beziehungsweise elf Millionen Parameter, um Bilder mit 784 Pixeln zu klassifizieren. Deshalb ist das Resultat der Arbeit auch nicht so genau. Das trainierte neuronale Netzwerk erkannte 90,41 Prozent der Bilder korrekt - ein unterdurchschnittlicher Wert. Dem Algorithmus standen 60.000 MNIST-Bilder zur Verfügung und 10.000 weitere für die Validierung der Ergebnisse. Beim MNIST-Test müssen KI-Systeme richtige Ergebnisse von handgeschriebenen Gleichungen errechnen.

Replikation benötigt zu viele Rechenressourcen

Allerdings musste die Parametermenge relativ klein gehalten werden, um eine Replikation überhaupt möglich zu machen. Im Prinzip dupliziert das neuronale Netz seine aus den Parametern erstellte Gewichtungsmatrix, die zumindest eine Größe von A Eingaben mal B Ausgaben hat. Die benötigte Rechenkapazität skaliert dementsprechend sehr hoch. Es stellte sich auch heraus, dass ein großer Teil der Leistung allein für den Replizierungsprozess benötigt wurde. Das neuronale Netz hatte dadurch weniger Ressourcen zur eigentlichen Bilderkennung zur Verfügung, was in schlechteren Ergebnissen resultierte.

Replikation ist nicht die erste Anlehnung an das echte Leben: Auch andere Prozesse in der Natur werden von maschinellen Lernalgorithmen nachgeahmt. Es gibt beispielsweise Modelle, die sich in verschiedenen Generationen mit meist zufälligen Änderungen der Gewichtung stetig weiterentwickeln. Dieses Zufallselement erinnert an die Evolution durch zufällige Mutationen und Anpassungen an die Umwelt. Allerdings scheint Vermehrung als weiteres Naturgeschehen zumindest noch nicht effizient genug auf Software anwendbar zu sein.

Bitte aktivieren Sie Javascript.
Oder nutzen Sie das Golem-pur-Angebot
und lesen Golem.de
  • ohne Werbung
  • mit ausgeschaltetem Javascript
  • mit RSS-Volltext-Feed


DreiChinesenMit... 25. Mär 2018

das erste soll sogar schon im einsatz sein: (ein video was als vorschlag kam) https...

MarioWario 23. Mär 2018

Wenn ein Gehirn was lernt und behält sind schon viele Denkansätze verreckt - bei heutiger...

TC 23. Mär 2018

Ansätze gibt's ja schon mit CryptoKitten

sackzement 23. Mär 2018

Der Artikel bringt so wie mir scheint da ein zwei Sachen etwas durcheinander. DRAW und...



Aktuell auf der Startseite von Golem.de
Militärischer Weitblick in Toys (1992)
Ein vergessener, wenngleich prophetischer Film

Der Kinofilm Toys von 1992 ist heute weitgehend vergessen. Zu Unrecht, gab er doch eine erstaunlich gute Prognose darüber ab, wie heutzutage Krieg geführt wird.
Ein IMHO von Mathias Küfner

Militärischer Weitblick in Toys (1992): Ein vergessener, wenngleich prophetischer Film
Artikel
  1. Das System E-Mail: Schritt für Schritt vom Sender zum Empfänger
    Das System E-Mail
    Schritt für Schritt vom Sender zum Empfänger

    E-Mail verhalf dem Internet zum Durchbruch, als es noch Arpanet hieß. Zeit für einen Blick auf die Hintergründe dieses Systems - nebst Tipps für einen eigenen Mailserver.
    Von Florian Bottke

  2. Digitalwährung: Bundesbank sieht digitalen Euro als wichtige Ergänzung
    Digitalwährung
    Bundesbank sieht digitalen Euro als wichtige Ergänzung

    Auch die deutsche Bundesbank unterstützt den digitalen Euro. Der könnte internationale Abhängigkeiten reduzieren

  3. Programmierung: Volvo bringt Rust in die Auto-Software
    Programmierung
    Volvo bringt Rust in die Auto-Software

    Das Rust-Team bei Volvo will die Nutzung der Sprache in der Auto-Software deutlich ausweiten. Bis hin zu sicherheitskritischen Anwendungen.

Du willst dich mit Golem.de beruflich verändern oder weiterbilden?
Zum Stellenmarkt
Zur Akademie
Zum Coaching
  • Schnäppchen, Rabatte und Top-Angebote
    Die besten Deals des Tages
    Daily Deals • PS5-Verkauf bei Saturn & Media Markt • CyberWeek: PC-Zubehör, Werkzeug & Co. • Günstig wie nie: Gigabyte RX 6900 XT 864,15€, MSI RTX 3090 1.159€, Fractal Design RGB Tower 129,90€ • MindStar (Palit RTX 3070 549€) • Thrustmaster T300 RS GT 299,99€ • Alternate (iPad Air (2022) 256GB 949,90€) [Werbung]
    •  /