CGI in Filmen: Disney will Deep Fakes gegen den Uncanny Valley nutzen

Ein Forscherteam bei Disney arbeitet an einer Kombination aus KI und traditioneller CGI. Gesichter sollen dadurch realistischer wirken.

Artikel veröffentlicht am ,
Disneys Forschungsprojekt kombiniert CGI mit KI-Software.
Disneys Forschungsprojekt kombiniert CGI mit KI-Software. (Bild: Disney)

Schon im Sommer 2021 wurde klar: Mit computergenerierten Gesichtstexturen mittels Deep Fakes will Disney weiter experimentieren. Die KI-Forschungsabteilung im Konzern hat nun eine Hybrid-Lösung vorgestellt. Diese soll mittels Deep Fakes und per Motion Capturing und manuell erstellter CGI wesentlich realistischer wirkende Gesichter erschaffen. Das System soll etwa auch existierende Gesichter mit künstlich erzeugter Mimik verändern können.

Stellenmarkt
  1. Junior Softwareentwickler (m/w/d) Java / Webshop/E-Commerce
    ifm electronic GmbH, Essen
  2. Geschäftsführer (m/w/d) - Software / SaaS-Lösung - Karriereschritt Gesamtverantwortung
    tetris Unternehmensberater GbR, Dortmund
Detailsuche

Der Deep-Fakes-Ansatz generiert dabei laut dem Magazin Unite.ai vor allem die Augen und Mundpartien von computeranimierten Gesichtern. Das Magazin bezieht sich auf ein Video von Disney. Besagte Partien gehören aktuell noch zu den großen Schwachstellen manueller CGI und müssen in teils langwieriger Arbeit von Künstlern Frame für Frame angepasst werden.

Dabei wird eine Hauttextur aus klassischer CGI generiert, die das Gesicht darstellen soll. Diese Textur verbindet Disney mit Nvidias StyleGAN2, einem auf Tensorflow basierendem Bildmodellierer. Das System generiert dann aus der Gesichtsmaske automatisiert zufällige passende Köpfe auf Basis diverser Parameter und aus einer vorgegebenen Datenbank an Bildern.

Weniger Uncanny Valley bei Augen und Mund

Beide Systeme kombiniert sollen vor allem den Effekt des Uncanny Valley minimieren, der computeranimierte und fotorealistische Menschen fast echt aussehen lässt. Das menschliche Gehirn erkennt aber weiterhin künstliche Merkmale in Gesichtern von CGI-Personen, was als unheimlich (englisch uncanny) wahrgenommen wird.

Golem Akademie
  1. Microsoft Dynamics 365 Guides mit HoloLens 2: virtueller Ein-Tages-Workshop
    16. Februar 2022, Virtuell
  2. Cloud Computing mit Amazon Web Services (AWS): virtueller Drei-Tage-Workshop
    14.–16. Februar 2022, virtuell
Weitere IT-Trainings

Dass Personen unecht erscheinen, erkennen Zuschauer wohl vor allem an Augen- und Mundpartien - inklusive Gebiss, Zunge und anderen Merkmalen. Aus diesem Grund fokussiert sich Disney auf diese Bereiche besonders.

Generative Adversarial Networks (GANs) wie Nvidias StyleGAN2 können allerdings auch sich ändernde Beleuchtungseffekte automatisch generieren. Gleiches gilt für Köpfe bei sich ändernder Kameraperspektive. Gerade in diesem Bereich treten die meisten Artefakte auf: Haare werden teils nicht konsistent generiert und verändern sich deshalb je nach Kameraposition merklich.

Das System ist deshalb auch noch lange nicht fertig entwickelt.

Bitte aktivieren Sie Javascript.
Oder nutzen Sie das Golem-pur-Angebot
und lesen Golem.de
  • ohne Werbung
  • mit ausgeschaltetem Javascript
  • mit RSS-Volltext-Feed


Aktuell auf der Startseite von Golem.de
Naomi "SexyCyborg" Wu
Pappbüste einer Tech-Youtuberin ist Youtube zu anstößig

Naomi Wu wird in der Maker-Szene für ihr Fachwissen geschätzt. Youtube demonetarisiert sie aber wohl wegen ihrer Körperproportionen.

Naomi SexyCyborg Wu: Pappbüste einer Tech-Youtuberin ist Youtube zu anstößig
Artikel
  1. Quartalsbericht: Apples Gewinn stellt alles in den Schatten
    Quartalsbericht
    Apples Gewinn stellt alles in den Schatten

    Apple erwirtschaftet im letzten Quartal des Vorjahres einen Gewinn von 34,6 Milliarden US-Dollar. Und das trotz Chipkrise und weiteren Lieferengpässen.

  2. Coronapandemie: 42,6 Millionen mehr digitale Impfzertifikate als Impfdosen
    Coronapandemie
    42,6 Millionen mehr digitale Impfzertifikate als Impfdosen

    Einem Medienbericht zufolge gibt es eine Lücke zwischen ausgestellten Impfnachweisen und verabreichten Dosen. Diese wird sogar noch größer.

  3. Akamai: Steigende Nachfrage für illegale Kopien von Filmen
    Akamai
    Steigende Nachfrage für illegale Kopien von Filmen

    Durch die vielen neuen Streaming-Dienste ist illegales Filesharing wieder stark im Kommen.

Du willst dich mit Golem.de beruflich verändern oder weiterbilden?
Zum Stellenmarkt
Zur Akademie
Zum Coaching
  • Schnäppchen, Rabatte und Top-Angebote
    Die besten Deals des Tages
    Daily Deals • RX 6900 XTU 16GB 1.449€ • Intel i7 3,6Ghz 399€ • Alternate: u.a. Acer Gaming-Monitor 119,90€ • Logitech Gaming-Headset 75€ • iRobot Saugroboter ab 289,99€ • 1TB SSD PCIe 4.0 128,07€ • Razer Gaming-Tastatur 155€ • GOG New Year Sale: bis zu 90% Rabatt • LG OLED 65 Zoll 1.599€ [Werbung]
    •  /