Abo
  • Services:
Anzeige
Total Moving Face Reconstruction: Einschränkungen durch Schatten oder Lichtreflexionen
Total Moving Face Reconstruction: Einschränkungen durch Schatten oder Lichtreflexionen (Bild: University of Washington)

Computergrafik: US-Forscher modellieren Gesichter in Videos dreidimensional

Prinz Charles wird nachgebaut: US-Forscher rekonstruieren Gesichter aus beliebigen Youtube-Videos. Daraus erzeugen sie eine dreidimensionale Animation, in der sich das Gesicht genau wie das im originalen Video verhält.

Anzeige

Aus 2D mach 3D: US-Forscher haben ein Verfahren entwickelt, um aus Videoaufnahmen einer Person eine 3D-Animation zu erzeugen. Dazu bedarf es keiner speziellen Aufnahmetechnik. Vorhandenes Bildmaterial reicht, um das Video digital nachzubilden.

Ausgangsmaterial sind ein Video sowie Fotos einer Person. Supasorn Suwajanakorn, Ira Kemelmacher-Shlizerman und Steven Seitz von der Universität des US-Bundesstaates Washington in Seattle haben sich auf Prominente wie den englischen Thronfolger Prinz Charles, den Schauspieler Arnold Schwarzenegger oder den ehemaligen US-Präsidenten George W. Bush konzentriert, da von ihnen sehr viel Material im Netz zu finden ist.

Öffentlich zugängliches Material

Videos wie Fotos sind nicht eigens dafür aufgenommen worden, sondern stammen aus öffentlich zugänglichen Quellen, wie etwa dem Videoportal Youtube. Ein 3D-Modell des Gesichts ist ebenso wenig nötig wie definierte Bedingungen, etwa bei der Beleuchtung oder der Ausrichtung des Gesichts zur Kamera. Der Abgebildete muss auch nicht per Motion Capturing aufgenommen werden.

Zunächst wird aus mehreren Fotos ein zweidimensionales Basismodell erzeugt, das dann in ein einfaches dreidimensionales Modell überführt wird - die Methode für diese beiden Schritte haben Kemelmacher-Shlizerman und Seitz schon 2011 vorgestellt.

Gleiche Pose, gleiche Mimik

Im dritten Schritt wird die Ausrichtung des Gesichts in einem Videobild bestimmt und das 3D-Basismodell daran angepasst. Als nächstes wird das Basismodell so verändert, dass es den gleichen Gesichtsausdruck zeigt wie die Person in dem jeweiligen Videoframe. Das 3D-Modell ist jetzt so ausgerichtet wie das Bild im Video und zeigt die gleiche Mimik.

Es ist aber immer noch relativ grob. Im fünften und letzten Schritt werden deshalb die Details im Gesicht angepasst, wie Schattierungen, Falten oder die Textur der Haut. Am Ende hat das System aus dem originalen Video eine Animation eines Gesichts erzeugt, die dem Video weitgehend entspricht. Das bedeutet, das künstlich erzeugte Gesicht macht die gleichen Bewegungen und die gleiche Mimik mit wie das Original.

Große Kontraste

Zu große Kontraste können allerdings das Ergebnis verschlechtern: Wenn Teile des Gesichts im tiefen Schatten liegen oder Licht auf der Haut reflektiert, fehlt an der entsprechenden Stelle die Bildinformation, um ein 3D-Modell zu erstellen. Diese Einschränkung dürfte jedoch nicht so gravierend sein, wenn nur einzelne Partien davon betroffen sind.

Die Wissenschaftler aus Seattle haben ihr Verfahren Total Moving Face Reconstruction kürzlich auf der European Conference on Computer Vision (ECCV) in Zürich vorgestellt.


eye home zur Startseite
furanku1 25. Sep 2014

Ja, man kann durch die Verwendung mehrerer Bilder mehr Informationen herausquetschen...

artavenue 25. Sep 2014

Ich reagierte nur ausfallend auf deine Art, ausfallend zu werden. Natürlich war das...

Mr. Joe 25. Sep 2014

Ich musst an das hier denken: Enemy of the state - Freeze,Rotate,Zoom,Focus,Enhance...



Anzeige

Stellenmarkt
  1. DATAGROUP Köln GmbH, Essen
  2. Ratbacher GmbH, Hamburg
  3. SCHOTT AG, Mitterteich
  4. Fresenius Kabi Deutschland GmbH, Oberursel


Anzeige
Hardware-Angebote
  1. 599€ + 5,99€ Versand

Folgen Sie uns
       


  1. MacOS 10.13

    Apple gibt High Sierra frei

  2. WatchOS 4.0 im Test

    Apples praktische Taschenlampe mit autarkem Musikplayer

  3. Werksreset

    Unitymedia stellt Senderbelegung heute in Hessen um

  4. Aero 15 X

    Mehr Frames mit der GTX 1070 im neuen Gigabyte-Laptop

  5. Review Bombing

    Valve verbessert Transparenz bei Nutzerbewertungen auf Steam

  6. Big Four

    Kundendaten von Deloitte offenbar gehackt

  7. U2F

    Yubico bringt winzigen Yubikey für USB-C

  8. Windows 10

    Windows Store wird zum Microsoft Store mit Hardwareangeboten

  9. Kabelnetz

    Eazy senkt Preis für 50-MBit/s-Zugang im Unitymedia-Netz

  10. Nintendo

    Super Mario Run wird umfangreicher und günstiger



Haben wir etwas übersehen?

E-Mail an news@golem.de


Anzeige
Bundestagswahl 2017: Viagra, Datenbankpasswörter und uralte Sicherheitslücken
Bundestagswahl 2017
Viagra, Datenbankpasswörter und uralte Sicherheitslücken
  1. Bundestagswahl 2017 Union und SPD verlieren, Jamaika-Koalition rückt näher
  2. Zitis Wer Sicherheitslücken findet, darf sie behalten
  3. Merkel im Bundestag "Wir wollen nicht im Technikmuseum enden"

Olympus Tough TG5 vs. Nikon Coolpix W300: Die Schlechtwetter-Kameras
Olympus Tough TG5 vs. Nikon Coolpix W300
Die Schlechtwetter-Kameras
  1. Mobilestudio Pro 16 im Test Wacom nennt 2,2-Kilogramm-Grafiktablet "mobil"
  2. HP Z8 Workstation Mit 3 TByte RAM und 56 CPU-Kernen komplexe Bilder rendern
  3. Meeting Owl KI-Eule erkennt Teilnehmer in Meetings

VR: Was HTC, Microsoft und Oculus mit Autos zu tun haben
VR
Was HTC, Microsoft und Oculus mit Autos zu tun haben
  1. Zukunft des Autos "Unsere Elektrofahrzeuge sollen typische Porsche sein"
  2. Concept EQA Mercedes elektrifiziert die Kompaktklasse
  3. GLC F-Cell Mercedes stellt SUV mit Brennstoffzelle und Akku vor

  1. Re: Kritische Masse für die Berichterstattung

    dantist | 20:59

  2. Re: Das ist schon heftig.

    JouMxyzptlk | 20:59

  3. Re: ...und meinem Vermieter sag ich jetzt was?

    groupsi2beld | 20:58

  4. Re: Nutzen von ECC?

    robinx999 | 20:55

  5. Re: Was ihnen Golem unterschlägt

    Reitgeist | 20:50


  1. 19:40

  2. 19:00

  3. 17:32

  4. 17:19

  5. 17:00

  6. 16:26

  7. 15:31

  8. 13:28


  1. Themen
  2. A
  3. B
  4. C
  5. D
  6. E
  7. F
  8. G
  9. H
  10. I
  11. J
  12. K
  13. L
  14. M
  15. N
  16. O
  17. P
  18. Q
  19. R
  20. S
  21. T
  22. U
  23. V
  24. W
  25. X
  26. Y
  27. Z
  28. #
 
    •  / 
    Zum Artikel