Unreal Engine 4: Echtzeit-Gesichtsanimation per Webcam

Ohne Markierungen auf den Wangen, keine teure Spezialkamera: Mit einer neuen Middleware können Entwickler nahezu in Echtzeit den Gesichtsausdruck eines Menschen auf eine Animation übertragen. Das könnte auch Auswirkungen auf TV- und Streaming-Sendungen haben.

12. August 2015 um 11:42 Uhr / Peter Steinlechner

Faceware Live mit Webcam Bild: Faceware

Die Firma Faceware hat auf der Grafikmesse Siggraph 2015 in Los Angeles eine Middleware namens Live 2.0 vorgestellt, mit der die Gesichtsbewegungen eines Menschen nahezu in Echtzeit auf Figuren in der Unreal Engine 4 übertragen werden können. Das Besondere ist, dass dies ohne die sonst üblichen Markierungen im Gesicht etwa eines Schauspielers und auch ohne teure Spezialkamera möglich ist.

Faceware Live Client für die Unreal Engine 4 – Trailer (01:39)

Stattdessen reicht etwa eine herkömmliche Webcam aus, oder ein vorher aufgenommenes Video, um die Daten in die Unreal Engine 4 zu übernehmen. Das neue System bietet einige neue Einsatzbereiche: Entwickler können niedrigschwellig und schnell etwa Animationen für Prototypen erstellen. Auch qualitativ hochwertige Streaming-Sendungen mit animierten und in Echtzeit etwa an Gesprächsrunden teilnehmenden virtuellen Figuren sind möglich.

Neben der Unreal Engine 4 soll die Technologie von Faceware auch Autodesk Motionbuilder und Unity über ein Plugin unterstützen. In allen Fällen soll keine zeitaufwendige Kalibrierung nötig sein. Der Schauspieler soll nur eine Sekunde lang einen neutralen Gesichtsausdruck machen müssen, dann soll die Software loslegen können – und das auch bei schwierigen Lichtverhältnissen.