Abo
  • Services:

Interactive Dynamic Video: Forscher erwecken Objekte in normalen Videos zum Leben

Mit einem Algorithmus können Wissenschaftler des MIT anhand feinster Bewegungen und Vibrationen in Videos leblose Objekte dynamisch auf Eingaben reagieren lassen. Spezielle Aufnahmegeräte sind nicht nötig - die Technik funktioniert theoretisch mit jedem Videomaterial.

Artikel veröffentlicht am ,
Ein Algorithmus analysiert verschiedene Vibrationsfrequenzen und errechnet basierend darauf ein Bewegungsmodell.
Ein Algorithmus analysiert verschiedene Vibrationsfrequenzen und errechnet basierend darauf ein Bewegungsmodell. (Bild: MIT)

Forscher vom Computer Science and Artificial Intelligence Laboratory (CSAIL) des Massachusetts Institute of Technology (MIT) haben einen Weg gefunden, mit der aus gewöhnlichem Videomaterial ein Film mit interaktiven, dynamischen Elementen wird. Die Wissenschaftler nennen ihre Technologie entsprechend "Interactive Dynamic Video", kurz: IDV.

Stellenmarkt
  1. Schaeffler Technologies AG & Co. KG, Herzogenaurach
  2. Polizeipräsidium Oberbayern Süd, Traunstein

Grundgedanke ist, aus den natürlichen Bewegungen eines Objektes im Film - hier reichen auch Vibrationen - mit Hilfe eines Algorithmus ein Bewegungsmodell dessen zu erstellen. Die minimalen Bewegungen, die etwa eine kleine Drahtskulptur macht, wenn der Tisch unter ihr erschüttert wird, reichen aus, um auch größere Bewegungen vorauszusagen.

Neue Interaktionen zwischen Objekten möglich

Im fertigen IDV können dann Objekte außerhalb ihres ursprünglich aufgezeichneten Zustandes animiert werden. Die durch die Bewegungen ausgelösten Bildänderungen werden vom Algorithmus berechnet, was in einem gewissen Rahmen noch realistisch aussieht.

In einem Video zeigen die Macher von IDV etwa, wie sie besagte Drahtskulptur aufgrund eines nur fünfsekündigen Ursprungsvideos realistisch animieren können. Ein anderes Beispiel ist ein einminütig gefilmter Busch oder eine Hängebrücke auf einem Spielplatz.

Als Einsatzzweck können sich die Wissenschaftler unter anderem Gebäudesimulationen in bestimmten Stresssituationen, wie etwa Erdbeben, vorstellen. Ein anderes Einsatzgebiet liegt im Entertainmentbereich: So könnten etwa Interaktionen zwischen virtuellen Figuren und der realen Welt deutlich kostengünstiger und einfacher als bisher erstellt werden.



Anzeige
Hardware-Angebote
  1. ab 349€
  2. 229,90€ + 5,99€ Versand

a user 05. Aug 2016

Absolut. Ich hab so etwas gut gemachtes noch nie gesehen. Man braucht nicht einmal den...


Folgen Sie uns
       


Huawei P20 Pro - Hands on

Huaweis neues Smartphone P20 Pro kommt mit drei Hauptkameras und einer Reihe von KI-Funktionen. Wir haben uns das Gerät in einem ersten Hands on angeschaut.

Huawei P20 Pro - Hands on Video aufrufen
Datenverkauf bei Kommunen: Öffentliche Daten nicht verhökern, sondern sinnvoll nutzen
Datenverkauf bei Kommunen
Öffentliche Daten nicht verhökern, sondern sinnvoll nutzen

Der Städte- und Gemeindebund hat vorgeschlagen, Kommunen sollten ihre Daten verkaufen. Wie man es auch dreht und wendet: Es bleibt eine schlechte Idee.
Ein IMHO von Michael Peters und Walter Palmetshofer

  1. Gerichtsurteil Kein Recht auf anonyme IFG-Anfrage in Rheinland-Pfalz
  2. CDLA Linux Foundation veröffentlicht Open-Data-Lizenzen
  3. Deutscher Wetterdienst Wetterdaten sind jetzt Open Data

Oracle vs. Google: Dieses Urteil darf nicht bleiben
Oracle vs. Google
Dieses Urteil darf nicht bleiben

Im Fall Oracle gegen Google fällt ein eigentlich nicht zuständiges Gericht ein für die IT-Industrie eventuell katastrophales Urteil. Denn es kann zu Urhebertrollen, Innovationsblockaden und noch mehr Milliardenklagen führen. Einzige Auswege: der Supreme Court oder Open Source.
Eine Analyse von Sebastian Grüner

  1. Oracle gegen Google Java-Nutzung in Android kein Fair Use

God of War im Test: Der Super Nanny
God of War im Test
Der Super Nanny

Ein Kriegsgott als Erziehungsberechtigter: Das neue God of War macht nahezu alles anders als seine Vorgänger. Neben Action bietet das nur für die Playstation 4 erhältliche Spiel eine wunderbar erzählte Handlung um Kratos und seinen Sohn Atreus.
Von Peter Steinlechner

  1. God of War Papa Kratos kämpft ab April 2018

    •  /