Virtual Projection: iPhone als virtueller Beamer

Das Smartphone als Eingabegerät und Beamer für digitale Oberflächen: Wissenschaftler wollen mit der Virtual Projection neue Möglichkeiten für die Präsentation und Interaktion bieten.

Artikel veröffentlicht am ,
Virtual Projection wird vorgeführt.
Virtual Projection wird vorgeführt. (Bild: Youtube/Screenshot: Golem.de)

Auf dem Smartphone gespeicherte Bilder, Videos und Texte könnten künftig ohne Probleme auf größeren Displays präsentiert und wie eine Projektion verschoben, gedreht oder skaliert werden - einfach indem das Smartphone als virtueller Beamer vor das entsprechende Display gehalten wird. Das soll auch mit mehreren Smartphones parallel funktionieren.

Stellenmarkt
  1. Linux- und Datenbankadministrator*in (m/w/d)
    Stadt Mülheim (Ruhr), Mülheim an der Ruhr
  2. Projektmanager MES in SAP (m/w/d)
    IGH Infotec AG, Langenfeld
Detailsuche

An ihrer Virtual Projection arbeiten Dominikus Baur, Sebastian Boring und Steven Feiner, Wissenschaftler der Ludwig-Maximilians-Universität München, der University of Calgary und der Columbia University. Sie demonstrieren das mit einem iPhone, obwohl das Verfahren auch mit beliebigen anderen Smartphones funktionieren soll, vorausgesetzt sie sind mit einer Kamera und einer passenden App bestückt.

Unkomplizierte Verbindung

Ein aufwendiges Verbinden von Smartphone und Display soll dem Nutzer bei der virtuellen Projektion erspart bleiben. Stattdessen soll automatisch erkannt werden, vor welchem externen Display sich das Smartphone befindet. Die Wissenschaftler nutzen dazu die Kamera des iPhones, um mit ihr den Bildausschnitt des Displays aufzunehmen, vor den das Smartphone gehalten wird.

Die Videodaten wertet ein Bilderkennungsserver aus, der die Bildinhalte des mit ihm vernetzten Displays kennt und sie mit den Kamerabildern vergleicht. So wird nicht nur die Positionierung des Smartphones zum Display ermittelt und entsprechend die Größe und Ausrichtung der virtuellen Projektion angepasst, sondern auch erkannt, vor welches Display es gerade gehalten wird. Damit könnte die virtuelle Projektion auch mit dem Nutzer über mehrere Displays mitwandern.

Neue Möglichkeiten

Golem Karrierewelt
  1. Informationssicherheit in der Automobilindustrie nach VDA-ISA und TISAX® mit Zertifikat: Zwei-Tage-Workshop
    22./23.11.2022, Virtuell
  2. IT-Sicherheit für Webentwickler: virtueller Zwei-Tage-Workshop
    27./28.09.2022, Virtuell
Weitere IT-Trainings

Dabei geht die virtuelle Projektion weit über das hinaus, was mit einem echten Projektor möglich ist. Es würden sich zwar wie beim Vorbild Bilder und Landkarten vergrößert auf anderen Bildschirmen anzeigen lassen, sagte Dominikus Baur Golem.de. Da jedoch alles nur simuliert sei, könnten beispielsweise die Projektionen auf dem Display geparkt oder mehrere Projektionen gleichzeitig angezeigt werden. Im Video der Wissenschaftler ist zudem zu sehen, wie das iPhone-Display als virtuelle Lupe für eine Landkarte auf dem großen Display eingesetzt wird.

  • Virtual Projection (Youtube/Screenshot: Golem.de)
  • Virtual Projection (Youtube/Screenshot: Golem.de)
  • Virtual Projection (Youtube/Screenshot: Golem.de)
  • Virtual Projection (Youtube/Screenshot: Golem.de)
  • Virtual Projection (Youtube/Screenshot: Golem.de)
  • Virtual Projection (Youtube/Screenshot: Golem.de)
  • Virtual Projection (Youtube/Screenshot: Golem.de)
  • Virtual Projection (Youtube/Screenshot: Golem.de)
  • Virtual Projection (Youtube/Screenshot: Golem.de)
  • Virtual Projection (Youtube/Screenshot: Golem.de)
Virtual Projection (Youtube/Screenshot: Golem.de)

Die Wissenschaftler glauben, dass ihre Virtual Projection künftig von allen Smartphones und Displays unterstützt werden wird. Sie sehen ein großes Potenzial vor allem im geschäftlichen Bereich, wo Menschen die Zusammenarbeit erleichtert werden könnte. Das Forschungsprojekt Virtual Projection soll im Mai 2012 auf der CHI-Konferenz in Austin, Texas, vorgestellt werden.

Nachtrag vom 19. Januar 2012, 17:55 Uhr

Baur hat Golem.de noch einige Details zur technischen Umsetzung genannt: "Ein Rechner fungiert als Server, der regelmäßig Screenshots aller angeschlossenen Displays für die Vergleiche macht. Wir arbeiten mit der hinteren Kamera des iPhones, die permanent Fotos aufnimmt, diese herunterskaliert (im Augenblick arbeiten wir mit 320-x-240-Pixel-Bildern) und dann per WLAN (54 Mbps) an den Server schickt."

Auf dem Server werden dann mit dem Bildanalyse-Algorithmus Surf die iPhone-Fotos mit allen vorhandenen Screenshots abgeglichen. Mit Zeitstempeln wird dafür gesorgt, dass auch die richtigen Fotos mit den richtigen Screenshots verglichen werden. Baur: "[...] daher funktioniert unser Verfahren auch auf bewegten Bildern wie Videos."

"Insgesamt kommen wir auf circa 10 Frames/s für die Bildübertragung (das ist die Grenze des WLAN-Chips im iPhone) und 8 Frames/s für das Tracking auf dem Server (mit einem schnelleren Rechner ließe sich das wohl lösen - die Messungen stammen von einem Macbook Pro, 2.4 GHz Core Duo)", erklärt Baur. Durch das Verfahren ergebe sich auch eine Verzögerung von 100 bis 130 Millisekunden.

"Insgesamt macht der Server also fast alles, das iPhone selbst nimmt nur Fotos auf", so der deutsche Wissenschaftler. "Daher ließe sich das System auch problemlos auf andere Smartphone-Betriebssysteme portieren - Fotos machen können eigentlich alle."

Bitte aktivieren Sie Javascript.
Oder nutzen Sie das Golem-pur-Angebot
und lesen Golem.de
  • ohne Werbung
  • mit ausgeschaltetem Javascript
  • mit RSS-Volltext-Feed


Aktuell auf der Startseite von Golem.de
25 Jahre Dungeon Keeper
Wir sind wieder richtig böse!

Nicht Held, sondern Monster: Darum geht's in Dungeon Keeper von Peter Molyneux. Golem.de hat neu gespielt - und einen bösen Bug gefunden.
Von Andreas Altenheimer

25 Jahre Dungeon Keeper: Wir sind wieder richtig böse!
Artikel
  1. bZ4X: Toyota bietet Rückkauf seiner zurückgerufenen E-Autos an
    bZ4X
    Toyota bietet Rückkauf seiner zurückgerufenen E-Autos an

    Toyota bietet Kunden den Rückkauf seiner Elektro-SUVs an, nachdem diese im Juni wegen loser Radnabenschrauben zurückgerufen wurden.

  2. Laptops: Vom Bastel-Linux zum heimlichen Liebling der Entwickler
    Laptops
    Vom Bastel-Linux zum heimlichen Liebling der Entwickler

    Noch vor einem Jahrzehnt gab es kaum Laptops mit vorinstalliertem Linux. Inzwischen liefern das aber sogar die drei weltgrößten Hersteller - ein überraschender Siegeszug.

  3. Entwicklerstudio: Eidos Montreal möchte Cyberpunk 2077 mit Deus Ex toppen
    Entwicklerstudio
    Eidos Montreal möchte Cyberpunk 2077 mit Deus Ex toppen

    Eidos Montreal würde gerne ein neues Deus Ex machen. Der Plan, damit Cyberpunk 2077 zu übertrumpfen, scheitert aber vorerst an einem Detail.

Du willst dich mit Golem.de beruflich verändern oder weiterbilden?
Zum Stellenmarkt
Zur Akademie
Zum Coaching
  • Schnäppchen, Rabatte und Top-Angebote
    Die besten Deals des Tages
    Daily Deals • MindStar (u. a. Samsung 980 1 TB 77€ und ASRock RX 6800 639€ ) • Alternate (u. a. Corsair Vengeance LPX 8 GB DDR4-3200 34,98€ ) • AOC GM200 6,29€ • be quiet! Deals • SSV bei Saturn (u. a. WD_BLACK SN850 1 TB 119€) • Weekend Sale bei Alternate • PDP Victrix Gambit 63,16€ [Werbung]
    •  /