Thaw: Das Smartphone schnappt Dateien vom Bildschirm

Thaw: Erkennung über ein Farbgitter (Bild: MIT)

Eine direkte Interaktion zwischen Smartphone und Computer soll das System Thaw ermöglichen, das Forscher am MIT entwickelt haben. Der Nutzer kann das Smartphone beispielsweise dazu nutzen, Inhalte auf dem Bildschirm zu manipulieren oder nahtlos zwischen Computer und Mobilgerät auszutauschen.

Wer ein mobiles Android-Gerät besitzt, kann Dateien mit dem Rechner über den Explorer austauschen, Besitzer eines iPhones oder iPads sind auf iTunes angewiesen. Praktisch ist das beides nicht, und viel einfacher wäre es, Daten ohne eine Zwischenstation auszutauschen: Das ist das Ziel der Forscher des Massachusetts Institute of Technology (MIT).

Thaw heißt das System, das die Fluid Interfaces Group und die Tangible Media Group zusammen entwickelt haben. Ziel ist, Mobilgeräte und Computer nahtlos miteinander zu vernetzen. Das Smartphone soll dabei sowohl als physische Verbindung zwischen beiden Systemen als auch als grafische Ebene für die Interaktion dienen.

Bildschirme kombinieren

Das Smartphone dient dabei beispielsweise als Gerät, um Inhalte auf dem Bildschirm per Drag & Drop zu verschieben. Ebenso kann der Nutzer Dateien auf das Smartphone verschieben, indem er sie mit der Maus auf das Gerät zieht, das vor dem Bildschirm steht, oder indem er ein Dokument, etwa eine geöffnete Webseite, vom Bildschirm wegzieht.

Daneben haben die MIT-Forscher ein Spiel entwickelt, bei dem das Smartphone als Eingabegerät genutzt wird: Sie zeigen, wie der Spieler die Figur vom Bildschirm auf das Smartphone und von dort wieder zurück auf den Bildschirm transferiert - etwa, indem er das Smartphone schräg hält, so dass die Figur die Schräge hinabrutscht und wieder auf dem Bildschirm landet. Auf dem Smartphone kann er die Figur manipulieren, sie mit den bekannten Gesten vergrößern oder verkleinern.

Erkennung über Farbgitter

Die Orientierung erfolgt über ein Farbmuster, das für den Nutzer nicht sichtbar auf dem Bildschirm liegt. Die hintere Kamera des Smartphones erfasst das Muster und erkennt, wo sich das Gerät im Verhältnis zum Bildschirm befindet - auch die Entfernung erfasst sie bis auf etwa 15 Zentimeter. Zusammen mit den Lagesensoren des Smartphones ermöglicht das eine weitere Form der Interaktion: Der Nutzer kann ein Objekt auf dem Bildschirm vergrößern oder verkleinern, indem er das Smartphone vom Bildschirm entfernt oder sich diesem damit nähert. Er kann per Smartphone auch mit Objekten interagieren, etwa sie drehen.

Vorteil an Thaw sei, dass das System die vorhandene Ausstattung der Geräte nutze. Das System könne also ohne weiteres auf aktuelle Mobilgeräte installiert werden, erklären die Forscher. Sie wollen das System in Kürze auf dem Symposium on User Interface Software and Technology (UIST) vorstellen, das vom 5. bis 8. Oktober2014 in Honolulu im US-Bundesstaat Hawaii stattfindet.

Pin-Art-Display Inform

Die Tangible Media Group beschäftigt sich nach eigenen Angaben damit, "nahtlos die Welten der Bits und der Atome" zu verbinden. Im vergangenen Jahr stellten die Forscher um Leiter Hiroshi Ishii das 3D-Display Inform vor - eine Art digitales Pin-Art.

Inform besteht aus 900 Kunststoffstäben, die in einen Tisch eingelassen sind. Die Stäbe können von Aktoren angehoben werden und so beispielsweise 3D-Inhalte wie topografische Karten darstellen. Aber das System ermöglicht es auch, Gegenstände auf dem Tisch zu manipulieren, etwa mit einem Ball zu spielen.