Software erstellt aus Skizzen Fotomontagen

Photosketch sucht Einzelelemente aus Flickr und Co. zusammen

Mit Photosketch können aus simplen Strichzeichnungen nicht nur die passenden Fotos gefunden, sondern diese gleich automatisch zu Montagen verarbeitet werden, wenn die gewünschte Skizze sich nicht als Einzelfoto im Fundus findet.

Photosketch ist eine Forschungsarbeit der Informatikstudenten Tao Chen, Ming-Ming Cheng, Ping Tan, Ariel Shamir und Shi-Min Hu, die an den Universitäten Tsinghua und Singapur studieren. Sie stellten Photosketch auf der Siggraph Asia 2009 vor.

Photosketch: Internet Image Montage from tao chen on Vimeo.

Bei Photosketch stellt der Nutzer zunächst eine einfache Strichzeichnung her, zum Beispiel mit einem Grafiktablett. Damit stellt der Benutzer dar, wie er sich das künftige Foto vorstellt. Die Auswertung berücksichtigt sowohl die Größe der Objekte als auch deren Tiefenstaffelung und den gewünschten Hintergrund. Die Objekte werden als Umrisse gezeichnet.

Die Objekte werden außerdem mit Stichwörtern bezeichnet. So kann der angeschlossene Suchalgorithmus in Bildsammlungen wie Flickr und Picasa suchen und die gefundenen Fotos mit der Skizze vergleichen, um eine Auswahl zu treffen.

Im Nachgang werden die gefundenen Objekte freigestellt und so montiert, dass die gewünschte Anordnung nachempfunden wird. Das Ergebnis wird danach mit Schatten versehen, gerendert und dargestellt. Noch gibt es Photosketch nicht als Applikation für den normalen Anwender.

Das muss aber nicht so bleiben, wie ein anderes Forschungsprojekt zeigt, an dem zumindest einer der Autoren bereits beteiligt war. Ariel Shamir entwickelte am Bildskalierungsalgorithmus Seam Carving mit. Sein Ziel ist es, beim Skalieren von Bildern nur unwichtige Teile zu entfernen und so beispielsweise Proportionen und Formen unangetastet zu lassen.

Die "Seam Carving"-Technik analysiert das Bild auf skalierbare Bereiche und erlaubt dem Benutzer dann interaktiv, das Bild entsprechend zusammen- oder auseinanderzuziehen. So lässt sich bei einer Sonnenuntergangsszene sicherlich nicht die Sonne, jedoch der Farbverlauf des Himmels strecken, ohne dass es dem Betrachter nachträglich auffällt.

Entwickelt wurde Seam Carving von Shai Avidan und Ariel Shamir. Später wurde eine kommerzielle Variante unter anderem unter Adobe Photoshop CS4 und Photoshop Elements 8 sowie Xtreme Foto und Grafik Designer von Magix eingesetzt. Das Gleiche könnte auch mit Photosketch passieren.

Weitere Informationen zum Photosketch-Algorithmus wurden samt Beispielen in einem Paper online veröffentlicht.