Architektur-Bildanalyse: Was lässt Paris nach Paris aussehen?

Forscher aus den USA und Frankreich haben einen Algorithmus entwickelt, mit dem sie Google-Street-View-Aufnahmen analysieren können, um die Bilder nach architektonischen und städtebaulichen Besonderheiten automatisch einzuordnen.

Artikel veröffentlicht am ,
Automatische Bildanalyse erzeugt einen architektonischen Fingerabdruck.
Automatische Bildanalyse erzeugt einen architektonischen Fingerabdruck. (Bild: Stephanie Kraus/(CC BY 2.0))

Mit Hilfe einer Bildanalyse sollen die für eine Stadt unverwechselbaren Elemente automatisch herausgefiltert werden. So lässt sich zum Beispiel ermitteln, wo ein neues Bild vermutlich aufgenommen wurde oder welche Baustile auch in anderen Städten zu finden sind.

Stellenmarkt
  1. IT-Administrator (m/w/d)
    Zeitfracht GmbH, Stuttgart
  2. IT-Koordinator (m/w/d)
    Landesförderinstitut Mecklenburg-Vorpommern, Schwerin
Detailsuche

Das Forschungsprojekt ist eine amerikanisch-französische Gemeinschaftsarbeit der Carnegie Mellon University und der Inria/Ecole Normale Supérieure in Paris. Zum Anlernen des Systems wurden zunächst die Street-View-Aufnahmen von europäischen Metropolen wie Paris, Prag, Mailand, Barcelona oder London in winzige Stücke zerlegt.

  • Fenster und Balkone werden automatisch extrahiert. (Bild: Carnegie Mellon University/Inria/Ecole Normale Supérieure)
  • Typisch für London: Gitter und Balkonbrüstungen (Bild: Carnegie Mellon University/Inria/Ecole Normale Supérieure)
  • Unterschiede zwischen London und Barcelona (Bild: Carnegie Mellon University/Inria/Ecole Normale Supérieure)
  • Typisch für Paris: Balkongitter und Straßenschilder (Bild: Carnegie Mellon University/Inria/Ecole Normale Supérieure)
  • Unterschiede zwischen Paris und Prag (Bild: Carnegie Mellon University/Inria/Ecole Normale Supérieure)
  • Straßenschilder in Paris (Bild: Carnegie Mellon University/Inria/Ecole Normale Supérieure)
  • Zuordnung von Balkonstilen zu Straßen (Bild: Carnegie Mellon University/Inria/Ecole Normale Supérieure)
  • Wiederkehrende Elemente in verschiedenen Metropolen (Bild: Carnegie Mellon University/Inria/Ecole Normale Supérieure)
  • Wiederkehrende Elemente in einer einzelnen Stadt (Bild: Carnegie Mellon University/Inria/Ecole Normale Supérieure)
Fenster und Balkone werden automatisch extrahiert. (Bild: Carnegie Mellon University/Inria/Ecole Normale Supérieure)

Immer wiederkehrende Elemente wie Mauern, Bürgersteige, Bäume und Büsche, aber auch Autos und Fußgänger, die in den Street-View-Aufnahmen zu sehen sind, werden herausgefiltert, denn sie unterscheiden sich voneinander nicht ausreichend.

Die für die Analyse interessanten Bereiche tauchen an den jeweiligen Aufnahmeorten trotzdem häufig auf. Sie umfassen zum Beispiel Straßenlaternen, Straßenschilder, Balkons und Fenster. Dank der Geocodierung der Bilder in Street View lässt sich zuordnen, wo die Aufnahmen entstanden sind.

Straßenschilder und Fassadenelemente erzeugen architektonischen Fingerabdruck der Stadt

Golem Akademie
  1. IT-Fachseminare der Golem Akademie
    Live-Workshops zu Schlüsselqualifikationen
  2. 1:1-Videocoaching mit Golem Shifoo
    Berufliche Herausforderungen meistern
  3. Online-Sprachkurse mit Golem & Gymglish
    Kurze Lektionen, die funktionieren
Weitere IT-Trainings

Der Algorithmus versucht also, Bildbestandteile zu identifizieren, die für eine Stadt unverwechselbar sind. In ihrem Beispiel führten die Forscher die Straßenschilder von Paris an, deren Erscheinungsbild sich stark von denen zum Beispiel in London oder Barcelona unterscheidet.

Interessanter als Straßenschilder sind jedoch architektonische Komponenten wie Fenster, Balkons oder Torbögen. Die Häufigkeit, mit denen unterscheidungskräftige Merkmale vorkommen, ermöglicht es, sozusagen einen architektonischen Fingerabdruck einer Stadt anhand der Bilder zu erstellen.

Die Forscher heben hervor, dass mit ihrer Software auch architektonische Gemeinsamkeiten zwischen Regionen und Städten automatisch entdeckt werden können. Schließlich sind architektonische Einflüsse nicht auf eine einzige Stadt oder ein Land beschränkt.

Die Forschungsarbeit von Carl Doersch, Saurabh Singh, Abhinav Gupta, Josef Sivic und Alexei A. Efros wird auf der Siggraph 2012 in Los Angeles präsentiert. Ein wissenschaftliches Papier ist als PDF abrufbar. Ob die Software irgendwann auch Dritten zur Verfügung gestellt werden kann, ist derzeit nicht bekannt.

Bitte aktivieren Sie Javascript.
Oder nutzen Sie das Golem-pur-Angebot
und lesen Golem.de
  • ohne Werbung
  • mit ausgeschaltetem Javascript
  • mit RSS-Volltext-Feed


Aktuell auf der Startseite von Golem.de
Powervision Powerray im Test
Diese Drohne geht unter

Ein ferngesteuertes U-Boot mit 4K-Kamera ist nicht mit einem Quadcopter vergleichbar, wie wir in unserem Test festgestellt haben.

Powervision Powerray im Test: Diese Drohne geht unter
Artikel
  1. Form Energy: Eisen-Luft-Akku soll Energiespeicherprobleme lösen
    Form Energy
    Eisen-Luft-Akku soll Energiespeicherprobleme lösen

    Mit Geld von Bill Gates und Jeff Bezos sollen große, billige Akkus Strom für mehrere Tage speichern. Kann die Technik liefern, was sie verspricht?
    Eine Analyse von Frank Wunderlich-Pfeiffer

  2. E-Motorräder: Yamaha will Verbrenner auch in 30 Jahren nicht aufgeben
    E-Motorräder
    Yamaha will Verbrenner auch in 30 Jahren nicht aufgeben

    Yamaha will den Verbrennungsmotor für seine Motorräder nicht ganz aufgeben. Selbst in 30 Jahren soll es noch Maschinen mit Auspuff geben.

  3. iOS 14.7.1 und macOS Big Sur 11.5.1: Apple patcht aktiv ausgenutzte Mac- und iOS-Sicherheitslücke
    iOS 14.7.1 und macOS Big Sur 11.5.1
    Apple patcht aktiv ausgenutzte Mac- und iOS-Sicherheitslücke

    Apple-Nutzer müssen ihre Geräte mit iOS 14.7.1, iPadOS 14,7.1 und MacOS Big Sur 11.5.1 aktualisieren. Es gibt eine aktiv genutzte Sicherheitslücke.

Raumzeitkrümmer 09. Aug 2012

Immer diese Komputeranalysen mit Wahrscheinlichkeitsangaben. Ich sehe schon den...

Raumzeitkrümmer 09. Aug 2012

Dafür gibt es google Home View.

ad (Golem.de) 09. Aug 2012

Tja - aber in London? In Prag? Ich hoffe ja dass das Projekt weiter geführt wird und man...



Du willst dich mit Golem.de beruflich verändern oder weiterbilden?
Zum Stellenmarkt
Zur Akademie
Zum Coaching
  • Schnäppchen, Rabatte und Top-Angebote
    Die besten Deals des Tages
    Schnäppchen • PS5 mit Vertrag bei MediaMarkt bestellbar • PCGH-Gaming-PCs stark reduziert (u. a. PC mit RTX 3060 & Ryzen 5 5600X 1.400€) • Microsoft Flight Simulator Xbox Series X 69,99€ • 3 für 2 bei MediaMarkt: 2 Spiele kaufen + 1 Spiel geschenkt • New World vorbestellbar ab 39,99€ [Werbung]
    •  /