• IT-Karriere:
  • Services:

Adobe Sensei: Hundebilder suchen per KI

Adobes künstliche Intelligenz kann Personen aus Bildern ausschneiden, Sprachaufnahmen verbessern, das Verhalten von Nutzern vorhersagen und vieles mehr. Wir haben mit einem der Entwickler über Vorhersagen von Nutzerverhalten, Datenschutz und einen Berliner Chatbot gesprochen.

Artikel von Martin Wolf veröffentlicht am
Brett Butterfield ist Leiter der Softwareentwicklung für Sensei und Suche bei Adobe.
Brett Butterfield ist Leiter der Softwareentwicklung für Sensei und Suche bei Adobe. (Bild: Martin Wolf/Golem.de)

Es ist heiß in Los Angeles. Auch im November steigen die Temperaturen mitunter auf fast 30 Grad. Von Sonnenschein und blauem Himmel ist auf Adobes Hausmesse Max 2019 aber nichts zu sehen - jedenfalls nicht in der riesigen Halle, in der wir uns mit dem technischen Leiter für Softwareentwicklung, Brett Butterfield, verabredet haben. Hier stehen einige Stände fast verloren auf dunklen, tiefen Teppichen in klimatisierter Umgebung. Trotzdem hat Butterfield sehr gute Laune, denn sein Projekt für die diesjährige Messe ist pünktlich fertig geworden: In nur 30 Tagen haben sein Team und er eine Sprachsuche für das Stockfoto-Portal von Adobe entwickelt. Der Name: Hey Sensei.

Inhalt:
  1. Adobe Sensei: Hundebilder suchen per KI
  2. Sensei soll Muster im Workflow erkennen

Die Suche nutzt einen Chatbot, der von der Berliner Firma Rasa programmiert wurde und kontextbasiert reagiert. Wenn Butterfield sagt: "Fotos von Kindern", sehen wir erwartungsgemäß viele glückliche Kinder. Sagt er dann: "Füge einen Hund hinzu" und "Bewege den Hund nach links" verändert sich die Fotoauswahl entsprechend. Die glücklichen Kinder sind jetzt rechts, der Hund links im Bild. Die zugrundeliegende Technologie heißt intern Concept Canvas und basiert auf der Analyse der Anordnung der Bildinhalte.

All diese Funktionen sind Teil von Adobe Sensei - der konzerneigenen Plattform für maschinelles Lernen.

"Es ist ein ganzes Bündel von neuronalen Netzwerken", sagt Brett Butterfield. "Die Teams können individuell entscheiden, für welche Plattform sie entwickeln. Die meisten nehmen Pytorch, manche nutzen Tensorflow oder Caffe." Es sei im Grunde genommen Grid Computing. "Wir haben eine große Zahl an Cloud-Servern, die verschiedene Plattformen bieten und eine gemeinsame API haben. Man kann sie zusammenschließen und verkettete Analysen durch alle laufen lassen."

Stellenmarkt
  1. akf bank GmbH & Co KG, Wuppertal
  2. Limbach Gruppe SE, Heidelberg

Häufig würden 70 Millionen Fotos und mehr auf einen Schlag verarbeitet, so Butterfield weiter. Diese Fotos würden mit fünf oder sechs Merkmalen klassifiziert. "Das erzeugt schon eine ziemliche Last auf den Servern, aber die Architektur skaliert automatisch."

Trotzdem hat das System Grenzen. Bei aufwendigen Merkmalen braucht ein Einzelrechner bis zu einer Sekunde. Adobe Stock hat 175 Millionen Fotos, da kämen insgesamt viele Jahre Rechenzeit zusammen. Die einfachen Klassifikationen können jedoch in Sekundenbruchteilen durchgeführt werden - als Beispiel nennt Butterfield die Analyse von Geschlecht, Alter und Emotionen. Das funktioniert inzwischen sogar bei Videodaten in Echtzeit. Wenn Fotos neu zur Datenbank hinzugefügt werden, erfolgt die Klassifikation auf den Rechnerclustern verteilt im Hintergrund.

Bitte aktivieren Sie Javascript.
Oder nutzen Sie das Golem-pur-Angebot
und lesen Golem.de
  • ohne Werbung
  • mit ausgeschaltetem Javascript
  • mit RSS-Volltext-Feed
Sensei soll Muster im Workflow erkennen 
  1. 1
  2. 2
  3.  


Anzeige
Hardware-Angebote
  1. täglich neue Deals bei Alternate.de
  2. (reduzierte Überstände, Restposten & Co.)

StaTiC2206 21. Nov 2019

also von Familie und Freunden :D


Folgen Sie uns
       


Probefahrt mit dem Corsa-e

Wir haben den vollelektrischen Opel Corsa-e einen Tag lang in Berlin und Brandenburg Probe gefahren.

Probefahrt mit dem Corsa-e Video aufrufen
Cyberpunk 2077 angespielt: Zwischen Beamtenbestechung und Gunplay mit Wumms
Cyberpunk 2077 angespielt
Zwischen Beamtenbestechung und Gunplay mit Wumms

Mit dem Auto von der Wüste bis in die große Stadt: Golem.de hat den Anfang von Cyberpunk 2077 angespielt.
Von Peter Steinlechner

  1. CD Projekt Red Cyberpunk 2077 nutzt Raytracing und DLSS 2.0
  2. Cyberpunk 2077 Die Talentbäume von Night City
  3. CD Projekt Red Cyberpunk 2077 rutscht in Richtung Next-Gen-Startfenster

Mehrwertsteuersenkung: Worauf Firmen sich einstellen müssen
Mehrwertsteuersenkung
Worauf Firmen sich einstellen müssen

Wegen der Mehrwertsteuersenkung müssen viele Unternehmen in kürzester Zeit ihre Software umstellen. Alle möglichen Sonderfälle müssen berücksichtigt werden, der Aufwand ist enorm.
Von Boris Mayer

  1. Raumfahrt Vega-Raketenstart während Corona-Ausbruchs verschoben
  2. Corona Google und Microsoft starten Weiterbildungsprogramme
  3. Kontaktverfolgung Datenschützer kritisieren offene Gästelisten

Unix: Ein Betriebssystem in 8 KByte
Unix
Ein Betriebssystem in 8 KByte

Zwei junge Programmierer entwarfen nahezu im Alleingang ein Betriebssystem und die Sprache C. Zum 50. Jubiläum von Unix werfen wir einen Blick zurück auf die Anfangstage.
Von Martin Wolf


      •  /