Zum Hauptinhalt Zur Navigation

Barrierefreiheit: Kinect wird zum Gebärdendolmetscher

Chinesische Wissenschaftler haben ein neues Betätigungsfeld für die Kinect gefunden: Sie haben Microsofts System zur Gestenerkennung beigebracht, Gebärdensprache zu erkennen und zu übersetzen.
/ Werner Pluta
4 Kommentare News folgen (öffnet im neuen Fenster)
Kinect Sign Language Translator: Avatar stellt Gebärden dar. (Bild: Microsoft Research)
Kinect Sign Language Translator: Avatar stellt Gebärden dar. Bild: Microsoft Research

Wissenschaftler in China haben auf der Basis von Microsofts Kinect ein System entwickelt, das Gebärdensprache übersetzt. Das Projekt ist eine Zusammenarbeit der chinesischen Akademie der Wissenschaften, einer Pekinger Universität und Microsoft Research Asia.

Kinect Sign Language Translator - Microsoft
Kinect Sign Language Translator - Microsoft (05:32)

Kinect Sign Language Translator(öffnet im neuen Fenster) heißt das System. Es besteht unter anderem aus einem System zur Gestenerkennung sowie einem automatischen Übersetzungssystem: Wenn ein Sprecher Wörter gebärdet, erfasst das System die Bewegungen und übersetzt diese.

Verschiedene Ausgabemöglichkeiten

Das System transformiert dabei von einer Gebärdensprache in eine andere sowie von einer Gebärdensprache in eine gesprochene Sprache. Der Text kann auf dem Bildschirm angezeigt oder per Sprachsynthese ausgegeben werden.

Das System kann aber noch mehr: Es setzt einen gesprochenen Text in Gebärden um. Ein Avatar stellt diese auf einem Bildschirm dar. Die Übersetzung in beiden Richtungen soll in Echtzeit funktionieren.

Das System sei noch ein Prototyp, erklären die Entwickler um Xilin Chen von der chinesischen Akademie der Wissenschaften. Sie glauben aber, dass es das Potenzial hat, ein kostengünstiges und effektives Kommunikationsmittel für Gebärdensprecher zu werden.


Relevante Themen