Facebook: Neuronales Netzwerk wandelt Sprache in andere Sprachen um

Facebook-Forscher arbeiten an einem Programm, das die Toneigenschaften von Sprachen lernt und Gesprochenes in andere Sprachen umwandeln kann. Erste Ergebnisse klingen schon relativ glaubwürdig. Allerdings gibt es Einschränkungen.

Artikel veröffentlicht am ,
Facebooks Software kann Deutsch in Englisch umwandeln.
Facebooks Software kann Deutsch in Englisch umwandeln. (Bild: Pixabay.com/CC0 1.0)

Facebook entwickelt ein Neuronales Netzwerk (PDF), welches die Sprachmelodie einer Sprache in eine andere Sprache umwandeln kann. Es übersetzt im Prinzip das Gesprochene einer Person und behält den Klang der Stimme bei. Bisher versteht das System drei verschiedene Sprachen: Englisch, Spanisch und Deutsch. Es handelt sich dabei ausschließlich um ein Text-to-Speech-System (TTS). Es übersetzt keinen Text.

Stellenmarkt
  1. IT-Security Engineer (m/w/d)
    Duravit AG, Hornberg
  2. Business Analyst*in Geschäftsprozessmanagement / Business Continuity Manager*in (w/m/d)
    Landeshauptstadt München, München (Home-Office möglich)
Detailsuche

Die Wissenschaftler nutzen die Klangeigenschaften jeder der drei Sprachen, um diese auseinanderzuhalten. Als zweites Element wird der Software ein zu sprechender Text übergeben. Das neuronale Netzwerk setzt die Phonetik und den Text zu einem Ergebnis zusammen. Die Grundlage für die Tonbeispiele bilden 109 englischsprachige, 100 spanischsprachige und 201 deutschsprachige Personen. Aus diesen haben die Forscher ihre Tonwörterbücher erstellt.

Ergebnisse noch nicht perfekt

Das Ergebnis: Die Übersetzung in das Englische kommt einer Jury aus zehn Menschen am natürlichsten vor. Auf einer Skala von 0 bis 5 wurde dies mit durchschnittlich 3,4 bewertet. Das Umwandeln ins Spanische oder Deutsche wird als unnatürlicher wahrgenommen. Das liegt daran, dass dem neuronalen Netzwerk 40.000 englischsprachige und nur 5.500 spanische und 15.000 deutschsprachige Sprachbeispiele als Lerngrundlage zur Verfügung gestellt wurden.

Das US-Onlinemagazin Venturebeat stellt zwei verschiedene Ergebnisse bereit, bei denen der Satz "The rainbow is the division of white" aus dem Spanischen und aus dem Deutschen umgewandelt wurde. Ersteres Ergebnis klingt interessanterweise so, wie viele deutschsprachige Personen Englisch sprechen würden. Es ist ein klarer Akkzent zu hören. Der spanischsprachigen Stimme hat die Software stattdessen am Ende des Satzes undefinierbare Töne angehängt.

Golem Karrierewelt
  1. Container Technologie: Docker und Kubernetes - Theorie und Praxis: virtueller Drei-Tage-Workshop
    14.-16.12.2022, virtuell
  2. Git Grundlagen: virtueller Zwei-Tage-Workshop
    19./20.01.2023, Virtuell
Weitere IT-Trainings

Das System ist also bei weitem noch nicht perfekt. Es könnte zusammen mit Übersetzungssoftware in einigen Jahren aber etwa als mobiler Übersetzer dienen, der in Echtzeit die eigene Stimme übersetzt.

Bitte aktivieren Sie Javascript.
Oder nutzen Sie das Golem-pur-Angebot
und lesen Golem.de
  • ohne Werbung
  • mit ausgeschaltetem Javascript
  • mit RSS-Volltext-Feed


Aktuell auf der Startseite von Golem.de
Metaverse
EU blamiert sich mit interaktiver Onlineparty

Rund 387.000 Euro an Kosten, fünf Besucher auf der Onlineparty: Ein EU-Projekt wollte junge Menschen als Büroklammer tanzen lassen.

Metaverse: EU blamiert sich mit interaktiver Onlineparty
Artikel
  1. Elektromobilität: Hyundai zeigt Elektrosportwagen Ioniq 5 N
    Elektromobilität
    Hyundai zeigt Elektrosportwagen Ioniq 5 N

    Hyundai hat erstmals ein Video mit dem Ioniq 5 N veröffentlicht. Das besonders sportliche Fahrzeug soll die N-Marke beleben.

  2. Patches: Anti-Ruckel-Updates für Pokémon und Callisto zeigen Wirkung
    Patches
    Anti-Ruckel-Updates für Pokémon und Callisto zeigen Wirkung

    Warum nicht gleich so? Für die von Bugs geplagten Computerspiele Pokémon Karmesin/Purpur und The Callisto Protocol gibt es Updates.

  3. IT-Projektmanager: Mehr als Excel-Schubser und Flaschenhälse
    IT-Projektmanager
    Mehr als Excel-Schubser und Flaschenhälse

    Viele IT-Teams halten ihr Projektmanagement für überflüssig. Wir zeigen drei kreative Methoden, mit denen Projektmanager wirklich relevant werden.
    Ein Ratgebertext von Jakob Rufus Klimkait und Kristin Ottlinger

Du willst dich mit Golem.de beruflich verändern oder weiterbilden?
Zum Stellenmarkt
Zur Akademie
Zum Coaching
  • Schnäppchen, Rabatte und Top-Angebote
    Die besten Deals des Tages
    Daily Deals • PS5-Bundle vorbestellbar • Amazon-Geräte bis -53% • Mindstar: AMD-Ryzen-CPUs zu Bestpreisen • Alternate: Kingston FURY Beast RGB 32GB DDR5-4800 146,89€ • Advent-Tagesdeals bei MediaMarkt/Saturn: u. a. SanDisk Ultra microSDXC 512GB 39€ • Thrustmaster Ferrari GTE Wheel 87,60€ [Werbung]
    •  /