Inhalt
summary Zusammenfassung

Meta veröffentlicht ein neues KI-Modell, das gesprochene Sprache direkt in 35 Sprachen und Text in 100 Sprachen übersetzen kann.

Anzeige

Mit dem neuen multimodalen Encoder-Decoder-Modell "SeamlessM4T" kombiniert Meta Technologien aus den langjährigen KI-Übersetzungsprojekten No Language Left Behind (NLLB), Universal Speech Translator und Massively Multilingual Speech in einem einzigen Modell. M4T steht für "Massively Multilingual & Multimodal Machine Translation".

Durch die Implementierung der verschiedenen Vorgängermodelle in einem System werden laut Meta Fehler und Verzögerungen reduziert und somit die Effizienz und Qualität des Übersetzungsprozesses verbessert.

Das Modell ist multimodal, da es neben gesprochener Sprache, also Audio in 35 Sprachen, auch Text in 100 Sprachen übersetzen kann. Insgesamt kann das Modell Sprache in Text, Sprache in Sprache, Text in Sprache und Text in Text übersetzen und Sprache automatisch erkennen.

Anzeige
Anzeige

Laut Meta ist SeamlessM4T das erste Modell, das viele Sprachen (35) direkt wieder in gesprochene Sprache übersetzen kann, ohne den Umweg über eine Textübersetzung zu nehmen. Damit soll das Modell ein "signifikanter Schritt" auf dem Weg zu einem Universalübersetzer wie dem Babel Fish in Per Anhalter durch die Galaxis sein, den Meta in der Ankündigung explizit als Ziel nennt.

Video: Meta

Meta will Sprachbarrieren auf eigenen sozialen Plattformen überwinden

Laut Meta erzielt SeamlessM4T in den gängigen Übersetzungsbenchmarks neue State-of-the-Art-Ergebnisse und übertrifft Whisper von OpenAI. Wer sich selbst von den Qualitäten überzeugen möchte, kann hier eine interaktive Demo testen.

Bild: Meta AI

Auch bei der menschlichen Bewertung liegt das größte SeamlessM4T-Modell vor Whisper, allerdings ist der Abstand geringer. Beide Modelle liegen qualitativ noch hinter den menschlichen Übersetzungen, aber der Abstand verringert sich mit jedem neuen Modell.

Bild: Meta AI

Meta veröffentlicht das Modell unter der Lizenz CC BY-NC 4.0 als Open-Source-Modell bei Github, das allerdings nicht kommerziell genutzt werden darf. Laut Meta-Chef Mark Zuckerberg sollen die KI-Übersetzungstechnologien perspektivisch in die eigenen sozialen Plattformen Facebook, Instagram, WhatsApp, Messenger und Threads integriert werden.

Empfehlung

Neben dem Modell veröffentlicht Meta auch den Datensatz "SeamlessAlign", den das Team für das Training von SeamlessM4T zusammengetragen hat. Der laut Meta größte offene Datensatz für multimodale Übersetzung umfasst 470.000 Stunden Material für 37 Sprachen. Eine Erweiterung auf 100 Sprachen ist ein Thema für zukünftige Entwicklungen. Das wäre dann der nächste Schritt zum Universalübersetzer.

Anzeige
Anzeige
Community beitreten
Kommt in die DECODER-Community bei Discord,Reddit, Twitter und Co. - wir freuen uns auf euch!
Unterstütze unsere unabhängige, frei zugängliche Berichterstattung. Jeder Betrag hilft und sichert unsere Zukunft. Jetzt unterstützen:
Banküberweisung
Zusammenfassung
  • Meta hat SeamlessM4T vorgestellt, ein KI-Modell, das gesprochene Sprache direkt in 35 Sprachen und Text in 100 Sprachen übersetzen kann. Es kombiniert Technologien aus den Projekten No Language Left Behind, Universal Speech Translator und Massively Multilingual Speech.
  • SeamlessM4T ist das erste Modell, das viele Sprachen direkt in gesprochene Sprache übersetzen kann, ohne den Umweg über eine Textübersetzung zu nehmen. Laut Meta ist dies ein wichtiger Schritt auf dem Weg zu einem universellen Übersetzer.
  • Meta plant, die KI-Übersetzungstechnologien in die eigenen sozialen Plattformen wie Facebook, Instagram, WhatsApp, Messenger und Threads zu integrieren. SeamlessM4T wurde als Open Source unter der Lizenz CC BY-NC 4.0 veröffentlicht, darf aber nicht kommerziell genutzt werden.
Online-Journalist Matthias ist Gründer und Herausgeber von THE DECODER. Er ist davon überzeugt, dass Künstliche Intelligenz die Beziehung zwischen Mensch und Computer grundlegend verändern wird.
Community beitreten
Kommt in die DECODER-Community bei Discord,Reddit, Twitter und Co. - wir freuen uns auf euch!