Meta hat den KI-Übersetzer SeamlessM4T aktualisiert und ihn noch flüssiger und ausdrucksstärker gemacht

Von Bohdan Kaminskyi | 04.12.2023, 14:50
Meta hat den KI-Übersetzer SeamlessM4T aktualisiert und ihn noch flüssiger und ausdrucksstärker gemacht
Meta

Meta hat die zweite Version seines multimodalen neuronalen Netzwerks SeamlessM4T für die Sprachübersetzung vorgestellt. Das Update macht das Dolmetschen noch spontaner und emotionaler.

Was bekannt ist

Die erste neue Funktion, SeamlessExpressive, bezieht die Intonation des Originaltons in die Übersetzung ein: Lautstärke, Tonhöhe, Tempo, Pausen, usw. Dies verleiht dem Gespräch einen natürlicheren Charakter.

Die zweite Funktion, SeamlessStreaming, startet die Übersetzung, während die Person noch spricht. Dadurch wird die Verzögerung auf zwei Sekunden reduziert und es muss nicht gewartet werden, bis der Gesprächspartner den Satz beendet hat.

Nach Angaben von Meta analysiert der Algorithmus den Teil des Satzes, der bereits gesprochen wurde, und entscheidet, ob genügend Kontext vorhanden ist, um mit der Übersetzung zu beginnen.

Das Unternehmen hat noch keinen genauen Zeitplan dafür genannt, wann die neuen Funktionen für ein breiteres Publikum verfügbar sein werden.

Für diejenigen, die mehr wissen wollen

Quelle: Meta