ElevenLabs startet Sprachübersetzungstool zur Überwindung von Sprachbarrieren für Inhalte

• Voice-KI-Plattform ElevenLabs enthüllt neues AI Dubbing Feature - der bisher größte Meilenstein in den Bemühungen des Unternehmens, Sprachbarrieren zu beseitigen und universelle Zugänglichkeit von Inhalten zu fördern
• Dieses Sprachübersetzungstool kann gesprochenen Inhalt in wenigen Minuten in eine andere Sprache umwandeln und dabei die Stimme des ursprünglichen Sprechers bewahren.Basierend auf der eigenen Forschung des Unternehmens bedeutet dies, dass globale Zielgruppen Inhalte in ihrer Muttersprache genießen können
• Das neue KI-Synchronisations-Feature ermöglicht es allen Kreativen, Pädagogen und Medienunternehmen, mit wenigen Klicks ein globales Publikum zu erreichen. Dies folgt auf die kürzliche Einführung von ElevenLabs’ Studio Tool zur Unterstützung der effizienten Erstellung von Langform-Audio

10. Oktober, Global - ElevenLabs, der globale Marktführer in der Voice-KI-Technologie, kündigt heute die Ergänzung eines bahnbrechenden Sprachübersetzungs-Features zu seiner Plattform an. Entstanden aus der grundlegenden Mission, die sprachlichen Barrieren von Inhalten zu beseitigen, auf der ElevenLabs gegründet wurde, und als Höhepunkt der bisherigen Forschung des Unternehmens, ermöglicht das KI-Synchronisations-Tool den Nutzern, jede Sprache automatisch in eine andere zu übersetzen und dabei die Stimme des ursprünglichen Sprechers zu bewahren - eine neue, hochwertige und effektive Methode zur Synchronisation von Audio- und Videoinhalten.

CEO und Mitbegründer von ElevenLabs, Mati Staniszewski, kommentiert:

„Die Veröffentlichung von KI-Synchronisation ist unser bisher größter Schritt zur Beseitigung dieser sprachlichen Barrieren von Inhalten. Es wird den Zuschauern helfen, jeden gewünschten Inhalt zu genießen, unabhängig von der Sprache, die sie sprechen. Und es bedeutet, dass Inhaltsersteller leicht und authentisch ein viel größeres Publikum weltweit erreichen können. Nachdem mein Mitbegründer Piotr und ich diese Sprachbarrieren aus erster Hand erlebt haben, freuen wir uns sehr, die KI-Synchronisation endlich zum Leben zu erwecken.“

Ein neues Zeitalter der Inhaltszugänglichkeit über Medien wie Streaming, Gaming und Filme einläutend, geht das neue Tool über traditionelle Übersetzung und Untertitelung hinaus, indem es die Identität des Sprechers und die ursprünglichen Sprachmuster bei der Übersetzung bewahrt. Dies bedeutet, dass die Stimme desselben Schauspielers von Zuschauern in über 20 verschiedenen Sprachen gehört werden kann, wobei die Merkmale und Nuancen der ursprünglichen Aufnahme beibehalten werden.

AI Dubbing kombiniert die Forschung des Unternehmens zur mehrsprachigen Sprachsynthese, Stimmklonung, Text- und Audiobearbeitung in einem einzigen Tool; verbessert die Authentizität der übersetzten Inhalte und macht sie einem breiteren Publikum zugänglicher, während die Essenz der ursprünglichen Darbietung erhalten bleibt. Das KI-Synchronisations-Feature unterstützt die Sprachübersetzung in über 20 Sprachen, die derzeit vom Eleven Multilingual v2 Modell unterstützt werden, darunter Hindi, Portugiesisch, Spanisch, Japanisch, Ukrainisch, Polnisch oder Arabisch.

Dieser Schritt erweitert die Forschung von ElevenLabs im Bereich der Audio-KI weiter; ermöglicht die Umwandlung von Emotionen und Intonation aus dem Originalaudio in das synchronisierte Audio. Das Unternehmen hat auch eine eigene Methode entwickelt, um die Stimmen verschiedener Sprecher zu erkennen und Hintergrundgeräusche zu entfernen, Musik und Geräusche vom Dialog zu unterscheiden. Dies bedeutet, dass das Tool effektiv Audio oder Video mit mehreren Sprechern verarbeiten kann und sicherstellt, dass jede Stimme in verschiedenen Sprachen deutlich und erkennbar bleibt.

Durch die Automatisierung des Synchronisationsprozesses und die Sicherstellung einer hochwertigen Ausgabe vereinfacht ElevenLabs die Erstellung mehrsprachiger Inhalte für Kreative, Pädagogen und Medienunternehmen. Nur 6 % der Weltbevölkerung sind englische Muttersprachler und 75 % sprechen kein Englisch. Diese Veröffentlichung bedeutet, dass jedes Video nun schnell und kostengünstig einem globalen Publikum zugänglich gemacht werden kann.

Die Ankündigung folgt auf die kürzliche Veröffentlichung von Studio - ElevenLabs’ fortschrittlicher Workflow zur Erstellung und Bearbeitung von Langform-Audio, der eine Vielzahl von Bearbeitungsfunktionen unterstützt, wie z.B. Sprecherzuweisung, Pauseneinfügung und Segmentregeneration.

Mit dieser Ergänzung setzt ElevenLabs seine Mission fort, Sprachbarrieren abzubauen und Inhalte in jeder Sprache und Stimme universell zugänglich zu machen.