ElevenLabs sale de la fase beta y lanza Eleven Multilingual v2: un modelo de voz IA para 30 idiomas

• La plataforma de IA vocal ElevenLabs alcanza un hito en sus esfuerzos por eliminar las barreras lingüísticas del contenido, con el lanzamiento de un nuevo modelo de aprendizaje profundo que soporta capacidades multilingües en 30 idiomas: Eleven Multilingual v2
• Este avance permitirá a empresas de medios, desarrolladores de juegos, editores y creadores independientes de todo el mundo mejorar considerablemente la accesibilidad de su contenido
• Estas nuevas funcionalidades, que siguen a una serie de novedades y mejoras desde el lanzamiento de la plataforma en enero, también marcan el fin oficial de la fase beta de la empresa
• La misión de ElevenLabs es hacer que todo el contenido sea universalmente accesible en cualquier idioma y con cualquier voz

Londres, Reino Unido - ElevenLabs, el líder mundial en software de IA vocal, ha lanzado hoy un nuevo modelo de generación de voz multilingüe capaz de producir con precisión sonidos de IA «ricos en emociones» en 30 idiomas.

Este avance, completamente basado en investigaciones internas, permitirá a creadores producir contenidos de audio localizados para los mercados internacionales de Europa, Asia y Oriente Medio. ElevenLabs ha pasado los últimos 18 meses analizando las características del habla humana, creando nuevos mecanismos para entender el contexto y transmitir emociones en la generación del habla, así como sintetizando voces nuevas y únicas.

Con Eleven Multilingual v2, cuando se introduce un texto en la plataforma de síntesis vocal de ElevenLabs, el nuevo modelo puede identificar automáticamente cerca de 30 idiomas escritos y generar habla con un nivel de autenticidad sin precedentes.

Además, ya sea una voz sintética o clonada, las características únicas de la voz del hablante se conservan en todos los idiomas, incluido su acento original. Así, la misma voz puede usarse para dar vida a contenido en 30 idiomas diferentes.

Este despliegue sigue al lanzamiento del clonaje de voz profesional para todos los creadores de la plataforma. Esta actualización del producto, que se lanzó junto con funciones de seguridad adicionales, permite a los usuarios crear una copia digital perfecta de su propia voz; que es prácticamente

imposible de distinguir de la original. Con esta nueva versión, tu voz podrá expresarse en los cerca de 30 idiomas que ofrece el modelo multilingüe.

Los idiomas soportados incluyen: coreano, neerlandés, turco, sueco, indonesio, vietnamita, filipino, ucraniano, griego, checo, finlandés, rumano, danés, búlgaro, malayo, húngaro, noruego, eslovaco, croata, árabe clásico y tamil. Se unen a los idiomas previamente disponibles, incluyendo inglés, polaco, alemán, español, francés, italiano, hindi y portugués.

Tras los recientes lanzamientos de funcionalidades y las mejoras continuas de la plataforma, ElevenLabs también ha confirmado hoy que la plataforma sale oficialmente de su fase beta. Esta transición marca un punto de inflexión en el compromiso de la empresa de proporcionar herramientas fiables y de vanguardia a sus más de un millón de usuarios en todo el mundo.

En el futuro, ElevenLabs planea introducir un mecanismo que permita a los usuarios compartir sus voces en la plataforma y beneficiarse del desarrollo de nuevos sonidos, fomentando así las posibilidades de colaboración entre humanos e inteligencia artificial.

Mati Staniszewski, CEO y cofundador de ElevenLabs, comenta:

«ElevenLabs fue creada con el objetivo de hacer que todo contenido sea universalmente accesible en cualquier idioma y con cualquier voz. Con el lanzamiento de Eleven Multilingual v2, nos acercamos un poco más a nuestro objetivo, que es hacer de este sueño una realidad y poner a disposición voces de IA de calidad humana en todos los dialectos.

«Nuestros herramientas de síntesis vocal permiten poner a todos en igualdad de condiciones y ofrecer a todos los creadores capacidades de audio vocal de calidad superior. Estos beneficios ahora se extienden a aplicaciones multilingües en cerca de 30 idiomas. A largo plazo, esperamos cubrir aún más idiomas y voces con la ayuda de la IA, y eliminar las barreras lingüísticas al contenido. En ElevenLabs, creemos que estos avances en accesibilidad fomentarán a largo plazo la creatividad, la innovación y la diversidad.»

Al reducir los costos y los recursos necesarios para crear contenido de audio de alta calidad en varios idiomas, ElevenLabs permite a empresas y creadores producir contenido más imaginativo y accesible que tenga en cuenta todas las culturas y todos los idiomas.

Para desarrolladores y editores de juegos independientes, la herramienta de generación de voz multilingüe permite traducir las experiencias de juego y el contenido de audio para audiencias internacionales, estableciendo un vínculo con los jugadores y oyentes en su propio idioma sin comprometer la calidad o precisión del audio hablado.

De igual manera, los establecimientos educativos ahora tienen los medios para proporcionar instantáneamente a los estudiantes contenido de audio preciso en los idiomas objetivo, lo que permite mejorar las habilidades de comprensión y pronunciación de idiomas y responder a los diferentes estilos de enseñanza y necesidades de aprendizaje de los estudiantes internacionales.

Creadores de todo tipo pueden usar la herramienta de ElevenLabs para mejorar la accesibilidad del contenido para personas con discapacidades visuales o con necesidades de aprendizaje adicionales, complementando el contenido visual con un discurso disponible en varios idiomas.

Su primer conjunto de herramientas de voz IA, presentado en enero de 2023, incluía la posibilidad de transformar cualquier texto en habla gracias a una selección de voces sintéticas predefinidas y la posibilidad de crear un clon de tu propia voz. La herramienta de síntesis vocal multilingüe es un nuevo paso en la misión de ElevenLabs de hacer que todo contenido sea universalmente accesible en cualquier idioma y con cualquier voz.

La tecnología ya ha sido adoptada en muchos sectores y verticales creativos, permitiendo a autores independientes crear audiolibros, dando voz a personajes secundarios en videojuegos, ayudando a personas con discapacidad visual a acceder a contenidos escritos en línea y alimentando la primera cadena de radio IA del mundo. ElevenLabs también se ha asociado con una gama de creadores y estudios de contenido de primer nivel, incluyendo los generadores de videos de IA D-ID, uno de los mayores editores de audiolibros del mundo , Storytel, la plataforma de videos científicos de acceso libre ScienceCast cuyo generador de videos reúne documentos de investigación científica publicados en arXiv, la principal plataforma mundial de creación de contenido TheSoul Publishing, desarrolladores de juegos increíbles como Embark Studios y Paradox Interactive, y la plataforma multimedia MNTN.