ElevenLabs lleva Dubbing v2 a su API para que desarrolladores integren doblaje automático con preservación de tono, emoción y entrega en más de 90 idiomas.
ElevenLabs ha lanzado Dubbing v2 dentro de ElevenAPI, permitiendo integrar doblaje automático directamente en productos, herramientas y flujos de trabajo. La función está pensada para traducir audio y vídeo manteniendo mejor la voz y la interpretación original.
Según ElevenLabs, Dubbing v2 condiciona la generación en el rendimiento original, no solo en una transcripción. Esto permite preservar tono, emoción, ritmo y entrega al pasar el contenido a otro idioma.
La nueva versión funciona en más de 90 idiomas e incorpora lógica de traducción sincronizada para alinear los inicios y finales de las frases con el audio original. Esto reduce la sensación de doblaje desajustado y mejora la adaptación a vídeos con varias intervenciones.
El modelo también mejora la precisión por región y acento. ElevenLabs menciona diferencias como español de España y español latinoamericano, además de mejor manejo de música, efectos, audio de fondo y escenas con múltiples hablantes.
La API permite automatizar traducción, clonación de voz, doblaje y sincronización desde un mismo flujo. Para usos más avanzados, las empresas pueden aportar sus propios textos originales y traducciones, editar segmentos concretos y regenerar solo las partes modificadas.