Betty la fea hablando francés, Jaime Garzón hablando inglés y Taylor Swift hablando español… la era del doblaje por IA está aquí

Traducir de un idioma a otro fue una tarea que, por años, pareció eludir el poder de los sistemas digitales, al punto de que llegamos a darlas por inherentemente imperfectas. Pero eso fue antes, no solo servicios como Google Translate han perfeccionado su juego, sino que ahora, potenciadas por IA generativa, nuevas herramientas logran cosas sorprendentes.

Es el caso de HeyGen, un sistema online que no solo traduce el texto de quien habla en un video, sino que lo hace con su propia voz. Más aún, HeyGen modifica el video para que la boca de quien habla parezca moverse en el idioma elegido para la traducción.

Hace poco les contamos cómo funciona.

Bueno, en Xataka Colombia pusimos a prueba esta herramienta con algunos personajes ampliamente conocidos. El primer ejemplo no fue otra que la desafiante voz de Beatriz Pinzón Solano, a quien le pedimos poner a hablar en francés.

Si bien el resultado no es perfecto (los tonos peculiares de la voz de Betty se pierden en la traducción, el lip sync es satisfactorio y la escena, como tal, podría funcionar.

A continuación, escogimos un personaje de Jaime Garzón en Quac para ponerlo a hablar en inglés. Juzguen ustedes:

De nuevo, ciertos dejos e inflexiones se pierden, y en este caso la traducción es menos que perfecta. Y sin embargo, ahí está Néstor Elí, hablando inglés.

Finalmente, quisimos hacer el proceso inverso y usamos un clip de una entrevista de Taylor Swift para ponerla a hablar español.

En este caso el resultado es bastante bueno, si bien la voz de la artista resulta algo más solemne en nuestro idioma. Pero quien mire sus labios no dudaría que estaba hablando español, ¿no?

Estos ejemplos son una muestra del poder de la IA en este campo, en donde pronto podremos verla doblando películas para que, cuando usted vaya a ver Rápidos y Furiosos 19, Dominic hable de su amor por la familia en perfecto español con la voz de Vin Diesel, y moviendo la boca de manera impecable.

Ver todos los comentarios en https://www.xataka.com.co

VER 0 Comentario

Portada de Xataka Colombia