Fotomontaje de la cara de Torrente. Omicrono
Mariano Rajoy, Torrente y El Fary hablando en perfecto inglés: la IA que lo hace posible
Los internautas han aprovechado el poder de la inteligencia artificial para traducir algunos de los mejores vídeos de Internet.
14 septiembre, 2023 17:38España se ha sumergido sobremanera en el turbio mundo de los deepfakes. Estos vídeos falsos hechos con inteligencia artificial han inundado las redes en los últimos años, causando incluso que múltiples expertos adviertan de los peligros de esta tecnología. Gracias a estos últimos avances, podemos ver casos increíblemente curiosos, que van desde lo gracioso hasta lo problemático.
Para muestra, un botón. Lionel Messi, uno de los jugadores de fútbol más importantes de la historia, dando una rueda de prensa en perfecto inglés. Todo ello gracias al poder de la IA, dedicada especialmente a la traducción en vivo de la voz, usando para ello la misma voz y entonación que usaría la persona original.
La causante de todo esto es la herramienta de traducción de vídeo de HeyGen, una plataforma de vídeo basada en inteligencia artificial que, entre otras cosas, tiene en su porfolio de productos la función de traducir cualquier voz en otro idioma. Una novedad que ya han usado los internautas para fabricar todo tipo de memes.
¿Cómo funciona este sistema?
Lo cierto es que las herramientas de producción de vídeos falsos con IA que roban las voces de otras personas llevan un tiempo entre nosotros. No obstante, pocas lo habían hecho con tanta precisión como HeyGen.
En este caso, la plataforma usa una combinación de los modelos GPT-4 para la traducción y lipsyncing para la sincronización labial. Para la clonación de voz, el modelo usado pertenece a ElevenLabs, tal y como detallan en Techopedia. La plataforma, tal y como asegura uno de sus fundadores, Joshua Xu, permite a cualquiera subir vídeos de hasta 30 segundos (sin pagar) y traducirlos.
Captura del sistema HeyGen Omicrono
Son tres simples pasos: subir el vídeo, elegir uno de los idiomas disponibles y esperar. HeyGen permite hasta 9 idiomas distintos; inglés con acento americano, acento propio, español, francés, hindi, italiano, alemán, polaco y portugués. El usuario puede elegir si traducir únicamente el audio o el vídeo al completo.
El sistema usa una estructura de créditos, que se pueden aumentar pagando. De base, se pueden obtener hasta dos créditos al registrarse, pero si el usuario quiere más, tiene que pasar por caja. De esta forma, se admiten tipos de archivo de hasta 500 megabytes, con formatos mp4, quicktime y webm.
La fiesta de los memes
Los memes no se han hecho esperar. Gracias a la facilidad de uso de la herramienta y su accesibilidad, los usuarios en redes sociales no han tardado en lanzar sus primeros vídeos, algunos en clave de humor y otros como demostración de las capacidades de este software.
Grande M.Rajoy, no puedo parar https://t.co/AdxS6OQSK4 pic.twitter.com/d5hGmjmgv9
— La Fani (@hojucitas) September 14, 2023
No son pocos los ejemplos, más allá del ya mencionado de Messi hablando inglés. Uno de los más rocambolescos muestra a un Mariano Rajoy hablando en perfecto inglés en algunas de sus intervenciones más icónicas, y sorprendentemente, consigue traducir prácticamente todas las palabras dichas por el expresidente.
Sin embargo, las que se han llevado la peor parte son las celebridades televisivas nacidas en el seno de programas como Sálvame y similares. Los usuarios no han dudado al traducir los vídeos más míticos de estos famosos, causando metrajes tremendamente llamativos.
— SAMPA10 (@jc_sampaio) September 14, 2023
Por otro lado, esto puede sentar un precedente peligroso. No solo facilita enormemente la confección de un deepfake, sino que puede incurrir en problemas de copyrightal usar contenido protegido por derechos de autor. Esta es una de las mayores problemáticas a las que se enfrenta la industria de la IA, que ya ha tenido un par de encontronazos con el terreno musical y las discográficas, por ejemplo.
