La IA de Deepdub redefine el doblaje desde Hollywood hasta Bollywood

Deepdub's AI redefines dubbing from Hollywood to Bollywood.

En el panorama del entretenimiento global, la producción de programas de televisión y películas se extiende mucho más allá de Hollywood o Bollywood, es un fenómeno mundial.

Sin embargo, aunque las plataformas de streaming han ampliado el alcance del contenido, la tecnología de doblaje y traducción aún tiene mucho espacio para crecer.

Deepdub actúa como un puente digital, brindando acceso al contenido mediante el uso de inteligencia artificial generativa para superar las barreras del lenguaje y la cultura.

En el último episodio del podcast de IA de NVIDIA, el anfitrión Noah Kravitz habló con el cofundador y CEO de la startup con sede en Israel, Ofir Krakowski. Deepdub utiliza el doblaje impulsado por IA para ayudar a las compañías de entretenimiento a aumentar la eficiencia y reducir costos, al mismo tiempo que mejora la accesibilidad.

La compañía es miembro de NVIDIA Inception, un programa gratuito que ofrece soporte para el mercado, experiencia y asistencia tecnológica a startups.

Según Krakowski, el doblaje tradicional es lento, costoso y a menudo no cumple con las expectativas. La tecnología actual lucha con las sutilezas del lenguaje, dejando chistes, modismos o jerga perdidos en la traducción.

Deepdub ofrece una plataforma basada en web que permite a las personas interactuar con modelos de IA sofisticados para manejar cada parte del proceso de traducción y doblaje de manera eficiente. Traduce el texto, genera una voz y la mezcla con la música original y los efectos de audio.

Pero como señala Krakowski, incluso los mejores modelos de IA cometen errores, por lo que la plataforma incluye un punto de contacto humano para verificar las traducciones y asegurar que las voces generadas suenen naturales y capturen la emoción adecuada.

Deepdub también está trabajando en sincronizar los movimientos de los labios con las voces dobladas.

En última instancia, Krakowski espera liberar al mundo de las restricciones impuestas por las barreras del lenguaje.

“Creo que la tecnología permitirá a las personas disfrutar del contenido creado en todo el mundo”, dijo. “Globalizará la narración de historias y el conocimiento, que actualmente están limitados por las barreras del lenguaje”.

También te puede interesar

Jules Anh Tuan Nguyen explica cómo la IA permite a los amputados controlar una mano protésica y videojuegos
Un investigador postdoctoral de la Universidad de Minnesota habla sobre sus esfuerzos para permitir que los amputados controlen su extremidad protésica, incluso los movimientos de los dedos, con la mente.

Ai Wardah Inam de Overjet sobre cómo llevar la IA a la odontología
Overjet, miembro de NVIDIA Inception, se está moviendo rápidamente para llevar la IA a los consultorios dentales. La Dra. Wardah Inam, CEO de la compañía, habla sobre el uso de la IA para mejorar la atención al paciente.

Luis Voloch, CTO y cofundador de Immunai, sobre el uso del aprendizaje profundo para desarrollar nuevos medicamentos
Luis Voloch habla sobre cómo abordar los desafíos del sistema inmunológico con una mentalidad de aprendizaje automático y ciencia de datos.

Suscríbete al podcast de IA: ahora disponible en Amazon Music

El podcast de IA ahora está disponible en Amazon Music.

Además, obtén el podcast de IA a través de iTunes, Google Podcasts, Google Play, Castbox, DoggCatcher, Overcast, PlayerFM, Pocket Casts, Podbay, PodBean, PodCruncher, PodKicker, Soundcloud, Spotify, Stitcher y TuneIn.

Haz que el podcast de IA sea mejor. ¿Tienes unos minutos para completar esta encuesta para los oyentes?