Tecnologias

El doblaje automatizado de Amazon utiliza inteligencia artificial para copiar videos a idiomas extranjeros

El doblaje automatizado de Amazon utiliza inteligencia artificial para copiar videos a idiomas extranjeros

Con la popularidad de tantas plataformas de transmisión, el contenido se está volviendo bastante diverso y diferente. Cada vez más personas ven programas en idiomas extranjeros como "Money Heist" y "Dark", ya que son buenos programas y están disponibles en todo el mundo. Sin embargo, a algunos de nosotros nos gusta ver nuestros programas en un idioma que entendemos. A veces, los subtítulos no son suficientes. Dicho esto, el doblaje de programas extranjeros a otro idioma puede llevar mucho tiempo y resultar caro para las productoras. Esta es la razón principal por la que muchos programas no se doblan en idiomas extranjeros. Bueno, los investigadores de Amazon pueden tener una solución a este problema..

En un artículo publicado en el servidor de preimpresión Arxiv.org, los investigadores de Amazon teorizaron y probaron una nueva tecnología de "voz a voz". Usa AI para convertir el discurso original en un discurso traducido y refinar el discurso traducido para que suene más humano. Este es solo un primer paso hacia el desarrollo de una forma mucho más fácil y económica de doblar programas y películas..

Cómo funciona

Esta tecnología de "voz a voz" es mucho más complicada de lo que parece. Traducir un discurso original a un discurso extranjero usando computadoras es una tarea agitada. No se trata de traducir un idioma a otro solo desde el recurso de audio, sino que hay varios pasos involucrados.
El proceso de doblaje automatizado incluye esencialmente 3 pasos. Primero, el discurso original debe convertirse a formato de texto. El segundo paso consiste en traducir el texto al idioma deseado. Finalmente, el texto traducido genera el nuevo discurso..

Ahora, existen complicaciones al desarrollar el nuevo discurso a partir de la conversión de texto a voz traducida. El discurso traducido debe coincidir con la velocidad y la emoción del discurso original. También debe llevar los sonidos de fondo y eliminar la reverberación..

Para que este complicado proceso funcione, los investigadores de Amazon confirmaron que su tecnología de voz a voz ha sido capacitada en más de 150 millones de pares de inglés-italiano de frase para determinar la velocidad de un segmento de voz del discurso traducido para que coincida con la velocidad del discurso original. Este paso asegura que las pausas y los descansos en el discurso traducido coincidan con el discurso original..

Un modelo en la fase de conversión de texto a voz se ha entrenado en 47 horas de grabaciones de voz. Este modelo genera una secuencia de contexto a partir del texto que se alimenta a un codificador de voz previamente entrenado, que convierte la secuencia en una forma de onda de voz..

Esta tecnología también puede extraer sonidos de fondo del audio original y ponerlos en el audio traducido para que sea más similar al audio original. Por último, se aplica un paso separado llamado paso de reverberación para agregar la reverberación del audio original al traducido..

Será útil?

El proceso es sin duda complicado, pero los investigadores escribieron que su trabajo futuro estará dedicado a las mejoras del doblaje automático. Puede eliminar la necesidad de que los actores de doblaje doblen un programa o una película a otro idioma. Se volverá menos lento y mucho más económico doblar contenido al idioma deseado. Y sí, beneficiará a las productoras ofrecer más programas y películas a los espectadores al hacer que la lista sea mucho más diversa.

Estadísticas de uso de Internet, dispositivos móviles y redes sociales de la India que todo especialista en marketing debe conocer (2014)
Agencia de relaciones públicas y marketing en redes sociales WeAreSocial han publicado algunas estadísticas realmente interesantes y útiles sobre el m...
Diez razones para crear un sitio web adaptable en 2014
Las empresas que prosperan en línea conocen la importancia de un sitio web receptivo. Los clientes de hoy están accediendo e interactuando con negocio...
Cómo crear álbumes en vivo en Google Photos en Android, iOS y la Web
Durante su evento Made by Google la semana pasada, donde el gigante de Mountain View presentó un montón de nuevos productos, la compañía también anunc...