Hogar
El laboratorio Tongyi de Alibaba publica el código fuente de Fun-CineForge y resuelve el reto del doblaje con varios locutores
El doblaje de voz tradicional basado en IA suele quedarse corto en producciones de gran envergadura, como películas y animaciones, donde es fundamental captar los matices emocionales más sutiles y lograr una sincronización perfecta de los movimientos labiales. Para hacer frente a este reto fundamental del sector, Tongyi Lab ha lanzado oficialmente y ha puesto a disposición como código abierto el innovador modelo de doblaje multimodal y para múltiples escenarios con calidad cinematográfica: Fun-CineForge .
Salvar la brecha audiovisual: un marco de cuatro pilares para una sincronización perfecta
En lugar de basarse en la simple conversión de texto a voz, Fun-CineForge está diseñado para dominar cuatro dimensiones fundamentales del doblaje profesional:
Sincronización labial: garantiza que el habla sintetizada se alinee con los movimientos de la boca de los personajes en pantalla con una precisión excepcional.
Expresión emocional: infunde a la voz emociones auténticas y humanas mediante el análisis de las señales faciales y las instrucciones contextuales.
Consistencia vocal: mantiene una identidad vocal estable y reconocible para personajes específicos en escenas complejas de diálogo con múltiples interlocutores.
Alineación temporal: permite la inserción de diálogos con una precisión de milisegundos, incluso cuando el hablante está fuera de pantalla o parcialmente oculto.
Innovación fundamental: la pionera «modalidad temporal» y un conjunto de datos de alta fidelidad
El salto técnico de Fun-CineForge se deriva de su filosofía única de diseño conjunto de «datos + modelo»:
El conjunto de datos de alta calidad de CineDub: Tongyi Lab también ha abierto el código fuente del proceso automatizado de construcción del conjunto de datos de CineDub. Utilizando un mecanismo de corrección de errores de cadena de pensamiento, reduce las tasas de error de transcripción para textos en chino e inglés a aproximadamente un 1 % - 2 % y reduce los errores de diarización de hablantes hasta un 1,2 %.
Arquitectura de fusión de cuatro modalidades: El modelo es pionero en la integración de una «modalidad temporal», modelando conjuntamente entradas visuales (forma de los labios y expresión), texto (diálogo y contexto emocional) y audio (referencia de voz). Esta fusión permite una sincronización exacta en escenas complejas, incluidas aquellas en las que no se ven los rostros.
Excelencia demostrada: doblaje pionero de diálogos auténticos con múltiples personajes
Los resultados de las pruebas comparativas demuestran que Fun-CineForge supera sustancialmente a modelos de referencia como DeepDubber-V1 en métricas clave: tasa de error de palabras (WER/CER), sincronización labial (LSE-C/D) y similitud de voz. Un logro histórico es su capacidad, única en su género, para manejar con precisión diálogos a dúo y entre varias personas, mostrando una notable solidez en clips de vídeo de hasta 30 segundos.
GitHub: https://github.com/FunAudioLLM/FunCineForge
HuggingFace: https://huggingface.co/FunAudioLLM/Fun-CineForge
ModelScope: https://www.modelscope.cn/models/FunAudioLLM/Fun-CineForge/
Artículo relacionado
MiniMax presenta el Programa de Equipo 10x para incentivar a expertos globales en IA
MiniMax (Xiyu Technology), el Laboratorio de Inteligencia Artificial General, ha lanzado oficialmente "10x Team", una iniciativa global de colaboración de talento. Este programa tiene como objetivo reclutar a los mejores expertos de diversas industri
Corea del Sur inicia la construcción del Centro Nacional de Cómputo de IA, invirtiendo 2,5 billones de wones con un objetivo para 2028
El medio surcoreano EtNews informa que la ceremonia de colocación de la primera piedra del Centro de Cómputo de IA de Corea (KOACC) se llevó a cabo el 3 de agosto en el parque de centros de datos Solar City, en Sunan, Jeollanam-do. Con una inversión
Seis gigantes tecnológicos respaldan a la Linux Foundation con 12,5 millones de dólares para abordar el ruido de las vulnerabilidades de la inteligencia artificial
Para hacer frente a la avalancha de informes de seguridad de baja calidad generados por herramientas de automatización de IA, seis grandes empresas tecnológicas—Anthropic, Amazon (AWS), GitHub, Google, Microsoft y OpenAI—han contribuido conjuntamente
Recomendaciones de temas especiales relacionados
composicion musical
Herramientas de demostración vocal con IA para compositores, ganchos, melodías principales y sesiones de borrador multilingüe
¡Las mejores herramientas de demostración vocal con IA de 2026 para compositores, creadores de ganchos y equipos de contenido multilingüe! XIX.AI ha recopilado una lista de herramientas poderosas y transformadoras, rigurosamente probadas en el mundo real. Encontrarás datos detallados de comparación entre versiones gratuitas y de pago, clasificaciones completas y opciones imprescindibles para ayudarte a aumentar tu eficiencia de escritura y desbloquear todo tu potencial creativo. ¡Explora ahora para descubrir la herramienta perfecta para todas tus necesidades de contenido!
9 herramientas
xix.ai
Negocio
Las mejores herramientas de investigación competitiva basadas en IA para pequeñas empresas
¡Las mejores herramientas de investigación competitiva basadas en IA mejor valoradas de 2026 para pequeñas empresas! XIX.AI ha seleccionado una colección revolucionaria y muy potente, que se actualiza semanalmente con rigurosas pruebas en el mundo real y clasificaciones detalladas. Encontrarás una comparación exhaustiva entre las opciones gratuitas y las de pago que te ayudará a identificar las herramientas imprescindibles que impulsarán tu productividad y te proporcionarán una ventaja competitiva. ¡Explora ahora mismo y descubre la herramienta perfecta para ti!
9 herramientas
xix.ai
Edición de imágenes
Herramientas de retoque con IA de Photoshop para ropa de comercio electrónico, limpieza de piel y consistencia del color
¡Las mejores herramientas de retoque con IA de Photoshop de 2026 para ropa de comercio electrónico, limpieza de piel y consistencia de color! Esta lista curada de alta calificación presenta soluciones poderosas que cambian las reglas del juego, que ayudan a aumentar la eficiencia de redacción, optimizar la creación de contenido y lograr resultados visuales perfectos sin esfuerzo. Cada herramienta ha pasado por pruebas en el mundo real a través de clasificaciones actualizadas semanalmente, con detalles completos de comparación entre versiones gratuitas y de pago. Respaldado por XIX.AI, es la guía imprescindible para cualquier persona que aspire a desbloquear su ventaja con IA. ¡Explora ahora!
10 herramientas
xix.ai
Inmediato
Las mejores bibliotecas de indicaciones de IA para los flujos de trabajo de ChatGPT
Las mejores bibliotecas de prompts de IA de 2026, con las más valoradas, para optimizar todo tipo de flujos de trabajo de ChatGPT. XIX.AI ha seleccionado una colección potente y revolucionaria que se somete a rigurosas pruebas en condiciones reales para garantizar el máximo rendimiento. Encontrarás comparativas detalladas entre opciones gratuitas y de pago, así como clasificaciones de expertos, que te ayudarán a elegir las herramientas imprescindibles para potenciar tu productividad y sacar el máximo partido a la IA. ¡Explora ahora!
11 herramientas
xix.ai
Educación y aprendizaje
Plataformas de construcción de cuestionarios con IA para profesores, tutores y programas de aprendizaje basados en cohortes
2026 Últimas y mejores plataformas para crear cuestionarios con IA para profesores, tutores y programas de aprendizaje en cohortes. XIX.AI ha elaborado una lista de herramientas poderosas y transformadoras, sometidas a pruebas en el mundo real para ofrecer clasificaciones precisas. Estas plataformas obligatorias ayudan a mejorar la eficiencia en la redacción, agilizar la creación de contenido y simplificar el diseño de cuestionarios en todos los escenarios de aprendizaje. Explora ahora para descubrir la herramienta perfecta que te permitirá desbloquear tu ventaja con IA en la enseñanza.
13 herramientas
xix.ai
código
Herramientas de revisión de pull requests basadas en IA para equipos de GitHub que se ocupan de refactorizaciones, errores y fallos de seguridad
¡Ya están aquí, en XIX.AI, las mejores herramientas de 2026 para la revisión de pull requests con IA para equipos de GitHub! Esta lista seleccionada y mejor valorada presenta potentes soluciones revolucionarias que agilizan la refactorización, la corrección de errores y la detección de brechas de seguridad en todos los flujos de trabajo de los equipos. Disfruta de una comparación entre opciones gratuitas y de pago, junto con pruebas en condiciones reales y clasificaciones detalladas, que te ayudarán a encontrar la herramienta perfecta para aumentar significativamente tu productividad. ¡Explora ahora mismo y descubre tu ventaja con la IA!
12 herramientas
xix.ai
comentario (0)
0/500
El doblaje de voz tradicional basado en IA suele quedarse corto en producciones de gran envergadura, como películas y animaciones, donde es fundamental captar los matices emocionales más sutiles y lograr una sincronización perfecta de los movimientos labiales. Para hacer frente a este reto fundamental del sector, Tongyi Lab ha lanzado oficialmente y ha puesto a disposición como código abierto el innovador modelo de doblaje multimodal y para múltiples escenarios con calidad cinematográfica:
Salvar la brecha audiovisual: un marco de cuatro pilares para una sincronización perfecta
En lugar de basarse en la simple conversión de texto a voz, Fun-CineForge está diseñado para dominar cuatro dimensiones fundamentales del doblaje profesional:
Sincronización labial: garantiza que el habla sintetizada se alinee con los movimientos de la boca de los personajes en pantalla con una precisión excepcional.
Expresión emocional: infunde a la voz emociones auténticas y humanas mediante el análisis de las señales faciales y las instrucciones contextuales.
Consistencia vocal: mantiene una identidad vocal estable y reconocible para personajes específicos en escenas complejas de diálogo con múltiples interlocutores.
Alineación temporal: permite la inserción de diálogos con una precisión de milisegundos, incluso cuando el hablante está fuera de pantalla o parcialmente oculto.
Innovación fundamental: la pionera «modalidad temporal» y un conjunto de datos de alta fidelidad
El salto técnico de Fun-CineForge se deriva de su filosofía única de diseño conjunto de «datos + modelo»:
El conjunto de datos de alta calidad de CineDub: Tongyi Lab también ha abierto el código fuente del proceso automatizado de construcción del conjunto de datos de CineDub. Utilizando un mecanismo de corrección de errores de cadena de pensamiento, reduce las tasas de error de transcripción para textos en chino e inglés a aproximadamente un 1 % - 2 % y reduce los errores de diarización de hablantes hasta un 1,2 %.
Arquitectura de fusión de cuatro modalidades: El modelo es pionero en la integración de una «modalidad temporal», modelando conjuntamente entradas visuales (forma de los labios y expresión), texto (diálogo y contexto emocional) y audio (referencia de voz). Esta fusión permite una sincronización exacta en escenas complejas, incluidas aquellas en las que no se ven los rostros.
Excelencia demostrada: doblaje pionero de diálogos auténticos con múltiples personajes
Los resultados de las pruebas comparativas demuestran que Fun-CineForge supera sustancialmente a modelos de referencia como DeepDubber-V1 en métricas clave: tasa de error de palabras (WER/CER), sincronización labial (LSE-C/D) y similitud de voz. Un logro histórico es su capacidad, única en su género, para manejar con precisión diálogos a dúo y entre varias personas, mostrando una notable solidez en clips de vídeo de hasta 30 segundos.
GitHub: https://github.com/FunAudioLLM/FunCineForge
HuggingFace: https://huggingface.co/FunAudioLLM/Fun-CineForge
ModelScope: https://www.modelscope.cn/models/FunAudioLLM/Fun-CineForge/
MiniMax presenta el Programa de Equipo 10x para incentivar a expertos globales en IA
MiniMax (Xiyu Technology), el Laboratorio de Inteligencia Artificial General, ha lanzado oficialmente "10x Team", una iniciativa global de colaboración de talento. Este programa tiene como objetivo reclutar a los mejores expertos de diversas industri
Corea del Sur inicia la construcción del Centro Nacional de Cómputo de IA, invirtiendo 2,5 billones de wones con un objetivo para 2028
El medio surcoreano EtNews informa que la ceremonia de colocación de la primera piedra del Centro de Cómputo de IA de Corea (KOACC) se llevó a cabo el 3 de agosto en el parque de centros de datos Solar City, en Sunan, Jeollanam-do. Con una inversión
Seis gigantes tecnológicos respaldan a la Linux Foundation con 12,5 millones de dólares para abordar el ruido de las vulnerabilidades de la inteligencia artificial
Para hacer frente a la avalancha de informes de seguridad de baja calidad generados por herramientas de automatización de IA, seis grandes empresas tecnológicas—Anthropic, Amazon (AWS), GitHub, Google, Microsoft y OpenAI—han contribuido conjuntamente
¡Las mejores herramientas de demostración vocal con IA de 2026 para compositores, creadores de ganchos y equipos de contenido multilingüe! XIX.AI ha recopilado una lista de herramientas poderosas y transformadoras, rigurosamente probadas en el mundo real. Encontrarás datos detallados de comparación entre versiones gratuitas y de pago, clasificaciones completas y opciones imprescindibles para ayudarte a aumentar tu eficiencia de escritura y desbloquear todo tu potencial creativo. ¡Explora ahora para descubrir la herramienta perfecta para todas tus necesidades de contenido!
9 herramientas
xix.ai
¡Las mejores herramientas de investigación competitiva basadas en IA mejor valoradas de 2026 para pequeñas empresas! XIX.AI ha seleccionado una colección revolucionaria y muy potente, que se actualiza semanalmente con rigurosas pruebas en el mundo real y clasificaciones detalladas. Encontrarás una comparación exhaustiva entre las opciones gratuitas y las de pago que te ayudará a identificar las herramientas imprescindibles que impulsarán tu productividad y te proporcionarán una ventaja competitiva. ¡Explora ahora mismo y descubre la herramienta perfecta para ti!
9 herramientas
xix.ai
¡Las mejores herramientas de retoque con IA de Photoshop de 2026 para ropa de comercio electrónico, limpieza de piel y consistencia de color! Esta lista curada de alta calificación presenta soluciones poderosas que cambian las reglas del juego, que ayudan a aumentar la eficiencia de redacción, optimizar la creación de contenido y lograr resultados visuales perfectos sin esfuerzo. Cada herramienta ha pasado por pruebas en el mundo real a través de clasificaciones actualizadas semanalmente, con detalles completos de comparación entre versiones gratuitas y de pago. Respaldado por XIX.AI, es la guía imprescindible para cualquier persona que aspire a desbloquear su ventaja con IA. ¡Explora ahora!
10 herramientas
xix.ai
Las mejores bibliotecas de prompts de IA de 2026, con las más valoradas, para optimizar todo tipo de flujos de trabajo de ChatGPT. XIX.AI ha seleccionado una colección potente y revolucionaria que se somete a rigurosas pruebas en condiciones reales para garantizar el máximo rendimiento. Encontrarás comparativas detalladas entre opciones gratuitas y de pago, así como clasificaciones de expertos, que te ayudarán a elegir las herramientas imprescindibles para potenciar tu productividad y sacar el máximo partido a la IA. ¡Explora ahora!
11 herramientas
xix.ai
2026 Últimas y mejores plataformas para crear cuestionarios con IA para profesores, tutores y programas de aprendizaje en cohortes. XIX.AI ha elaborado una lista de herramientas poderosas y transformadoras, sometidas a pruebas en el mundo real para ofrecer clasificaciones precisas. Estas plataformas obligatorias ayudan a mejorar la eficiencia en la redacción, agilizar la creación de contenido y simplificar el diseño de cuestionarios en todos los escenarios de aprendizaje. Explora ahora para descubrir la herramienta perfecta que te permitirá desbloquear tu ventaja con IA en la enseñanza.
13 herramientas
xix.ai
¡Ya están aquí, en XIX.AI, las mejores herramientas de 2026 para la revisión de pull requests con IA para equipos de GitHub! Esta lista seleccionada y mejor valorada presenta potentes soluciones revolucionarias que agilizan la refactorización, la corrección de errores y la detección de brechas de seguridad en todos los flujos de trabajo de los equipos. Disfruta de una comparación entre opciones gratuitas y de pago, junto con pruebas en condiciones reales y clasificaciones detalladas, que te ayudarán a encontrar la herramienta perfecta para aumentar significativamente tu productividad. ¡Explora ahora mismo y descubre tu ventaja con la IA!
12 herramientas
xix.ai
