Meta presenta Movie Gen, un nuevo modelo de IA que puede generar video con sonido

Meta presentó este viernes Movie Gen, un nuevo modelo de inteligencia artificial que permite a los usuarios crear videos personalizados con audio a partir de simples entradas de texto. Este modelo, que integra capacidades de tecnologías anteriores, busca competir con herramientas destacadas en el sector, como Sora de OpenAI.

La función de generación de video permite producir clips de alta definición de hasta 16 segundos a 16 cuadros por segundo, capturando efectivamente movimientos e interacciones. Además, la generación de video personalizada permite incorporar la imagen de una persona junto con un texto, manteniendo su identidad y movimiento, lo que resulta en contenido altamente detallado y atractivo.

La herramienta también ofrece una edición de video precisa, permitiendo modificaciones específicas mediante indicaciones de texto y video. Esto incluye cambios localizados y ajustes globales, todo mientras preserva la integridad del contenido original, lo que simplifica el proceso de edición.

En cuanto a la generación de audio, Movie Gen produce sonido de alta calidad que abarca efectos ambientales, de sonido y música de fondo. El modelo de 13B parámetros sincroniza el audio con el video y cuenta con una técnica única para generar audio coherente para clips de cualquier duración. Sin embargo, el audio creados por Movie Gen puede durar hasta 45 segundos.

Meta compartió datos que muestran pruebas a ciegas que indican que el modelo funciona favorablemente en comparación con las ofertas de otras empresas relevantes en el sector, incluidas Runway, OpenAI, ElevenLabs y Kling.

A pesar de su potencial, Meta reconoce las limitaciones actuales y busca perfeccionar la herramienta mediante la colaboración con creadores. La empresa también indicó que no tiene planes inmediatos de lanzar Movie Gen para uso abierto, prefiriendo trabajar directamente con la comunidad de entretenimiento y planeando integrar la tecnología en sus productos para el próximo año.

Hollywood y la inteligencia artificial

El anuncio de Meta llega en un momento crucial para Hollywood, que explora cómo aprovechar la inteligencia artificial generativa en la industria cinematográfica. Recientemente, el festival de cine de inteligencia artificial organizado por Runway AI mostró el potencial de esta tecnología para permitir la producción de películas con un presupuesto significativamente menor y accesible para cualquier persona con una computadora y el software adecuado.

Sin embargo, la integración de la IA en la producción cinematográfica también plantea preocupaciones, ya que podría reemplazar el trabajo de numerosos profesionales, lo que ha generado inquietud en la industria. Esto llevó a actores y guionistas a una huelga de varios meses el verano pasado, demandando protecciones contra el uso de la IA generativa, entre otras cuestiones.

Las preocupaciones sobre el uso de deepfakes en contextos electorales en varios países también han llevado a los legisladores a cuestionar la ética de esta tecnología. A pesar de estos desafíos, la adopción de herramientas de IA sigue en aumento en diferentes áreas de producción, desde el guion hasta los efectos visuales.

Por otro lado, empresas de IA como OpenAI han mantenido reuniones con ejecutivos y agentes de Hollywood para explorar asociaciones relacionadas con su modelo Sora, aunque aún no hay acuerdos concretos. Además, Lions Gate Entertainment anunció que permitirá a la startup Runway acceder a su biblioteca de cine y televisión para entrenar un modelo de IA, con el objetivo de que el estudio y sus realizadores amplíen sus capacidades creativas.