Movie Gen es presentado por Meta como una herramienta destinada a «ayudar a estimular la creatividad» de los «aspirantes a productores de cine» así como de los «creadores que disfutan produciendo videos para su audiencia».
Meta ha revelado el estado actual de sus investigaciones en materia de inteligencia artificial, presentando especialmente Movie Gen. Se trata de un modelo de IA generativa que permitirá crear y editar videos y audio a partir de simples instrucciones de texto.
Movie Gen se destaca por su capacidad para producir contenido personalizado y preciso, facilitando la edición detallada de los videos. Este nuevo modelo de Meta se posiciona frente a competidores como Runway, ya popular, o Sora de OpenAI y Firefly de Adobe, también presentados este año, pero aún inaccesibles.
Movie Gen: ¿de qué se trata?
Es una IA generativa, capaz de producir videos a partir de un texto y/o una imagen, así como sonido y edición avanzada de secuencias.
“Nuestras últimas investigaciones demuestran que es posible crear videos y sonidos personalizados a partir de simples instrucciones textuales, modificar videos existentes y transformar una imagen personal en un video único.”
Con su modelo entrenado en 30 mil millones de parámetros, Movie Gen será capaz de producir secuencias de 16 segundos a una velocidad de 16 fotogramas por segundo, ofreciendo una resolución de 768 píxeles de ancho. Meta promete que su modelo «supera» a los competidores actuales, especialmente porque sobresale en la creación de movimientos realistas, interacciones objeto-sujeto y movimientos de cámara.
¿Cuáles son las capacidades de Movie Gen de Meta?
Movie Gen combina cuatro capacidades principales para satisfacer las necesidades de creación: generación de videos, creación personalizada, edición avanzada y producción de audio sincronizada.
Generación de videos a partir de texto: Movie Gen es capaz de crear videos de 16 segundos a partir de simples descripciones textuales, con una alta calidad de renderizado y movimientos realistas. Puede interpretar elementos complejos como interacciones entre sujetos y objetos, así como dinámicas de cámara.
Creación de videos personalizados: El modelo permite generar videos que representen a una persona específica a partir de su imagen y una instrucción textual.
Edición avanzada de video: Movie Gen se destaca por su capacidad de precisión en la edición de video. Los usuarios podrán agregar, eliminar o modificar elementos específicos en un video existente sin afectar las demás partes del contenido. También podrán aplicar modificaciones globales, como cambios de estilo o de fondo, sin alterar la estructura de la secuencia.
Producción de audio: El modelo soporta la creación de pistas de audio de hasta 45 segundos, incluyendo efectos sonoros, música y ambientes, todo sincronizado con el video. Una técnica de extensión de audio permitirá gestionar videos de diferentes duraciones, asegurando una coherencia óptima en el audio.
Movie Gen: una IA aún en desarrollo, como Sora
Actualmente, Meta no ha hecho accesible Movie Gen al público en general. La herramienta se encuentra en fase de investigación y desarrollo, y está siendo sometida a pruebas internas. La compañía de Mark Zuckerberg planea colaborar con cineastas y creadores para perfeccionar el modelo antes de un lanzamiento más amplio. Estos comentarios permitirán mejorar las funcionalidades de generación y edición de videos para satisfacer mejor las expectativas de los usuarios.
