¿Te imaginas poder crear un video con solo escribir unas palabras? ¿O modificar un video existente con solo cambiar el texto? Esto es lo que promete Lumiere, un modelo de inteligencia artificial generativa desarrollado por Google Research, que puede generar videos realistas a partir de instrucciones de texto o imágenes.

¿Qué es Lumiere y cómo funciona?

Lumiere es un proyecto de código abierto de Google Research, que utiliza una arquitectura llamada Space-Time U-Net, que genera la duración temporal completa del video de una vez, a través de un solo paso en el modelo. Esto resulta en un video con movimiento fluido y realista, que se adapta al texto o la imagen de entrada.

Lumiere puede crear videos a partir de diferentes tipos de entradas, como:

• Texto: el usuario puede escribir una descripción de lo que quiere ver en el video, y Lumiere lo generará. Por ejemplo, el usuario puede escribir “un gato persiguiendo un ratón” y Lumiere creará un video con esa escena.
• Imagen: el usuario puede proporcionar una imagen como entrada, y Lumiere generará un video que continúe la imagen. Por ejemplo, el usuario puede proporcionar una imagen de una persona sonriendo, y Lumiere creará un video con la persona riendo o hablando.
• Video: el usuario puede editar o modificar un video existente, cambiando el texto o la imagen de entrada. Por ejemplo, el usuario puede cambiar el atuendo, el estilo o el movimiento de una persona en un video, o añadir o eliminar elementos del fondo.

¿Qué aplicaciones tiene Lumiere?

Lumiere es un modelo de inteligencia artificial generativa que puede tener múltiples aplicaciones en diferentes campos, como:

• Entretenimiento: Lumiere puede ser una herramienta para crear contenido audiovisual de forma rápida y sencilla, sin necesidad de equipos o actores profesionales. Por ejemplo, se podría crear un video musical, un cortometraje o un videojuego con solo escribir el guion o el concepto.
• Educación: Lumiere puede ser una herramienta para facilitar el aprendizaje y la enseñanza, generando videos que ilustren conceptos o fenómenos. Por ejemplo, se podría crear un video que explique el ciclo del agua, el sistema solar o la historia de un país.
• Comunicación: Lumiere puede ser una herramienta para mejorar la comunicación y la expresión, generando videos que transmitan emociones o mensajes. Por ejemplo, se podría crear un video que felicite a un amigo por su cumpleaños, que muestre un producto o servicio, o que haga una broma.