Sección

Tecnología

Conoce Lumiere, la nueva IA de generación de video de Google

Aunque aún no está disponible al público en general, promete grandes características.

Luz Noticias
29/01/24

Conoce Lumiere, la nueva IA de generación de video de Google

FOTO: Lumiere.

Google ha lanzado recientemente un nuevo modelo de inteligencia artificial que promete revolucionar el campo de la generación de vídeo. Se trata de Lumiere, una IA que puede crear vídeos a partir de prompts de texto con una calidad y fluidez sin precedentes.

Lumiere se inspira en los hermanos Lumière, los pioneros del cine, y busca acercar el arte de la creación audiovisual a cualquier persona.

Imagen Placeholder

Lumiere se diferencia de otros modelos de generación de vídeo por su arquitectura de «espacio-tiempo», que le permite generar clips completos en un solo paso, evitando así la inconsistencia temporal que se observaba en modelos anteriores, en los que la imagen podía cambiar drásticamente durante el vídeo.

Esto hace que los vídeos generados por Lumiere sean más coherentes y realistas, aunque aún no alcancen el nivel de fotorrealismo que se logra con algunas IAs de generación de imagen estática.

Características

  • Texto a vídeo: Genera un video a partir de instrucciones de texto.
  • Imagen a vídeo: Convierte imágenes fijas en videos.
  • Generación estilizada: Utilizando una imagen de referencia, Lumiere puede generar vídeos basados en el estilo que contengan.
  • Video estilizado:  Utilizando un video de referencia, Lumiere puede generar vídeos basados en el estilo que contengan.

Imagen Placeholder

  • Cinemagraphs: Lumiere puede animar únicamente partes específicas de imágenes estáticas.
  • Edición de vídeo: Lumiere puede editar cualquier parte específica de un video al aplicar un prompt a un área seleccionada.

Para entrenar a Lumiere, Google ha utilizado una enorme base de datos de 30 millones de vídeos, lo que le ha permitido aprender a generar vídeos a partir de texto, pero también a realizar otras tareas relacionadas que abren todo un abanico de posibilidades creativas.

Imagen Placeholder

Por ejemplo, Lumiere puede modificar partes específicas de un vídeo con una simple máscara y un prompt de texto, lo que facilita el proceso de edición a los usuarios con pocos conocimientos.

Te puede interesar:

×