La nueva era de la edición de vídeo con IA llega con Lumiere de Google

[Noticias]

La nueva era de la edición de vídeo con IA llega con Lumiere de Google

Google ha dado un paso adelante en la inteligencia artificial con el lanzamiento de Lumiere, un modelo generativo de vídeo que se distingue por su capacidad para crear y editar vídeos a partir de texto y otros estímulos visuales. Este modelo, inspirado en los hermanos Lumière, pioneros del cine, es un avance significativo en comparación con los modelos previos de generación de vídeo, tanto de Google como de Meta. Lumiere se ha entrenado con una base de datos de 30 millones de vídeos, lo que le permite no solo generar vídeo a partir de texto, sino también convertir imágenes estáticas en vídeos, crear vídeos con estilos basados en una imagen de referencia, animar partes específicas de imágenes estáticas y editar partes específicas de un vídeo. Esta versatilidad abre un abanico de posibilidades en campos creativos, especialmente útil para añadir movimiento a imágenes creadas por otros modelos de IA como MidJourney o DALL-E. La principal innovación de Lumiere reside en su arquitectura de "espacio-tiempo", que permite generar clips completos en un solo paso, evitando la inconsistencia temporal común en modelos anteriores. Esto resulta en vídeos más fluidos y coherentes, aunque aún sin alcanzar el fotorrealismo de algunas IAs de generación de imagen. Además, Lumiere facilita la edición de vídeo a usuarios con pocos conocimientos técnicos mediante una máscara y un prompt de texto. A pesar de su presentación, Google aún no ha ofrecido acceso público a Lumiere, lo que ha generado críticas similares a las de lanzamientos anteriores de modelos de IA de la compañía. Esto impide evaluar completamente el modelo y compararlo con competidores como Runway o Pika.

fuente

[Shinji Mikami]

Pensé que era con Apple, por aquello de la noticia de Xataka y tal... : )

[acadio]

Muy buena pinta, habrá que probarlo en cuanto se pueda. Imaginad cómo será todo esto en 5 o 10 años....