Lumiere, la IA de Google, puede crear un video de 5 segundos a partir de una imagen o una frase
2 minutos de lectura'

Google ha presentado una nueva herramienta de inteligencia artificial (IA) generativa que crea un video a partir de una descripción en texto o una imagen, e introduce capacidades de edición y de trabajo sobre partes determinadas de la imagen.
Lumiere es un nuevo modelo de difusión que genera video, que Google ha diseñado con capacidad para crear resultados realistas y con movimiento coherente y de editarlo para conseguir estilos determinados.
Lo que caracteriza a este modelo es que genera en un solo paso la duración temporal del video, algo que logran con una arquitectura que han denominado ‘Space-Time U-Net’ (STUNet), que reduce la señal temporal y espacial y realiza la mayor parte del trabajo computacional en una representación compacta. Con este enfoque, se genera un video de 5 segundos.
Los videos se pueden crear a partir de una descripción en texto e incluso editar para conseguir un estilo determinado. Pero también a partir de una imagen con una indicación en texto que la acompañe, como informa Google en la página de GitHub dedicada a este proyecto.
Las capacidades de Lumiere incluyen la animación de una parte determina de una imagen y la reconstrucción de una parte que falte en un video, para que se vea completo.

1Un estudio que usa abogados de IA ganó un caso judicial en el Reino Unido
2OpenAI prepara el lanzamiento de Bidi 1 en ChatGPT, un nuevo modelo de voz capaz de escuchar y hablar a la vez
3Probamos el Razr Fold, el plegable con el que Motorola sale a competir con lo mejor de Samsung
4El nuevo modo de seguridad de WhatsApp antes de hablar con un desconocido




