1
¡Increíble! Así es Lumiere, la herramienta de Google que crea videos a partir de una frase o una imagen cualquiera
Lumiere, la IA de Google, puede crear un video de 5 segundos a partir de una imagen o una frase
2 minutos de lectura'
Google ha presentado una nueva herramienta de inteligencia artificial (IA) generativa que crea un video a partir de una descripción en texto o una imagen, e introduce capacidades de edición y de trabajo sobre partes determinadas de la imagen.
Lumiere es un nuevo modelo de difusión que genera video, que Google ha diseñado con capacidad para crear resultados realistas y con movimiento coherente y de editarlo para conseguir estilos determinados.
Lo que caracteriza a este modelo es que genera en un solo paso la duración temporal del video, algo que logran con una arquitectura que han denominado ‘Space-Time U-Net’ (STUNet), que reduce la señal temporal y espacial y realiza la mayor parte del trabajo computacional en una representación compacta. Con este enfoque, se genera un video de 5 segundos.
Los videos se pueden crear a partir de una descripción en texto e incluso editar para conseguir un estilo determinado. Pero también a partir de una imagen con una indicación en texto que la acompañe, como informa Google en la página de GitHub dedicada a este proyecto.
Las capacidades de Lumiere incluyen la animación de una parte determina de una imagen y la reconstrucción de una parte que falte en un video, para que se vea completo.
Más leídas de Tecnología
2WhatsApp prepara una función clave: cómo será la personalización de las reacciones con emojis
3Lucas, hacker: “Se siente una gran satisfacción cuando lográs hacer algo que profesionales capacitados dedicaron mucho tiempo a impedir que hagas”
4Lo que la exitosa salida a bolsa de la mayor empresa de robots humanoides del mundo revela sobre el liderazgo tecnológico de China