Así funciona Lumiere, la IA de Google que crea videos hiperrealistas mediante texto y fotos

Google presentó oficialmente “Lumiere”, una nueva inteligencia artificial especializada en crear videos hiperrealistas mediante instrucciones de texto, imágenes o simples garabatos. En concreto, la IA cuenta con 6 funciones principales que prometen dar bastante contenido al momento de su lanzamiento: Texto a video, imagen a video, generación estilizada, estilización de video, cinemágrafos e “inpainting”. Como …

Google presentó oficialmente “Lumiere”, una nueva inteligencia artificial especializada en crear videos hiperrealistas mediante instrucciones de texto, imágenes o simples garabatos.

En concreto, la IA cuenta con 6 funciones principales que prometen dar bastante contenido al momento de su lanzamiento: Texto a video, imagen a video, generación estilizada, estilización de video, cinemágrafos e “inpainting”.

Como se puede ver, cada una de las seis características cuenta con funciones totalmente diferentes, según lo que deseemos hacer. A continuación, las resumimos rápidamente:

Texto a video: como su nombre indica, permite que los usuarios ingresemos instrucciones específicas de texto como “una bandera argentina flameando en las playas de santa teresita”, para que la IA pueda crearlos. Imagen a video: transforma imágenes estáticas en videos dinámicos, animando elementos dentro de la imagen o generando una secuencia visual corta. Generación estilizada: genera videos (o pequeñas secuencias) muy escuetas, para darle dinamismo a logos o dibujos. Estilización de video: aplica estilos visuales a videos existentes. Por ejemplo, transforma un video normal, en algo similar a un stop-motion de legos. Cinemágrafos: permite darle dinamismo a porciones específicas de una imagen. Inpainting: Rellena áreas faltantes o eliminadas en un video de manera realista, reconstruyendo visualmente el contenido que falta al interpretar el contexto.
Esta nota habla de: