Así funciona Lumiere, la IA de Google que crea videos hiperrealistas mediante texto y fotos

Google presentó oficialmente “Lumiere”, una nueva inteligencia artificial especializada en crear videos hiperrealistas mediante instrucciones de texto, imágenes o simples garabatos. En concreto, la IA cuenta con 6 funciones principales que prometen dar bastante contenido al momento de su lanzamiento: Texto a video, imagen a video, generación estilizada, estilización de video, cinemágrafos e “inpainting”. Como …

Google presentó oficialmente “Lumiere”, una nueva inteligencia artificial especializada en crear videos hiperrealistas mediante instrucciones de texto, imágenes o simples garabatos.

En concreto, la IA cuenta con 6 funciones principales que prometen dar bastante contenido al momento de su lanzamiento: Texto a video, imagen a video, generación estilizada, estilización de video, cinemágrafos e “inpainting”.

Como se puede ver, cada una de las seis características cuenta con funciones totalmente diferentes, según lo que deseemos hacer. A continuación, las resumimos rápidamente:

  • Texto a video: como su nombre indica, permite que los usuarios ingresemos instrucciones específicas de texto como “una bandera argentina flameando en las playas de santa teresita”, para que la IA pueda crearlos.
  • Imagen a video: transforma imágenes estáticas en videos dinámicos, animando elementos dentro de la imagen o generando una secuencia visual corta.
  • Generación estilizada: genera videos (o pequeñas secuencias) muy escuetas, para darle dinamismo a logos o dibujos.
  • Estilización de video: aplica estilos visuales a videos existentes. Por ejemplo, transforma un video normal, en algo similar a un stop-motion de legos.
  • Cinemágrafos: permite darle dinamismo a porciones específicas de una imagen.
  • Inpainting: Rellena áreas faltantes o eliminadas en un video de manera realista, reconstruyendo visualmente el contenido que falta al interpretar el contexto.
Esta nota habla de: