Lumiere, la IA de Google capaz de generar video realista a partir de texto y que cambiará para siempre el modo en el que editas tus videos Aunque todavía no está abierto al público, Google nos ha dejado echar un vistazo a su nuevo modelo. Es impresionante.

Su nombre es un pequeño homenaje a los hermanos Auguste y Louis Lumière, los inventores franceses que en 1895 patentaron el cinematógrafo y que con la proyección en movimiento de un tren llegando a un andén ferroviario, iniciaron la fascinante historia del cine.

Pero el Lumiere de Google poco tiene que ver con la mágica tira de celuloide que el cinematógrafo utilizaba. Se trata de un modelo de inteligencia artificial generativa de texto a video y de video a texto, capaz de crear película a partir de las instrucciones de un usuario.

Relacionado: YouTube lanza herramienta para generar música con IA para los Shorts

Aunque no es el primer modelo de IA de este tipo, sí es el primero en entregar resultados realistas con movimientos fluidos y en los que empieza a ser difícil distinguir que fueron generados por un gran modelo de lenguaje.

En la página oficial del proyecto se explica que mediante el uso de una arquitectura denominada Space-Time-U-Net, el sistema genera "la duración temporal completa del video de una vez, a través de un solo paso en el modelo". Esto significa que Lumiere no sintetiza individualmente los diversos fotogramas para luego proyectarlos secuencialmente (siguiendo el principio de la animación cuadro por cuadro), sino que procesa la secuencia en su totalidad, resultando en un video con movimiento fluido y realista.

Además, el sistema permite la edición de material ya existente en video de manera ágil y versátil, pues es capaz de animar o modificar solo una parte del contenido. Por ejemplo, Lumiere puede animar una mariposa a partir de una fotografía, dejando el fondo estático.

También puede cambiar el atuendo que una persona lleva en una toma, o ponerle anteojos, un reloj o una corona.

Por si fuera poco, Lumiere es un modelo de código abierto que facilitará la vida a los creadores de contenido y editores de video con sus múltiples posibilidades.

Aunque por el momento no está abierta al público, esta IA de Google promete un revolucionario cambio en el modo en el que trabajamos y procesamos el material en video.