Google sigue innovando y esta vez presentó una nueva herramienta de inteligencia artificial (IA) generativa que crea un vídeo a partir de una descripción de texto o una imagen.
Lo que diferencia a Lumiere de sus competidores es su arquitectura única: genera el video en un solo intento.
Por otro lado, existen modelos que siguen un principio diferente: crean múltiples fotogramas clave y luego se van entrelazando, lo que dificulta la coherencia del video generado.
Asimismo, Google reconoce la amenaza potencial de proyectos como este, por lo tanto, busca que Lumiere logre identificar contenido inapropiado o dañino para evitar perjudicar a los usuarios.
¿Qué se sabe de Lumiere?
Lumiere es un modelo text-to-video e image-to-video diseñado para dar vida a palabras e imágenes estáticas, logrando secuencias de videos realistas.
Asimismo, Lumiere fue entrenada por Google con un conjunto de datos de 30 millones de videos y descripciones de texto.
Además, los clips tienen 80 fotogramas a 16 fps, con una resolución base de 128 x 128 píxeles.
¿Cuáles son las características de Lumiere?
- Versátil: Permite a los usuarios generar contenido visual creativo en respuesta a instrucciones de texto en lenguaje natural.
- Duración: Lumiere puede crear clips de video de hasta cinco segundos de duración, ofreciendo un amplio abanico de posibilidades a los creadores de contenido.
- Diseño rápido: Permite generar videos en un estilo específico utilizando solo una imagen de referencia, ajustando finamente los pesos del modelo de texto a imagen.
Cabe resaltar que, Lumiere representa un avance significativo en la generación de video impulsada por IA. A la vez destaca sus capacidad para crear videos coherentes en una sola pasada y su versatilidad creativa.
Sin embargo, es esencial considerar sus limitaciones y abordar las cuestiones éticas con su uso en el futuro.