Comment faire des vidéos IA avec un vieux GPU ? Stable Diffusion a la solution

Stability AI a lancé mardi Stable Video Diffusion, un outil d’IA qui permet de créer des vidéos à partir d’images fixes. L’outil est disponible pour les utilisateurs privés via l’interface graphique ComfyUI, qui offre la possibilité de construire des flux de travail complexes.

Selon les développeurs, Stable Video Diffusion peut générer des vidéos de 1024 x 576 pixels et de 25 images en environ 3 minutes sur un GPU Nvidia GTX 1080 datant de 7 ans. Les utilisateurs d’AMD peuvent également utiliser l’outil sur un AMD 6800 XT sous Linux. Deux exemples de flux de travail pour Stable Video Diffusion sont disponibles sur le blog de ComfyUI.

La vidéo généré par ComfyUI sur un PC ancien

Stable Video Diffusion est basé sur le modèle Stable Diffusion, qui permet de créer des images réalistes à partir de textes ou de bruits. Le modèle vidéo peut produire 14 ou 25 images à des fréquences d’images réglables entre 3 et 30 images par seconde. Stability AI affirme que son outil surpasse les concurrents commerciaux RunwayML et Pika Labs dans les études de préférence des utilisateurs.

Stability AI prévoit d’améliorer encore son outil et de développer un écosystème de modèles basés sur Stable Video Diffusion. Le modèle final sera disponible gratuitement et une version web avec une fonctionnalité de texte-à-vidéo est également prévue.