Découvrez Stable Video 4D de Stability AI, une approche nuancée de la génération vidéo IA
Avec son premier modèle d’IA vidéo-vidéo, Stability AI repousse encore plus loin les limites de la génération vidéo AI.
La popularité de la génération d’images IA nous a conduit à la prochaine frontière : la génération vidéo. Presque tous les acteurs majeurs du domaine de l’IA, y compris Google et OpenAI, développent des générateurs de texte en vidéo. Stability AI vient de publier son dernier modèle vidéo AI, mais sa vision est un peu différente des autres.
Mercredi, Stability AI a dévoilé Stable Video 4D, un modèle d'IA capable de transformer une vidéo d'un seul objet en plusieurs nouvelles vidéos de l'objet sous différents angles et perspectives. Cela permet aux utilisateurs de générer des vidéos réalistes sous plusieurs angles à partir d’une seule vidéo, comme indiqué ci-dessous.
Nous sommes heureux d'annoncer la disponibilité de Stable Video 4D, notre tout premier modèle de génération vidéo à vidéo qui permet aux utilisateurs de télécharger une seule vidéo et de recevoir des vidéos dynamiques sous huit nouveaux angles, offrant un nouveau niveau de polyvalence et de créativité. .
Dans… pic.twitter.com/1YbI2W514K
Lors de l'utilisation du modèle, un utilisateur commencerait par télécharger une seule vidéo et définirait les poses de caméra 3D qu'il aimerait voir rendues. Ensuite, en 40 secondes, Stable Video 4D génère cinq images sur huit vues, l'optimisation 4D complète prenant 20 à 25 minutes, selon le billet de blog.
Stability AI considère Stable Video 4D comme un outil capable d'aider les professionnels de divers secteurs dans un avenir proche.
"Notre équipe envisage de futures applications dans le développement de jeux, le montage vidéo et la réalité virtuelle", a déclaré Stability AI. "Les professionnels de ces domaines peuvent bénéficier de manière significative de la capacité de visualiser des objets sous de multiples perspectives, améliorant ainsi le réalisme et l'immersion de leurs produits."
Même si Stability AI a lancé d'autres générateurs vidéo IA, tels que Stable Video Diffusion, qui convertit les images en vidéos, et Stable Video 3D, qui génère des objets 3D à partir d'images uniques, il s'agit du premier générateur vidéo à vidéo de l'entreprise, que le l'entreprise appelle une « étape passionnante ».
Parallèlement au modèle d'IA, la société a également publié un rapport technique présentant le développement du modèle, y compris les méthodologies, les défis, etc.
Stable Video 4D est actuellement disponible sur Hugging Face. Stability AI affirme travailler activement à l’amélioration du modèle.