Cet outil permet de transformer une simple image en vidéo complète en 3D

 
Après l’image et la vidéo, Stability.ai propose un nouvel outil pour créer des vidéos en 3D à partir d’une seule image en 2D.

Dans la panoplie des outils d’IA générative, le modèle de Stable Diffusion s’était déjà fait remarquer en proposant de générer localement de la vidéo. Aujourd’hui, Stability.ai risque à nouveau de marquer le coup en annonçant un nouvel outil capable de générer une vidéo en 3D à partir d’une image en 2D.

Un outil impressionnant

Avec cet outil, Stability.ai réalise un véritable tour de force. Stable Virtual Camera (Seva) propose en effet de créer une vidéo 3D à partir d’une seule image en 2D.

En utilisant de l’intelligence artificielle générative, Seva permet ainsi à l’utilisateur d’opter pour plusieurs mouvements de caméras allant d’un 360° à un zoom avant/arrière plus classique ou encore la possibilité de se déplacer en lemniscate (forme d’infini).

Stability.ai, précise que l’outil peut produire des vidéos au format carré (1:1), portrait (9:16), paysage (16:9) ou avec d’autres rapports hauteur/largeur personnalisés sans instructions supplémentaires.

Un outil en phase de recherche

Stability.ai prévient d’emblée : Seva n’est pas exempt d’erreurs. Si l’outil fonctionne à partir d’une seule image, l’entreprise précise qu’il est possible d’en fournir jusqu’à 32, pour obtenir des résultats plus précis. Toutefois, cette précision peut être amoindrie lorsque les images d’entrée représentent « des humains, des animaux ou des textures dynamiques comme l’eau », ce qui peut entraîner la création d’artéfacts dans la vidéo.

Reste que cet outil présente une avancée notable dans la reconstruction de scène en 3D que l’on peut notamment voir dans le cinéma d’animation.

Stable Virtual Camera est mis à disposition sous une licence non commerciale à des fins de recherche. Il est possible de visionner sa documentation détaillée et d’accéder au code de l’application sur GitHub.


Rejoignez-nous de 17 à 19h, un mercredi sur deux, pour l’émission UNLOCK produite par Frandroid et Numerama ! Actus tech, interviews, astuces et analyses… On se retrouve en direct sur Twitch ou en rediffusion sur YouTube !

Les derniers articles