Wonder Dynamics a lancé Wonder Animation, une nouvelle fonction au sein de Wonder Studio, sa plateforme en ligne propulsée par IA, conçue pour insérer des personnages 3D dans des séquences de vidéo. Cet outil, actuellement en version bêta, convertit des vidéos en prises de vue réelles en scènes animées en 3D avec des personnages générés par ordinateur (CG) qui interagissent avec l'environnement.
Transformation de vidéo réelle en scène 3D animée
La nouvelle fonction de Wonder Animation vise à rapprocher les artistes de la production de films entièrement animés, en permettant de transformer des séquences de vidéo en prises de vue réelles en scènes 3D continues. Ce processus s'effectue par une reconstruction de la scène dans un espace 3D qui suit la position et le mouvement de chaque caméra par rapport aux personnages et à l'environnement.
Caractéristiques principales de Wonder Animation
- Reconstruction 3D dynamique : Wonder Animation reconstruit des scènes contenant différents types de plans, comme des plans généraux, moyens et gros plans.
- Prédiction de mouvement avancée : Utilise des algorithmes avancés pour reconstruire le mouvement des personnages, même lorsqu'ils sont partiellement occultés ou hors champ.
- Exportation vers des applications 3D : Les données générées peuvent être exportées vers des outils comme Blender, Maya, Unreal Engine, 3ds Max, Houdini ou Unity.
Contrairement à d'autres approches d'intelligence artificielle générative, Wonder Animation ne cherche pas à remplacer les flux de travail existants, mais s'y adapte, en offrant des résultats totalement modifiables. Les artistes peuvent ajuster l'animation, les personnages, l'environnement et l'éclairage, en intégrant le tout dans leurs flux de travail 3D ou moteurs de jeu préférés.
Une approche flexible et personnalisable
Wonder Animation s'éloigne de la conception erronée de l'IA comme une solution en un seul clic. Nikola Todorovic, cofondateur de Wonder Dynamics, souligne que l'objectif est d'autonomiser les artistes pour qu'ils donnent forme à leur vision, plutôt que de dépendre entièrement de résultats automatisés. Cette philosophie assure que la plateforme offre une grande flexibilité dans la création d'animations et d'effets visuels.
Limitations actuelles et améliorations possibles
Bien que Wonder Animation soit un outil puissant pour la création d'animations en 3D, il ne convertit actuellement pas l'arrière-plan de la vidéo en la géométrie 3D correspondante. Les utilisateurs doivent encore créer l'environnement 3D séparément. Autodesk a indiqué qu'ils travaillent sur une mise à jour possible pour étendre les capacités de cette fonction.
"Wonder Animation ne se contente pas de convertir des vidéos en scènes 3D, mais offre aux artistes un contrôle total sur chaque aspect du processus créatif."