Wonder Dynamics hat Wonder Animation veröffentlicht, eine neue Funktion innerhalb von Wonder Studio, ihrer KI-gestützten Online-Plattform, die dafür entwickelt wurde, 3D-Charaktere in Videosequenzen einzufügen. Dieses Tool, das derzeit in der Beta-Version ist, verwandelt Live-Action-Videos in animierte 3D-Szenen mit computer-generierten (CG) Charakteren, die mit der Umgebung interagieren.
Transformation von realem Video in animierte 3D-Szene
Die neue Funktion von Wonder Animation zielt darauf ab, Künstlern die Produktion vollständig animierter Filme näherzubringen, indem sie Live-Action-Videosequenzen in kontinuierliche 3D-Szenen umwandelt. Dieser Prozess erfolgt durch eine Rekonstruktion der Szene in einem 3D-Raum, die der Position und Bewegung jeder Kamera in Bezug auf die Charaktere und die Umgebung folgt.
Hervorstechende Merkmale von Wonder Animation
- Dynamische 3D-Rekonstruktion: Wonder Animation rekonstruiert Szenen, die verschiedene Arten von Einstellungen enthalten, wie Weitwinkel-, Mittel- und Nahaufnahmen.
- Fortschrittliche Bewegungsprognose: Es verwendet fortschrittliche Algorithmen, um die Bewegung der Charaktere zu rekonstruieren, sogar wenn sie teilweise verdeckt oder außerhalb des Bildes sind.
- Export in 3D-Anwendungen: Die generierten Daten können in Tools wie Blender, Maya, Unreal Engine, 3ds Max, Houdini oder Unity exportiert werden.
Im Gegensatz zu anderen generativen KI-Ansätzen versucht Wonder Animation nicht, bestehende Workflows zu ersetzen, sondern passt sich ihnen an und bietet vollständig editierbare Ergebnisse. Künstler können die Animation, die Charaktere, die Umgebung und die Beleuchtung anpassen und alles in ihre bevorzugten 3D-Workflows oder Spiele-Engines integrieren.
Ein flexibler und anpassbarer Ansatz
Wonder Animation distanziert sich vom falschen Konzept der KI als Ein-Klick-Lösung. Nikola Todorovic, Mitbegründer von Wonder Dynamics, betont, dass das Ziel darin besteht, Künstlern die Macht zu geben, ihre Vision zu formen, anstatt sich vollständig auf automatisierte Ergebnisse zu verlassen. Diese Philosophie stellt sicher, dass die Plattform eine große Flexibilität bei der Erstellung von Animationen und visuellen Effekten bietet.
Aktuelle Einschränkungen und mögliche Verbesserungen
Obwohl Wonder Animation ein mächtiges Tool für die Erstellung von 3D-Animationen ist, wandelt es derzeit den Videohintergrund nicht in die entsprechende 3D-Geometrie um. Die Nutzer müssen die 3D-Umgebung noch separat erstellen. Autodesk hat angekündigt, dass sie an einer möglichen Aktualisierung arbeiten, um die Fähigkeiten dieser Funktion zu erweitern.
"Wonder Animation verwandelt Videos nicht nur in 3D-Szenen, sondern gibt den Künstlern totale Kontrolle über jeden Aspekt des kreativen Prozesses."