Wonder Dynamicsは、Wonder StudioというAI駆動のオンラインプラットフォーム内に新しい機能Wonder Animationをリリースしました。このツールは、ビデオシーケンスに3Dキャラクターを挿入することを目的としています。現在ベータ版のこのツールは、ライブアクションのビデオを、環境と相互作用するコンピュータ生成（CG）キャラクターを含む3Dアニメーションシーンに変換します。
リアルビデオから3Dアニメーションシーンへの変換
Wonder Animationの新機能は、アーティストが完全にアニメーション化された映画の制作に近づけることを目的としており、ライブアクションのビデオシーケンスを連続した3Dシーンに変換することを可能にします。このプロセスは、キャラクターと環境に対する各カメラの位置と動きを追跡する3D空間でのシーンの再構築によって行われます。
Wonder Animationの主な特徴
- 動的3D再構築: Wonder Animationは、ワイドショット、ミディアムショット、クローズアップなどのさまざまなタイプのショットを含むシーンを再構築します。
- 高度な動き予測: キャラクターが部分的に隠れているかフレーム外にある場合でも、動きを再構築するための高度なアルゴリズムを使用します。
- 3Dアプリケーションへのエクスポート: 生成されたデータをBlender、Maya、Unreal Engine、3ds Max、Houdini、またはUnityなどのツールにエクスポートできます。
他の生成AIアプローチとは異なり、Wonder Animationは既存のワークフローを置き換えようとするのではなく、それらに適応し、完全に編集可能な結果を提供します。アーティストはアニメーション、キャラクター、環境、照明を調整し、お気に入りの3Dワークフローやゲームエンジンにすべてを統合できます。
柔軟でカスタマイズ可能なアプローチ
Wonder Animationは、AIをワンクリックソリューションとする誤った概念から離れています。Wonder Dynamicsの共同創設者であるNikola Todorovicは、目標はアーティストが自分のビジョンを形作る力を与えることであり、完全に自動化された結果に依存することではないと強調しています。この哲学は、プラットフォームがアニメーションと視覚効果の作成において高い柔軟性を提供することを保証します。
現在の制限と可能な改善
Wonder Animationは3Dアニメーション作成のための強力なツールですが、現在ビデオの背景を対応する3Dジオメトリに変換していません。ユーザーは環境の3Dを別途作成する必要があります。Autodeskは、この機能の機能を拡張するための可能なアップデートに取り組んでいると述べています。
"Wonder Animationはビデオを単に3Dシーンに変換するだけでなく、アーティストにクリエイティブプロセスのすべての側面に対する完全な制御を提供します。"