人工知能がダンスを学ぶとき
モーションキャプチャの革命が、DeepMotionのようなプラットフォームによって到来しました。これらは人工知能のアルゴリズムを使用して、単純な2Dビデオを完全に関節付きの3Dアニメーションに変換します。この技術は、伝統的に高価なモーションキャプチャスーツ、数十台の赤外線カメラを備えた部屋、大きなスタジオしか負担できなかった専門機器を必要とするプロセスを根本的に民主化しています。今では、スマートフォンのカメラとインターネット接続があれば、誰でもプロフェッショナルなアニメーションを生成できます。
プロセスは表面上は驚くほどシンプルですが、裏側では驚異的に複雑です。AIのアルゴリズムは入力ビデオをフレームごとに分析し、人体のキー点を特定し、その3次元的な動きを再構築します。DeepMotionのようなシステムを特に印象的なものにしているのは、2Dソースから3D情報を推測する能力で、人間の動きの文脈的理解を通じて失われた深さの問題を解決することです。
従来のシステムに対する利点
- 完全な排除：モーションキャプチャスーツと物理的なマーカー
- あらゆるカメラとの互換性：スマートフォンからプロフェッショナルカメラまで
- クラウド処理：ローカルの特殊ハードウェア不要
- 自動リターゲティング：異なる3Dスケルトンの比率への対応
魔法のような3D再構築プロセス
DeepMotionにビデオをアップロードすると、AIは各フレームでのポーズ検出から始まる多面的な分析を実行します。次に、数百万の人間の動きの例で訓練されたニューラルネットワークを使用して、各関節の完全な3D軌跡を再構築します。本当の天才的な点は、オクルージョン（体の部位が隠れる瞬間）を解決する方法で、学んだ人間のバイオメカニクスのパターンに基づいて動きを予測します。
最高のモーションキャプチャチームが今やポケットに収まる
結果はFBXやBVHなどの標準フォーマットにエクスポート可能で、主要な3Dアニメーションソフトウェアと互換性があります。これにより、アニメーターは技術的なキャプチャではなく創造性と洗練に集中できます。小規模または独立したスタジオにとって、このアクセシビリティは限られた予算で達成可能なことを根本的に変えます。
さまざまな産業での実用的応用
- インディーゲーム開発：予算を抑えたキャラクターアニメーション
- アニメーション制作：アーティストが後で洗練するアニメーションの基盤
- 教育とトレーニング：スポーツの動き分析やリハビリテーション
- 高速プロトタイピング：機器投資なしのアニメーションコンセプトテスト
これらのシステムの精度は急速に向上し続けています。初期バージョンでは高速動作やゆったりした服に問題がありましたが、現在のバージョンは複雑なダンスからスポーツ動作までスムーズに扱います。複数人を同時に処理する能力は、キャラクター間のインタラクションをキャプチャする可能性を開き、伝統的なモーションキャプチャセットアップでは極めて複雑なものでした。
プロフェッショナルなモーションキャプチャがカメラだらけの部屋を持つスタジオ専用だと思っていた人々は、ポケットに入れた電話だけで十分になる日が来るとは予想していなかったでしょう 🤖