Wonder Dynamics 发布了 Wonder Animation，这是其在线平台 Wonder Studio 中的一项新功能，该平台由 AI 驱动，旨在将 3D 角色插入视频序列中。该工具目前处于 beta 版本，将实拍视频转换为带有计算机生成（CG）角色与环境互动的 3D 动画场景。
将真实视频转换为 3D 动画场景
Wonder Animation 的新功能旨在让艺术家更接近全动画电影制作，让他们能够将实拍视频序列转换为连续的 3D 场景。这一过程通过在 3D 空间中重建场景来实现，该场景跟踪每个相机相对于角色和环境的定位和运动。
Wonder Animation 的亮点特性
- 动态 3D 重建：Wonder Animation 重建包含不同类型镜头的场景，如广角镜头、中景和特写镜头。
- 高级运动预测：使用高级算法重建角色的运动，即使角色部分被遮挡或不在画面中。
- 导出到 3D 应用程序：生成的数据可以导出到 Blender、Maya、Unreal Engine、3ds Max、Houdini 或 Unity 等工具。
与其他生成式人工智能方法不同，Wonder Animation 并不试图取代现有工作流程，而是适应它们，提供完全可编辑的结果。艺术家可以调整动画、角色、环境和照明，将一切集成到他们喜欢的 3D 工作流程或游戏引擎中。
灵活且可自定义的方法
Wonder Animation 摒弃了将 AI 视为一键式解决方案的错误观念。Wonder Dynamics 联合创始人 Nikola Todorovic 强调，目标是赋能艺术家塑造他们的愿景，而不是完全依赖自动化结果。这种理念确保平台在创建动画和视觉效果时提供极大的灵活性。
当前限制和可能的改进
虽然 Wonder Animation 是创建 3D 动画的强大工具，但目前它不会将视频背景转换为相应的 3D 几何体。用户仍需单独创建 3D 环境。Autodesk 表示，他们正在开发可能的更新，以扩展此功能的性能。
"Wonder Animation 不仅将视频转换为 3D 场景，还为艺术家提供对创意过程每个方面的完全控制。"