Wonder Dynamics выпустил Wonder Animation, новую функцию в составе Wonder Studio, его онлайн-платформы на базе ИИ, предназначенной для вставки персонажей 3D в видеопоследовательности. Этот инструмент, в настоящее время находящийся в бета-версии, преобразует видео живого действия в анимированные 3D-сцены с компьютерно-генерируемыми (CG) персонажами, взаимодействующими с окружающей средой.
Преобразование реального видео в анимированную 3D-сцену
Новая функция Wonder Animation направлена на приближение художников к производству полностью анимированных фильмов, позволяя преобразовывать видеопоследовательности живого действия в непрерывные 3D-сцены. Этот процесс осуществляется путем реконструкции сцены в 3D-пространстве, которая следует за позицией и движением каждой камеры относительно персонажей и окружающей среды.
Основные характеристики Wonder Animation
- Динамическая 3D-реконструкция: Wonder Animation реконструирует сцены, содержащие различные типы планов, такие как общие планы, средние планы и крупные планы.
- Продвинутое прогнозирование движения: Использует продвинутые алгоритмы для реконструкции движения персонажей, даже когда они частично скрыты или вне кадра.
- Экспорт в 3D-приложения: Сгенерированные данные можно экспортировать в инструменты, такие как Blender, Maya, Unreal Engine, 3ds Max, Houdini или Unity.
В отличие от других подходов генеративного искусственного интеллекта, Wonder Animation не пытается заменить существующие рабочие процессы, а адаптируется к ним, предлагая полностью редактируемые результаты. Художники могут корректировать анимацию, персонажей, окружение и освещение, интегрируя все в свои любимые 3D-рабочие процессы или игровые движки.
Гибкий и настраиваемый подход
Wonder Animation отходит от ошибочного представления об ИИ как о решении «одним кликом». Никола Тодорович, сооснователь Wonder Dynamics, подчеркивает, что цель — дать художникам возможность формировать свое видение, а не полностью полагаться на автоматизированные результаты. Эта философия обеспечивает платформе высокую гибкость в создании анимаций и визуальных эффектов.
Текущие ограничения и возможные улучшения
Хотя Wonder Animation является мощным инструментом для создания 3D-анимаций, в настоящее время он не преобразует фон видео в соответствующую 3D-геометрию. Пользователям все еще приходится создавать 3D-окружение отдельно. Autodesk отметил, что они работают над возможным обновлением для расширения возможностей этой функции.
"Wonder Animation не только преобразует видео в 3D-сцены, но и предоставляет художникам полный контроль над каждым аспектом творческого процесса."