Adobe представляет экспериментальный инструмент под названием MotionStream. Его цель — решить две распространённые проблемы в генерации видео с помощью ИИ: отсутствие точного контроля и медленность процесса. Вместо того чтобы полагаться только на текстовые промты, он позволяет пользователям в реальном времени манипулировать объектами и углами камеры, используя интуитивные элементы управления. Такое взаимодействие стремится сделать создание движения более естественным и устранить необходимость ждать полного рендеринга для корректировки деталей.
Интерфейс прямого манипулирования и адаптивная генерация 🎮
Технология основана на пользовательском интерфейсе, который преобразует движения курсора и настройки слайдеров в параметры генерации в реальном времени. Система интерпретирует эти действия как векторы направления и силы, интегрируя изменения в поток кадров без остановки процесса. Это позволяет корректировать траектории, изменять скорость элементов или менять планы на лету. Технический подход отдаёт приоритет низкой задержке, чтобы сохранить иллюзию прямого контроля над генерируемой сценой.
Прощай, промты-романы, чтобы сдвинуть чашку ☕
С этим заканчивается эра написания промтов вроде чашка кофе, которая скользит на 5,3 сантиметра вправо с плавным покачиванием, в то время как камера выполняет панорамирование на 30 градусов с нижнего ракурса. Теперь мы сможем просто подтолкнуть эту самую чашку мышью и посмотреть, что получится. Это значительный прогресс для тех, кто считал, что анимация простого объекта требует навыков театрального драматурга и терпения буддийского монаха.