Google обновил свою модель Gemini с заметной возможностью: генерацией симуляций и интерактивных 3D-моделей прямо в чате. Эта функция позволяет пользователям напрямую манипулировать трехмерными представлениями объектов или концепций. Цель — обогатить интерактивный опыт, облегчая понимание сложной информации через визуальное и динамичное исследование.
Технические основы рендеринга в реальном времени в чате 🤔
Эта возможность, вероятно, основана на генерации кода для стандартных веб-сред, таких как WebGL или аналогичные библиотеки. Gemini может производить фрагмент кода, который при выполнении инициализирует 3D-сцену с элементами управления поворотом, зумом и перемещением. Сложность заключается в переводе текстового описания в coherentные геометрические параметры, материалы и освещение, все в пределах ограничений безопасности браузера.
Прощай, часы моделирования, здравствуй, минуты корректировок 😅
Сообщество 3D может отнестись к этому с некоторой иронией. После лет совершенствования техник топологии и UV-маппинга теперь ассистент генерирует модель парой фраз. Конечно, потом приходится объяснять ему, что столы обычно не имеют пяти ножек и что запрошенный персонаж нуждается во внутреннем скелете для анимации. Это отличный shortcut, но дьявол, как всегда, в деталях практической реализации.