Граница между реальным и синтетическим стала размытой благодаря генеративному искусственному интеллекту. Однако дипфейки и продвинутые рендеры часто имеют недостатки иммерсивной реальности: заметные несоответствия в физике света, геометрии или временной согласованности. В этой статье анализируется, как методы 3D-моделирования и компьютерного зрения позволяют проверять цифровой контент для выявления этих несоответствий и отличия рендера от реальной записи.
Технический анализ: Освещение, тени и геометрия лица 🔍
Проверка дипфейков опирается на принципы физического рендеринга. Первый метод — анализ окружающего освещения: генераторы ИИ часто ошибаются при воспроизведении направления основного света или при расчете собственных теней (теней, которые объект отбрасывает на себя). Например, дипфейк лица может показывать зеркальное отражение в глазу, не совпадающее с доминирующим источником света в сцене. Кроме того, ключевое значение имеет геометрия лица; инструменты компьютерного зрения могут реконструировать 3D-модель лица и сравнить симметрию и пропорции со стандартными биометрическими параметрами. Искажение кривизны переносицы или неестественная асимметрия в положении ушей обычно выдают манипуляцию.
Практические примеры: Обнаружение нереального в вирусном контенте 🕵️
На практике эти методы позволили разоблачить вирусные дипфейки. Известный случай — видео с жестикулирующим политиком; анализ окклюзии челюсти показал, что тень от подбородка не смещалась должным образом при движении головы — типичный недостаток генераторов видео на основе ИИ. Другой пример касался гиперреалистичного рендера продукта: преломление света в стекле объекта было физически невозможным для смоделированной кривизны. Эти проверки демонстрируют, что, хотя ИИ развивается, законы физики остаются лучшим детектором недостатков иммерсивной реальности.
Как можно применить 3D-моделирование для обнаружения геометрических и световых несоответствий в дипфейках, незаметных для человеческого глаза?
(P.S. Обнаружение дипфейков похоже на игру в Где Уолли?, но с подозрительными пикселями.)