Sony интегрирует ядра ИИ в свои процессоры изображений для сенсоров камер
Эволюция процессоров обработки сигнала изображения (ISP) Sony делает скачок вперед благодаря включению специализированных схем искусственного интеллекта. Эти специализированные ядра расположены внутри того же сенсора, который компания поставляет производителям телефонов, обрабатывая данные до того, как они попадут на основной чип устройства. 🤖
Искусственный мозг внутри сенсора
Ключевая функция этого оборудования ИИ — выполнение нейронных сетей локально. Делая это, оно освобождает ЦПУ и ГПУ смартфона от ресурсоемких задач, позволяя сложным алгоритмам выполняться быстрее и потреблять меньше энергии. Весь процесс происходит за миллисекунды во время захвата.
Преимущества обработки в сенсоре:- Снижение задержки: Сырые данные не покидают модуль камеры, что ускоряет весь рабочий процесс.
- Экономия энергии: Минимизация перемещения больших объемов данных резко снижает потребление батареи.
- Улучшение общей производительности: Центральный процессор может уделять свои ресурсы другим приложениям параллельно.
Следующее идеальное фото в темноте может быть заслугой маленького искусственного мозга внутри твоей камеры, а не только твоего мастерства.
Задачи, которые теперь выполняет встроенный ИИ
Этот выделенный движок позволяет выполнять продвинутые функции обработки изображений, которые ранее были очень затратными для системы. Он работает в реальном времени, преобразовывая захват фото и видео.
Ключевые функции, активированные:- Предиктивная фокусировка: Предугадывает траекторию движущегося объекта, чтобы сохранить его четкость.
- Семантическая сегментация сцены: Опознает и разделяет элементы, такие как небо, кожа или передний план, для применения точных и специфических корректировок.
- Интеллектуальное снижение шума: Удаляет зернистость в условиях слабого освещения, сохраняя тонкие детали, избегая размытости от традиционных фильтров.
Влияние на мобильную фотографию
Интеграция этой вычислительной мощности непосредственно в сенсор — это решающее архитектурное преимущество. Она позволяет смартфонам захватывать видео в высоком разрешении и фото в условиях слабого освещения с превосходным качеством и минимальной задержкой. Эта инновация не только улучшает то, что пользователь видит мгновенно, но и закладывает основу для еще большей автономности и мощности камер телефонов. 📸