
Sony 索尼将其图像处理器中集成 AI 核心,用于相机传感器
索尼的图像信号处理器 (ISP) 的演进取得了飞跃,融入了专用的 AI 电路。这些专用核心位于公司提供给手机制造商的同一传感器中,在数据到达设备主芯片之前进行处理。🤖
传感器内的 AI 大脑
这个AI 硬件 的关键功能是在本地执行神经网络。这样做可以释放智能手机的CPU 和GPU,免于执行密集型任务,从而使复杂算法运行更快并消耗更少能量。整个过程在捕获期间以毫秒级速度完成。
在传感器中处理的优点:- 减少延迟:原始数据不会离开相机模块,从而加速整个工作流程。
- 节省能源:最小化大数据的移动大幅减少电池消耗。
- 提升整体性能:中央处理单元可以将资源并行分配给其他应用。
下一次在黑暗中拍出完美照片,可能要归功于你相机内的一个小 AI 大脑,而不仅仅是你的手稳。
现在由集成 AI 执行的任务
这个专用引擎允许执行之前对系统来说非常昂贵的图像处理 高级功能。它实时运行,转变照片和视频捕获。
启用关键功能:- 预测对焦:预测移动主体的轨迹以保持其清晰。
- 语义场景分割:识别并分离天空、皮肤或前景等元素,以应用特定精确调整。
- 智能降噪:在低光条件下消除颗粒感,同时保留精细细节,避免传统滤镜的模糊效果。
对移动摄影的影响
将这种计算 能力直接集成到传感器中是一种决定性的架构优势。它使智能手机能够在高分辨率视频捕获和低光环境照片中实现更高的质量和最小的延迟。这一创新不仅即时提升用户感知,还为手机相机更自主、更强大的未来奠定基础。📸