Sony intègre des cœurs d'IA dans ses processeurs d'image pour capteurs de caméra
L'évolution des processeurs de signal d'image (ISP) de Sony fait un bond en incorporant des circuits d'intelligence artificielle dédiés. Ces cœurs spécialisés se trouvent à l'intérieur du même capteur que l'entreprise fournit aux fabricants de téléphones, traitant les données avant qu'elles n'atteignent la puce principale de l'appareil. 🤖
Un cerveau artificiel à l'intérieur du capteur
La fonction clé de ce hardware d'IA est d'exécuter des réseaux neuronaux de manière locale. En le faisant, il libère le CPU et le GPU du smartphone des tâches intensives, permettant aux algorithmes complexes de s'exécuter plus rapidement et en consommant moins d'énergie. Tout le processus se déroule en millisecondes pendant la capture.
Avantages du traitement dans le capteur :- Réduire la latence : Les données brutes ne voyagent pas en dehors du module de caméra, ce qui accélère l'ensemble du flux de travail.
- Économiser de l'énergie : Minimiser le déplacement de grandes quantités de données réduit drastiquement la consommation de batterie.
- Améliorer les performances globales : L'unité centrale de traitement peut consacrer ses ressources à d'autres applications en parallèle.
La prochaine photo parfaite dans l'obscurité pourrait être due à un petit cerveau artificiel à l'intérieur de votre caméra, et non seulement à votre pouls.
Tâches désormais exécutées par l'IA intégrée
Ce moteur dédié permet de réaliser des fonctions avancées de traitement d'image qui étaient auparavant très coûteuses pour le système. Il opère en temps réel, transformant la capture photographique et vidéo.
Fonctionnalités clés activées :- Mise au point prédictive : Anticipe la trajectoire d'un sujet en mouvement pour le maintenir net.
- Segmentation sémantique de la scène : Identifie et sépare des éléments comme le ciel, la peau ou l'avant-plan pour appliquer des ajustements spécifiques et précis.
- Réduction intelligente du bruit : Élimine la granulation dans des conditions de faible luminosité tout en préservant les détails fins, évitant l'effet de flou des filtres traditionnels.
L'impact sur la photographie mobile
Intégrer cette puissance de calcul directement dans le capteur est un avantage architectural décisif. Cela permet aux smartphones de capturer des vidéos en haute résolution et des photos dans des environnements à faible luminosité avec une qualité supérieure et un délai minimal. Cette innovation n'améliore pas seulement ce que l'utilisateur perçoit instantanément, mais pose les bases pour que les caméras des téléphones deviennent encore plus autonomes et puissantes. 📸