Sony integriert KI-Kerne in seine Bildprozessoren für Kamerasensoren
Die Evolution der Bildsignalprozessoren (ISP) von Sony macht einen Sprung, indem sie dedizierte Schaltkreise für Künstliche Intelligenz integriert. Diese spezialisierten Kerne befinden sich innerhalb desselben Sensors, den das Unternehmen an Telefonherstellern liefert, und verarbeiten Daten, bevor sie den Hauptchip des Geräts erreichen. 🤖
Ein künstliches Gehirn im Sensor
Die Schlüsselfunktion dieser KI-Hardware besteht darin, neuronale Netze lokal auszuführen. Dadurch entlastet sie die CPU und die GPU des Smartphones von rechenintensiven Aufgaben, sodass komplexe Algorithmen schneller ablaufen und weniger Energie verbrauchen. Der gesamte Prozess erfolgt in Millisekunden während der Aufnahme.
Vorteile der Verarbeitung im Sensor:- Latenz reduzieren: Die Rohdaten verlassen nicht das Kamera-Modul, was den gesamten Workflow beschleunigt.
- Energie sparen: Das Minimieren der Übertragung großer Datenmengen reduziert den Akkuverbrauch drastisch.
- Gesamtleistung verbessern: Die zentrale Verarbeitungseinheit kann ihre Ressourcen parallel für andere Anwendungen nutzen.
Das nächste perfekte Foto in der Dunkelheit könnte einem kleinen künstlichen Gehirn in deiner Kamera zu verdanken sein, nicht nur deinem Puls.
Aufgaben, die nun die integrierte KI ausführt
Dieser dedizierte Motor ermöglicht fortschrittliche Bildverarbeitungsfunktionen, die zuvor für das System sehr teuer waren. Er arbeitet in Echtzeit und transformiert die Foto- und Videoaufnahme.
Wichtige aktivierte Funktionen:- Vorhersagendes Fokussieren: Antizipiert die Trajektorie eines sich bewegenden Subjekts, um es scharf zu halten.
- Semantische Szenensegmentierung: Identifiziert und trennt Elemente wie Himmel, Haut oder Vordergrund, um spezifische und präzise Anpassungen anzuwenden.
- Intelligente Rauschreduktion: Entfernt Körnung bei schlechten Lichtverhältnissen, während feine Details erhalten bleiben, und vermeidet den Unschärfeeffekt traditioneller Filter.
Der Einfluss auf die Mobilfotografie
Die Integration dieser Rechenleistung direkt in den Sensor ist ein entscheidender architektonischer Vorteil. Sie ermöglicht Smartphones, Videos in hoher Auflösung und Fotos in lichtarmen Umgebungen mit überlegener Qualität und minimaler Verzögerung aufzunehmen. Diese Innovation verbessert nicht nur, was der Nutzer sofort wahrnimmt, sondern legt den Grundstein dafür, dass Telefonkameras noch autonomer und leistungsstärker werden. 📸