Eine NPU (Neural Processing Unit) ist ein spezialisierter Rechenkern für Aufgaben der künstlichen Intelligenz. Sie sitzt neben Hauptprozessor (CPU) und Grafikchip im selben Chipsatz und übernimmt genau die Berechnungen, die neuronale Netze brauchen.
Sprache: Diktieren, Live-Untertitel, Übersetzung von Gesprächen in Echtzeit und die Zusammenfassung von Anrufen.
Text: Zusammenfassen von Mails und Webseiten, Umformulieren von Nachrichten, intelligente Suche in eigenen Inhalten.
System: Gesichtsentsperrung, Akkuverwaltung, Rauschfilter bei Telefonaten.
Warum ein eigener Chip?
KI-Modelle bestehen im Kern aus sehr vielen, aber sehr einfachen Rechenoperationen – hauptsächlich Matrixmultiplikationen mit geringer Genauigkeit. Eine CPU kann das, ist dabei aber langsam und stromhungrig. Eine NPU ist genau für dieses eine Muster gebaut und erledigt es um ein Vielfaches schneller bei einem Bruchteil des Energiebedarfs. Ihre Leistung geben Hersteller in TOPS an (Tera Operations Per Second); aktuelle Smartphone-NPUs liegen bei etwa 30 bis 80 TOPS.Was die NPU im Alltag macht
Fotografie: Szenenerkennung, Rauschunterdrückung, Nachtmodus, Freistellen des Hintergrunds im Porträtmodus und das Wegretuschieren störender Objekte laufen über die NPU.Sprache: Diktieren, Live-Untertitel, Übersetzung von Gesprächen in Echtzeit und die Zusammenfassung von Anrufen.
Text: Zusammenfassen von Mails und Webseiten, Umformulieren von Nachrichten, intelligente Suche in eigenen Inhalten.
System: Gesichtsentsperrung, Akkuverwaltung, Rauschfilter bei Telefonaten.
