Ein Edge-Sensing-Produkt steht und fällt mit vier Dingen: den Sensoren, die die Welt erfassen, dem Hub, der die Modelle ausführt, dem Speicher, der sie versorgt, und den Schnittstellen, die den Stack zusammenhalten. Wählt man sie nach Spitzenwerten aus, funktioniert das Design auf dem Labortisch und scheitert dann am Akku. Ein begleitender Artikel, On-Device Inference Is Remaking the Sensor Stack, zeigt einen besseren Ansatz: Jede Entscheidung wird an die günstigste Stufe delegiert, die sie treffen kann. Dieser Artikel übersetzt diese Regel in konkrete Spezifikationen, Bauteil für Bauteil.
Sehen wir uns die Spezifikationen an, mit denen sich jedes Bauteil festlegen lässt, welche Edge-AI-Funktion den Aufpreis wert ist und welche Schnittstellen typischerweise verwendet werden.
Komponente | Wichtige Spezifikationen, die festgelegt werden müssen | Edge-AI-Funktion, auf die man achten sollte | Typische Schnittstelle |
|---|---|---|---|
IMU | Achsen, gleichzeitige Full-Scale-Bereiche, Rauschdichte, Gyro-Bias-Stabilität, ODR, FIFO-Tiefe | No-Code-Entscheidungsbäume, programmierbarer In-Sensor-DSP, eingebettete Fusion | I2C / I3C / SPI + Interrupt |
Time-of-Flight | Anzahl der Zonen, Reichweite in Abhängigkeit vom Umgebungslicht, FoV/FoI, Genauigkeit, Modul-Footprint | On-Chip-Histogrammbildung, Distanz- plus Konfidenzausgabe | I2C / I3C (CSI-2 bei bildgebenden Klassen) |
60-GHz-Radar | Sweep-Bandbreite, Tx/Rx-Kanäle, Antenna-in-Package, Mikro-/Makro-Reichweite | Autonome Presence-Engine oder On-Chip-DSP-Klassifikator | SPI + Interrupt |
MEMS-Mikrofon | SNR, AOP, Ausgangstyp, Toleranz beim Array-Matching | Erkennung akustischer Aktivität, NPU im Mikrofon für VAD und Keyword Spotting | PDM / I2S / TDM |
Sensor-Hub / Host | SRAM, Speicherbandbreite, NPU-Operatorunterstützung, Deep-Sleep-Strom, Toolchain | Always-on-Hub-Domäne, Synchronisierung mehrerer Datenströme, Modellsicherheit | Hostet die oben genannten Busse |
Speicher | SRAM (KB), Flash (MB), LPDDR-Kapazität und -Bandbreite (GB/s) | Passt für das INT8-Modell plus Aktivierungen, mit OTA-Reserve | On-Chip / LPDDR / PSRAM |
Schnittstellen | Pin-Anzahl, Datenrate, Geräte pro Bus, Interrupt-Unterstützung | In-Band-Interrupts, dynamische Adressierung (I3C) | I2C / I3C / SPI / PDM / I2S / CSI-2 |
Die Inertial Measurement Unit (IMU) ist das Arbeitspferd von Wearables, Asset-Trackern und der Zustandsüberwachung und zugleich das ausgereifteste Beispiel für In-Sensor-AI. Vier Spezifikationsbereiche bestimmen die richtige IMU:
STMicroelectronics ist führend bei In-Sensor-Intelligenz; TDK InvenSense, Bosch Sensortec und Analog Devices decken die Spanne von Consumer bis Industrie ab. Für Automotive- und langlebige Designs sind AEC-Q100-Status und 10-Jahres-Langlebigkeitsprogramme Spezifikationen, nach denen sich filtern lässt.
Ein Time-of-Flight-Sensor (ToF) liefert eine Distanz statt eines Bildes. Deshalb hat er sich von Smartphones auf Laptops, Roboter und Haushaltsgeräte als Präsenz- und Gestensensor mit integriertem Datenschutz ausgeweitet. Direct ToF (dToF) misst die Rücklaufzeit von Photonen direkt on-chip und liefert dem Host Distanz plus Konfidenzwert, während indirect ToF mehr Leistung aufwendet, dafür aber dichtere Tiefenkarten liefert. Drei Spezifikationen helfen bei der Auswahl:
Millimeterwellenradar erkennt Makro- und Mikrobewegungen (einschließlich Atmung) in Sichtlinie, im Dunkeln und ohne identifizierbare Bilddaten zu erfassen. Einige Bauteile dienen als Frontends, führen Frequency-Modulated Continuous-Wave-(FMCW)-Sweeps aus und speichern on-chip im FIFO, während ein leichtgewichtiges Modell auf dem Host klassifiziert. Andere integrieren einen DSP im Die und führen den Klassifikator im Sensor aus. Ist diese Entscheidung getroffen, sind drei Spezifikationen besonders wichtig:
Das Anbieterfeld teilt sich entlang der Anwendungen. Infineon ist führend im Consumer-Bereich und in der Gebäudeautomation, während TI den Automotive-Bereich bei In-Cabin-Sensing dominiert. Modulanbieter sind eine weitere Option: Man zahlt einen Aufpreis, dafür kommen Antenne und Matching bereits vorkonstruiert.
Beim Mikrofon beginnt die Always-on-Leistungsgeschichte, und das Signal-Rausch-Verhältnis (SNR) ist nur ein Teil des Datenblatts. Darauf sollten Sie zusätzlich achten:
Der Host aggregiert die Sensorströme, versieht sie mit Zeitstempeln und synchronisiert sie, führt aus, was die Sensoren nicht leisten können, und wacht nur auf, wenn die unteren Ebenen dies signalisieren. TOPS-Angaben allein führen in die Irre, deshalb sollten Sie bei der Bauteilauswahl Folgendes tun:
Auch die Host-Ebene selbst deckt inzwischen ein breites Spektrum ab. Im unteren Bereich haben NPU-ausgestattete Mikrocontroller wie ST’s STM32N6 beschleunigte Bild- und Audioverarbeitung in Leistungs- und Preisbudgets von MCUs gebracht. Eine Stufe höher tragen Bauteile auf Basis von Arm’s Ethos-U85 Transformer-Operatoren bis an den Endpunkt. Im oberen Bereich führen Edge-SoCs wie Qualcomm’s Dragonwing Q-8750 multimodale Pipelines und kleine Sprachmodelle aus. Stimmen Sie die Stufe auf das schwergewichtigste Modell ab, das das Produkt ausführen wird, mit Reserve für das Modell, das es im nächsten Jahr ausführen soll.
Der Speicher entscheidet darüber, ob das Design funktioniert – und im Jahr 2026 auch darüber, ob es im Budget ausgeliefert werden kann. On-Chip-SRAM ist die eigentliche Obergrenze für Inferenz in der MCU-Klasse, da Aktivierungen und Arbeitsbuffer hineinpassen müssen; typisch ist ein Rahmen von 256 KB bis 512 KB. Flash speichert das quantisierte Modell, in der Regel etwa ein Viertel so groß wie sein ursprüngliches 32-Bit-Pendant, sobald es auf 8 Bit reduziert wurde, plus Reserve für Over-the-Air-Updates und A/B-Slots. Sobald Vision-Pipelines oder kleine Sprachmodelle hinzukommen, folgt externer LPDDR-Speicher, und die Bandbreite in GB/s bestimmt ebenso wie die Kapazität, was der Beschleuniger tatsächlich liefert.
Aber die Speicherspezifikation festzulegen ist der einfache Teil. Die DRAM-Kapazität hat sich in Richtung KI-Rechenzentren verschoben, was LPDDR-Preise steigen lässt und Lieferzeiten verlängert. Prüfen Sie Verfügbarkeit, Lifecycle-Status und Second Sources, bevor die BOM eingefroren wird. In diesem Zyklus ist diese Prüfung Teil der Spezifikation.
Der Bus bestimmt Pin-Anzahl, Leistungsaufnahme und wie viele Sensoren sich eine Leitung teilen. Eine Schnittstelle dient dazu, den Datenverkehr zu formen, bevor er den teuren Teil des Systems erreicht – und die Standardvorgaben dafür haben sich geändert:
Die Grundsätze aus On-Device Inference Is Remaking the Sensor Stack gelten für jede Zeile der BOM: Treffen Sie jede Entscheidung so weit unten im Stack wie möglich und bevorzugen Sie Bauteile, die Ergebnisse statt Rohdaten übertragen.
Jede obige Spezifikation ist zugleich auch ein Suchbegriff. Full-Scale-Bereich, SNR und On-Chip-Speicher lassen sich Parametric-Filtern auf Octopart zuordnen, und wenn eine Spezifikation neuer ist als der Filtersatz (etwa Zonenzahl oder eine In-Sensor-NPU), ist das Datenblatt von denselben Ergebnissen aus nur einen Klick entfernt. Spezifizieren Sie auf das Sleep-Budget hin und filtern Sie nach den Werten, die es bestimmen – dann ergibt die BOM für Edge-Sensing eine in sich schlüssige Architektur.