Multimodale Sensorfusion für fahrzeuginterne Erkennungssysteme

Die Murata Manufacturing Co., Ltd. stellt in Zusammenarbeit mit Smart Eye eine integrierte Hardware- und Softwarearchitektur vor, die hochfrequente Radardaten mit KI-basierter optischer Erkennung fusioniert. Dieser multimodale Ansatz wurde für Automobilhersteller (OEMs) entwickelt, um Fahrerüberwachungssysteme (Driver Monitoring Systems), Insassenüberwachungssysteme (Occupant Monitoring Systems) und die Erkennung von Kindern (Child Presence Detection) in einer einheitlichen Plattform für die Innenraumsensorik zu konsolidieren.

Technische Mechanismen der multimodalen Innenraumsensorik
Die Architektur löst die inhärenten Einschränkungen von eigenständigen optischen oder Hochfrequenzsensoren durch die Zusammenführung ihrer jeweiligen Telemetrie. Innenraumkameras, die in der Regel in der Dachkonsole oder im Rückspiegel montiert sind, erfassen hochauflösende visuelle Daten zu Körperhaltung, Position und Verhaltensmetriken der Insassen. Optische Systeme verlieren jedoch in Umgebungen mit wenig Licht oder bei verdeckten Sichtlinien an Leistung.

Um visuelle Verdeckungen auszugleichen, integriert das System ein 60-GHz-Millimeterwellen-Radar in Automobilqualität. Diese Radarfrequenz durchdringt problemlos nichtleitende Materialien wie dicke Kleidung oder Decken, um die Tiefe abzubilden und verborgene Mikrobewegungen zu erkennen. Die Fusion dieser parallelen Datenströme innerhalb eines automobilen Datenökosystems ermöglicht es der Verarbeitungssoftware, unabhängig von den Umgebungslichtverhältnissen eine beständige, hochpräzise räumliche Karte des Fahrzeuginnenraums zu erstellen.

Hardware-Optimierung und Integration von Rückhaltesystemen
Durch den Einsatz von Deckenkameras und 60-GHz-Radarmodulen können Automobilhersteller auf redundante, für Einzelzwecke konzipierte physische Sensoren verzichten, wie etwa gewichtsempfindliche Fußmatten oder kapazitive Sitzanordnungen. Diese Hardware-Konsolidierung vereinfacht elektrische Kabelbäume, reduziert die Komplexität der Systemintegration und senkt die Gesamtstücklistenkosten (BOM) für die Innenraumfertigung.

Die präzise räumliche Klassifizierung, die durch diese Sensorfusion generiert wird, fließt direkt in adaptive Rückhaltesysteme ein. Hochgenaue Daten bezüglich Insassengröße, Sitzposition und dynamischer Körperhaltung ermöglichen es dem Fahrzeugsteuergerät, die Auslösekraft von Airbags und Gurtstraffern bei einem Aufprallereignis zu optimieren. Darüber hinaus gewährleistet die Nutzung von Radar-Tiefentelemetrie in Kombination mit visuellen KI-Klassifikatoren eine äußerst zuverlässige Erkennung von Kindern, während Fehlalarme, die durch schwere, unbelebte Objekte auf den Sitzen ausgelöst werden, stark reduziert werden.

Skalierbarkeit in softwaredefinierten Architekturen
Der Einsatz vereinheitlichter Sensor-Hardware schafft eine Basisplattform, die erweiterte Funktionalitäten durch Over-the-Air-Updates unterstützen kann. Henrik Lind, Chief Research Officer bei Smart Eye, merkt an, dass die Kombination von visuellem Kontext mit Radar-Tiefentelemetrie eine gemeinsame Hardwareplattform ergibt, die es den Herstellern ermöglicht, nachträglich Softwarefunktionen hinzuzufügen – von der Gestenerkennung bis hin zur Überwachung von Vitalparametern –, ohne dass physische Komponenten aktualisiert werden müssen. Diese integrierte Methodik wurde den Tier-1-Zulieferern auf der Fachmesse InCabin/AutoSens präsentiert, um ihre unmittelbare Anwendbarkeit für aufkommende softwaredefinierte Fahrzeugarchitekturen zu demonstrieren.

Zusätzlicher Kontext
Dieser Abschnitt enthält technische Spezifikationen und Wettbewerbs-Benchmarking, die nicht in der ursprünglichen Pressemitteilung enthalten sind.

Im Bereich der fahrzeuginternen Sensorik ist die Integration von 60-GHz-Radar zu einem regulatorischen Maßstab für die Erkennung der Anwesenheit von Kindern geworden, der in erster Linie durch die strengen Anforderungen des European New Car Assessment Programme (Euro NCAP) vorangetrieben wird. Zu den Wettbewerbern im Bereich der Fusion von Radar und Kamera im Innenraum zählen Tier-1-Zulieferer wie Bosch und Aptiv, die ebenfalls hybride Sensor-Suites entwickeln. Der anerkannte technische Maßstab für diese Fusionsarchitekturen ist die Reduzierung der Verarbeitungslatenz während der Kreuzvalidierung der Sensoren sowie die Genauigkeit der Insassenklassifizierung, beispielsweise die Fähigkeit des Systems, einen rückwärtsgerichteten Kindersitz konsequent von einem schweren Paket zu unterscheiden. Rein optische Systeme weisen in Szenarien ohne Lichteinfall typischerweise eine höhere Falsch-Negativ-Rate auf, während 60-GHz-Radar eine millimetergenaue Präzision zur Erkennung von kardiopulmonalen Mikrobewegungen bietet und damit den grundlegenden technischen Standard für die kontinuierliche Überwachung von Vitalparametern in Fahrzeugumgebungen definiert.

Bearbeitet von Aishwarya Mambet, Induportals-Redakteurin, mit Unterstützung von KI.

www.murata.com