InCarIn-Projekt Kamerabasierte Personenerfassung für den Auto-Innenraum

Assistenzsysteme sollen künftig erkennen, womit sich die Insassen im Auto beschäftigen.
Assistenzsysteme sollen künftig erkennen, womit sich die Insassen im Auto beschäftigen.

Ein im Rahmen des InCarIn-Projektes entwickeltes System erkennt Anzahl und Größe der Personen im Fahrzeug und weiß, worauf sie ihre Aufmerksamkeit richten. Es soll als Basis für neuartige Assistenzsysteme dienen, etwa für das automatisierte Fahren.

Forscher der Fraunhofer-Institute für Optronik, Systemtechnik und Bildauswertung IOSB in Karlsruhe und für Arbeitswirtschaft und Organisation IAO in Stuttgart entwickeln im Projekt »Intelligent Car Interieur«, kurz InCarIn, ein System für den Fahrzeug-Innenraum – gemeinsam mit ihren Kollegen der Volkswagen Konzernforschung, von Bosch, Visteon und weiteren Unternehmen. Das Projekt wird vom Bundesministerium für Bildung und Forschung (BMBF) gefördert. »Wir weiten die Sensorik auf den gesamten Innenraum aus«, erläutert Dr. Michael Voit, Gruppenleiter am IOSB. »Über Tiefenkameras erfassen wir das Fahrzeuginnere, erkennen die Anzahl der Personen, ihre Größe und ihre Körperhaltung. Daraus leiten wir die Aktivitäten der Personen ab.«

Das langfristige Ziel liegt im Aufbau neuer Assistenzsysteme. Wichtig ist dies unter anderem bei teilautomatisiertem Fahren: Dreht sich der Fahrer zu den Kindern um, die auf der Rückbank sitzen, könnte in diesem Moment das System auf einem Monitor das Videobild der Rückbank darstellen – so kann der Fahrer den Blick umgehend wieder gen Straße richten und sieht dennoch, was die Kinder machen. »Über die Sensoren kann das System abschätzen, wie lange der Fahrer nach dem automatisierten Fahren brauchen wird, um die Kontrolle über das Fahrzeug wieder vollständig zu übernehmen«, erklärt Frederik Diederichs, Wissenschaftler und Projektleiter am IAO. Anhand der Information, wo die Personen sitzen und wie groß sie sind, ließe sich beispielsweise auch der Airbag an die individuelle Körpergröße anpassen – und über die Analyse der Gliedmaßen auch an spezielle Situationen wie an den Beifahrer, der die Füße auf das Armaturenbrett gelegt hat.

Die Herausforderung liegt vor allem in der Auswertung der aufgenommenen Daten. Personen und deren Gliedmaßen erkennt die Software bereits, auch kann sie über eine Art Skelett, das sie über die Personenbilder legt, die Bewegungen nachvollziehen. Doch wie bringt man dem Computer bei, welche Aktivitäten die Personen gerade ausführen? »Eine Herausforderung liegt darin, Gegenstände, mit denen sich die Person beschäftigt, zuverlässig zu erkennen. Wenn man bedenkt, dass prinzipiell jedes Objekt in das Fahrzeug gebracht werden kann, müssen irgendwo Grenzen der Erfassungsmöglichkeiten gezogen werden. Wir setzen daher Grundvoraussetzungen, indem wir dem Computer mitteilen, wo sich etwa Sonnenschutzblende und Handschuhfach befinden«, erklärt Voit.

Die Forscher haben die Kameras und die zugehörigen Auswertealgorithmen zunächst im IAO-eigenen Fahrsimulator getestet und weiterentwickelt. Nun soll das System – integriert in einen Volkswagen Multivan – in Probandenversuchen zeigen, was es kann. Hier werden Grundlagen für die neuen Fahrzeugkonzepte der nächsten fünf bis zehn Jahre gelegt.