-
Die vorliegende Erfindung betrifft ein Verfahren zur Übermittlung von Informationen an einen Fahrer eines Kraftfahrzeugs, wobei zur Übermittlung einer Information wenigstens zwei Informationskanäle vorgesehen sind. Weiterhin betrifft die Erfindung eine Vorrichtung und ein Computerprogramm das dazu eingerichtet ist das Verfahren auszuführen sowie ein maschinenlesbares Speichermedium, auf dem das Computerprogramm gespeichert ist.
-
Stand der Technik
-
Aus dem Stand der Technik sind beispielsweise Eye-Tracking Systeme bekannt. Als Eye-Tracking bezeichnet man das Aufzeichnen der hauptsächlich aus Fixationen (Punkte, welche genau betrachtet werden), Sakkaden (schnellen Augenbewegungen) und Regressionen bestehenden Blickbewegungen einer Person. Als „Eyetracker“ werden Geräte und Systeme bezeichnet, die diese Aufzeichnung vornehmen und eine Analyse der Blickbewegungen und Blickrichtung ermöglichen. Moderne Eyetracker bestehen aus Nahinfrarot-Kameras, die mit einer Beleuchtungseinheit Reflektionen auf der Netzhaut erzeugen. Die kalibrierten Positionen von Pupille und Reflexionen erlauben eine genaue Erkennung der Blickrichtung des Fahrers. 1 zeigt hierbei ein schematisches Modell zur Kalibrierung eines solchen Systems. Hierbei werden mittels A unterschiedliche Positionen einer Pupille mit Reflexionen gezeigt. C eine Beleuchtungseinheit zur Beleuchtung der Pupille. B zeigt ein Kamerasystem zur Aufnahme der Pupille und der Reflexionen. D stellt ein visuelles Fokusfeld dar. Hierbei werden für unterschiedliche Bildpunkte auf dem Fokusfeld die jeweilige Pupillenposition und Reflexion mit der Kamera aufgenommen. Aus diesen Daten erfolgt mittels einer Übertragungsfunktion E eine Zuordnung der unterschiedlichen Bildpunkte und Pupillenpositionen. Hieraus kann für zukünftige Pupillenpositionen die entsprechend betrachteten Bildpunkte ermittelt werden.
-
Weiterhin ist aus dem Stand der Technik die Patentanmeldung
EP 2 325 722 A bekannt. Diese Schrift betrifft ein Verfahren zum Modulieren eines Betriebs einer Vorrichtung, umfassend:
- – Anordnen eines Hardware-Sensor in oder an der Vorrichtung zum Erfassen Aufmerksamkeit eines Benutzers in Bezug auf die Vorrichtung;
- – Verarbeiten eines Signals von dem Hardware-Sensor und Ausgabe einer Maßzahl oder eines Indexes der Aufmerksamkeit des Benutzers bezüglich der Vorrichtung; und
- – Anpassung des Betriebs der Vorrichtung auf der Basis der Maßzahl oder des Indexes der Aufmerksamkeit des Benutzers zu der Vorrichtung;
- – wobei die Anpassung durch die Vorrichtung initiiert wird und eine Benachrichtigung und / oder Information und / oder Kommunikation an den Benutzer basierend auf die Aufmerksamkeit des Benutzers zu dem Gerät umfasst.
-
Offenbarung der Erfindung
-
Vorteilhaft ermöglicht hingegen das erfindungsgemäße Verfahren eine an den tatsächlichen aktuell vorliegenden Bedarf an Informationen des Fahrers angepasste Informationspräsentation. Eine derartige adaptive Informationsübermittlung berücksichtigt vorteilhaft, ob der Fahrer eine Information bereits wahrgenommen hat oder ob nicht.
-
Ermöglicht wird dies gemäß der Erfindung durch die im Patentanspruch 1 sowie den Patentansprüchen 9 bis 12 angegebenen Merkmale. Weitere Ausgestaltungen der Erfindung sind Gegenstand von Unteransprüchen.
-
Das erfindungsgemäße Verfahren zur Übermittlung von Informationen an einen Fahrer eines Kraftfahrzeugs, wobei zur Übermittlung einer Information wenigstens zwei Informationskanäle vorgesehen sind, ist gekennzeichnet durch folgende Schritte:
- – Präsentation der Information mittels wenigstens eines ersten Informationskanals für den Fahrer,
- – Bestimmung einer eine Wahrnehmung des Fahrers repräsentierenden Wahrnehmungsgröße bezüglich der präsentierten Information,
- – Definition einer Übermittlung der Information mittels eines weiteren Informationskanals auf Basis der ermittelten Wahrnehmungsgröße.
-
Hierunter wird verstanden, dass vorteilhaft eine an den tatsächlichen Bedarf des Fahrers angepasste Übermittlung von Informationen erfolgen kann. Dies kann auch als adaptive Informationsübermittlung bezeichnet werden. Hierfür wird dem Fahrer zunächst die entsprechende Information über, d.h. mittels eines ersten Informationskanals angeboten. Als Informationskanal, kann jede Art und Weise einer Anbietung und Übermittlung einer Information verstanden werden. Die potentiellen Informationskanäle sind über die sensorischen Wahrnehmungsmöglichkeiten des Fahrers definiert. Daher sind visuelle, auditive, haptische, oder sogar olfaktorische Kanäle und weitere möglich. Die tatsächlich nutzbaren Informationskanäle sind jedoch natürlich über die im Fahrzeug vorhandenen technischen Vorrichtungen beschränkt. Die praktische Umsetzung eines Informationskanals erfolgt dabei mittels einer Informationsübermittlungsstelle. Eine visuelle Präsentation der Information kann bspw. mittels eines Displays erfolgen. Hierfür können vorteilhaft bereits im Fahrzeug eingebaute Displays, wie bspw. das Kombiinstrument oder das Display der Mittelkonsole oder auch Head-Up-Display Verwendung finden.
-
Die Präsentation der Information mittels des ersten Informationskanals kann wie angedeutet über einen dieser Informationskanäle erfolgen. Weiterhin ist selbstverständlich auch möglich, dass die Präsentation der Informationen über mehrere Kanäle erfolgt. Aufgrund der technischen Umsetzung der Kanäle mittels Informationsübermittlungsstellen, können unterschiedliche Informationskanäle sich sowohl hinsichtlich ihrer sensorischen Wahrnehmung – bspw. visuell (Display) und auditiv (Lautsprecher) – unterscheiden, als auch hinsichtlich ihrer baulichen Umsetzung – bspw. zwei Displays als zwei unterschiedliche visuelle Informationskanäle.
-
Weiterhin sieht das erfindungsgemäße Verfahren vorteilhaft vor, dass überprüft wird, ob der Fahrer die präsentierte Information wahrgenommen hat, bzw. wahrnimmt. Hierfür wird eine die Wahrnehmung repräsentierende Wahrnehmungsgröße bestimmt und analysiert. Es bieten sich verschiedene Ansätze an, um zu ermitteln, ob eine Wahrnehmung der angebotenen Information erfolgt ist. Hierbei kann bspw. eine Fokussierung des Fahrers auf die Informationspräsentation, bspw. die Blickrichtung und Blickverweildauer auf eine visuelle Präsentation, analysiert werden. Alternativ oder zusätzlich kann auch eine Reaktion des Fahrers beobachtet und analysiert werden, d.h. ob er eine Aktion ausführt, die auf eine Wahrnehmung der präsentierten Information schließen lässt. Im Rahmen der Abschätzung der Wahrnehmung kann dabei sowohl eine positive Wahrnehmung als auch eine fehlende Wahrnehmung durch den Fahrer erkannt werden.
-
Auf Grundlage der abgeschätzten Wahrnehmung, kann eine Übermittlung der Information mittels eines weiteren Informationskanals definiert werden. Die Definition der Übermittlung kann dabei – bspw. bei erkannter fehlender Wahrnehmung – eine Präsentation und ggf. eine Verstärkung der Präsentation der Information mittels eines weiteren Informationskanal vorsehen. Hierdurch kann vorteilhaft sichergestellt werden, dass der Fahrer die entsprechenden Informationen wahrnimmt. Die Definition der Übermittlung kann jedoch auch – bspw. bei erkannter positiver Wahrnehmung – eine Unterlassung, oder ggf. eine Abschwächung oder Deaktivierung einer zusätzlichen Präsentation vorsehen. Hierdurch kann vorteilhaft eine Präsentation von redundanten Informationen reduziert oder sogar vermieden werden. Als redundante Informationen sollen die Informationen verstanden werden, die nochmals dem Fahrer präsentiert werden, obwohl diese bereits vom Fahrer wahrgenommen worden sind, bzw. dem Fahrer bewusst sind.
-
Die Definition der Übermittlung kann auch den Schritt Umsetzung der Definition der Übermittlung, d.h. Ausführung der Übermittlung der Information mittels des weiteren Informationskanals umfassen. Alternativ kann sich dieser Schritt vorteilhaft an den Schritt der Definition anschließen. Hierdurch wird die tatsächliche Präsentation der Information mittels des weiteren Informationskanals umgesetzt und dadurch die Übermittlung der Information an den Fahrer optimiert und finalisiert.
-
Die Bezeichnung „Übermittlung der Information“ soll so verstanden, dass es sich insbesondere um dieselbe Information handelt, welche ggf. an den jeweiligen Informationskanal angepasst dem Fahrer übermittelt werden soll. Daher kann auch die Wahrnehmung, bzw. die die Wahrnehmung des Fahrers repräsentierenden Wahrnehmungsgröße verstanden werden als eine Wahrnehmung bezüglich der mittels des ersten Informationskanals übermittelten Information.
-
In einer vorteilhaften Ausführungsform ist das Verfahren dadurch gekennzeichnet, dass der erste Informationskanal als eine erste visuelle Informationsübermittlungsstelle ausgestaltet ist.
-
Hierunter wird verstanden, dass die Präsentation der Information im Rahmen des ersten Schrittes des Verfahrens mittels einer visuellen Informationsübermittlung erfolgt. Hierbei können vorteilhaft Displays eingesetzt werden. Neben dem Kombiinstrument können bspw. auch Head-Up-Displays oder Displays eingesetzt werden, welche in oder um die Mittelkonsole positioniert sind. Die visuelle Informationsübermittlungsstelle ermöglicht dabei einen unidirektionalen Informationsfluss. Selbstverständlich können auch Displays eingesetzt werden, die einen bidirektionalen Informationsfluss ermöglichen, bspw. sogenannte Touch-Displays. In zusätzlichen oder alternativen Ausführungen können auch auditive oder haptische Informationsübermittlungsstellen als erster Informationskanal Einsatz finden.
-
In einer bevorzugten Weiterbildung ist das Verfahren dadurch gekennzeichnet, dass der weitere Informationskanal ausgestaltet ist als
- – eine auditive Informationsübermittlungsstelle und/oder
- – als einen zweite visuelle Informationsübermittlungsstelle und/oder
- – als eine haptische Informationsübermittlungsstelle.
-
Der Terminus „weitere Informationskanal“ ist in Bezug auf Schritt 3 des Verfahrens zu verstehen, in welchem eine Übermittlung der Information mittels eines weiteren Informationskanals auf Basis der ermittelten Wahrnehmung definiert wird. Die beschriebene Weiterbildung ist so zu verstehen, dass die Definition der Übermittlung der Information vorteilhaft mittels eine auditiven Informationsübermittlungsstelle, bspw. eines Lautsprechers erfolgt. In einer vorteilhaften Alternative kann der weitere Informationskanal ebenfalls als visuelle Informationsübermittlungsstelle ausgebildet sein, bspw. als weiteres Display. In einer alternativen Ausführungsform ist der weitere Informationskanal zur Übermittlung der Information als haptische Informationsübermittlungsstelle ausgebildet. Als haptische Informationsübermittlungsstelle eignen sich insbesondere Komponenten, mit denen der Fahrer in Kontakt steht, bspw. das Lenkrad, das Brems- oder Gaspedal, sowie der Fahrersitz. Bspw. kann durch eine vorgegebenen Lenkbewegung oder selbstständige Bewegung des Bremspedals eine Information an den Fahrer übermittelt werden.
-
In einer vorteilhaften Ausführungsform ist das Verfahren dadurch gekennzeichnet, dass wenn die Wahrnehmungsgröße eine Wahrnehmung der Information durch den Fahrer repräsentiert, die Definition der Übermittlung der Information mittels des weiteren Informationskanals zumindest einen der folgenden Schritte umfasst:
- – Unterlassung einer Übermittlung der Information mittels eines weiteren Informationskanal, und/oder
- – Anpassung einer Übermittlung der Information mittels eines weiteren Informationskanal, wobei insbesondere eine Abschwächung der Präsentation der Information erfolgt.
-
Hierunter wird verstanden, dass wenn im Rahmen der Abschätzung der Wahrnehmung eine positive, d. h. tatsächliche Wahrnehmung durch den Fahrer ermittelt wird, einer der angegebenen Schritte ausgeführt wird. Diese Schritte können dabei als Definition und Umsetzung der Übermittlung der Information mittels des weiteren Informationskanals verstanden werden. Hierbei ist vorgesehen, dass keine Übermittlung der Information mittels eines weiteren Informationskanals erfolgt. Sollte bereits eine Präsentation mittels eines weiteren Informationskanälen vorliegen, kann alternativ auch vorgesehen werden, dass die Übermittlung mittels dieses Informationskanals angepasst wird. Hierbei kann bspw. vorteilhaft eine Abschwächung der Präsentation vorgesehen werden. Dies kann bspw. bei visuellen Darstellungen durch eine Veränderung der Farben, eine Abdunkelung der Darstellung, oder eine (Semi-)Transparenz der gezeigten Elemente erfolgen. Das Verfahren ermöglicht damit vorteilhaft, dass auf Basis der Wahrnehmungsgröße eine Bestimmung von redundanten Informationen erfolgt und eine Unterlassung einer Übermittlung der redundanten Information mittels eines weiteren Informationskanals erfolgt und/oder eine Anpassung einer Übermittlung der redundanten Information mittels eines weiteren Informationskanal erfolgt, wobei insbesondere eine Abschwächung der Präsentation der redundanten Information erfolgt. Als redundante Informationen sollen gedoppelte Informationen verstanden werden, die vom Fahrer bereits wahrgenommen wurden und/oder dem Fahrer bekannt sind. Die Redundanz beschränkt sich selbstverständlich nicht auf einen bestimmten Informationskanal, d. h. auch bei einer Präsentation derselben Information mittels unterschiedlichen Informationskanälen kann es zu einer Redundanz kommen, sobald der Fahrer die Information wahrgenommen hat. Eine Präsentation bereits wahrgenommener, d.h. redundanter, Informationen über einen weiteren Informationskanal ist überflüssig. Durch eine Vermeidung der Präsentation derartiger Informationen kann eine Reduktion der Informationsfülle für den Fahrer erzielt werden. Weiterhin wird hierdurch vorteilhaft die Fahrerablenkung durch weitere Informationen reduziert. Auch ist vorstellbar, dass hierdurch neue Funktionen eine höhere Nutzerakzeptanz erzielen können. Ein weiterer Vorteil zeigt sich in der Energieeinsparung bei elektrischen Anzeigegeräten – diese werden nur angeschaltet, bzw. in volle Helligkeit geschalten, wenn die Präsentation der Information für den Fahrer tatsächlich notwendig ist, da der Fahrer diese noch nicht wahrgenommen hat. Weiterhin wird eine Vermeidung störender Lichtquellen und Reflexionen mittels Anzeigegeräte in einem Fahrzeug insbesondere bei Nachtfahren erzielt.
-
In einer alternativen vorteilhaften Ausführungsform ist das Verfahren dadurch gekennzeichnet, dass wenn die Wahrnehmungsgröße keine Wahrnehmung der Information durch den Fahrer repräsentiert, die Definition der Übermittlung der Information mittels des weiteren Informationskanals zumindest einen der folgenden Schritte umfasst:
- – Übermittlung der Information mittels eines weiteren Informationskanals und/oder
- – Anpassung der Übermittlung der Information mittels eines weiteren Informationskanals, wobei insbesondere eine Verstärkung einer Präsentation der Information erfolgt.
-
Hierunter wird verstanden, dass wenn im Rahmen der Abschätzung der Wahrnehmung eine negative, d. h. keine Wahrnehmung durch den Fahrer ermittelt wird, einer der angegebenen Schritte ausgeführt wird. Hierbei ist vorgesehen, dass eine zusätzliche Übermittlung der Information mittels eines weiteren Informationskanals erfolgt. Sollte bereits eine Präsentation mittels eines weiteren Informationskanälen vorliegen, kann alternativ auch vorgesehen werden, dass die Übermittlung mittels dieses Informationskanals angepasst wird. Hierbei kann bspw. vorteilhaft eine Verstärkung der Präsentation vorgesehen werden. Dies kann bspw. bei visuellen Darstellungen durch eine Veränderung der Farben, eine Aufhellung der Präsentation, Stärkere Kontraste oder sonstige visuellen Effekte, bspw. Blinken der gezeigten Elemente erfolgen. Bei auditiven Präsentationen kann vorteilhaft eine Wiederholung und/oder eine Erhöhung der Lautstärke vorgesehen werden. Weiterhin ist anzumerken, dass sich die Begriffe „keine Wahrnehmung“ beziehungsweise „Wahrnehmung“ insbesondere auf die Wahrnehmung durch den Fahrer aufgrund der Übermittlung mittels des wenigstens ersten Informationskanals beziehen.
-
In einer bevorzugten Ausgestaltung ist das Verfahren dadurch gekennzeichnet, dass zur Ermittlung der Wahrnehmungsgröße wenigstens einer der folgenden Faktoren berücksichtigt wird:
- – eine Blickrichtung des Fahrers und/oder
- – eine Handlung des Fahrers.
-
Hierunter wird verstanden, dass die Ermittlung der Wahrnehmung losgelöst von einer aktiven Bestätigung durch den Fahrer erfolgen kann. Eine derartige Bestätigung könnte bspw. mittels eines Sprachkommentars oder dem Drücken eines Bestätigungsknopfes erfolgen. Durch ein Vermeiden einer derartigen aktiven Bestätigung, kann vorteilhaft die Ablenkung des Fahrers sowie die Arbeitshandlungen des Fahrers reduziert werden. Eine indirekte Ermittlung der Wahrnehmung einer präsentierten Information kann daher die Belastung des Fahrers reduzieren und die Sicherheit der Fahrzeugführung erhöhen. Eine indirekte Ermittlung einer erwarteten Wahrnehmung kann bspw. mittels der Blickrichtung des Fahrers erfolgen. Dies ist insbesondere für visuelle Informationsübermittlungsstellen vorteilhaft einzusetzen, wobei die Blickrichtung bspw. auf die präsentierte Information der Informationsschnittstelle zu erfolgen hat. Eine Ermittlung der Blickrichtung kann bspw. mittels einer Innenraumkamera und herkömmlicher Eyetracking-Verfahren erfolgen. Sieht der Fahrer bspw. eine mittels des ersten Informationskanals dargestellte visuelle Information an, kann in einer Abschätzung von einer Wahrnehmung der Information ausgegangen werden.
-
In einer alternativen Ausführung kann eine indirekte Ermittlung einer wahrscheinlichen Wahrnehmung bspw. mittels einer Beobachtung und Analyse des Verhaltens und der Handlungen des Fahrers erfolgen. Erfolgt innerhalb einer definierten Zeitspanne nach Präsentation einer Information eine Handlung, die als Reaktion auf die übermittelte Information gewertet werden kann, kann dies in einer ersten Abschätzung als Beleg für die Wahrnehmung gesehen werden. Beispielhaft seien folgende Handlungen für die Information „Anstehender Richtungswechsel“ im Rahmen einer Navigation zu sehen: Einordnen in eine geeignete Spur zum Abbiegen, Blinker setzen, Schulterblick, etc.
-
In einer vorteilhaften Weiterbildung ist das Verfahren dadurch gekennzeichnet, dass zur Ermittlung der Wahrnehmungsgröße, eine Modellierung der visuellen Wahrnehmung erfolgt, wobei insbesondere eine Blickverweildauer berücksichtigt wird.
-
Hierunter wird verstanden, dass vorteilhaft Algorithmen zur Modellierung visueller Aufmerksamkeit bezüglich Objekten im Rahmen des Verfahrens eingesetzt werden können. Derartige Algorithmen laufen bspw. auf einem Steuergerät. Eine Abschätzung der Wahrnehmung kann dabei bspw. durch die Blickrichtung und die Verweildauer des Blickes erfolgen. Hierbei bezieht sich die Messung der Blickverweildauer insbesondere auf sogenannte ROI (Regions Of Interest), bspw. die Positionen an welchen die relevanten Informationen dargestellt werden. Hieraus wird deutlich, dass sich die Blickverweildauer auf die Dauer des Blickes des Fahrers in eine bestimmte Richtung, bzw. auf einen bestimmten Punkt bezieht. Hierbei kann bspw. eine Verweildauer von größer gleich 1 Sekunde auf einen aufmerksamen Anwender hin deuten. Diese entsprechende präsentierte Information könnte damit als „wahrgenommen“ angenommen werden.
-
In einer möglichen Ausführung ist das Verfahren dadurch gekennzeichnet, dass eine Bestimmung der Wahrnehmungsgröße mittels einer Innenraumsensorik, insbesondere mittels einer Innenraumkamera, erfolgt.
-
Hierunter wird verstanden, dass bspw. eine Innenraumkamera im Rahmen des Verfahrens eingesetzt wird. Diese Kamera ermöglicht die Aufnahme zumindest von Teilen des Fahrers, insbesondere dessen Gesichts sowie dessen Augen. Mit anderen Worten, wird ermöglicht mit Hilfe einer Innenraumsensorik (bspw. einer Fahrerbeobachtungskamera zum Eyetracking) die Blickzuwendung des Fahrers (= visuelle Aufmerksamkeit) zu Objekten und/oder Displays zu erkennen und entsprechend auditive und/oder visuelle und/oder haptische Hinweise durch eine Mensch-Maschine-Schnittstelle zu unterdrücken oder zu verstärken.
-
Beispielhaft seien zwei Beispiele ausgeführt:
- – Navigationssystem hat eine Routenplanung vorgenommen – in 100m soll Fahrer rechts abbiegen. Fahrer blickt auf Routenbeschreibung, die auf dem Display des Navigationsgeräts angezeigt wird. Eine gesonderte Audio-Ausgabe der Wegbeschreibung („Jetzt rechts abbiegen“) wird unterdrückt, da der Fahrer durch seine Blickzuwendung zum Display seine visuelle Aufmerksamkeit demonstriert hat.
- – Fahrer blickt kontinuierlich auf Geschwindigkeitsanzeige im HUD. Die Geschwindigkeitsanzeige im Kombiinstrument hat er seit geraumer Zeit nicht mehr angesehen. Daher wird die Anzeige im Kombiinstrument schrittweise abgedunkelt und erst dann wieder aufgehellt, wenn der Fahrer explizit auf das Kombiinstrument blickt.
-
Das weiterhin vorgesehene erfindungsgemäße Verfahren zur Steuerung eines Fahrerassistenzsystems mit einer Übermittlung von Informationen an einen Fahrer eines Kraftfahrzeugs, wobei zur Übermittlung einer Information wenigstens zwei Informationskanäle vorgesehen sind, ist dadurch gekennzeichnet, dass unter Verwendung des zuvor beschriebenen Verfahrens
- – eine Präsentation der Information mittels wenigstens eines ersten Informationskanals für den Fahrer,
- – eine Bestimmung einer eine Wahrnehmung des Fahrers repräsentierenden Wahrnehmungsgröße bezüglich der präsentierten Information, und
- – eine Definition einer Übermittlung der Information mittels eines weiteren Informationskanals auf Basis der ermittelten Wahrnehmungsgröße erfolgt.
-
Hierunter soll ein Fahrerassistenzsystem verstanden, mittels welchem durch die Anwendung des beschriebenen Verfahrens eine Übermittlung nicht wahrgenommener Informationen an den Fahrer unterstützt sowie eine Übermittlung redundanter Informationen vermieden werden kann.
-
Weiterhin ist erfindungsgemäß eine Vorrichtung vorgesehen, die Mittel aufweist und eingerichtet ist, das Verfahren auszuführen. Als Vorrichtung kann bspw. eine Vorrichtung für ein Fahrerassistenzsystem zur Umsetzung des beschriebenen Verfahrens angesehen werden. Weiterhin kann als Vorrichtung bspw. eine Innenraumkamera zur Umsetzung des beschriebenen Verfahrens angesehen werden.
-
Das Verfahren kann beispielsweise in Software oder Hardware oder in einer Mischform aus Software und Hardware beispielsweise in einem Steuergerät implementiert sein. Der hier vorgestellte Ansatz schafft ferner eine Vorrichtung, die ausgebildet ist, um die Schritte einer Variante eines hier vorgestellten Verfahrens in entsprechenden Einrichtungen durchzuführen, anzusteuern bzw. umzusetzen. Auch durch diese Ausführungsvariante der Erfindung in Form einer Vorrichtung kann die der Erfindung zugrunde liegende Aufgabe schnell und effizient gelöst werden.
-
Unter einer derartigen Vorrichtung kann vorliegend ein elektrisches Gerät verstanden werden, das Sensorsignale verarbeitet und in Abhängigkeit davon Steuer- und/oder Datensignale ausgibt. Die Vorrichtung kann eine Schnittstelle aufweisen, die hard- und/oder softwaremäßig ausgebildet sein kann. Bei einer hardwaremäßigen Ausbildung können die Schnittstellen beispielsweise Teil eines sogenannten System-ASICs sein, der verschiedenste Funktionen der Vorrichtung beinhaltet. Es ist jedoch auch möglich, dass die Schnittstellen eigene, integrierte Schaltkreise sind oder zumindest teilweise aus diskreten Bauelementen bestehen. Bei einer softwaremäßigen Ausbildung können die Schnittstellen Softwaremodule sein, die beispielsweise auf einem Mikrocontroller neben anderen Softwaremodulen vorhanden sind.
-
Von Vorteil ist auch ein Computerprogrammprodukt oder Computerprogramm mit Programmcode, der auf einem maschinenlesbaren Träger oder Speichermedium wie einem Halbleiterspeicher, einem Festplattenspeicher oder einem optischen Speicher gespeichert sein kann und zur Durchführung, Umsetzung und/oder Ansteuerung der Schritte des Verfahrens nach einer der vorstehend beschriebenen Ausführungsformen verwendet wird, insbesondere wenn das Programmprodukt oder Programm auf einem Computer oder einer Vorrichtung ausgeführt wird.
-
Ausführungsformen
-
Es ist darauf hinzuweisen, dass die in der Beschreibung einzeln aufgeführten Merkmale in beliebiger, technisch sinnvoller Weise miteinander kombiniert werden können und weitere Ausgestaltungen der Erfindung aufzeigen. Weitere Merkmale und Zweckmäßigkeit der Erfindung ergeben sich aus der Beschreibung von Ausführungsbeispielen anhand der beigefügten Figuren.
-
Von den Figuren zeigt:
-
1 ein schematisches Modell zur Kalibrierung eines Eyetracking-Systems; und
-
2 einen schematischen Ausschnitt eines Fahrers in einem Kraftfahrzeug bei einer Ausführung des Verfahrens, und
-
3 einen schematischer Ablaufplan der Schritte des Verfahrens.
-
Die 1 zeigt ein schematisches Modell zur Kalibrierung eines Eyetracking-Systems. Eine Beschreibung dieser Kalibrierung sowie der Technologie des Eyetracking finden sich in den Ausführungen zum Stand der Technik.
-
Die 2 zeigt einen schematischen Ausschnitt eines Fahrers 1 in einem Kraftfahrzeug 3 bei einer Ausführung des Verfahrens 10, bzw. 10´. Hierbei ist der Fahrer 1 in Sitzposition im Fahrzeug 3 positioniert. Das Fahrzeug 3 enthält weiterhin ein Fahrerassistenzsystem 4. Diese ist in dem Ausführungsbeispiel als Navigationsinstrument ausgestaltet. Gemäß dem Verfahren 10, bzw. 10´ erfolgt eine Übermittlung von Informationen 11 an den Fahrer 1 mittels eines ersten Informationskanals. Dieser Informationskanal ist im Ausführungsbeispiel als visueller Informationskanal mittels eines Displays 6 ausgestaltet. Als Display 6 dient bspw. das Display der Mittelkonsole, ein Display des Kombiinstruments oder ein separates Display.
-
Die Augen 2 des Fahrers 1 werden mittels einer Innenraumsensorik 5 überwacht. Diese Innenraumsensorik 5 ist als Kamera mit aktiver Infrarotbeleuchtung zur Feststellung der Blickrichtung („Eyetracking“) ausgestaltet. Hierdurch kann die Ermittlung von Blickvektoren und der Augenposition erfolgen. Durch den Einsatz von Verfahren des Eyetracking kann überprüft werden, wohin der Fahrer 1 sieht und welche Elemente der Fahrer 1 betrachtet. Hierdurch kann bspw. überprüft werden, ob der Fahrer 1 eine mittels eines HMI-Fahrerdisplays 6 visuell dargestellte Information 11 angesehen hat. Weiterhin wird eine Abschätzung vorgenommen, ob der Fahrer 1 die Information 11 wahrgenommen hat. Hierfür wird unter anderem die Zeitspanne des Betrachtens berücksichtigt werden.
-
Darüber hinaus ist ein weiterer Informationskanal vorgesehen. Dieser ist im Ausführungsbeispiel als auditiver Informationskanal mittels der Lautsprecher 7 des Fahrzeugs ausgestaltet. Entsprechend der Wahrnehmung der über den ersten Informationskanal, d.h. das Display 6, übermittelten Information 11 durch den Fahrer 1, wird eine Übermittlung der Information 11 über einen zweiten Informationskanal definiert und umgesetzt. Kann bspw. auf Basis der mittels des Eyetracking ermittelten Daten nicht von einer Wahrnehmung der auf dem Display 6 dargestellten Information 11 durch den Fahrer ausgegangen werden, kann eine weitere Anbietung der Information 11 über den auditiven Weg durch den Lautsprecher 7 mittels Sprachausgabe an den Fahrer 1 erfolgen. Wird jedoch festgestellt, dass der Fahrer 1 die Information 11 bereits bei einer Präsentation mittels des Displays 6 wahrnimmt, kann auf eine zusätzliche auditive Präsentation der Information mittels des Lautsprechers 7 verzichtet werden.
-
Weiterhin ist ein zusätzlicher Informationskanal vorgesehen. Diese ist im Ausführungsbeispiel als haptischer Informationskanal mittels einer weiteren Informationsschnittstelle 8 dargestellt, welche bspw. als Lenkradvibration und/oder einer Lenkradbewegung ausgestaltet ist. Eine Informationsanbietung über diesen Weg erfolgt ebenfalls nur, wenn die Auswertung der Daten vermuten lässt, dass der Fahrer 1 die auf dem Display präsentierten Informationen 11 nicht wahrgenommen hat.
-
Weiterhin ist ein weitere visuelle Informationsschnittstelle 6´ durch ein weiteres Display dargestellt. Wenn bspw. festgestellt wird, dass der Fahrer 1 eine Information 11 nicht wahrgenommen hat, kann diese auch über diesen ebenfalls visuellen Informationskanal dupliziert und dem Fahrer 1 zusätzlich präsentiert werden. Hierauf wird verzichtet, wenn der Fahrer 1 die Information 11 bereits wahrgenommen hat.
-
Die Steuerung der Informationskanäle erfolgt mittels eines Regel-, und Steuergeräts 9. Ebenfalls kann die Auswertung der Daten zur Wahrnehmung, d.h. insbesondere die Kamerabilder, mittels eines Regel-, oder Steuergerätes erfolgen. Hierbei kann es sich um dasselbe oder ein anderes Regel-, und Steuergerät 9 handeln. Das Steuergerät 9 sendet dabei bspw. über eine Schnittstelle (bspw. CAN) Befehle zur HMI-Anpassung an die Steuergeräte betroffener Objekte (bspw. Navigationsystem, Kombiinstrument).
-
Die 3 zeigt einen schematischen Ablaufplan der Schritte des Verfahrens 10, bzw. 10´ gemäß einem Ausführungsbeispiel. Hierbei erfolgt in einem ersten Schritt S1 die Präsentation der Information an den Fahrer mittels wenigstens eines ersten Informationskanals. In einem zweiten Schritt S2 erfolgt die Bestimmung einer eine Wahrnehmung des Fahrers repräsentierenden Wahrnehmungsgröße bezüglich der präsentierten Information. In einem dritten Schritt S3 erfolgt die Definition einer Übermittlung der Information mittels eines weiteren Informationskanals auf Basis der ermittelten Wahrnehmungsgröße. In diesen dritten Schritt S3 kann sich ein vierter Schritt S4 anschließen, welcher die Übermittlung der Information mittels eines weiteren Informationskanals umfasst.
-
ZITATE ENTHALTEN IN DER BESCHREIBUNG
-
Diese Liste der vom Anmelder aufgeführten Dokumente wurde automatisiert erzeugt und ist ausschließlich zur besseren Information des Lesers aufgenommen. Die Liste ist nicht Bestandteil der deutschen Patent- bzw. Gebrauchsmusteranmeldung. Das DPMA übernimmt keinerlei Haftung für etwaige Fehler oder Auslassungen.
-
Zitierte Patentliteratur
-
