DE102022210120A1 - Method and device for determining a need for a warning to increase attention of a driver of a vehicle - Google Patents

Method and device for determining a need for a warning to increase attention of a driver of a vehicle Download PDF

Info

Publication number
DE102022210120A1
DE102022210120A1 DE102022210120.0A DE102022210120A DE102022210120A1 DE 102022210120 A1 DE102022210120 A1 DE 102022210120A1 DE 102022210120 A DE102022210120 A DE 102022210120A DE 102022210120 A1 DE102022210120 A1 DE 102022210120A1
Authority
DE
Germany
Prior art keywords
driver
vehicle
category
driving situation
determined
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
DE102022210120.0A
Other languages
German (de)
Inventor
Caterine Ospina-Schick
Rainer Erbach
Maximilian Schukraft
Andreas Fuener
Michael Busse
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Robert Bosch GmbH
Original Assignee
Robert Bosch GmbH
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Robert Bosch GmbH filed Critical Robert Bosch GmbH
Priority to DE102022210120.0A priority Critical patent/DE102022210120A1/en
Publication of DE102022210120A1 publication Critical patent/DE102022210120A1/en
Pending legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/50—Context or environment of the image
    • G06V20/59—Context or environment of the image inside of a vehicle, e.g. relating to seat occupancy, driver state or inner lighting conditions
    • G06V20/597—Recognising the driver's state or behaviour, e.g. attention or drowsiness
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W30/00—Purposes of road vehicle drive control systems not related to the control of a particular sub-unit, e.g. of systems using conjoint control of vehicle sub-units
    • B60W30/08—Active safety systems predicting or avoiding probable or impending collision or attempting to minimise its consequences
    • G—PHYSICS
    • G08—SIGNALLING
    • G08G—TRAFFIC CONTROL SYSTEMS
    • G08G1/00—Traffic control systems for road vehicles
    • G08G1/16—Anti-collision systems
    • G08G1/166—Anti-collision systems for active traffic, e.g. moving vehicles, pedestrians, bikes

Landscapes

  • Engineering & Computer Science (AREA)
  • Automation & Control Theory (AREA)
  • Transportation (AREA)
  • Mechanical Engineering (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • Traffic Control Systems (AREA)

Abstract

Vorgeschlagen wird ein Verfahren (40) zum Ermitteln einer Notwendigkeit einer Warnung zum Steigern einer Aufmerksamkeit eines Fahrers (24) eines Fahrzeugs (20) mit den Schritten,Ermitteln einer Aufmerksamkeit des Fahrers (24) mittels einer Beobachtungsvorrichtung (22) zum Beobachten einer Blickrichtung und/oder einer Kopfposition des Fahrers (24),Ermitteln einer Fahrsituation in Abhängigkeit eines oder mehrerer Fahrzeugparameter, wobei die Fahrsituation in Abhängigkeit des einen oder mehreren Fahrzeugparameter einer ersten Kategorie oder einer zweiten Kategorie zugeteilt werden kann,wobei der ersten Kategorie die Fahrsituation zugeteilt werden, bei denen der Fahrer (24) seinen Blick auf einen bestimmten Bereich in einem Umfeld des Fahrzeugs (20) fokussieren sollte und wobei der zweiten Kategorie die Fahrsituation zugeteilt werden, bei denen der Fahrer (24) in seinen Blick auf das gesamte Umfeld des Fahrzeugs (20) legen kann,Ermitteln einer Notwendigkeit einer Warnung zum Steigern einer Aufmerksamkeit in Abhängigkeit der ermittelten Aufmerksamkeit des Fahrers (24) und der ermittelten Fahrsituation,wobei eine Notwendigkeit dann nicht festgestellt wird, wenn eine definierte Fahrsituation der zweiten Kategorie ermittelt wird oder eine Aufmerksamkeit des Fahrers (24) festgestellt wird,wobei eine Notwendigkeit dann festgestellt wird, wenn eine Aufmerksamkeit des Fahrers (24) nicht festgestellt wird und eine definierte Fahrsituation der ersten Kategorie ermittelt wird.A method (40) is proposed for determining the need for a warning to increase the attention of a driver (24) of a vehicle (20) with the steps of determining the driver's (24) attention using an observation device (22) for observing a line of sight and /or a head position of the driver (24), determining a driving situation depending on one or more vehicle parameters, wherein the driving situation can be assigned to a first category or a second category depending on the one or more vehicle parameters, the driving situation being assigned to the first category, in which the driver (24) should focus his gaze on a specific area in the surroundings of the vehicle (20) and the second category is assigned to the driving situation in which the driver (24) focuses his gaze on the entire surroundings of the vehicle ( 20) can determine a need for a warning to increase attention depending on the determined attention of the driver (24) and the determined driving situation, whereby a need is not determined if a defined driving situation of the second category is determined or an attention of the Driver (24) is determined, a necessity being determined when the driver (24) is not attentive and a defined driving situation of the first category is determined.

Description

Stand der TechnikState of the art

Aus der DE 10 2014 214 352 A1 ist ein Verfahren und eine Anordnung zum Betreiben eines Insassenbeobachtungssystems bekannt.From the DE 10 2014 214 352 A1 a method and an arrangement for operating an occupant observation system are known.

Offenbarung der ErfindungDisclosure of the invention

Vorgeschlagen wird ein Verfahren zum Ermitteln einer Notwendigkeit einer Warnung zum Steigern einer Aufmerksamkeit eines Fahrers eines Fahrzeugs mit den Schritten, Ermitteln einer Aufmerksamkeit des Fahrers mittels einer Beobachtungsvorrichtung zum Beobachten einer Blickrichtung und/oder einer Kopfposition des Fahrers, Ermitteln einer Fahrsituation in Abhängigkeit eines oder mehrerer Fahrzeugparameter, wobei die Fahrsituation in Abhängigkeit des einen oder mehreren Fahrzeugparameter einer ersten Kategorie oder einer zweiten Kategorie zugeteilt werden kann,
wobei der ersten Kategorie die Fahrsituation zugeteilt werden, bei denen der Fahrer seinen Blick auf einen bestimmten Bereich in einem Umfeld des Fahrzeugs fokussieren sollte und wobei der zweiten Kategorie die Fahrsituation zugeteilt werden, bei denen der Fahrer in seinen Blick auf das gesamte Umfeld des Fahrzeugs legen kann, Ermitteln einer Notwendigkeit einer Warnung zum Steigern einer Aufmerksamkeit in Abhängigkeit der ermittelten Aufmerksamkeit des Fahrers und der ermittelten Fahrsituation,
wobei eine Notwendigkeit dann nicht festgestellt wird, wenn eine definierte Fahrsituation der zweiten Kategorie ermittelt wird oder eine Aufmerksamkeit des Fahrers festgestellt wird,
wobei eine Notwendigkeit dann festgestellt wird, wenn eine Aufmerksamkeit des Fahrers nicht festgestellt wird und eine definierte Fahrsituation der ersten Kategorie ermittelt wird.What is proposed is a method for determining the need for a warning to increase the attention of a driver of a vehicle with the steps of determining the driver's attention using an observation device for observing a line of sight and / or a head position of the driver, determining a driving situation depending on one or more Vehicle parameters, whereby the driving situation can be assigned to a first category or a second category depending on the one or more vehicle parameters,
whereby the first category is assigned to the driving situations in which the driver should focus his gaze on a specific area in the vehicle's surroundings and the second category is assigned to the driving situations in which the driver should focus his gaze on the entire surroundings of the vehicle can, determine a need for a warning to increase attention depending on the determined attention of the driver and the determined driving situation,
whereby a necessity is not determined if a defined driving situation of the second category is determined or if the driver is attentive,
wherein a necessity is determined when the driver's attention is not detected and a defined driving situation of the first category is determined.

Der Vorteil des vorgeschlagenen Verfahrens liegt darin, dass sicher und/oder zuverlässig erkannt werden kann, ob eine Notwendigkeit besteht, eine Aufmerksamkeit eines Fahrers zu steigern bzw. insbesondere wieder zu fokussieren. Hierdurch kann insbesondere die Sicherheit im Straßenverkehr erhöht werden. Ferner kann mittels des vorgeschlagenen Verfahrens eine Fehlermeldung bzw. eine falsche Warnung des Fahrers verhindert werden. Beispielsweise kann ein Fahrer, zum Beispiel während eines Abbiegevorgangs, einen Fußgänger mittels des Schulterblicks erblicken, wobei in dieser Situation eine Warnung zur Fokussierung auf den Straßenverkehr vor dem Fahrzeug nicht nötig bzw. für den Fahrer wahrscheinlich unnötigerweise irritierend wäre. Ferner kann der Fahrer durch die Verwendung des vorgeschlagenen Verfahrens nicht durch zu viele Warnungen überfordert werden.The advantage of the proposed method is that it can be safely and/or reliably recognized whether there is a need to increase a driver's attention or, in particular, to refocus. This can increase safety in road traffic in particular. Furthermore, the proposed method can be used to prevent an error message or a false warning from the driver. For example, a driver can see a pedestrian by looking over his shoulder, for example during a turn, in which case a warning to focus on the road traffic in front of the vehicle would not be necessary or would probably be unnecessarily irritating for the driver. Furthermore, by using the proposed method, the driver cannot be overwhelmed by too many warnings.

In einer vorteilhaften Ausführung weist das Verfahren ferner einen Schritt des Darstellens einer Warnung zum Steigern der Aufmerksamkeit des Fahrers auf, wobei die Warnung als ein oder mehrere sich bewegende Leuchtpunkte in einem Bereich zwischen einem Armaturenbrett des Fahrzeugs und der Windschutzscheibe des Fahrzeugs dargestellt werden. Vorteilhafterweise kann mittels der Warnung ein Blick des Fahrers gelenkt werden. Hierdurch kann eine Aufmerksamkeit des Fahrers insbesondere zielgerichtet gesteigert werden. Vorteilhafterweise kann der Fahrer mittels der vorgeschlagenen Darstellung sanft dazu gebracht werden, seinen Blick zu fokussieren. Hierdurch kann sich der Fahrer insbesondere schneller auf die Straße konzentrieren, wobei er insbesondere nicht durch Systemwarnungen in Panik versetzt wird.In an advantageous embodiment, the method further comprises a step of displaying a warning to increase the driver's attention, wherein the warning is displayed as one or more moving luminous dots in an area between a dashboard of the vehicle and the windshield of the vehicle. Advantageously, the driver's attention can be directed by means of the warning. In this way, the driver's attention can be increased in a particularly targeted manner. Advantageously, the driver can be gently made to focus his gaze using the proposed representation. This allows the driver to concentrate on the road more quickly, without being panicked by system warnings.

In einer beispielhaften Ausgestaltung kann im Schritt des Ermittelns der Aufmerksamkeit des Fahrers ermittelt werden, ob der Fahrer auf einen Bereich vor einer Windschutzscheibe des Fahrzeugs blickt. In einer Weiterentwicklung kann im Schritt des Ermittelns der Aufmerksamkeit des Fahrers ermittelt werden, ob der Fahrer auf einen bestimmten Bereich vor einer Windschutzscheibe des Fahrzeugs blickt. Hierdurch kann insbesondere sicher und/oder zuverlässig eine Aufmerksamkeit des Fahrers ermittelt werden, wodurch insbesondere sicher und/zuverlässig eine Notwendigkeit einer Warnung zum Steigern der Aufmerksamkeit ermittelt werden kann.In an exemplary embodiment, in the step of determining the driver's attention, it can be determined whether the driver is looking at an area in front of a windshield of the vehicle. In a further development, in the step of determining the driver's attention, it can be determined whether the driver is looking at a specific area in front of a windshield of the vehicle. In this way, the driver's attention can be determined in particular safely and/or reliably, whereby the need for a warning to increase attention can be determined in particular safely and/reliably.

Vorteilhafterweise sollte der Fahrer in der Fahrsituation der ersten Kategorie seinen Blick insbesondere auf einen Bereich vor der Windschutzscheibe des Fahrzeugs fokussieren. Durch einen Blick insbesondere auf einen Bereich vor der Windschutzscheibe des Fahrzeugs kann ein Fahrer das Fahrgeschehen auf der Straße insbesondere zuverlässig beobachten und entsprechend reagieren. Hierdurch kann die Sicherheit im Straßenverkehr dahingehend erhöht werden, dass der Fahrer das Fahrergeschehen zuverlässig beobachtet. Sollte mittels des Verfahrens erkannt werden, dass der Fahrer während einer Fahrsituation der ersten Kategorie nicht auf diesen Bereich blickt, kann eine Aufmerksamkeit des Fahrers auf das Fahrergeschehen bzw. den Bereich vor der Windschutzscheibe des Fahrzeugs gesteigert werden. Dies kann beispielsweise dann von Vorteil sein, wenn ein Fahrer das Fahrzeug nach einem automatisierten Betrieb wieder manuell übernehmen soll.Advantageously, in the driving situation of the first category, the driver should focus his gaze in particular on an area in front of the windshield of the vehicle. By looking in particular at an area in front of the windshield of the vehicle, a driver can reliably observe what is happening on the road and react accordingly. In this way, safety in road traffic can be increased to the extent that the driver reliably observes what is happening to the driver. If the method detects that the driver is not looking at this area during a driving situation in the first category, the driver's attention to what is happening to the driver or the area in front of the windshield of the vehicle can be increased. This can be advantageous, for example, if a driver is to take over the vehicle manually again after automated operation.

In einer Weiterentwicklung kann die Einteilung einer Fahrsituation in die erste Kategorie oder die zweite Kategorie mittels maschinellen Lernens eintrainiert werden. Hierdurch können die Fahrsituation insbesondere sicher und/oder zuverlässig in die erste oder die zweite Kategorie eingeteilt werden. Ferner können zukünftige Fahrsituationen besser eingeschätzt bzw. eingeteilt werden.In a further development, the classification of a driving situation into the first category or the second category can be trained using machine learning. As a result, the driving situation can be divided into the first or second category, particularly safely and/or reliably. Furthermore, future driving situations can be better assessed and classified.

In einer beispielhaften Ausführung kann als Fahrzeugparameter eine Fahrzeuggeschwindigkeit und/oder eine Position des Fahrzeugs auf einer Karte verwendet werden. In einer Weiterentwicklung kann beispielsweise der ersten Kategorie die Fahrsituation zugeteilt werden, bei denen bei denen eine Geschwindigkeit des Fahrzeugs eine definierte Geschwindigkeitsschwelle überschreitet. Vorteilhafterweise kann der zweiten Kategorie insbesondere die Fahrsituation zugeteilt werden, bei denen bei denen eine Geschwindigkeit des Fahrzeugs eine Geschwindigkeitsschwelle unterschreitet. Beispielsweise kann die Geschwindigkeitsschwelle als Schrittgeschwindigkeit ausgebildet sein. Hierdurch können die Fahrsituation insbesondere sicher und/oder zuverlässig in die erste oder die zweite Kategorie eingeteilt werden. Ferner kann sicher und/oder zuverlässig in Abhängigkeit der Kategorie der Fahrsituation eine Anforderung an eine Aufmerksamkeit des Fahrers bestimmt werden. Hierdurch kann eine gezielte Ermittlung der Notwendigkeit der Fokussierung der Aufmerksamkeit des Fahrers ermittelt werden. Hierdurch kann insbesondere die Sicherheit im Straßenverkehr erhöht werden.In an exemplary embodiment, a vehicle speed and/or a position of the vehicle on a map can be used as vehicle parameters. In a further development, for example, the first category can be assigned to the driving situation in which the speed of the vehicle exceeds a defined speed threshold. Advantageously, the driving situation in which the speed of the vehicle falls below a speed threshold can be assigned to the second category. For example, the speed threshold can be designed as a walking speed. As a result, the driving situation can be divided into the first or second category, particularly safely and/or reliably. Furthermore, a requirement for the driver's attention can be determined safely and/or reliably depending on the category of the driving situation. This allows a targeted determination of the need to focus the driver's attention. This can increase safety in road traffic in particular.

In einer vorteilhaften Ausgestaltung kann eine Fahrsituation eines Einparkvorgangs, eines Rückwärts-Fahrens, eines Wartens an einer Fahrzeugampel, eines Wartens an einem Fußgängerüberweg, das Heranfahren an eine Kreuzung, das Auffahren auf eine Schnellstraße der zweiten Kategorie zugeordnet werden. Hierdurch kann eine Fahrsituation insbesondere sicher und/oder zuverlässig in die erste Kategorie eingeteilt werden, wodurch sicher und/oder zuverlässig in Abhängigkeit der Kategorie der Fahrsituation eine Anforderung an eine Aufmerksamkeit des Fahrers bestimmt werden kann.In an advantageous embodiment, a driving situation of parking, reversing, waiting at a vehicle traffic light, waiting at a pedestrian crossing, approaching an intersection, or entering an expressway can be assigned to the second category. In this way, a driving situation can be classified, in particular safely and/or reliably, into the first category, whereby a requirement for the driver's attention can be determined safely and/or reliably depending on the category of the driving situation.

Weiterhin vorgeschlagen wird ein System zum Ermitteln einer Notwendigkeit einer Warnung zum Steigern einer Aufmerksamkeit eines Fahrers eines Fahrzeugs umfassend eine Beobachtungsvorrichtung zum Beobachten einer Blickrichtung und/oder einer Kopfposition des Fahrers und zum Ermitteln einer Aufmerksamkeit des Fahrers, eine Recheneinheit, wobei die Recheneinheit ausgebildet ist zum Ermitteln einer Fahrsituation in Abhängigkeit eines oder mehrerer Fahrzeugparameter, wobei die Fahrsituation in Abhängigkeit des einen oder mehreren Fahrzeugparameter einer ersten Kategorie oder einer zweiten Kategorie zugeteilt werden kann, wobei der ersten Kategorie die Fahrsituation zugeteilt werden, bei denen der Fahrer seinen Blick auf einen bestimmten Bereich in einem Umfeld des Fahrzeugs fokussieren sollte und wobei der zweiten Kategorie die Fahrsituation zugeteilt werden, bei denen der Fahrer in seinen Blick auf das gesamte Umfeld des Fahrzeugs legen kann, und wobei die Recheneinheit ausgebildet ist zum Ermitteln einer Notwendigkeit einer Warnung zum Steigern einer Aufmerksamkeit in Abhängigkeit der ermittelten Aufmerksamkeit des Fahrers und der ermittelten Fahrsituation, wobei eine Notwendigkeit dann nicht festgestellt wird, wenn eine definierte Fahrsituation der zweiten Kategorie ermittelt wird oder eine Aufmerksamkeit des Fahrers festgestellt wird und wobei eine Notwendigkeit dann festgestellt wird, wenn eine Aufmerksamkeit des Fahrers nicht festgestellt wird und eine definierte Fahrsituation der ersten Kategorie ermittelt wird.Furthermore, a system for determining the need for a warning to increase the attention of a driver of a vehicle is proposed, comprising an observation device for observing a line of sight and/or a head position of the driver and for determining the driver's attention, a computing unit, wherein the computing unit is designed to Determining a driving situation depending on one or more vehicle parameters, wherein the driving situation can be assigned to a first category or a second category depending on the one or more vehicle parameters, the first category being assigned the driving situation in which the driver looks at a specific area should focus in an environment of the vehicle and the driving situation in which the driver can focus on the entire environment of the vehicle is assigned to the second category, and the computing unit is designed to determine the need for a warning to increase attention Dependence of the determined driver's attention and the determined driving situation, whereby a necessity is not determined when a defined driving situation of the second category is determined or the driver's attention is determined and whereby a necessity is determined when the driver's attention is not determined and a defined driving situation of the first category is determined.

Die Beobachtungsvorrichtung kann auch als Beobachtungssystem, Driver Monitoring System und/oder als Insassenbeobachtungssystem bezeichnet werden. Die Beobachtungsvorrichtung kann beispielsweise ausgebildet sein einen oder mehrere Fahrzeuginsassen zu beobachten, zum Beispiel eine Körperhaltung, eine Blickrichtung und/oder eine Position eines Kopfes bzw. eines Gesichts bzw. von Augen des Fahrzeuginsassen, insbesondere eines Fahrers und/oder eines Beifahrers und/oder eines oder mehrere Fahrzeuginsassen auf der Rückbank, oder den Müdigkeitszustand und/oder andere Vitalwerte des einen oder der mehreren Fahrzeuginsassen zu erfassen. Ferner kann beispielsweise eine Identität eines Fahrzeuginsassen erfasst werden.The observation device can also be referred to as an observation system, driver monitoring system and/or as an occupant observation system. The observation device can, for example, be designed to observe one or more vehicle occupants, for example a posture, a direction of vision and/or a position of a head or a face or eyes of the vehicle occupant, in particular a driver and/or a passenger and/or a or multiple vehicle occupants in the back seat, or to record the state of tiredness and/or other vital signs of one or more vehicle occupants. Furthermore, for example, an identity of a vehicle occupant can be recorded.

Der Vorteil des vorgeschlagenen Systems liegt darin, dass sicher und/oder zuverlässig erkannt werden kann, ob eine Notwendigkeit besteht, eine Aufmerksamkeit eines Fahrers zu steigern bzw. insbesondere wieder zu fokussieren. Hierdurch kann insbesondere die Sicherheit im Straßenverkehr erhöht werden. Ferner kann eine Fehlermeldung bzw. eine falsche Warnung des Fahrers verhindert werden und so insbesondere zu viele und/oder irritierende Warnungen vermieden bzw. zumindest reduziert werden. Vorzugsweise kann der Fahrer durch die Verwendung des vorgeschlagenen Verfahrens nicht durch zu viele Warnungen überfordert werden.The advantage of the proposed system is that it can be safely and/or reliably recognized whether there is a need to increase a driver's attention or, in particular, to refocus. This can increase safety in road traffic in particular. Furthermore, an error message or an incorrect warning from the driver can be prevented and, in particular, too many and/or irritating warnings can be avoided or at least reduced. Preferably, by using the proposed method, the driver cannot be overwhelmed by too many warnings.

In einer vorteilhaften Ausführung kann das System eine Anzeigeeinheit aufweisen zum Darstellen einer Warnung zum Steigern der Aufmerksamkeit des Fahrers, wobei die Warnung als ein oder mehrere sich bewegende Leuchtpunkte in einem Bereich zwischen einem Armaturenbrett des Fahrzeugs und der Windschutzscheibe des Fahrzeugs dargestellt werden. In einer Weiterentwicklung kann die Anzeigeeinheit als ein Leuchtsteifen zwischen einem Armaturenbrett des Fahrzeugs und der Windschutzscheibe des Fahrzeugs ausgebildet sein. Vorteilhafterweise kann mittels der Warnung ein Blick des Fahrers gelenkt werden. Hierdurch kann eine Aufmerksamkeit des Fahrers insbesondere zielgerichtet gesteigert werden. Vorteilhafterweise kann der Fahrer mittels der vorgeschlagenen Darstellung sanft dazu gebracht werden, seinen Blick zu fokussieren. Hierdurch kann sich der Fahrer insbesondere schneller auf die Straße konzentrieren, wobei er insbesondere nicht durch Systemwarnungen in Panik versetzt wird.In an advantageous embodiment, the system may have a display unit for displaying a warning to increase the driver's attention, the warning being displayed as one or more moving luminous dots in an area between a dashboard of the vehicle and the windshield of the vehicle. In a further development, the display unit can be designed as a light strip between a dashboard of the vehicle and the windshield of the vehicle. Advantageously, the driver's attention can be directed by means of the warning. This allows the driver to pay particular attention directed to be increased. Advantageously, the driver can be gently made to focus his gaze using the proposed representation. This allows the driver to concentrate on the road more quickly, without being panicked by system warnings.

Kurze Beschreibung der ZeichnungenBrief description of the drawings

Ausführungsbeispiele der Erfindung sind in den Zeichnungen dargestellt und in den nachfolgenden Beschreibungen näher erläutert. Für die in den verschiedenen Figuren dargestellten und ähnlich wirkenden Elemente werden gleiche Bezugszeichen verwendet, wobei auf eine wiederholte Beschreibung der Elemente verzichtet wird. Es zeigen:

  • 1 eine schematische Darstellung eines Fahrzeugs mit einer Vorrichtung zum Beobachten eines Fahrzeuginsassen;
  • 2 eine schematische Darstellung eines Verfahrens gemäß einem Ausführungsbeispiel der vorliegenden Erfindung;
  • 3 eine schematische Darstellung eines Verfahrens gemäß einem Ausführungsbeispiel der vorliegenden Erfindung;
  • 4 eine schematische Darstellung eines Systems gemäß einem Ausführungsbeispiel der vorliegenden Erfindung;
  • 5 eine schematische Darstellung einer Anzeigeeinheit gemäß einem Ausführungsbeispiel der vorliegenden Erfindung;
  • 6 eine schematische Darstellung einer Anzeigeeinheit gemäß einem Ausführungsbeispiel der vorliegenden Erfindung;
  • 7 eine schematische Darstellung einer Anzeigeeinheit gemäß einem Ausführungsbeispiel der vorliegenden Erfindung.
Exemplary embodiments of the invention are shown in the drawings and explained in more detail in the following descriptions. The same reference numerals are used for the elements shown in the various figures and which have a similar effect, with a repeated description of the elements being omitted. Show it:
  • 1 a schematic representation of a vehicle with a device for observing a vehicle occupant;
  • 2 a schematic representation of a method according to an embodiment of the present invention;
  • 3 a schematic representation of a method according to an embodiment of the present invention;
  • 4 a schematic representation of a system according to an embodiment of the present invention;
  • 5 a schematic representation of a display unit according to an embodiment of the present invention;
  • 6 a schematic representation of a display unit according to an embodiment of the present invention;
  • 7 a schematic representation of a display unit according to an embodiment of the present invention.

Ausführungsformen der Erfindung:Embodiments of the invention:

1 zeigt eine schematische Darstellung eines Fahrzeugs 20, beispielsweise eines Kraftfahrzeugs, beispielsweise eines Autos, mit einer Beobachtungsvorrichtung 22 zum Beobachten eines Fahrzeuginsassen 24. Das Fahrzeug 20 weist insbesondere einen Fahrzeuginnenraum 26 bzw. Innenraum 26 auf, wobei in dem Fahrzeuginnenraum 26 insbesondere ein oder mehrere Sitze 28 für einen oder mehrere Fahrzeuginsassen 24 angeordnet sein können. Weiterhin weist das Fahrzeug 20 eine Beobachtungsvorrichtung 22 zum Beobachten eines Fahrzeuginsassen 24 auf, wobei die Beobachtungsvorrichtung 22 auch als Beobachtungssystem und/oder als Insassenbeobachtungssystem bezeichnet werden kann. Die Beobachtungsvorrichtung 22 kann beispielsweise ausgebildet sein eine Blickrichtung, eine Körperhaltung und/oder die Position des Kopfes bzw. des Gesichts bzw. der Augen des Fahrzeuginsassen 24 oder den Müdigkeitszustand und/oder andere Vitalwerte des Fahrzeuginsassen 24 zu erfassen. Ferner kann beispielsweise eine Identität des Fahrzeuginsassen 24 erfasst werden. 1 shows a schematic representation of a vehicle 20, for example a motor vehicle, for example a car, with an observation device 22 for observing a vehicle occupant 24. The vehicle 20 in particular has a vehicle interior 26 or interior 26, in particular one or more seats in the vehicle interior 26 28 can be arranged for one or more vehicle occupants 24. Furthermore, the vehicle 20 has an observation device 22 for observing a vehicle occupant 24, wherein the observation device 22 can also be referred to as an observation system and/or as an occupant observation system. The observation device 22 can, for example, be designed to detect a line of sight, a body posture and/or the position of the head or the face or the eyes of the vehicle occupant 24 or the state of tiredness and/or other vital signs of the vehicle occupant 24. Furthermore, for example, an identity of the vehicle occupant 24 can be recorded.

Zum Beobachten des Fahrzeuginsassen 24 kann die Beobachtungsvorrichtung 22 eine Beleuchtungseinheit 30 zum Aussenden von Lichtstrahlen, insbesondere Infrarotstrahlen, und eine Aufnahmeeinheit 32 aufweisen. Die Beobachtungsvorrichtung 22 kann insbesondere in einem Armaturenbrett 34 und/oder in einer Instrumententafel 34 des Fahrzeugs 20 angeordnet sein. In einer vorteilhaften Ausführung kann die Beobachtungsvorrichtung 22 insbesondere in einem Kombiinstrument in dem Armaturenbrett 34 angeordnet sein. Alternativ oder zusätzlich kann die Beobachtungsvorrichtung 22 auch an einer anderen Stelle in dem Fahrzeuginnenraum 26 des Fahrzeugs 20 angeordnet sein, beispielsweise an einem Fahrzeugdach 38, an einem Rückspiegel oder an einer Säule des Fahrzeugs 20, zum Beispiel an der A-Säule und/oder der B-Säule.To observe the vehicle occupant 24, the observation device 22 can have a lighting unit 30 for emitting light rays, in particular infrared rays, and a recording unit 32. The observation device 22 can in particular be arranged in a dashboard 34 and/or in an instrument panel 34 of the vehicle 20. In an advantageous embodiment, the observation device 22 can be arranged in the dashboard 34, in particular in a combination instrument. Alternatively or additionally, the observation device 22 can also be arranged at another location in the vehicle interior 26 of the vehicle 20, for example on a vehicle roof 38, on a rear-view mirror or on a pillar of the vehicle 20, for example on the A-pillar and/or the B-pillar.

Die Beleuchtungseinheit 30 ist insbesondere in Richtung des Fahrzeuginsassen 24 und somit in Richtung des Fahrzeugsitzes 28 gerichtet, um den Fahrzeuginsassen 24 mit Lichtstrahlen, insbesondere mit Infrarotstrahlen, anzustrahlen. Mit anderen Worten werden mittels der Beleuchtungseinheit 30 Lichtstrahlen, insbesondere Infrarotstrahlen, in Richtung des Fahrzeuginsassen 24 ausgesendet. Die Beleuchtungseinheit 30 kann zum Beispiel als Leuchteinheit, Leuchtelement, Leuchtdiode, LED, OLED und/oder Laserdiode ausgebildet sein und/oder eine Leuchteinheit, ein Leuchtelement, eine Leuchtdiode, eine LED, OLED und/oder eine Laserdiode aufweisen.The lighting unit 30 is directed in particular in the direction of the vehicle occupant 24 and thus in the direction of the vehicle seat 28 in order to illuminate the vehicle occupant 24 with light rays, in particular with infrared rays. In other words, light rays, in particular infrared rays, are emitted in the direction of the vehicle occupant 24 by means of the lighting unit 30. The lighting unit 30 can, for example, be designed as a lighting unit, a lighting element, a light-emitting diode, an LED, an OLED and/or a laser diode and/or have a lighting unit, a lighting element, a light-emitting diode, an LED, an OLED and/or a laser diode.

Die Aufnahmeeinheit 32 kann beispielsweise als Bildaufnahmeeinheit, zum Beispiel als Sensor bzw. als Kamera ausgebildet sein, insbesondere als Infrarot-Kameramodul, wobei die Aufnahmeeinheit 32 in Richtung des Fahrzeuginsassen 24 und somit in Richtung des Fahrzeugsitzes 28 gerichtet ist, um den Fahrzeuginsassen 24 des Fahrzeugs 20 visuell zu erfassen. Durch die Ausbildung als Infrarot-Kameramodul ist es möglich, die Beobachtung auch nachts durchzufuhren, ohne dass der Fahrzeuginsasse 24 hell angeleuchtet und dadurch geblendet werden würde.The recording unit 32 can be designed, for example, as an image recording unit, for example as a sensor or as a camera, in particular as an infrared camera module, the recording unit 32 being directed in the direction of the vehicle occupant 24 and thus in the direction of the vehicle seat 28, around the vehicle occupant 24 of the vehicle 20 to be captured visually. By designing it as an infrared camera module, it is possible to carry out observation even at night without the vehicle occupant 24 being brightly illuminated and thereby blinded.

Mit anderen Worten ist Beobachtungsvorrichtung 22 ausgebildet zum Beobachten eines Fahrzeuginnenraums eines Fahrzeugs. Die Beobachtungsvorrichtung 22 weist eine Beleuchtungseinheit 30 zum Aussenden von Lichtstrahlen, insbesondere Infrarotstrahlen, in Richtung des Fahrzeuginnenraums und eine Aufnahmeeinheit 32 zum Aufnehmen von Lichtstrahlen, insbesondere Infrarotstrahlen, wobei die von der Beleuchtungseinheit 30 ausgesendeten Lichtstrahlen, insbesondere Infrarotstrahlen, an bzw. in dem Fahrzeuginnenraum reflektierbar sind und wobei die reflektierten Lichtstrahlen, insbesondere Infrarotstrahlen, in Richtung der Aufnahmeeinheit 32 lenkbar sind.In other words, observation device 22 is designed to observe a vehicle interior of a vehicle. The observation device 22 has a lighting unit 30 for emitting light rays, in particular infrared rays, in the direction of the vehicle interior and a recording unit 32 for recording men of light rays, in particular infrared rays, wherein the light rays, in particular infrared rays, emitted by the lighting unit 30 can be reflected on or in the vehicle interior and the reflected light rays, in particular infrared rays, can be steered in the direction of the recording unit 32.

Weiterhin weist die Beobachtungsvorrichtung 22 eine Steuereinheit 36 bzw. eine Auswerteeinheit 36 bzw. eine Recheneinheit 36 auf zur Ansteuerung der Beleuchtungseinheit 30 und/oder der Aufnahmeeinheit 32 und/oder zur Verarbeitung der mittels der Aufnahmeeinheit 32 aufgenommenen Daten.Furthermore, the observation device 22 has a control unit 36 or an evaluation unit 36 or a computing unit 36 for controlling the lighting unit 30 and/or the recording unit 32 and/or for processing the data recorded by means of the recording unit 32.

2 zeigt eine schematische Darstellung eines Verfahrens 40 zum Ermitteln einer Notwendigkeit einer Warnung zum Steigern einer Aufmerksamkeit eines Fahrers eines Fahrzeugs gemäß einem Ausführungsbeispiel der vorliegenden Erfindung. Das Verfahren 40 kann beispielsweise mittels einem System gemäß dem System gemäß 4 ausgeführt werden. 2 shows a schematic representation of a method 40 for determining a need for a warning to increase attention of a driver of a vehicle according to an embodiment of the present invention. The method 40 can be carried out, for example, by means of a system according to the system according to 4 be executed.

In einem ersten Schritt 42 des Verfahrens 40 wird eine Aufmerksamkeit des Fahrers mittels einer Beobachtungsvorrichtung zum Beobachten einer Blickrichtung und/oder einer Kopfposition des Fahrers ermittelt. In einer Weiterentwicklung kann ermittelt werden, ob der Fahrer auf einen bestimmten Bereich vor einer Windschutzscheibe des Fahrzeugs blickt. Beispielsweise kann ermittelt werden, ob der Fahrer auf einen Bereich vor einer Windschutzscheibe, insbesondere in Fahrtrichtung des Fahrzeugs, blickt. Die Beobachtungsvorrichtung kann beispielsweise gemäß der Beobachtungsvorrichtung gemäß 1 ausgebildet und/oder in einem Fahrzeug angeordnet sein.In a first step 42 of the method 40, the driver's attention is determined using an observation device for observing a line of sight and/or a head position of the driver. In a further development, it can be determined whether the driver is looking at a specific area in front of a vehicle windshield. For example, it can be determined whether the driver is looking at an area in front of a windshield, in particular in the direction of travel of the vehicle. The observation device can, for example, according to the observation device according to 1 designed and/or arranged in a vehicle.

In einem zweiten Schritt 44 des Verfahrens 40 wird eine Fahrsituation in Abhängigkeit eines oder mehrerer Fahrzeugparameter ermittelt, wobei die Fahrsituation in Abhängigkeit des einen oder mehreren Fahrzeugparameter einer ersten Kategorie oder einer zweiten Kategorie zugeteilt werden kann. Der ersten Kategorie werden die Fahrsituation zugeteilt, bei denen der Fahrer seinen Blick auf einen bestimmten Bereich in einem Umfeld des Fahrzeugs fokussieren sollte. Der zweiten Kategorie die Fahrsituation zugeteilt werden, bei denen der Fahrer in seinen Blick auf das gesamte Umfeld des Fahrzeugs legen kann.In a second step 44 of the method 40, a driving situation is determined depending on one or more vehicle parameters, wherein the driving situation can be assigned to a first category or a second category depending on the one or more vehicle parameters. The first category includes driving situations in which the driver should focus his gaze on a specific area in the vehicle's surroundings. The second category is the driving situation in which the driver can look at the entire surroundings of the vehicle.

Mit anderen Worten befindet sich der Fahrer in einer Fahrsituation der ersten Kategorie, dann sollte der Fahrer seine Aufmerksamkeit mit seinem Blick auf einen bestimmten Bereich in dem Umfeld fokussieren bzw. auf einen bestimmten Bereich blicken. Dieser Bereich kann beispielsweise vor der Windschutzscheibe des Fahrzeugs liegen, wobei vor der Windschutzscheibe insbesondere in Fahrtrichtung bedeutet. Mit anderen Worten sollte der Fahrer insbesondere durch die Windschutzscheibe hindurch auf die Straße vor dem Fahrzeug blicken. Beispielsweise sollte der Fahrer in der Fahrsituation der ersten Kategorie seinen Blick auf einen Bereich vor der Windschutzscheibe des Fahrzeugs fokussieren sollte. Vorzugsweise sollte der Fahrer in der Fahrsituation der ersten Kategorie seinen Blick auf einen bestimmten Bereich vor der Windschutzscheibe des Fahrzeugs fokussieren. Fahrsituationen dieser Kategorie können beispielsweise Fahrten auf der Autobahn, Überlandfahrten oder Fahrten auf eine Vorfahrtsstraße sein.In other words, if the driver is in a driving situation of the first category, then the driver should focus his attention with his gaze on a specific area in the environment or look at a specific area. This area can be located, for example, in front of the windshield of the vehicle, where in front of the windshield means in particular in the direction of travel. In other words, the driver should look particularly through the windshield at the road in front of the vehicle. For example, in the first category driving situation, the driver should focus his gaze on an area in front of the windshield of the vehicle. In the driving situation of the first category, the driver should preferably focus his gaze on a specific area in front of the windshield of the vehicle. Driving situations in this category can be, for example, driving on the motorway, cross-country driving or driving onto a priority road.

In einer Weiterentwicklung können zur Einteilung einer Fahrsituation in unterschiedliche Kategorien beispielsweise verschiedene Fahrzeugparameter verwendet werden. Als Fahrzeugparameter kann beispielsweise eine Fahrzeuggeschwindigkeit und/oder eine Position des Fahrzeugs auf einer Karte verwendet werden. Beispielsweise können der ersten Kategorie die Fahrsituation zugeteilt werden, bei denen bei denen eine Geschwindigkeit des Fahrzeugs eine definierte Geschwindigkeitsschwelle überschreitet. Weiterhin können der zweiten Kategorie die Fahrsituation zugeteilt werden, bei denen bei denen eine Geschwindigkeit des Fahrzeugs eine Geschwindigkeitsschwelle unterschreitet. Mit anderen Worten kann die Geschwindigkeit des Fahrzeugs als Klassifikation der Fahrsituation verwendet werden. Eine Geschwindigkeitsschwelle kann beispielsweise als Schrittgeschwindigkeit ausgebildet sein. Insbesondere können der ersten Kategorie die Fahrsituation zugeteilt werden, bei denen bei denen eine Geschwindigkeit des Fahrzeugs eine Schrittgeschwindigkeit überschreitet. Weiterhin können der zweiten Kategorie die Fahrsituation zugeteilt werden, bei denen bei denen eine Geschwindigkeit des Fahrzeugs eine Schrittgeschwindigkeit unterschreitet.In a further development, for example, different vehicle parameters can be used to divide a driving situation into different categories. For example, a vehicle speed and/or a position of the vehicle on a map can be used as vehicle parameters. For example, the first category can be assigned to driving situations in which the speed of the vehicle exceeds a defined speed threshold. Furthermore, driving situations in which the speed of the vehicle falls below a speed threshold can be assigned to the second category. In other words, the speed of the vehicle can be used as a classification of the driving situation. A speed threshold can, for example, be designed as a walking speed. In particular, the first category can be assigned to driving situations in which the speed of the vehicle exceeds a walking speed. Furthermore, driving situations in which the speed of the vehicle falls below walking speed can be assigned to the second category.

Beispielsweise kann eine Fahrsituation eines Einparkvorgangs, eines Rückwarts-Fahrens, eines Wartens an einer Fahrzeugampel, eines Wartens an einem Fußgängerüberweg, das Heranfahren an eine Kreuzung, das Auffahren auf eine Schnellstraße der zweiten Kategorie zugeordnet werden.For example, a driving situation such as parking, reversing, waiting at a traffic light, waiting at a pedestrian crossing, approaching an intersection, or entering an expressway can be assigned to the second category.

Die Einteilung einer Fahrsituation in die erste Kategorie oder die zweite Kategorie kann mittels maschinellen Lernens eintrainiert werden. Beispielsweise können verschiedene Fahrsituation ausgewertet und entsprechend klassifiziert werden, wodurch eine Einteilung eingelernt werden kann.The division of a driving situation into the first category or the second category can be trained using machine learning. For example, different driving situations can be evaluated and classified accordingly, whereby a classification can be taught.

In einem dritten Schritt 46 des Verfahrens 40 wird eine Notwendigkeit einer Warnung zum Steigern einer Aufmerksamkeit in Abhängigkeit der ermittelten Aufmerksamkeit des Fahrers und der ermittelten Fahrsituation ermittelt. Eine Notwendigkeit wird dann nicht festgestellt, wenn eine definierte Fahrsituation der zweiten Kategorie ermittelt wird oder eine Aufmerksamkeit des Fahrers festgestellt wird. Eine Notwendigkeit wird dann festgestellt, wenn eine Aufmerksamkeit des Fahrers nicht festgestellt wird und eine definierte Fahrsituation der ersten Kategorie ermittelt wird.In a third step 46 of the method 40, a need for a warning to increase attention is determined depending on the determined driver's attention and the determined Driving situation determined. A need is not determined if a defined driving situation of the second category is determined or if the driver is attentive. A need is determined if the driver is not paying attention and a defined driving situation of the first category is determined.

3 zeigt eine schematische Darstellung eines Verfahrens 40 zum Ermitteln einer Notwendigkeit einer Warnung zum Steigern einer Aufmerksamkeit eines Fahrers eines Fahrzeugs gemäß einem Ausführungsbeispiel der vorliegenden Erfindung. Das Verfahren 40 gemäß 3 kann gemäß dem Verfahren 40 gemäß 2 ausgebildet sein. Das Verfahren 40 gemäß 3 kann insbesondere den ersten Schritt 42, den zweiten Schritt 44 und den dritten Schritt 46 gemäß 2 aufweisen. 3 shows a schematic representation of a method 40 for determining a need for a warning to increase attention of a driver of a vehicle according to an embodiment of the present invention. The procedure 40 according to 3 can according to the procedure 40 according to 2 be trained. The procedure 40 according to 3 can in particular the first step 42, the second step 44 and the third step 46 according to 2 exhibit.

Das Verfahren 40 gemäß 3 kann weiterhin einen vierten Schritt 48 aufweisen, wobei in dem vierten Schritt 48 des Verfahrens 40 eine Warnung zum Steigern der Aufmerksamkeit des Fahrers dargestellt wird. Die Warnung kann als ein oder mehrere sich bewegende Leuchtpunkte in einem Bereich zwischen einem Armaturenbrett des Fahrzeugs und der Windschutzscheibe des Fahrzeugs dargestellt werden. The procedure 40 according to 3 may further comprise a fourth step 48, wherein in the fourth step 48 of the method 40 a warning to increase the driver's attention is presented. The warning may be displayed as one or more moving dots of light in an area between a dashboard of the vehicle and the windshield of the vehicle.

Vorteilhafterweise kann mittels der Warnung ein Blick des Fahrers gelenkt werden. Die Darstellung kann beispielsweise mittels einer Anzeigeeinheit dargestellt werden. Die Darstellung der Warnung kann beispielsweise gemäß 5, 6 und/oder 7 ausgebildet sein.Advantageously, the driver's attention can be directed by means of the warning. The representation can be displayed, for example, using a display unit. The warning can be displayed according to, for example 5 , 6 and or 7 be trained.

4 zeigt eine schematische Darstellung eines Systems 50 zum Ermitteln einer Notwendigkeit einer Warnung zum Steigern einer Aufmerksamkeit eines Fahrers eines Fahrzeugs gemäß einem Ausführungsbeispiel der vorliegenden Erfindung. Das System 50 gemäß 4 kann beispielsweise ein Verfahren gemäß dem Verfahren gemäß 2 und/oder 3 ausführen. 4 shows a schematic representation of a system 50 for determining a need for a warning to increase attention of a driver of a vehicle according to an embodiment of the present invention. The system 50 according to 4 For example, a method according to the method according to 2 and or 3 carry out.

Das System 50 weist insbesondere eine Beobachtungsvorrichtung 22 auf. Die Beobachtungsvorrichtung 22 ist ausgebildet zum Beobachten einer Blickrichtung und/oder einer Kopfposition des Fahrers und zum Ermitteln einer Aufmerksamkeit des Fahrers. Die Beobachtungsvorrichtung kann beispielsweise gemäß der Beobachtungsvorrichtung gemäß 1 ausgebildet und/oder in einem Fahrzeug angeordnet sein.The system 50 in particular has an observation device 22. The observation device 22 is designed to observe a line of sight and/or a head position of the driver and to determine whether the driver is attentive. The observation device can, for example, according to the observation device according to 1 designed and/or arranged in a vehicle.

Ferner weist das System 50 eine Recheneinheit 54 bzw. einen Mikrocomputer 54 auf. Die Recheneinheit 54 ist ausgebildet zum Ermitteln einer Fahrsituation in Abhängigkeit eines oder mehrerer Fahrzeugparameter. Die Fahrzeugparameter können beispielsweise von einer Ermittlungseinheit 56 an die Recheneinheit 54 gesendet werden. Die Ermittlungseinheit 56 kann beispielsweise ebenfalls als Recheneinheit und/oder als Messeinheit zum Messen der Fahrzeugparameter ausgebildet sein. Der Fahrzeugparameter kann beispielsweise eine Fahrzeuggeschwindigkeit und/oder eine Position des Fahrzeugs auf einer Karte sein. Die Fahrsituation kann insbesondere in Abhängigkeit des einen oder mehreren Fahrzeugparameter einer ersten Kategorie oder einer zweiten Kategorie zugeteilt werden, wobei der ersten Kategorie die Fahrsituation zugeteilt werden, bei denen der Fahrer seinen Blick auf einen bestimmten Bereich in einem Umfeld des Fahrzeugs fokussieren sollte und wobei der zweiten Kategorie die Fahrsituation zugeteilt werden, bei denen der Fahrer in seinen Blick auf das gesamte Umfeld des Fahrzeugs legen kann. Die Einteilung kann beispielsweise gemäß dem zweiten Schritt des Verfahrens gemäß 2 und/oder 3 ausgeführt werden.The system 50 also has a computing unit 54 or a microcomputer 54. The computing unit 54 is designed to determine a driving situation depending on one or more vehicle parameters. The vehicle parameters can, for example, be sent from a determination unit 56 to the computing unit 54. The determination unit 56 can, for example, also be designed as a computing unit and/or as a measuring unit for measuring the vehicle parameters. The vehicle parameter can be, for example, a vehicle speed and/or a position of the vehicle on a map. The driving situation can be assigned to a first category or a second category, in particular depending on the one or more vehicle parameters, with the first category being assigned the driving situation in which the driver should focus his gaze on a specific area in an environment of the vehicle and where the The second category is the driving situation in which the driver can look at the entire surroundings of the vehicle. The classification can be carried out, for example, according to the second step of the method 2 and or 3 be executed.

Ferner ist die Recheneinheit 54 ausgebildet ist zum Ermitteln einer Notwendigkeit einer Warnung zum Steigern einer Aufmerksamkeit in Abhängigkeit der ermittelten Aufmerksamkeit des Fahrers und der ermittelten Fahrsituation. Die Ermittlung kann beispielsweise gemäß dem dritten Schritt des Verfahrens gemäß 2 und/oder 3 ausgeführt werden. Eine Notwendigkeit dann nicht festgestellt werden, wenn eine definierte Fahrsituation der zweiten Kategorie ermittelt wird oder eine Aufmerksamkeit des Fahrers festgestellt wird. Eine Notwendigkeit kann dann festgestellt werden, wenn eine Aufmerksamkeit des Fahrers nicht festgestellt wird und eine definierte Fahrsituation der ersten Kategorie ermittelt wird.Furthermore, the computing unit 54 is designed to determine the need for a warning to increase attention depending on the determined attention of the driver and the determined driving situation. The determination can be carried out, for example, according to the third step of the method 2 and or 3 be executed. A need cannot be determined if a defined driving situation of the second category is determined or if the driver is attentive. A need can be determined if the driver is not paying attention and a defined driving situation of the first category is determined.

In dieser vorteilhaften Ausführungsform weist das System 50 eine Anzeigeeinheit 58 auf. Die Anzeigeeinheit 58 kann insbesondere als Feedbacksystem ausgebildet sein. Die Anzeigeeinheit 58 ist ausgebildet zum Darstellen einer Warnung zum Steigern der Aufmerksamkeit des Fahrers, wobei die Warnung als ein oder mehrere sich bewegende Leuchtpunkte in einem Bereich zwischen einem Armaturenbrett des Fahrzeugs und der Windschutzscheibe des Fahrzeugs dargestellt werden. In einer beispielhaften Ausgestaltung kann die Anzeigeeinheit 58 als ein Leuchtsteifen zwischen einem Armaturenbrett des Fahrzeugs und der Windschutzscheibe des Fahrzeugs ausgebildet sein. Vorzugsweise kann die Darstellung der Warnung beispielsweise gemäß 5, 6 und/oder 7 ausgebildet sein. Vorzugsweise kann die Anzeigeeinheit 58 beispielsweise gemäß 5, 6 und/oder 7 ausgebildet sein.In this advantageous embodiment, the system 50 has a display unit 58. The display unit 58 can in particular be designed as a feedback system. The display unit 58 is configured to display a warning to increase the driver's attention, the warning being displayed as one or more moving luminous dots in an area between a dashboard of the vehicle and the windshield of the vehicle. In an exemplary embodiment, the display unit 58 can be designed as a light strip between a dashboard of the vehicle and the windshield of the vehicle. Preferably, the warning can be displayed according to, for example 5 , 6 and or 7 be trained. Preferably, the display unit 58 can, for example, according to 5 , 6 and or 7 be trained.

Ein Fahrer, welcher in automatisierten Fahrzeugen nach SAE Level 2 fährt, hat insbesondere weiterhin die Verantwortung, die Fahrsituation zu verfolgen und die Straße zu beobachten. Um sicherzustellen, dass der Fahrer seine Beobachtungsaufgaben erfüllt, kann eine Überwachung des Fahrers implementiert werden. Beispielsweise kann als Überwachung ein Hands on Wheel System verwendet werden, bei dem der Fahrer innerhalb vordefinierter Zeitfenster das Lenkrad berühren muss. Wenn er dies nach einem Eskalationsverfahren nicht tut, wechselt das Auto vom automatisierten in den manuellen Modus zurück. Alternativ oder zusätzlich kann die Überwachung des Fahrers mittels einer Beobachtungsvorrichtung bzw. einer Fahrerüberwachungskamera durchgeführt werden, mittels welche überprüft werden kann, ob der Fahrer seine Beobachtungspflichten beim automatisierten Fahren erfüllt. Erkennt das System, dass der Fahrer seine Beobachtungsaufgabe nicht erfüllt, kann insbesondere eine Warnkaskade gestartet werden. Eine Standard-Warnkaskade kann beispielsweise nach 3-5 Sekunden beginnen. Hierfür kann ein visuelles Signal, ein Audiosignal oder eine Kombination der beiden verwendet werden. Wenn der Fahrer innerhalb der nächsten Sekunden nicht auf die Straße zurückschaut, startet die nächste Warnstufe. Nach weiterer verstrichener Zeit, beispielsweise nach ca. 10-15 Sekunden, kann das System ein Take-over Request bzw. TOR oder minimal risk maneuver bzw. MRM einleiten, um das Auto anzuhalten.In particular, a driver who drives in automated vehicles according to SAE Level 2 still has the responsibility to monitor the driving situation and observe the road. To ensure that the driver fulfills his observation tasks, driver monitoring can be implemented. For example, a hands-on-wheel system can be used as monitoring, in which the driver has to touch the steering wheel within predefined time windows. If he doesn't do this after an escalation procedure, the car switches back from automated to manual mode. Alternatively or additionally, the driver can be monitored using an observation device or a driver monitoring camera, which can be used to check whether the driver fulfills his observation duties during automated driving. If the system detects that the driver is not fulfilling his observation task, a warning cascade can be started. For example, a standard warning cascade can begin after 3-5 seconds. A visual signal, an audio signal or a combination of the two can be used for this. If the driver does not look back at the road within the next few seconds, the next warning level starts. After further elapsed time, for example after approx. 10-15 seconds, the system can initiate a take-over request or TOR or minimal risk maneuver or MRM to stop the car.

Das System 50 umfasst eine Fahrerüberwachungskamera 22 und insbesondere eine Anzeigeeinheit 58. Die Anzeigeeinheit 58 kann beispielsweise als eine LED-Leiste ausgebildet sein, die sich vom linken Fahrerfenster über die Windschutzscheibe bis zur rechten Seite erstreckt. Sobald das System erkennt, dass der Fahrer abgelenkt ist und die Straße nicht beobachtet, das heißt der Blick ist nicht innerhalb vordefinierter Sektoren des Windschutzes, startet das System den ersten Warnkaskadenschritt. Die LED-Leiste zeigt animierte LEDs, die in der Nähe der letzten erkannten Blickposition beginnen und dann die beleuchteten LEDs virtuell in die Hauptansichtsrichtung vor dem Fahrer bringen. Wenn der Fahrer innerhalb eines vordefinierten Zeitrahmens die Straße wieder im Blick hat, schaltet das System die LEDs ab. Wird der Benutzer über den vorgegebenen Zeitraum hinaus abgelenkt, löst das System den zweiten Warnkaskadenschritt aus. Als Beispiel für die zweite Warnkaskade nach einer vordefinierten Warnzeit, zum Beispiel 4 bis 10 Sekunden, zum Beispiel 5 Sekunden, ändern sich die Farben der LEDs, zum Beispiel von blau nach rot, und der komplette Balken blinkt, um den Fahrer zu warnen und seinen Fokus wieder auf die Straße zu lenken. Sobald der Fahrer den Blick zurück auf die Straße hat, stoppt die Warnkaskade und die LEDs werden ausgeschaltet.The system 50 includes a driver monitoring camera 22 and in particular a display unit 58. The display unit 58 can be designed, for example, as an LED bar that extends from the left driver's window over the windshield to the right side. As soon as the system detects that the driver is distracted and not watching the road, i.e. the view is not within predefined sectors of the windbreak, the system starts the first warning cascade step. The LED bar displays animated LEDs that start near the last detected viewing position and then virtually bring the illuminated LEDs into the main viewing direction in front of the driver. When the driver regains sight of the road within a predefined time frame, the system switches off the LEDs. If the user is distracted beyond the specified period of time, the system triggers the second warning cascade step. As an example of the second warning cascade, after a predefined warning time, for example 4 to 10 seconds, for example 5 seconds, the colors of the LEDs change, for example from blue to red, and the entire bar flashes to warn the driver and his To bring the focus back to the road. As soon as the driver looks back at the road, the warning cascade stops and the LEDs are switched off.

Die Warnmethode kann unter Berücksichtigung bestimmter Fahrsituationen kombiniert werden. Beispielsweise kann der Fahrer bei dem ein Parkvorgang seinen Blick von der Straße abwenden, ohne dass das System die Warnkaskade startet.The warning method can be combined taking into account specific driving situations. For example, the driver can look away from the road when parking without the system starting the warning cascade.

Die Beobachtungsvorrichtung 22 bzw. Driver Attention Sensing 22 ist verantwortlich für die Überwachung der Aufmerksamkeit des Benutzers über die Zeit. Parameter zur Überwachung der Aufmerksamkeit des Fahrers sind der Blick und/oder die Kopfhaltung des Fahrers, die vorteilhafterweise vom Fahrerüberwachungssystem gemessen werden. Gesammelte Daten können im Mikrocomputer 54 verarbeitet werden. Sobald vordefinierte Schwellen erreicht sind, zum Beispiel kein Blick auf die Straße, definiert durch bestimmte Sektoren auf der Windschutzscheibe, beispielsweise für mehr als 3 bis 5 Sekunden, insbesondere für mehr als 3 Sekunden, kann die Warnkaskade gestartet werden, wobei beispielsweise eine LED-Leiste angesteuert werden kann, die sich von der linken Seite über die Windschutzscheibe bis zur rechten Seitenscheibe erstreckt.The observation device 22 or Driver Attention Sensing 22 is responsible for monitoring the user's attention over time. Parameters for monitoring the driver's attention are the driver's gaze and/or head position, which are advantageously measured by the driver monitoring system. Collected data can be processed in the microcomputer 54. As soon as predefined thresholds are reached, for example no view of the road, defined by certain sectors on the windshield, for example for more than 3 to 5 seconds, in particular for more than 3 seconds, the warning cascade can be started, using, for example, an LED bar can be controlled, which extends from the left side over the windshield to the right side window.

Der Micro Computer 54 wertet die Daten der Fahrerüberwachung 22 in Echtzeit aus. Wenn die Warnschwellen überschritten werden, wird die Warnkaskade je nach Fahr- und Fahrsituation gestartet. Die Fahrsituation wird von verschiedenen im Auto verteilten Sensorsystemen 56 erfasst, zum Beispiel eine Karte mit der aktuellen Position und anderen Sensoren zur Geschwindigkeitsmessung, Erkennung anderer Fahrzeuge und weitere. Dies kann beispielsweise als Driver Situation Detection bezeichnet werden. Es kann bestimmte Verkehrssituationen anhand von Machine-Learning-Prinzipien erkennen und/oder klassifizieren.The microcomputer 54 evaluates the data from the driver monitoring system 22 in real time. If the warning thresholds are exceeded, the warning cascade is started depending on the driving and driving situation. The driving situation is recorded by various sensor systems 56 distributed throughout the car, for example a map with the current position and other sensors for measuring speed, detecting other vehicles and more. This can be referred to as driver situation detection, for example. It can detect and/or classify certain traffic situations using machine learning principles.

Der Micro Computer kann die Warnkaskade abhängig von der erkannten Situation starten und stoppt sie, wenn der Blick wieder auf die Straße gerichtet ist.The micro computer can start the warning cascade depending on the situation detected and stops it when the view is back on the road.

Typische Fahrsituationen die der zweiten Kategorie zugeteilt werden und somit die Warnkaskade nicht gestattet wird, insbesondere auch wenn der Fahrer nicht auf die Straße vor sich blickt, sind beispielsweise und nicht abschließend:

  • • Warten vor Ampeln
  • • Parksituationen
  • • Rückwärtsfahrt
  • • Suche nach Fußgängern in Situationen mit niedriger Geschwindigkeit Alternativ können sich bei erkannten Fußgängern eine oder mehrere animierte LEDs zu den erkannten Fußgängern bewegen.
  • • Warten an Querschnitten Alternative können sich animierte LEDs zu erkannten anderen Autos bewegen.
  • • Übernahme einer Autobahn Alternative können sich animierte LEDs zu erkannten anderen Autos am Fahrerfenster bewegen.
  • • Fahren nach rechts oder links in einer Kreuzung Alternativ können sich bei erkannten Fußgängern oder Autos eine oder mehrere animierte LEDs zu den erkannten Fußgängern oder Autos bewegen.
  • • Warten im Stau bei Nullgeschwindigkeit
  • • Das Auto steht still
Typical driving situations that are assigned to the second category and therefore the warning cascade is not permitted, especially if the driver is not looking at the road in front of him, are, for example and not exhaustive:
  • • Waiting at traffic lights
  • • Parking situations
  • • Reverse travel
  • • Search for pedestrians in low speed situations Alternatively, when pedestrians are detected, one or more animated LEDs can move towards the detected pedestrians.
  • • Waiting at cross sections Alternatively, animated LEDs can move to recognized other cars.
  • • Adopting a highway alternative, animated LEDs can move to other cars detected on the driver's window.
  • • Driving to the right or left in an intersection Alternatively, when pedestrians or cars are detected, one or more animated LEDs can move to the detected pedestrians or cars.
  • • Waiting in a traffic jam at zero speed
  • • The car is stationary

Die Anzeigeeinheit 58 kann als Feedbacksystem 58 ausgebildet sein. Das FeedbackSystem 58 soll insbesondere den Fokus des Fahrers steuern und den Blick zurück auf die Straße bzw. einen definierten Bereich lenken. Dies kann beispielsweise durch eine LED-Leiste realisiert werden, die animierte Balken zeigt, die von der letzten erkannten Blickposition ausgehen und von dort aus in eine Position vor dem Sichtfeld des Fahrers übergehen. Nach einer vordefinierten Zeit, in der die nächste Warnstufe startet, können sich beispielsweise Farben, zum Beispiel von blau auf rot, und/oder die Blinkfrequenz ändern, um die Aufmerksamkeit des Fahrers wiederzuerlangen.The display unit 58 can be designed as a feedback system 58. The feedback system 58 is intended in particular to control the driver's focus and direct the view back to the road or a defined area. This can be achieved, for example, with an LED bar that shows animated bars that start from the last recognized viewing position and from there transition to a position in front of the driver's field of vision. After a predefined time in which the next warning level starts, colors, for example from blue to red, and/or the flashing frequency can change in order to regain the driver's attention.

Fährt ein Fahrer beispielsweise im SAE L2 Freisprechmodus auf einer Autobahn und hat damit begonnen, E-Mails auf ihrem Mobiltelefon zu checken und schaut nicht auf die Straße, kann dieser durch das Fahrerüberwachungssystem überwacht werden. Nach beispielsweise ca. 3 Sekunden kann die LED-Leiste die Animationen starten. Der Fahrer kann darauf aufmerksam werden und zurück auf die Straße blicken. Die Animation kann vorteilhafterweise anschließend gestoppt werden. Schaut ein Fahrer während eines Staus und somit einer niedrigen Geschwindigkeit auf ein Smartphone oder Ähnliches, kann diese Fahrsituation in die zweite Kategorie eingeteilt werden, wodurch das Warnsystem insbesondere nicht gestattet wird. Das Fahrzeug kann im automatisierten Level hierbei insbesondere selbst steuern.For example, if a driver is driving on a highway in SAE L2 hands-free mode and has started checking emails on their cell phone and is not looking at the road, this can be monitored by the driver monitoring system. After about 3 seconds, for example, the LED bar can start the animations. The driver may become aware of this and look back at the road. The animation can advantageously be stopped afterwards. If a driver looks at a smartphone or similar during a traffic jam and therefore at a low speed, this driving situation can be classified into the second category, which in particular means that the warning system is not permitted. In particular, the vehicle can control itself at the automated level.

Vorzugsweise kann mittels einer Beobachtungsvorrichtung, zum Beispiel mittels einer Kamera, ein Bild eines Fahrers erfasst und mittels eines Verarbeitungsalgorithmus auf einer Recheneinheit auf eine Aufmerksamkeit des Fahrers ermittelt werden. Beispielsweise können eine Blickrichtung, eine Lidschlagsfrequenz und/oder eine Kopfposition des Fahrers ermitteln werden. Eine hohe Lidschlagsfrequenz, geschlossene Augenlider und/oder ein gesenkter Kopf können auf eine Ermüdung des Fahrers hindeuten. Preferably, an image of a driver can be captured using an observation device, for example a camera, and the driver's attention can be determined using a processing algorithm on a computing unit. For example, a line of sight, a blink frequency and/or a head position of the driver can be determined. A high blink rate, closed eyelids and/or a bowed head can indicate driver fatigue.

5 zeigt eine schematische Darstellung einer Anzeigeeinheit 58 gemäß einem Ausführungsbeispiel der vorliegenden Erfindung. Die Anzeigeeinheit 58 kann Teil eines Systems gemäß dem System gemäß 4 sein. Die Anzeigeeinheit 58 kann eine Darstellung anzeigen, welche mittels des Verfahrens gemäß dem Verfahren gemäß 3 ermittelt wird bzw. wurde. 5 shows a schematic representation of a display unit 58 according to an exemplary embodiment of the present invention. The display unit 58 can be part of a system according to the system according to 4 be. The display unit 58 can display a representation which is made using the method according to the method according to 3 is or has been determined.

Die Anzeigeeinheit 58 ist in einem Fahrzeug 20 angeordnet. In dieser vorteilhaften Ausführung ist die Anzeigeeinheit 58 als ein LED-Streifen 60 bzw. LED-Balken 60 zwischen der Windschutzscheibe 62 und dem Fahrzeug 20, hier besondere zwischen der Windschutzscheibe 62 und dem Armaturenbrett 34, angeordnet. Der LED-Streifen 60 kann von einem ein Fahrer 24 betrachtet werden. Anstelle von LED können auch andere Leuchtmittel verwendet werdenThe display unit 58 is arranged in a vehicle 20. In this advantageous embodiment, the display unit 58 is arranged as an LED strip 60 or LED bar 60 between the windshield 62 and the vehicle 20, here in particular between the windshield 62 and the dashboard 34. The LED strip 60 can be viewed by a driver 24. Other light sources can also be used instead of LED

Auf der Straße vor der Windschutzscheibe 62 wird mittels eines Fahrzeugsicherheitssystems ein vorausfahrendes Fahrzeug 66 erkannt. Ferner wird mittels einer Beobachtungsvorrichtung ein Blick 68 des Fahrers 24 ermittelt. Die Beobachtungsvorrichtung kann beispielsweise gemäß der Beobachtungsvorrichtung gemäß 1 ausgebildet und/oder in dem Fahrzeug angeordnet sein. In dieser Ausführung blickt der Fahrer 24 nicht auf das vorausfahrende Fahrzeug 66 und somit das Verkehrsgeschehen, sondern in der Umgebung des Fahrzeugs umher, hier insbesondere nach rechts über die Fahrbahn hinweg. Nach einer gewissen Zeit, beispielsweise 3-5 Sekunden, insbesondere 3 Sekunden, in denen der Fahrer 24 nicht wieder zurück auf das Verkehrsgeschehen blickt, kann eine Notwendigkeit einer Steigerung der Aufmerksamkeit des Fahrers 24 mittels des Verfahrens gemäß 2 und/oder 3 ermittelt werden.A vehicle 66 driving ahead is detected on the road in front of the windshield 62 by means of a vehicle safety system. Furthermore, a look 68 of the driver 24 is determined using an observation device. The observation device can, for example, according to the observation device according to 1 designed and/or arranged in the vehicle. In this embodiment, the driver 24 does not look at the vehicle 66 in front and thus at the traffic situation, but rather around the area surrounding the vehicle, here in particular to the right across the road. After a certain time, for example 3-5 seconds, in particular 3 seconds, in which the driver 24 does not look back at the traffic situation, there may be a need to increase the driver's attention 24 using the method 2 and or 3 be determined.

Um die Aufmerksamkeit des Fahrers 24 zu steigern können Lichtpunkte 70 bzw. Lichtbalken 70 auf dem LED-Streifen 60 angezeigt werden. In dieser vorteilhaften Ausführung werden die Lichtstreifen 70 an der Stelle angezeigt, auf welcher Höhe der Blick 68 des Fahrers 24 erkannt wird. Anschließend bewegt sich der Lichtstreifen 70 entlang des LED-Streifen 60 in Richtung des Fahrgeschehens und somit in Richtung Höhe des erkannten vorausfahrenden Fahrzeug 66. Hierdurch kann der Blick des Fahrers 24 entlang des Lichtbalkens 70 auf dem LED-Streifen 60 gelenkt werden. Vorteilhafterweise können mehrere Lichtpunkte 70 bzw. Lichtbalken 70 entlang des LED-Streifen 60 angezeigt werden und entlang bewegt werden. Wird mittels der Beobachtungsvorrichtung erkannt, dass der Fahrer anschließend auf das vorausfahrende Fahrzeug 66 blickt, wird der LED-Streifen 60 wieder abgeschaltet. Wird erkannt, dass der Fahrer nicht wieder auf 40 Verkehrsgeschehen und somit das vorausfahrende Fahrzeug 66 blickt, kann eine weitere Warnstufe eingeleitet werden, beispielsweise gemäß 7.In order to increase the driver's attention 24, light spots 70 or light bars 70 can be displayed on the LED strip 60. In this advantageous embodiment, the light strips 70 are displayed at the point at which level the driver 24's gaze 68 is recognized. The light strip 70 then moves along the LED strip 60 in the direction of the driving event and thus in the direction of the height of the detected vehicle 66 in front. This allows the driver 24's gaze to be directed along the light bar 70 on the LED strip 60. Advantageously, several light points 70 or light bars 70 can be displayed and moved along the LED strip 60. If the observation device detects that the driver is then looking at the vehicle 66 in front, the LED strip 60 is switched off again. If it is recognized that the driver is not again looking at the traffic situation and thus at the vehicle 66 in front, a further warning level can be initiated, for example according to 7 .

6 zeigt eine schematische Darstellung einer Anzeigeeinheit 58 gemäß einem Ausführungsbeispiel der vorliegenden Erfindung. Die Anzeigeeinheit 58 kann Teil eines Systems gemäß dem System gemäß 4 sein. Die Anzeigeeinheit 58 kann eine Darstellung anzeigen, welche mittels des Verfahrens gemäß dem Verfahren gemäß 3 ermittelt wird bzw. wurde. Die Anzeigeeinheit 58 kann gemäß der Anzeigeeinheit gemäß 5 ausgebildet sein. In dieser vorteilhaften Ausführung wird mittels einer Beobachtungsvorrichtung erkannt, dass der Fahrer 24 auf das Entertainment System 72 blickt. Um die Aufmerksamkeit des Fahrers zurückzugewinnen, können insbesondere Leuchtbalken 70 von rechts nach links und von links nach rechts eingefahren werden, und sich auf der Höhe des vorausfahrenden Fahrzeug 66 zu einem größeren Balken verbinden. Die Leuchtbalken 70 können entweder am Ende des LED-Streifen 60 starten oder in der Mitte, beispielsweise auf Höhe des Entertainmentsystems 72. 6 shows a schematic representation of a display unit 58 according to an exemplary embodiment of the present invention. The display unit 58 can be part of a system according to the system according to 4 be. The display unit 58 can display a representation which is made using the method according to the method according to 3 is or has been determined. The display unit 58 can according to the display unit according to 5 be trained. In this advantageous embodiment, an observation device is used to detect that the driver 24 is looking at the entertainment system 72. In order to regain the driver's attention, light bars 70 in particular can be retracted from right to left and from left to right, and combine to form a larger bar at the height of the vehicle 66 in front. The light bars 70 can either start at the end of the LED strip 60 or in the middle, for example at the level of the entertainment system 72.

7 zeigt eine schematische Darstellung einer Anzeigeeinheit 58 gemäß einem Ausführungsbeispiel der vorliegenden Erfindung. Die Anzeigeeinheit 58 kann Teil eines Systems gemäß dem System gemäß 4 sein. Die Anzeigeeinheit 58 kann eine Darstellung anzeigen, welche mittels des Verfahrens gemäß dem Verfahren gemäß 3 ermittelt wird bzw. wurde. Die Anzeigeeinheit 58 kann gemäß der Anzeigeeinheit gemäß 5 und/oder 6 ausgebildet sein. In dieser vorteilhaften Ausführung wird mittels der Beobachtungsvorrichtung erkannt, dass der Fahrer 24 nach einer ersten Warnstufe nicht zurück auf das Verkehrsgeschehen blickt. Anschließend kann eine zweite Warnstufe eingeleitet werden, wobei insbesondere der gesamte LED-Streifen 60 leuchtet. Der LED-Streifen 60 kann beispielsweise in einer Warnfarbe, zum Beispiel rot, leuchten. 7 shows a schematic representation of a display unit 58 according to an exemplary embodiment of the present invention. The display unit 58 can be part of a system according to the system according to 4 be. The display unit 58 can display a representation which is made using the method according to the method according to 3 is or has been determined. The display unit 58 can according to the display unit according to 5 and or 6 be trained. In this advantageous embodiment, the observation device detects that the driver 24 does not look back at the traffic after a first warning level. A second warning level can then be initiated, with the entire LED strip 60 in particular lighting up. The LED strip 60 can, for example, light up in a warning color, for example red.

ZITATE ENTHALTEN IN DER BESCHREIBUNGQUOTES INCLUDED IN THE DESCRIPTION

Diese Liste der vom Anmelder aufgeführten Dokumente wurde automatisiert erzeugt und ist ausschließlich zur besseren Information des Lesers aufgenommen. Die Liste ist nicht Bestandteil der deutschen Patent- bzw. Gebrauchsmusteranmeldung. Das DPMA übernimmt keinerlei Haftung für etwaige Fehler oder Auslassungen.This list of documents listed by the applicant was generated automatically and is included solely for the better information of the reader. The list is not part of the German patent or utility model application. The DPMA assumes no liability for any errors or omissions.

Zitierte PatentliteraturCited patent literature

  • DE 102014214352 A1 [0001]DE 102014214352 A1 [0001]

Claims (14)

Verfahren (40) zum Ermitteln einer Notwendigkeit einer Warnung zum Steigern einer Aufmerksamkeit eines Fahrers (24) eines Fahrzeugs (20) mit den Schritten, Ermitteln einer Aufmerksamkeit des Fahrers (24) mittels einer Beobachtungsvorrichtung (22) zum Beobachten einer Blickrichtung und/oder einer Kopfposition des Fahrers (24), Ermitteln einer Fahrsituation in Abhängigkeit eines oder mehrerer Fahrzeugparameter, wobei die Fahrsituation in Abhängigkeit des einen oder mehreren Fahrzeugparameter einer ersten Kategorie oder einer zweiten Kategorie zugeteilt werden kann, wobei der ersten Kategorie die Fahrsituation zugeteilt werden, bei denen der Fahrer (24) seinen Blick auf einen bestimmten Bereich in einem Umfeld des Fahrzeugs (20) fokussieren sollte und wobei der zweiten Kategorie die Fahrsituation zugeteilt werden, bei denen der Fahrer (24) in seinen Blick auf das gesamte Umfeld des Fahrzeugs (20) legen kann, Ermitteln einer Notwendigkeit einer Warnung zum Steigern einer Aufmerksamkeit in Abhängigkeit der ermittelten Aufmerksamkeit des Fahrers (24) und der ermittelten Fahrsituation, wobei eine Notwendigkeit dann nicht festgestellt wird, wenn eine definierte Fahrsituation der zweiten Kategorie ermittelt wird oder eine Aufmerksamkeit des Fahrers (24) festgestellt wird, wobei eine Notwendigkeit dann festgestellt wird, wenn eine Aufmerksamkeit des Fahrers (24) nicht festgestellt wird und eine definierte Fahrsituation der ersten Kategorie ermittelt wird.Method (40) for determining the need for a warning to increase the attention of a driver (24) of a vehicle (20) with the steps, Determining whether the driver (24) is paying attention by means of an observation device (22) for observing a line of sight and/or a head position of the driver (24), Determining a driving situation depending on one or more vehicle parameters, wherein the driving situation can be assigned to a first category or a second category depending on the one or more vehicle parameters, wherein the first category is assigned the driving situation in which the driver (24) should focus his gaze on a specific area in an environment of the vehicle (20) and the second category is assigned the driving situation in which the driver (24) in can look at the entire surroundings of the vehicle (20), Determining the need for a warning to increase attention depending on the determined attention of the driver (24) and the determined driving situation, wherein a necessity is not determined if a defined driving situation of the second category is determined or if the driver (24) is attentive is determined, wherein a necessity is determined when the driver (24) is not attentive and a defined driving situation of the first category is determined. Verfahren (40) nach Anspruch 1, mit einem Schritt des Darstellens einer Warnung zum Steigern der Aufmerksamkeit des Fahrers (24), wobei die Warnung als ein oder mehrere sich bewegende Leuchtpunkte (70) und/oder Leuchtbalken (70) in einem Bereich zwischen einem Armaturenbrett (34) des Fahrzeugs (20) und der Windschutzscheibe (62) des Fahrzeugs (20) dargestellt werden.Procedure (40) according to Claim 1 , with a step of displaying a warning to increase the driver's attention (24), the warning being one or more moving light dots (70) and / or light bars (70) in an area between a dashboard (34) of the vehicle ( 20) and the windshield (62) of the vehicle (20) are shown. Verfahren (40) nach Anspruch 2, wobei mittels der Warnung ein Blick des Fahrers (24) gelenkt wird.Procedure (40) according to Claim 2 , whereby the driver's (24) look is directed by means of the warning. Verfahren (40) nach einem der vorherigen Ansprüche, wobei im Schritt des Ermittelns der Aufmerksamkeit des Fahrers (24) ermittelt wird, ob der Fahrer (24) auf einen Bereich vor einer Windschutzscheibe (62) des Fahrzeugs (20) blickt.Method (40) according to one of the preceding claims, wherein in the step of determining the attention of the driver (24) it is determined whether the driver (24) is looking at an area in front of a windshield (62) of the vehicle (20). Verfahren (40) nach einem der vorherigen Ansprüche, wobei der Fahrer (24) in der Fahrsituation der ersten Kategorie seinen Blick auf einen Bereich vor der Windschutzscheibe (62) des Fahrzeugs (20) fokussieren sollte.Method (40) according to one of the preceding claims, wherein the driver (24) in the driving situation of the first category should focus his gaze on an area in front of the windshield (62) of the vehicle (20). Verfahren (40) nach einem der vorherigen Ansprüche, wobei die Einteilung einer Fahrsituation in die erste Kategorie oder die zweite Kategorie mittels maschinellen Lernens eintrainiert wird.Method (40) according to one of the preceding claims, wherein the classification of a driving situation into the first category or the second category is trained using machine learning. Verfahren (40) nach einem der vorherigen Ansprüche, wobei als Fahrzeugparameter eine Fahrzeuggeschwindigkeit und/oder eine Position des Fahrzeugs (20) auf einer Karte verwendet wird.Method (40) according to one of the preceding claims, wherein a vehicle speed and/or a position of the vehicle (20) on a map is used as the vehicle parameter. Verfahren (40) nach einem der vorherigen Ansprüche, wobei der ersten Kategorie die Fahrsituation zugeteilt werden, bei denen bei denen eine Geschwindigkeit des Fahrzeugs (20) eine definierte Geschwindigkeitsschwelle überschreitet.Method (40) according to one of the preceding claims, wherein the first category is assigned the driving situation in which a speed of the vehicle (20) exceeds a defined speed threshold. Verfahren (40) nach einem der vorherigen Ansprüche, wobei der zweiten Kategorie die Fahrsituation zugeteilt werden, bei denen bei denen eine Geschwindigkeit des Fahrzeugs (20) eine Geschwindigkeitsschwelle unterschreitet.Method (40) according to one of the preceding claims, wherein the second category is assigned the driving situation in which a speed of the vehicle (20) falls below a speed threshold. Verfahren (40) nach einem der vorherigen Ansprüche 8 bis 9, wobei Geschwindigkeitsschwelle als Schrittgeschwindigkeit ausgebildet ist.Method (40) according to one of the previous ones Claims 8 until 9 , whereby the speed threshold is designed as a walking speed. Verfahren (40) nach einem der vorherigen Ansprüche, wobei eine Fahrsituation eines Einparkvorgangs, eines Rückwärts-Fahrens, eines Wartens an einer Fahrzeugampel, eines Wartens an einem Fußgängerüberweg, das Heranfahren an eine Kreuzung, das Auffahren auf eine Schnellstraße der zweiten Kategorie zugeordnet wird.Method (40) according to one of the preceding claims, wherein a driving situation of a parking operation, reversing, waiting at a vehicle traffic light, waiting at a pedestrian crossing, approaching an intersection, entering a highway is assigned to the second category. System (50) zum Ermitteln einer Notwendigkeit einer Warnung zum Steigern einer Aufmerksamkeit eines Fahrers (24) eines Fahrzeugs (20) umfassend eine Beobachtungsvorrichtung (22) zum Beobachten einer Blickrichtung und/oder einer Kopfposition des Fahrers (24) und zum Ermitteln einer Aufmerksamkeit des Fahrers (24), eine Recheneinheit (54), wobei die Recheneinheit (54) ausgebildet ist zum Ermitteln einer Fahrsituation in Abhängigkeit eines oder mehrerer Fahrzeugparameter, wobei die Fahrsituation in Abhängigkeit des einen oder mehreren Fahrzeugparameter einer ersten Kategorie oder einer zweiten Kategorie zugeteilt werden kann, wobei der ersten Kategorie die Fahrsituation zugeteilt werden, bei denen der Fahrer (24) seinen Blick auf einen bestimmten Bereich in einem Umfeld des Fahrzeugs (20) fokussieren sollte und wobei der zweiten Kategorie die Fahrsituation zugeteilt werden, bei denen der Fahrer (24) in seinen Blick auf das gesamte Umfeld des Fahrzeugs (20) legen kann, und wobei die Recheneinheit (54) ausgebildet ist zum Ermitteln einer Notwendigkeit einer Warnung zum Steigern einer Aufmerksamkeit in Abhängigkeit der ermittelten Aufmerksamkeit des Fahrers (24) und der ermittelten Fahrsituation, wobei eine Notwendigkeit dann nicht festgestellt wird, wenn eine definierte Fahrsituation der zweiten Kategorie ermittelt wird oder eine Aufmerksamkeit des Fahrers (24) festgestellt wird und wobei eine Notwendigkeit dann festgestellt wird, wenn eine Aufmerksamkeit des Fahrers (24) nicht festgestellt wird und eine definierte Fahrsituation der ersten Kategorie ermittelt wird.System (50) for determining the need for a warning to increase the attention of a driver (24) of a vehicle (20), comprising an observation device (22) for observing a line of sight and/or a head position of the driver (24) and for determining the attention of the driver (24). Driver (24), a computing unit (54), the computing unit (54) being designed to determine a driving situation depending on one or more vehicle parameters, wherein the driving situation can be assigned to a first category or a second category depending on the one or more vehicle parameters , the first category being assigned the driving situation in which the driver (24) should focus his gaze on a specific area in the surroundings of the vehicle (20) and the second category being assigned the driving situation in which the driver (24) in its view of the entire surroundings of the vehicle (20), and wherein the computing unit (54) is designed to determine the need for a warning to increase attention depending the determined attention of the driver (24) and the determined driving situation, whereby a necessity is not determined if a defined driving situation of the second category is determined or if the driver's attention (24) is determined and whereby a necessity is determined when one Attention of the driver (24) is not determined and a defined driving situation of the first category is determined. System (50) nach Anspruch 12, wobei das System eine Anzeigeeinheit (58) aufweist zum Darstellen einer Warnung zum Steigern der Aufmerksamkeit des Fahrers (24), wobei die Warnung als ein oder mehrere sich bewegende Leuchtpunkte (70) und/oder Leuchtbalken (70) in einem Bereich zwischen einem Armaturenbrett (34) des Fahrzeugs (20) und der Windschutzscheibe (62) des Fahrzeugs (20) dargestellt werden.System (50) after Claim 12 , wherein the system has a display unit (58) for displaying a warning to increase the driver's attention (24), the warning being one or more moving light dots (70) and / or light bars (70) in an area between a dashboard (34) of the vehicle (20) and the windshield (62) of the vehicle (20) are shown. System (50) nach Anspruch 13, wobei die Anzeigeeinheit (58) als ein LED-Streifen (60) zwischen einem Armaturenbrett (34) des Fahrzeugs (20) und der Windschutzscheibe (62) des Fahrzeugs (20) ausgebildet ist.System (50) after Claim 13 , wherein the display unit (58) is designed as an LED strip (60) between a dashboard (34) of the vehicle (20) and the windshield (62) of the vehicle (20).
DE102022210120.0A 2022-09-26 2022-09-26 Method and device for determining a need for a warning to increase attention of a driver of a vehicle Pending DE102022210120A1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
DE102022210120.0A DE102022210120A1 (en) 2022-09-26 2022-09-26 Method and device for determining a need for a warning to increase attention of a driver of a vehicle

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
DE102022210120.0A DE102022210120A1 (en) 2022-09-26 2022-09-26 Method and device for determining a need for a warning to increase attention of a driver of a vehicle

Publications (1)

Publication Number Publication Date
DE102022210120A1 true DE102022210120A1 (en) 2024-03-28

Family

ID=90140017

Family Applications (1)

Application Number Title Priority Date Filing Date
DE102022210120.0A Pending DE102022210120A1 (en) 2022-09-26 2022-09-26 Method and device for determining a need for a warning to increase attention of a driver of a vehicle

Country Status (1)

Country Link
DE (1) DE102022210120A1 (en)

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102013012470A1 (en) 2013-07-26 2015-01-29 Audi Ag Method for operating a warning system of a motor vehicle and warning system for a motor vehicle
DE102014004395B3 (en) 2014-03-26 2015-06-18 Audi Ag Method for operating a driver assistance system and motor vehicle
DE102014214352A1 (en) 2014-07-23 2016-01-28 Robert Bosch Gmbh Method and arrangement for operating an occupant observation system
DE102018216008A1 (en) 2017-11-15 2019-05-16 Omron Corporation APPARATUS FOR DETERMINING DISCONTINUED DRIVING, METHOD FOR DETERMINING DISCONTINUED DRIVING, AND PROGRAM FOR DETERMINING DISCONTINUED DRIVING

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102013012470A1 (en) 2013-07-26 2015-01-29 Audi Ag Method for operating a warning system of a motor vehicle and warning system for a motor vehicle
DE102014004395B3 (en) 2014-03-26 2015-06-18 Audi Ag Method for operating a driver assistance system and motor vehicle
DE102014214352A1 (en) 2014-07-23 2016-01-28 Robert Bosch Gmbh Method and arrangement for operating an occupant observation system
DE102018216008A1 (en) 2017-11-15 2019-05-16 Omron Corporation APPARATUS FOR DETERMINING DISCONTINUED DRIVING, METHOD FOR DETERMINING DISCONTINUED DRIVING, AND PROGRAM FOR DETERMINING DISCONTINUED DRIVING

Similar Documents

Publication Publication Date Title
DE112016006416B4 (en) VEHICLE CONTROL DEVICE AND VEHICLE CONTROL METHOD
DE102019208663B4 (en) Method for supporting a driver with regard to objects and motor vehicle relevant to a traffic situation
EP2625056A1 (en) Motor vehicle having a device for influencing the viewing direction of the driver
DE102013216490A1 (en) A system for providing a signal to an object in the environment of the system
DE102016001204B4 (en) Motor vehicle
DE102012221036A1 (en) Method for automatic switching on of parking- and/or maneuvering assistance systems e.g. park distance control system in motor car, involves switching on parking- and/or maneuvering assistance systems based on evaluation of driver behavior
DE102009002979A1 (en) Projection display device for vehicles, comprises sensor units formed to generate projection data from sensor values and location information, where control unit is formed to perform filtering of projection data
EP3409551B1 (en) Method and device for supporting a vehicle occupant located in a vehicle
DE102013210826A1 (en) A method of operating a display device, computer program product, display device
DE102012025354A1 (en) Method for indicating change of dynamic parameter e.g. velocity of vehicle e.g. passenger car, involves altering pre-defined light spots projected onto a surface in environment of vehicle, depending on variation of dynamic parameter
DE102017119834A1 (en) A method for assisting a driver of a motor vehicle in a turn, driver assistance system and motor vehicle
DE102008038831A1 (en) Method for automatic view guidance of driver of vehicle, involves determining information for operation of vehicle, with which view of driver is automatically diverted to traffic situation or to information
DE102014019420A1 (en) Motor vehicle headlight system, motor vehicle, method for operating a motor vehicle headlight system and computer program product
DE102008043601B4 (en) Method and device for optimizing visibility for a user when changing the light fields affecting the user
DE29811086U1 (en) Device for detecting influences affecting the visual quality for driving a motor vehicle
DE102022210120A1 (en) Method and device for determining a need for a warning to increase attention of a driver of a vehicle
DE10047817B4 (en) Motor vehicle with means for reducing the risk of accidents
EP1944195B1 (en) Method and device for controlling a close up lighting device for a driver assistance system of a motor vehicle
DE102017010513A1 (en) A method for detecting an attention of a person detected in an environment of a vehicle
DE102014016579B4 (en) Method for operating a driver assistance system after an accident and a motor vehicle
DE102020106850A1 (en) Method for assisting an occupant when getting out of a vehicle by adapting a display, driver assistance system and vehicle
DE10249816B4 (en) Method and device for operating an automotive night-vision system
DE102018214453A1 (en) Warning system and motor vehicle
DE102023206382B3 (en) Method for adjusting a sampling rate of an observation camera for observing a vehicle occupant
DE102021202504A1 (en) Method for detecting inattention on the part of a driver of a vehicle

Legal Events

Date Code Title Description
R163 Identified publications notified