WO2018116619A1 - 車両用運転者状態判定装置 - Google Patents

車両用運転者状態判定装置 Download PDF

Info

Publication number
WO2018116619A1
WO2018116619A1 PCT/JP2017/038158 JP2017038158W WO2018116619A1 WO 2018116619 A1 WO2018116619 A1 WO 2018116619A1 JP 2017038158 W JP2017038158 W JP 2017038158W WO 2018116619 A1 WO2018116619 A1 WO 2018116619A1
Authority
WO
WIPO (PCT)
Prior art keywords
driver
vehicle
reaction time
determination device
state determination
Prior art date
Application number
PCT/JP2017/038158
Other languages
English (en)
French (fr)
Inventor
寛 森本
亜矢子 角田
兼義 植田
Original Assignee
株式会社デンソー
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 株式会社デンソー filed Critical 株式会社デンソー
Publication of WO2018116619A1 publication Critical patent/WO2018116619A1/ja
Priority to US16/431,985 priority Critical patent/US11077858B2/en

Links

Images

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W30/00Purposes of road vehicle drive control systems not related to the control of a particular sub-unit, e.g. of systems using conjoint control of vehicle sub-units
    • B60W30/14Adaptive cruise control
    • B60W30/16Control of distance between vehicles, e.g. keeping a distance to preceding vehicle
    • B60W30/17Control of distance between vehicles, e.g. keeping a distance to preceding vehicle with provision for special action when the preceding vehicle comes to a halt, e.g. stop and go
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/08Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to drivers or passengers
    • B60W40/09Driving style or behaviour
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R21/00Arrangements or fittings on vehicles for protecting or preventing injuries to occupants or pedestrians in case of accidents or other traffic risks
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W30/00Purposes of road vehicle drive control systems not related to the control of a particular sub-unit, e.g. of systems using conjoint control of vehicle sub-units
    • B60W30/08Active safety systems predicting or avoiding probable or impending collision or attempting to minimise its consequences
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/08Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to drivers or passengers
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08Interaction between the driver and the control system
    • B60W50/14Means for informing the driver, warning the driver or prompting a driver intervention
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08Interaction between the driver and the control system
    • B60W50/14Means for informing the driver, warning the driver or prompting a driver intervention
    • B60W50/16Tactile feedback to the driver, e.g. vibration or force feedback to the driver on the steering wheel or the accelerator pedal
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/012Head tracking input arrangements
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/013Eye tracking input arrangements
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/50Context or environment of the image
    • G06V20/59Context or environment of the image inside of a vehicle, e.g. relating to seat occupancy, driver state or inner lighting conditions
    • G06V20/597Recognising the driver's state or behaviour, e.g. attention or drowsiness
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • G06V40/168Feature extraction; Face representation
    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/16Anti-collision systems
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/08Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to drivers or passengers
    • B60W2040/0818Inactivity or incapacity of driver
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08Interaction between the driver and the control system
    • B60W50/14Means for informing the driver, warning the driver or prompting a driver intervention
    • B60W2050/143Alarm means
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08Interaction between the driver and the control system
    • B60W50/14Means for informing the driver, warning the driver or prompting a driver intervention
    • B60W2050/146Display means
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2540/00Input parameters relating to occupants
    • B60W2540/225Direction of gaze

Definitions

  • the present disclosure relates to a vehicle driver state determination device that is provided in a vehicle equipped with a driving support device and determines a driver's state.
  • a driving ability decrease determination device disclosed in Patent Document 1 is known as a technique for determining a decrease in driving ability caused by fatigue of a driver who drives a vehicle such as an automobile.
  • This driving ability lowering determination device displays a display image for determination as a virtual image on the windshield while the vehicle is traveling. And, it is configured to detect the reaction time until the driver operates the measurement button in response to the light stimulus, determine the driving ability deterioration from the detection result, and perform alerting if necessary. ing.
  • Patent Document 1 The technique disclosed in Patent Document 1 described above is troublesome for the driver because it is necessary to operate the measurement button in addition to the driving operation while the vehicle is running, that is, during driving by the driver.
  • This disclosure is intended to provide a vehicle driver state determination device that can determine the state of a driver without causing the driver to feel bothered during normal traveling.
  • the vehicle driver state determination device is provided in a vehicle on which the driving support device is mounted, and determines the state of the driver.
  • a determination device for determining that there has been a specific notification that prompts the driver to perform a predetermined driving operation with the occurrence of the occurrence of a failure, and a reaction time from when the specific notification is received until the predetermined driving operation is performed by the driver A timing device that counts time and an evaluation device that evaluates a state related to the driving ability of the driver from the timing result of the timing device.
  • the timing device determines that the predetermined notification has occurred.
  • the reaction time until the driving operation is performed by the driver is counted.
  • operator's driving ability is evaluated by the evaluation apparatus from the timing result of a timing apparatus.
  • the driver's evaluation is performed based on the fact that the driver performs a predetermined driving operation that is actually required, unlike the case where the driver calculates the reaction time when performing an operation not related to driving. be able to. Therefore, it is possible to determine the state of the driver without making the driver feel bothered during normal traveling.
  • FIG. 1 shows a first embodiment, and is a block diagram schematically showing an electrical configuration of a vehicle driver state determination device.
  • FIG. 2 is a flowchart showing a processing procedure for determining the driver state.
  • FIG. 3 shows a second embodiment, and is a flowchart showing a processing procedure for determining the driver state.
  • FIG. 4 shows a third embodiment, and is a flowchart showing a processing procedure for driver state determination.
  • FIG. 1 schematically shows a configuration of a vehicle driver state determination device 1 according to the present embodiment mounted on a vehicle including an ACC function part.
  • the vehicle driver state determination device 1 includes a driver state determination control unit 2, a warning unit 3, and a driver face direction detection unit 4.
  • the driver state determination control unit 2 is mainly composed of a computer including a CPU, a ROM, a RAM, and the like. As will be described later, the driver state determination control unit 2 determines whether or not there is a decrease in driving ability due to the driver's state, that is, fatigue, randomness, drowsiness, etc., by executing the driver state determination program stored in the ROM. Perform processing such as evaluation. Further, the alerting unit 3 alerts the driver by voice or display when fatigue or the like is determined by the driver.
  • the driver face direction detection unit 4 includes an in-vehicle camera, an image processing device, and the like (not shown), and detects whether the driver's line of sight or face direction, that is, whether the driver is facing forward.
  • the driver state determination control unit 2, the alerting unit 3, and the driver face direction detecting unit 4 are connected to an in-vehicle LAN 5 such as a CAN (Controller Area Network).
  • the in-vehicle LAN 5 is connected with an ACC control unit 6, a preceding vehicle start notification unit 7, a steering switch 8, an accelerator control unit 9, a brake control unit 10, and the like.
  • various devices are further connected to the in-vehicle LAN 5 in order to realize the ACC function.
  • an external camera that captures the periphery (front and rear) of the host vehicle
  • a laser radar that detects a distance between the preceding vehicle and an obstacle
  • a host vehicle position detection device that detects the position of the host vehicle
  • the ACC control unit 6 realizes an adaptive cruise control (ACC) function when the ACC function is turned on by a driver's operation instruction.
  • the ACC function is a function of controlling the accelerator control unit 9, the brake control unit 10, and the like so that the host vehicle automatically follows the preceding vehicle at a certain inter-vehicle distance.
  • the preceding vehicle is stopped by a signal or the like during execution of the ACC function, the host vehicle follows and stops behind the vehicle. Thereafter, when the preceding vehicle starts, the preceding vehicle start notification unit 7 notifies the driver that the preceding vehicle has started by display on the display and sound output.
  • the driver When the driver receives a specific notification that the preceding vehicle has started, the driver performs a starting operation as a predetermined driving operation corresponding to the specific notification. This starting operation is performed by turning on the steering switch 8 or turning on (depressing) the accelerator. In response to the start operation, the following traveling of the preceding vehicle by the ACC control unit 6 is resumed. Therefore, in this embodiment, when the ACC function is executed, a specific event occurs when the preceding vehicle starts after stopping. In addition, the preceding vehicle start notification becomes the specific notification.
  • the driver state determination control unit 2 determines whether or not there is a decrease in driving ability due to the state of the driver while the vehicle is traveling, that is, fatigue, casualness, drowsiness, and the like. At this time, the driver state determination control unit 2 determines that there is a specific notification that prompts the driver to perform a predetermined driving operation with the occurrence of a specific event mainly from the software configuration thereof. To do. Then, the reaction time from when the specific notification is received until the driver performs a predetermined driving operation according to the specific notification is measured, and the state related to the driving ability of the driver is evaluated from the measured result.
  • the driver state determination control unit 2 follows the preceding vehicle and stops the preceding vehicle when the ACC function is performed.
  • the vehicle starts it is determined that the preceding vehicle start is notified as the specific notification.
  • the reaction time from when the specific notification is received until the start operation is performed by the driver is counted, and when the measured reaction time is equal to or greater than the threshold value, the driver's response delay, that is, driving Evaluated as a decline in capacity.
  • the driver state determination control unit 2 determines that the preceding vehicle start has been notified as the specific notification, the driver's line of sight based on the detection by the driver face direction detection unit 4 Alternatively, the reaction time is measured and evaluated on the condition that the face is not facing the front. Further, in the present embodiment, the driver state determination control unit 2 performs the case where a predetermined driving operation, that is, a starting operation is not performed by the driver even though a predetermined time has elapsed after the preceding vehicle has stopped and started. Does not determine fatigue or the like, and determines that the driver did not intentionally perform the starting operation.
  • a predetermined driving operation that is, a starting operation is not performed by the driver even though a predetermined time has elapsed after the preceding vehicle has stopped and started. Does not determine fatigue or the like, and determines that the driver did not intentionally perform the starting operation.
  • step S1 it is determined whether or not ACC is turned on. If the ACC function is turned off (No in step S1), the process ends.
  • step S1 it is determined in the next step S2 whether the vehicle has stopped following the preceding vehicle. If the vehicle has stopped following the preceding vehicle (Yes in step S2), it is determined in next step S3 whether the preceding vehicle has started. In this case, when the preceding vehicle has started, a specific event occurs, and the driver performs a starting operation to turn on the steering switch 8 or to turn on (depress) the accelerator as a predetermined driving operation. By doing so, the host vehicle follows the preceding vehicle and resumes traveling.
  • step S4 it is determined whether or not there is no starting operation in the own vehicle even if a predetermined time has elapsed since the preceding vehicle started.
  • the fixed time is set to about 1 to 2 seconds, for example, 1.5 seconds. If there is a start operation before the fixed time has elapsed (No in step S4), it is determined that the driver is in a normal state (no reduction in driving ability), and the process is terminated.
  • step S4 if there is no start operation even after a predetermined time has elapsed (Yes in step S4), the process proceeds to step S5, and the preceding vehicle start notification unit 7 notifies that the preceding vehicle has started.
  • This notification is performed by, for example, display on a display or meter unit, and voice notification such as a chime sound (buzzer sound).
  • voice notification such as a chime sound (buzzer sound).
  • vibration of the steering wheel may be added.
  • the driver's line of sight or face direction is directed to the front based on the detection by the driver face direction detection unit 4 in the next step S6. It is judged whether or not. If the driver's line of sight or face direction is facing the front (Yes in step S6), the process ends. If the driver's line of sight or face is not facing the front (No in step S6), the process proceeds to step S7, and the reaction time from when the specific notification is made until the start operation is performed by the driver Is timed.
  • step S8 it is determined whether or not the measured reaction time is a threshold value (for example, 600 msec) or more. If the reaction time is less than the threshold value (No in step S8), it is determined that the driver's state is normal (no reduction in driving ability), and the process ends. On the other hand, when the reaction time is equal to or greater than the threshold value (Yes in step S8), it is determined that the driver is in a state in which the driving ability is reduced due to fatigue or the like, and in step S9, a warning is issued. Done. This alerting is performed, for example, by displaying on the display a message prompting the driver to take a break, such as “Please rest because you are tired”. Thereafter, the process ends.
  • a threshold value for example, 600 msec
  • the vehicle driver state determination device 1 is provided in a vehicle having an ACC function as a driving support device, and determines the state of the driver.
  • the state related to the driving ability of the driver is evaluated based on the reaction time when a specific notification with a predetermined driving operation is given to the driver.
  • the preceding vehicle start is notified as a specific notification when the preceding vehicle starts, and the driver Utilized starting operation. That is, the evaluation is performed based on measuring the reaction time from the notification of the preceding vehicle start until the start operation is performed by the driver. Thereby, when the reaction time is longer than the threshold value, it can be determined with sufficient certainty that the driver's fatigue is large.
  • the reaction delay is a scene that the driver can feel, and has the advantage that the acceptability of advice is increased.
  • the driver face direction detection unit 4 that detects the driver's line of sight or face direction is provided, and the driver's line of sight or face direction is not facing the front when a specific notification is made.
  • the reaction time was measured and the state was evaluated.
  • the driver performs the starting operation by looking at the front, that is, the preceding vehicle and judging that the preceding vehicle amount has started without receiving a notification.
  • the driver performs the starting operation by looking at the front, that is, the preceding vehicle and judging that the preceding vehicle amount has started without receiving a notification.
  • a specific event that is, when a predetermined time has elapsed since the start of the preceding vehicle, the driver does not perform a predetermined driving operation (starting operation).
  • starting operation Is configured to deliberately not perform the start operation.
  • a certain time for example, 1.5 seconds
  • the actual situation is determined by determining that the driver has not intentionally started the start operation. Therefore, it is possible to determine the driver state with more accuracy and accuracy that matches the conditions.
  • the vehicle is first provided with a pedestrian jumping detection function as a driving support device.
  • This pop-up detection function detects, for example, the pop-up of a pedestrian in front using an image from a vehicle-mounted camera.
  • pedestrian information detected by a detection device detected by another vehicle or installed on a road may be acquired by communication between vehicles or between vehicles.
  • This pedestrian pop-up detection function detects a pedestrian's jumping forward of the vehicle as the occurrence of a specific event. In other words, a notification for prompting a predetermined driving operation, in this case, a deceleration operation is performed. This notice of pop-out attention is given to, for example, a sound on the display and a buzzer sound. Further, the deceleration operation includes an operation of turning off the accelerator or turning on the brake.
  • the driver state determination control unit 2 determines that there has been a notice of a pedestrian's jumping out notice by the detection function as the specific notice. Then, the reaction time from when the specific notification is received until the deceleration operation is performed by the driver is counted, and when the measured result of the reaction time is equal to or greater than the first threshold value, the driver's reaction delay In other words, it is evaluated that the driving ability is reduced and alerts are given. Further, in this embodiment, when there is a notification of the pedestrian jumping, based on the detection of the driver face direction detection unit 4, on the condition that the driver's line of sight or the face direction is not facing the front, The reaction time is measured and evaluated.
  • step S11 it is determined whether or not a pedestrian has been detected by the detection function.
  • step S12 a notice of pop-out is notified in the next step S12.
  • step S ⁇ b> 13 based on the detection by the driver face direction detection unit 4, it is determined whether the driver's line of sight or face direction is facing the front when a notice of popping out is given. If it is facing the front (Yes in step S13), the process is terminated as it is.
  • step S13 if the driver's line of sight or face is not facing the front (No in step S13), the driver performs a deceleration operation after the notice of jumping out is given in step S14.
  • the reaction time is measured until.
  • step S15 it is determined whether or not the measured reaction time is equal to or greater than a threshold value (for example, 600 msec). If the reaction time is less than the threshold value (No in step S15), it is determined that the driver's state is normal (no reduction in driving ability), and the process ends.
  • a threshold value for example, 600 msec
  • step S15 when the reaction time is equal to or greater than the threshold value (Yes in step S15), it is determined that the driving ability is reduced due to fatigue or the like, and alert is issued in step S16. , The process ends.
  • an upper limit value for example, 1.5 seconds
  • the reaction time exceeds the upper limit value (for example, 1.5 seconds)
  • the upper limit value for example, 1.5 seconds
  • a notice of jumping out is made as a specific notification, and the driver Used the decelerating operation. That is, the evaluation is performed based on measuring the reaction time from when the notice of jumping out is issued until the driver performs the deceleration operation. Thereby, when the reaction time is longer than the threshold value, it can be determined with sufficient certainty that the driver's fatigue is large. Also in this case, the reaction delay is a scene that the driver can realize, and there is an advantage that the acceptability of advice is increased.
  • FIG. 4 shows a third embodiment.
  • the vehicle is not in front of the ACC function described in the first embodiment, but the preceding vehicle start notification function as the driving support device, that is, the vehicle stops ahead of the host vehicle as the occurrence of the specific event. It is detected that the preceding vehicle that had been started.
  • the driver is provided with a function to display and sound a notification of preceding vehicle start as a specific notification. Based on receiving the preceding vehicle start notification, the driver performs a predetermined driving operation, in this case, a brake-off operation or an accelerator-on operation (these are called start operations).
  • the driver state determination control unit 2 determines that there is a preceding vehicle start notification as the specific notification, and the driver performs a start operation after receiving the notification. Measure the reaction time until. And when the time measurement result of reaction time is more than a threshold value (for example, 400 msec), it is evaluated as a driver's reaction delay, that is, a decrease in driving ability, and a warning is given.
  • a threshold value for example, 400 msec
  • the driver state determination control unit 2 determines that the driver's line of sight or face direction is front based on the detection of the driver face direction detection unit 4 when the preceding vehicle start is notified. The reaction time is measured and evaluated on the condition that it is not suitable. Furthermore, in the present embodiment, the driver state determination control unit 2 performs the case where a start operation by the driver is not performed even though a certain time (for example, 1.5 seconds) has elapsed after the preceding vehicle has started. Does not determine fatigue or the like, and determines that the driver has not performed the operation intentionally.
  • a certain time for example, 1.5 seconds
  • step S21 it is determined whether or not the preceding vehicle (and the host vehicle) is stopped. If the preceding vehicle is stopped (Yes in step S21), the preceding vehicle is started in step S22. It is judged whether or not. If the preceding vehicle has started (Yes in step S22), even if a predetermined time (for example, 1.5 seconds) has elapsed since the preceding vehicle started in step S23, the starting operation is performed in the host vehicle. It is determined whether there is any. If there is a start operation before a certain period of time has elapsed (No in step S23), it is determined that the driver is in a normal state (no reduction in driving ability), and the process ends.
  • a predetermined time for example, 1.5 seconds
  • step S23 If there is no start operation before a certain time has elapsed (Yes in step S23), a notification that the preceding vehicle has started is issued in step S24.
  • step S25 based on the detection by the driver face direction detection unit 4, it is determined whether or not the driver's line of sight or face direction is facing the front. If the driver's line of sight or face is facing the front (Yes in step S25), the process is terminated. If the driver's line of sight or face is not facing the front (No in step S25), the process proceeds to step S26, and the reaction time from the notification to the start operation by the driver is counted. Is done.
  • step S27 it is determined whether or not the measured reaction time is equal to or greater than a threshold value (for example, 400 msec). If the reaction time is less than the threshold value (No in step S27), it is determined that the driver's state is normal (no reduction in driving ability), and the process ends. On the other hand, when the reaction time is equal to or greater than the threshold value (Yes in step S27), it is determined that the driver is in a state in which the driving ability has decreased due to fatigue or the like, and in step S9, a warning is issued. And the process ends.
  • a threshold value for example, 400 msec
  • the driver can be evaluated based on the fact that the driver actually performs the driving operation. Therefore, it is possible to obtain an excellent effect that it is possible to determine the state of the driver without making the driver feel bothered during normal traveling. Further, as in the first embodiment, since the start operation based on self-judgment when the driver's line of sight or face is facing the front is excluded, the reaction time is obtained more accurately, and the driver's The state can be reliably determined. Furthermore, when a certain time has elapsed since the start of the preceding vehicle and the driver has not started, the driver has determined that the driver has not intentionally started. It is possible to determine the driver state with more accuracy and accuracy that matches the actual situation.
  • the driver when the preceding vehicle start notification function as the driving support device, that is, when the preceding vehicle start notification is given as the specific notification, the driver performs the brake-off operation or the accelerator on as the predetermined driving operation. Used to perform operations. That is, the evaluation is performed based on measuring the reaction time from when the advance vehicle start notification is made until the start operation is performed by the driver. Thereby, when the reaction time is longer than the threshold value, it can be determined with sufficient certainty that the driver's fatigue is large. Also in this case, the reaction delay is a scene that the driver can realize, and there is an advantage that the acceptability of advice is increased.
  • the driving support device has a function of notifying that the front signal has changed to a green signal, and can be configured as follows. . That is, the driver state determination control unit 2 determines that there is a notification that the front signal has changed to a green signal as a specific notification, and the driver performs a brake-off operation or an accelerator-on operation after receiving the notification. Time the reaction time until it is done. And when the time-measurement result of reaction time is more than a threshold value, it is evaluated that a driver's reaction delay, that is, a decrease in driving ability, and alerting is performed.
  • reaction time when the reaction time is longer than the threshold value, it can be determined with sufficient certainty that the driver's fatigue is large. In addition, it is possible to obtain an effect that it is possible to determine the state of the driver without making the driver feel bothered during normal traveling.
  • the reaction time delay is configured to call attention when there is one reaction time delay.
  • attention should be paid. You may comprise so that arousal may be performed. It may be a timing for alerting or a timing for stopping.
  • the threshold value the driver's reaction time distribution may be stored, and the reaction time slower than usual may be set as the threshold value from the distribution.

Landscapes

  • Engineering & Computer Science (AREA)
  • Automation & Control Theory (AREA)
  • Mechanical Engineering (AREA)
  • Physics & Mathematics (AREA)
  • Transportation (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • General Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • Mathematical Physics (AREA)
  • Multimedia (AREA)
  • Health & Medical Sciences (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • General Health & Medical Sciences (AREA)
  • Traffic Control Systems (AREA)
  • Control Of Driving Devices And Active Controlling Of Vehicle (AREA)

Abstract

車両用運転者状態判定装置(1)は、運転支援装置(6)を搭載した車両に設けられ、運転者の状態を判定するものであって、前記運転支援装置から、特定の事象の発生に伴って運転者に対し所定の運転操作を促す特定通知があったことを判断する判断装置(2)と、前記特定通知があってから前記所定の運転操作が運転者により行われるまでの反応時間を計時する計時装置(2)と、前記計時装置の計時結果から運転者の運転能力に関する状態を評価する評価装置(2)とを備えている。

Description

車両用運転者状態判定装置 関連出願の相互参照
 本出願は、2016年12月12日に出願された日本出願番号2016-249190号に基づくもので、ここにその記載内容を援用する。
 本開示は、運転支援装置を搭載した車両に設けられ、運転者の状態を判定する車両用運転者状態判定装置に関する。
 従来、車両例えば自動車を運転する運転者の、疲労などに伴う運転能力の低下を判定する技術として、特許文献1に示された運転能力低下判定装置が知られている。この運転能力低下判定装置は、車両の走行中に、判定用表示画像を、ウインドシールドに虚像として表示する。そして、運転者がその光刺激に反応して測定用ボタンを操作するまでの反応時間を検出し、その検出結果から運転能力低下を判定し、必要に応じて注意喚起などを行うように構成されている。
特許第5533938号公報
 上記した特許文献1の技術では、車両の走行中、つまり運転者による運転中に、運転操作に加えて測定用ボタンを操作する必要があるので、運転者にとって煩わしいものとなっていた。
 本開示は、通常走行の中で、運転者に煩わしさを感じさせることなく、運転者の状態を判定することが可能な車両用運転者状態判定装置を提供することを目的とする。
 本開示の第一の態様において、車両用運転者状態判定装置は、運転支援装置を搭載した車両に設けられ、運転者の状態を判定するものであって、前記運転支援装置から、特定の事象の発生に伴って運転者に対し所定の運転操作を促す特定通知があったことを判断する判断装置と、前記特定通知があってから前記所定の運転操作が運転者により行われるまでの反応時間を計時する計時装置と、前記計時装置の計時結果から運転者の運転能力に関する状態を評価する評価装置とを備える。
 これによれば、判断装置により、特定の事象が発生し運転支援装置から運転者に対し所定の運転操作を伴う特定通知があったと判断されると、計時装置により、特定通知があってから所定の運転操作が運転者により行われるまでの反応時間が計時される。そして、計時装置の計時結果から、評価装置により、運転者の運転能力に関する状態が評価される。この場合、運転者が運転に関係ない操作を行う際の反応時間を求めるものと異なり、運転者により実際に必要とされる所定の運転操作が行われることに基づいて、運転者の評価を行うことができる。従って、通常走行の中で、運転者に煩わしさを感じさせることなく、運転者の状態を判定することが可能となる。
 本開示についての上記目的およびその他の目的、特徴や利点は、添付の図面を参照しながら下記の詳細な記述により、より明確になる。その図面は、
図1は、第1の実施形態を示すもので、車両用運転者状態判定装置の電気的構成を概略的に示すブロック図であり、 図2は、運転者状態判定の処理手順を示すフローチャートであり、 図3は、第2の実施形態を示すもので、運転者状態判定の処理手順を示すフローチャートであり、 図4は、第3の実施形態を示すもので、運転者状態判定の処理手順を示すフローチャートである。
 (1)第1の実施形態
 以下、第1の実施形態について、図1及び図2を参照しながら説明する。この第1の実施形態では、運転支援装置としての、アダプティブクルーズコントロール(以下「ACC」と略称)機能を備えた車両(自動車)に適用している。図1は、車両に搭載される本実施形態に係る車両用運転者状態判定装置1の構成を、ACC機能部分を含んで概略的に示している。この車両用運転者状態判定装置1は、運転者状態判定制御部2、注意喚起部3、運転者顔向き検出部4を備えて構成される。
 前記運転者状態判定制御部2は、CPU、ROM、RAM等からなるコンピュータを主体として構成される。後述するように、運転者状態判定制御部2は、ROMに記憶された運転者状態判定プログラムの実行により、運転者の状態、つまり疲労、漫然、眠気等による運転能力の低下があるかどうかについての評価等の処理を実行する。また、注意喚起部3は、運転者に疲労等が判定された場合に、音声や表示などにより注意喚起を行う。運転者顔向き検出部4は、図示しない車内カメラや画像処理装置などを備え、運転者の視線又は顔の向き、即ち前方を向いているかどうかを検出する。
 これら運転者状態判定制御部2、注意喚起部3、運転者顔向き検出部4は、例えばCAN(Controller Area Network)等の車内LAN5に接続されている。そして、車内LAN5には、ACC制御部6、先行車両発進通知部7、ステアリングスイッチ8、アクセル制御部9、ブレーキ制御部10等が接続されている。また、図示は省略しているが、ACC機能を実現するために、車載LAN5には、更に、各種の装置が接続されている。各種の装置としては、自車両の周辺(前方及び後方)を撮影する車外カメラ、先行車両や障害物との間の距離を検出するレーザレーダ、自車両の位置を検出する自車位置検出装置、道路地図データを記憶する地図データベース、車車間通信や路車間通信を行う通信装置、各種車載センサ等がある。
 前記ACC制御部6は、運転者の操作指示により、ACC機能がオンされたときに、アダプティブクルーズコントロール(ACC)機能を実現する。このACC機能は、アクセル制御部9、ブレーキ制御部10などを制御して、自車両を、先行車両に一定の車間距離で追従して自動走行させる機能である。このACC機能の実行時において、先行車両が例えば信号などで停止した場合には、自車両も追従してその後方で停止する。その後、先行車両が発進した場合には、前記先行車両発進通知部7により、運転者に対し先行車が発進した旨が、ディスプレイへの表示及び音声出力により通知される。
 そして、運転者は、先行車が発進した旨の特定通知を受けると、特定通知に応じた所定の運転操作として発進操作を行う。この発進操作は、前記ステアリングスイッチ8をオン操作する、或いは、アクセルをオン操作する(踏込む)ことにより行われる。その発進操作を受けて、ACC制御部6による、先行車両の追従走行が再開される。従って、本実施形態では、ACC機能の実行時における、先行車両が停車後に発進したことが特定の事象の発生となる。また、先行車両発進通知が特定通知となる。
 さて、本実施形態では、前記運転者状態判定制御部2は、車両の走行中の運転者の状態、即ち、疲労、漫然、眠気等による運転能力の低下があるかどうかを判定する。このとき、運転者状態判定制御部2は、主としてそのソフトウエア構成により、運転支援装置から、特定の事象の発生に伴って運転者に対し所定の運転操作を促す特定通知があったことを判断する。そして、特定通知があってから該特定通知に応じた所定の運転操作が運転者により行われるまでの反応時間を計時し、その計時結果から運転者の運転能力に関する状態を評価する。
 より具体的には、次の作用説明(フローチャート説明)でも述べるように、運転者状態判定制御部2は、ACC機能の行時において、先行車両に追従して車両が停止した後、当該先行車両が発進した際に特定通知として先行車両発進が通知されたことを判断する。そして、その特定通知があってから運転者により発進操作が行われるまでの反応時間を計時し、反応時間の計時結果が、しきい値以上であったときに、運転者の反応遅れ、つまり運転能力の低下と評価する。
 またこのとき、本実施形態では、運転者状態判定制御部2は、特定通知として先行車両発進が通知されたと判断した際に、前記運転者顔向き検出部4の検出に基づき、運転者の視線又は顔の向きが正面を向いていないことを条件に、反応時間の計時及び評価を行う。更に本実施形態では、運転者状態判定制御部2は、先行車両が停止し発進した後に一定時間が経過したにもかかわらず、運転者による所定の運転操作即ち発進操作が行われなかった場合には、疲労等と判定せず、運転者が故意に発進操作を行わなかったと判定する。
 次に、上記構成の作用について、図2も参照して述べる。図2のフローチャートは、車両の走行中における、運転者状態判定制御部2が実行する、運転者の状態判定の処理手順を概略的に示している。即ち、まず、ステップS1では、ACCがオンされているかどうかが判断される。ACCの機能がオフされている場合には(ステップS1にてNo)、そのまま処理が終了する。
 ACCの機能がオンされている場合には(ステップS1にてYes)、次のステップS2にて、先行車両に追従して停止したかどうかが判断される。先行車両に追従して停止した場合には(ステップS2にてYes)、次のステップS3にて、先行車両が発進したかどうかが判断される。この場合、先行車両が発進したことが、特定の事象の発生となり、運転者は、所定の運転操作として、ステアリングスイッチ8をオン操作する、或いは、アクセルをオン操作する(踏込む)発進操作を行うことにより、自車両が、先行車両に追従して走行を再開する。
 先行車両が発進したときには(ステップS3にてYes)、次のステップS4にて、先行車両が発進してから一定時間が経過しても、自車両において発進操作がないかどうかが判断される。この場合、一定時間としては、1~2秒程度例えば1.5秒が設定される。一定時間が経過するまでに発進操作があった場合には(ステップS4にてNo)、運転者の状態は正常である(運転能力の低下はない)と判定され、そのまま処理を終了する。
 これに対し、一定時間が経過しても発進操作がない場合には(ステップS4にてYes)、ステップS5に進み、先行車両発進通知部7による、先行車両が発進した旨の通知が行われる。この通知は、例えばディスプレイ又はメータ部への表示、及び、チャイム音(ブザー音)等の音声通知により行われる。表示や音に加えて、ステアリングホイールの振動などを付加しても良い。
 先行車両発進通知部7による先行車両発進の通知がなされると、次のステップS6にて、前記運転者顔向き検出部4の検出に基づき、運転者の視線又は顔の向きが正面を向いているかどうかが判断される。運転者の視線又は顔の向きが正面を向いている場合には(ステップS6にてYes)、そのまま処理を終了する。運転者の視線又は顔の向きが正面を向いていない場合には(ステップS6にてNo)、ステップS7に進み、前記特定通知が行われてから運転者による発進操作が行われるまでの反応時間が計時される。
 そして、ステップS8では、計時された反応時間がしきい値(たとえば600msec)以上かどうかが判断される。反応時間がしきい値未満である場合には(ステップS8にてNo)、運転者の状態は正常である(運転能力の低下はない)と判定され、そのまま処理を終了する。これに対し、反応時間がしきい値以上である場合には(ステップS8にてYes)、運転者が疲労等により運転能力が低下した状態であると判定され、ステップS9にて、注意喚起が行われる。この注意喚起は、例えばディスプレイに、「疲れているので休憩してください」といった、運転者に休憩を促す表示を行うことによりなされる。その後、処理が終了する。
 このように本実施形態の車両用運転者状態判定装置1によれば、運転支援装置としてのACC機能を備えた車両に設けられ、運転者の状態を判定するものであって、ACC機能による運転者に対し所定の運転操作を伴う特定通知があったときの反応時間に基づいて、運転者の運転能力に関する状態が評価されるように構成した。この場合、運転者が運転に関係ない操作を行う際の反応時間を求めるものと異なり、運転者により実際に必要とされる運転操作が行われることに基づいて、運転者の評価を行うことができる。従って、本実施形態によれば、通常走行の中で、運転者に煩わしさを感じさせることなく、運転者の状態を判定することが可能となるという優れた効果を得ることができる。
 特に本実施形態では、運転支援装置としてACC機能の実行時において、先行車両に追従して車両が停止した後、当該先行車両が発進した際に特定通知として先行車両発進が通知され、運転者が発進操作を行うことを利用した。即ち、先行車両発進が通知されてから運転者により発進操作が行われるまでの反応時間を計時することに基づいて評価を行うように構成した。これにより、反応時間がしきい値よりも長い場合に、運転者の疲労が大きいといった判定を、十分な確かさで行うことができる。また、反応遅れについては、運転者が実感できるシーンであり、アドバイスの受容性が高まるといった利点もある。
 また本実施形態では、運転者の視線又は顔の向きを検出する運転者顔向き検出部4を設け、特定通知がなされた際に、運転者の視線又は顔の向きが正面を向いていないことを条件に、反応時間の計時及び状態の評価を行うように構成した。ここで、運転者の視線又は顔が正面を向いている場合には、前方つまり先行車両を見ていて、通知を受けずとも先行車量が発進したことを自分で判断して発進操作を行う可能性がある。このような場合、通知を受けての反応時間を正確に求めることはできない。これに対し、運転者の視線又は顔が正面を向いていない、つまり前方を見ていない場合には、そのような自己判断による動作を除外することができる。従って、通知を受けた後の、反応時間をより正確に求めることができ、運転者の状態を確実に判定することができる。
 さらに本実施形態では、特定の事象の発生時即ち先行車両の発進から一定時間が経過したにもかかわらず、運転者による所定の運転操作(発進操作)が行われなかった場合には、運転者が故意に発進操作を行わなかったと判定するように構成した。ここで、先行車両が発進した場合でも、運転者の意思によって発進操作を行わない、例えば、歩行者など周囲の安全の確認を行った上で発進する必要があるといったケースもしばしば発生する。先行車両の発進から一定時間(例えば1.5秒)が経過したにもかかわらず、発進操作が行われなかった場合には、運転者が故意に発進操作を行わなかったと判定することにより、実情に合ったより確かで精度の高い運転者状態の判定を行うことができる。
 (2)第2の実施形態
 次に、図3を参照して、第2の実施形態について述べる。この第2の実施形態が上位第1の実施形態と異なるところは、以下の点にある。即ち、まず車両には、運転支援装置として、歩行者の飛出し検知機能が設けられている。この飛出し検知機能は、例えば車載カメラの画像を用いて前方の歩行者の飛出しを検知するものである。車載カメラ画像を用いるもの以外にも、車車間或いは路車間の通信により、他車両の検知した或いは道路に設置した検知装置が検知した歩行者情報を取得するものであっても良い。
 この歩行者の飛出し検知機能は、特定事象の発生として歩行者の車両前方への飛出しを検知し、その飛出し検知に伴い、運転者に対し、特定通知として、飛出し注意の通知、つまり所定の運転操作この場合減速操作を促す通知を行う。この飛出し注意の通知は、例えばディスプレイの表示及びブザー音等の音声に行われる。また、前記減速操作としては、アクセルをオフにする、或いはブレーキをオンにする操作が含まれる。
 そして、本実施形態では、次のフローチャート説明で述べるように、運転者状態判定制御部2は、特定通知として、上記検知機能による歩行者の飛出し注意の通知があったことを判断する。そして、その特定通知があってから運転者により減速操作が行われるまでの反応時間を計時し、反応時間の計時結果が、第1のしきい値以上であったときに、運転者の反応遅れ、つまり運転能力の低下と評価し、注意喚起を行う。また本実施形態では、歩行者の飛出しの通知があったときに、運転者顔向き検出部4の検出に基づき、運転者の視線又は顔の向きが正面を向いていないことを条件に、反応時間の計時及び評価を行う。
 図3のフローチャートは、運転者状態判定制御部2の実行する運転者の状態判定の処理手順を概略的に示している。即ち、まず、ステップS11では、検知機能による歩行者の飛出しの検知があったかどうかが判断される。飛出しを検知した場合には(ステップS11にてYes)、次のステップS12にて、飛出し注意の通知がなされる。ステップS13では、運転者顔向き検出部4の検出に基づき、飛出し注意の通知があったときに運転者の視線又は顔の向きが正面を向いているかどうかが判断される。正面を向いている場合には(ステップS13にてYes)、そのまま処理を終了する。
 これに対し、運転者の視線又は顔の向きが正面を向いていなかった場合には(ステップS13にてNo)、ステップS14にて、飛出し注意の通知が行われてから運転者による減速操作が行われるまでの反応時間が計時される。そして、ステップS15では、計時された反応時間がしきい値(たとえば600msec)以上かどうかが判断される。反応時間がしきい値未満である場合には(ステップS15にてNo)、運転者の状態は正常である(運転能力の低下はない)と判定され、そのまま処理を終了する。
 一方、反応時間がしきい値以上である場合には(ステップS15にてYes)、運転者が疲労等により運転能力が低下した状態であると判定され、ステップS16にて、注意喚起が行われ、処理が終了する。尚、この場合も、ステップS15にて、上限値(第2のしきい値)を設定して、反応時間が上限値(例えば、1.5秒)を超えていた場合には、疲労等と判定せず、運転者が故意に減速操作を行わなかったと判定するように構成しても良い。
 このような第2の実施形態においても、運転者が運転に関係ない操作を行う際の反応時間を求めるものと異なり、運転者により実際に必要とされる運転操作が行われることに基づいて、運転者の評価を行うことができる。従って、本実施形態によれば、通常走行の中で、運転者に煩わしさを感じさせることなく、運転者の状態を判定することが可能となるという優れた効果を得ることができる。また、上記第1の実施形態と同様に、運転者の視線又は顔が正面を向いている場合の自己判断による減速操作を除外するようにしたので、反応時間をより正確に求め、運転者の状態を確実に判定することができる。
 そして、特に本実施形態では、運転支援装置としての歩行者の飛出し検知の機能を利用して、歩行者の飛出しが検知された場合に特定通知として飛出し注意の通知がなされ、運転者が減速操作を行うことを利用した。即ち、飛出し注意の通知がなされてから運転者により減速操作が行われるまでの反応時間を計時することに基づいて、評価を行うように構成した。これにより、反応時間がしきい値よりも長い場合に、運転者の疲労が大きいといった判定を、十分な確かさで行うことができる。この場合も、反応遅れについては、運転者が実感できるシーンであり、アドバイスの受容性が高まるといった利点もある。
 (3)第3の実施形態、その他の実施形態
 図4は、第3の実施形態を示すものであり、上記第1の実施形態と異なる点は、以下の構成にある。即ち、本実施形態では、車両は、上記第1の実施形態で述べたACC機能とは関係なく、運転支援装置としての先行車両発進通知機能、つまり、特定事象の発生として自車両の前方に停車していた先行車両が発進したことを検知する。そして、その検知に伴い、運転者に対し、特定通知として先行車両発進の通知を表示及び音声で行う機能を備えている。運転者は、先行車両発進通知を受けることに基づき、所定の運転操作この場合ブレーキオフ操作又はアクセルオン操作(これらを発進操作という)を行う。
 本実施形態では、次のフローチャート説明で述べるように、運転者状態判定制御部2は、特定通知として、先行車両発進通知があったことを判断し、その通知があってから運転者により発進操作が行われるまでの反応時間を計時する。そして、反応時間の計時結果が、しきい値(例えば400msec)以上であったときに、運転者の反応遅れ、つまり運転能力の低下と評価し、注意喚起を行う。
 またこのとき、本実施形態では、運転者状態判定制御部2は、先行車両発進が通知された際に、運転者顔向き検出部4の検出に基づき、運転者の視線又は顔の向きが正面を向いていないことを条件に、反応時間の計時及び評価を行う。更に本実施形態では、運転者状態判定制御部2は、先行車両が発進した後に一定時間(例えば1.5秒)が経過したにもかかわらず、運転者による発進操作が行われなかった場合には、疲労等と判定せず、運転者が故意に操作を行わなかったと判定する。
 図4のフローチャートは、運転者状態判定制御部2の実行する運転者の状態判定の処理手順を概略的に示している。即ち、まず、ステップS21では、先行車両(及び自車両)が停車中であるかどうかが判断され、停車中である場合には(ステップS21にてYes)、ステップS22にて、先行車両が発進したかどうかが判断される。先行車両の発進があった場合には(ステップS22にてYes)、ステップS23にて、先行車両が発進してから一定時間(例えば1.5秒)が経過しても、自車両において発進操作がないかどうかが判断される。一定時間が経過するまでに発進操作があった場合には(ステップS23にてNo)、運転者の状態は正常である(運転能力の低下はない)と判定され、そのまま処理を終了する。
 一定時間が経過するまでに発進操作がなかった場合には(ステップS23にてYes)、ステップS24にて、先行車両が発進した旨の通知が行われる。次のステップS25では、運転者顔向き検出部4の検出に基づき、運転者の視線又は顔の向きが正面を向いているかどうかが判断される。運転者の視線又は顔の向きが正面を向いている場合には(ステップS25にてYes)、そのまま処理を終了する。運転者の視線又は顔の向きが正面を向いていない場合には(ステップS25にてNo)、ステップS26に進み、通知が行われてから運転者による発進操作が行われるまでの反応時間が計時される。
 そして、ステップS27では、計時された反応時間がしきい値(例えば400msec)以上かどうかが判断される。反応時間がしきい値未満である場合には(ステップS27にてNo)、運転者の状態は正常である(運転能力の低下はない)と判定され、そのまま処理を終了する。これに対し、反応時間がしきい値以上である場合には(ステップS27にてYes)、運転者が疲労等により運転能力が低下した状態であると判定され、ステップS9にて、注意喚起が行われ、処理が終了する。
 このような第3の実施形態によれば、運転者により実際に必要とされる運転操作が行われることに基づいて、運転者の評価を行うことができる。従って、通常走行の中で、運転者に煩わしさを感じさせることなく、運転者の状態を判定することが可能となるという優れた効果を得ることができる。また、上記第1の実施形態と同様に、運転者の視線又は顔が正面を向いている場合の自己判断による発進操作を除外するようにしたので、反応時間をより正確に求め、運転者の状態を確実に判定することができる。更に、先行車両の発進から一定時間が経過したにもかかわらず、運転者による発進操作が行われなかった場合には、運転者が故意に発進操作を行わなかったと判定するように構成したので、実情に合ったより確かで精度の高い運転者状態の判定を行うことができる。
 そして、特に本実施形態では、運転支援装置としての先行車両の発進通知の機能、つまり特定通知として先行車両の発進通知があったときに、運転者が所定の運転操作としてブレーキオフ操作又はアクセルオン操作を行うことを利用した。即ち、先行車両発進通知がなされてから運転者により発進操作が行われるまでの反応時間を計時することに基づいて、評価を行うように構成した。これにより、反応時間がしきい値よりも長い場合に、運転者の疲労が大きいといった判定を、十分な確かさで行うことができる。この場合も、反応遅れについては、運転者が実感できるシーンであり、アドバイスの受容性が高まるといった利点もある。
 尚、図示はしないが、第4の実施形態として、運転支援装置として、前方信号が青信号に変わった旨を通知する機能を備えたものにあって、次のように構成することが可能である。即ち、運転者状態判定制御部2が、特定通知として、前方信号が青信号に変わった旨の通知があったことを判断し、その通知があってから運転者によりブレーキオフ操作又はアクセルオン操作が行われるまでの反応時間を計時する。そして、反応時間の計時結果が、しきい値以上であったときに、運転者の反応遅れ、つまり運転能力の低下と評価し、注意喚起を行うように構成する。
 この第4の実施形態によっても、反応時間がしきい値よりも長い場合に、運転者の疲労が大きいといった判定を、十分な確かさで行うことができる。そして、通常走行の中で、運転者に煩わしさを感じさせることなく、運転者の状態を判定することが可能となるという効果を得ることができる。
 また、上記した各実施形態では、1回の反応時間の遅れがあったときに、注意喚起を行うように構成したが、反応時間の遅れが複数回(例えば3回)連続したときに、注意喚起を行うように構成しても良い。注意喚起を行うタイミングとしても、停車のタイミングとしても良い。しきい値に関しても、運転者の反応時間の分布を記憶しておき、その分布から普段より遅い反応時間をしきい値として設定するようにしても良い。
 その他、車両用運転者状態判定装置の全体のハードウエア構成、運転支援装置のシステムやソフトウエア構成などについても種々の変形が可能である。通知や注意喚起の手法についても様々な変更が可能である。しきい値や一定時間等の具体的数値についても、一例を示したに過ぎず、適宜変更が可能である。上記した複数の実施形態を組合せて実施することも可能である。
 本開示は、実施例に準拠して記述されたが、本開示は当該実施例や構造に限定されるものではないと理解される。本開示は、様々な変形例や均等範囲内の変形をも包含する。加えて、様々な組み合わせや形態、さらには、それらに一要素のみ、それ以上、あるいはそれ以下、を含む他の組み合わせや形態をも、本開示の範疇や思想範囲に入るものである。

Claims (7)

  1.  運転支援装置(6)を搭載した車両に設けられ、運転者の状態を判定する車両用運転者状態判定装置(1)であって、
     前記運転支援装置から、特定の事象の発生に伴って運転者に対し所定の運転操作を促す特定通知があったことを判断する判断装置(2)と、
     前記特定通知があってから前記所定の運転操作が運転者により行われるまでの反応時間を計時する計時装置(2)と、
     前記計時装置の計時結果から運転者の運転能力に関する状態を評価する評価装置(2)とを備えてなる車両用運転者状態判定装置。
  2.  運転者の視線又は顔の向きを検出する向き検出装置(4)を備え、
     前記判断装置が特定通知を判断した際に、前記向き検出装置の検出した運転者の視線又は顔の向きが正面を向いていないことを条件に、前記計時装置による計時及び前記評価装置による評価が行われる請求項1記載の車両用運転者状態判定装置。
  3.  前記運転支援装置として、アダプティブクルーズコントロール機能を備えたものにあって、
     前記判断装置は、アダプティブクルーズコントロール機能の実行時において、先行車両に追従して車両が停止した後、当該先行車両が発進した際に特定通知として先行車両発進が通知されたことを判断し、
     前記計時装置は、運転者により所定の運転操作としての発進操作が行われるまでの反応時間を計時し、
     前記評価装置は、前記反応時間の計時結果がしきい値以上であったときに、運転者の反応遅れと評価する請求項1又は2記載の車両用運転者状態判定装置。
  4.  前記運転支援装置として、歩行者の飛出し検知及び通知の機能を備えたものにあって、
     前記判断装置は、特定通知として歩行者の飛出し通知がなされたことを判断し、
     前記計時装置は、運転者により所定の運転操作としての減速操作が行われるまでの反応時間を計時し、
     前記評価装置は、前記反応時間の計時結果がしきい値以上であったときに、運転者の反応遅れと評価する請求項1又は2記載の車両用運転者状態判定装置。
  5.  前記運転支援装置として、先行車両が発進した旨を通知する機能を備えたものにあって、
     前記判断装置は、特定通知として先行車両発進が通知されたことを判断し、
     前記計時装置は、運転者による所定の運転操作としてのブレーキオフ操作又はアクセルオン操作までの反応時間を計時し、
     前記評価装置は、前記反応時間の計時結果がしきい値以上であったときに、運転者の反応遅れと評価する請求項1から4のいずれか一項に記載の車両用運転者状態判定装置。
  6.  前記運転支援装置として、前方信号が青信号に変わった旨を通知する機能を備えたものにあって、
     前記判断装置は、特定通知として前方信号が青信号に変わった旨が通知されたことを判断し、
     前記計時装置は、運転者による所定の運転操作としてのブレーキオフ操作又はアクセルオン操作までの反応時間を計時し、
     前記評価装置は、前記反応時間の計時結果がしきい値以上であったときに、運転者の反応遅れと評価する請求項1から5のいずれか一項に記載の車両用運転者状態判定装置。
  7.  前記評価装置は、前記特定の事象の発生時から一定時間が経過したにもかかわらず、運転者による所定の運転操作が行われなかった場合には、運転者が故意に運転操作を行わなかったと判定する請求項1から6のいずれか一項に記載の車両用運転者状態判定装置。
PCT/JP2017/038158 2016-12-22 2017-10-23 車両用運転者状態判定装置 WO2018116619A1 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
US16/431,985 US11077858B2 (en) 2016-12-22 2019-06-05 Vehicle driver state determination apparatus

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2016249190A JP6686868B2 (ja) 2016-12-22 2016-12-22 車両用運転者状態判定装置
JP2016-249190 2016-12-22

Related Child Applications (1)

Application Number Title Priority Date Filing Date
US16/431,985 Continuation US11077858B2 (en) 2016-12-22 2019-06-05 Vehicle driver state determination apparatus

Publications (1)

Publication Number Publication Date
WO2018116619A1 true WO2018116619A1 (ja) 2018-06-28

Family

ID=62627295

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2017/038158 WO2018116619A1 (ja) 2016-12-22 2017-10-23 車両用運転者状態判定装置

Country Status (3)

Country Link
US (1) US11077858B2 (ja)
JP (1) JP6686868B2 (ja)
WO (1) WO2018116619A1 (ja)

Families Citing this family (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6820243B2 (ja) * 2017-10-12 2021-01-27 京セラ株式会社 車両、判定方法及び判定プログラム
KR102563708B1 (ko) * 2018-05-14 2023-08-09 주식회사 에이치엘클레무브 선행 차량 출발 알림 장치 및 방법
FR3101307A1 (fr) * 2019-09-26 2021-04-02 Psa Automobiles Sa Procédé et dispositif de prévention de risque de collision pour véhicule
JP2021128427A (ja) * 2020-02-12 2021-09-02 トヨタ自動車株式会社 システム、情報処理装置、および情報処理方法
US11772670B2 (en) * 2020-06-03 2023-10-03 Micron Technology, Inc. Customized vehicle operation based on driver status
JP7423426B2 (ja) 2020-06-03 2024-01-29 株式会社トランストロン 運転能力低下検知装置、運転能力低下検知システム及び運転能力低下検知プログラム
US11396305B2 (en) * 2020-07-30 2022-07-26 Toyota Research Institute, Inc. Systems and methods for improving driver warnings during automated driving
US11545029B2 (en) * 2021-02-16 2023-01-03 Atieva, Inc. Distraction-sensitive traffic drive-off alerts
DE102022109811A1 (de) * 2022-04-22 2023-10-26 Bayerische Motoren Werke Aktiengesellschaft Fahrerassistenzsystem und Fahrerassistenzverfahren für ein Fahrzeug
CN117445805B (zh) * 2023-12-22 2024-02-23 吉林大学 面向公交车司乘冲突的人员预警和行车控制方法及***

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006350697A (ja) * 2005-06-16 2006-12-28 Toyota Motor Corp 車両の安全運転支援装置
JP2011148426A (ja) * 2010-01-22 2011-08-04 Toyota Motor Corp ドライバ状態確認装置
JP2015018503A (ja) * 2013-07-12 2015-01-29 住友電気工業株式会社 情報提供システム、情報提供装置、コンピュータプログラム及び情報提供方法
JP2015138308A (ja) * 2014-01-21 2015-07-30 アルパイン株式会社 運転支援装置、運転支援方法及び運転支援プログラム

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007245955A (ja) 2006-03-16 2007-09-27 Honda Motor Co Ltd 運転者状態判定装置および車両の走行安全装置
US20080042814A1 (en) * 2006-08-18 2008-02-21 Motorola, Inc. Mode sensitive vehicle hazard warning apparatuses and method
US7609150B2 (en) * 2006-08-18 2009-10-27 Motorola, Inc. User adaptive vehicle hazard warning apparatuses and method
JP2009099048A (ja) 2007-10-18 2009-05-07 Toyota Motor Corp 運転支援装置
JP5533938B2 (ja) 2012-06-01 2014-06-25 株式会社デンソー 運転能力低下判定装置
DE112015002948T5 (de) * 2014-06-23 2017-03-09 Denso Corporation Vorrichtung zum erfassen eines fahrunvermögenzustands eines fahrers
US10503987B2 (en) * 2014-06-23 2019-12-10 Denso Corporation Apparatus detecting driving incapability state of driver

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006350697A (ja) * 2005-06-16 2006-12-28 Toyota Motor Corp 車両の安全運転支援装置
JP2011148426A (ja) * 2010-01-22 2011-08-04 Toyota Motor Corp ドライバ状態確認装置
JP2015018503A (ja) * 2013-07-12 2015-01-29 住友電気工業株式会社 情報提供システム、情報提供装置、コンピュータプログラム及び情報提供方法
JP2015138308A (ja) * 2014-01-21 2015-07-30 アルパイン株式会社 運転支援装置、運転支援方法及び運転支援プログラム

Also Published As

Publication number Publication date
US20190283764A1 (en) 2019-09-19
JP6686868B2 (ja) 2020-04-22
US11077858B2 (en) 2021-08-03
JP2018106240A (ja) 2018-07-05

Similar Documents

Publication Publication Date Title
WO2018116619A1 (ja) 車両用運転者状態判定装置
JP6112054B2 (ja) 電子機器、電子機器の制御方法及び電子機器の制御プログラム
JP6611085B2 (ja) 車両制御装置
US10202121B2 (en) Stop control device
US9315191B2 (en) Driving assistance device
US20130060401A1 (en) Apparatus and method for preventing a vehicle collision, vehicle
JP4877060B2 (ja) 車両用注意喚起システム
JP5298966B2 (ja) 走行支援装置
JP2011510852A (ja) 車両特に商用車両の衝突を回避するか又は衝突による衝突の重大さを減少する装置及び方法
US10059340B2 (en) Starting control device and starting control method
JP3724177B2 (ja) 車載用交差点警告装置
CN113830085A (zh) 车辆跟停起步方法、装置、设备及计算机可读存储介质
CN111645674B (zh) 车辆控制装置
JP2009087249A (ja) 車載用渋滞警報装置
JP2019114100A (ja) 交通管制装置および車載器
JP2019008411A (ja) 車両の自動走行制御装置
JP2009176221A (ja) 運転支援装置
JP2008102615A (ja) 運転支援システム及び警報出力方法
US20180222474A1 (en) Driving assist apparatus and driving assist system
JP6602226B2 (ja) 追従走行支援装置および追従走行支援方法
JP6238018B2 (ja) 車両用運転支援装置
JP6634961B2 (ja) 運転支援装置
WO2021002251A1 (ja) 車両制御装置および車両制御方法
JP2010224900A (ja) 運転支援システム
JP5857393B2 (ja) 右折時走行支援装置、右折時走行支援方法

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 17884103

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 17884103

Country of ref document: EP

Kind code of ref document: A1