CN105313898A - 驾驶员状态感应装置及其方法 - Google Patents

驾驶员状态感应装置及其方法 Download PDF

Info

Publication number
CN105313898A
CN105313898A CN201410562445.9A CN201410562445A CN105313898A CN 105313898 A CN105313898 A CN 105313898A CN 201410562445 A CN201410562445 A CN 201410562445A CN 105313898 A CN105313898 A CN 105313898A
Authority
CN
China
Prior art keywords
driver
information
chaufeur
lifting capacity
driver status
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201410562445.9A
Other languages
English (en)
Other versions
CN105313898B (zh
Inventor
李相权
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hyundai Mobis Co Ltd
Original Assignee
Hyundai Mobis Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hyundai Mobis Co Ltd filed Critical Hyundai Mobis Co Ltd
Publication of CN105313898A publication Critical patent/CN105313898A/zh
Application granted granted Critical
Publication of CN105313898B publication Critical patent/CN105313898B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00—Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08—Interaction between the driver and the control system
    • B60W50/14—Means for informing the driver, warning the driver or prompting a driver intervention
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/02—Detecting, measuring or recording pulse, heart rate, blood pressure or blood flow; Combined pulse/heart-rate/blood pressure determination; Evaluating a cardiovascular condition not otherwise provided for, e.g. using combinations of techniques provided for in this group with electrocardiography or electroauscultation; Heart catheters for measuring blood pressure
    • A61B5/0205—Simultaneously evaluating both cardiovascular conditions and different types of body conditions, e.g. heart and respiratory condition
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/02—Detecting, measuring or recording pulse, heart rate, blood pressure or blood flow; Combined pulse/heart-rate/blood pressure determination; Evaluating a cardiovascular condition not otherwise provided for, e.g. using combinations of techniques provided for in this group with electrocardiography or electroauscultation; Heart catheters for measuring blood pressure
    • A61B5/024—Detecting, measuring or recording pulse rate or heart rate
    • A61B5/02416—Detecting, measuring or recording pulse rate or heart rate using photoplethysmograph signals, e.g. generated by infrared radiation
    • A61B5/02427—Details of sensor
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/16—Devices for psychotechnics; Testing reaction times ; Devices for evaluating the psychological state
    • A61B5/18—Devices for psychotechnics; Testing reaction times ; Devices for evaluating the psychological state for vehicle drivers or machine operators
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/68—Arrangements of detecting, measuring or recording means, e.g. sensors, in relation to patient
    • A61B5/6887—Arrangements of detecting, measuring or recording means, e.g. sensors, in relation to patient mounted on external non-worn devices, e.g. non-medical devices
    • A61B5/6893—Cars
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K28/00—Safety devices for propulsion-unit control, specially adapted for, or arranged in, vehicles, e.g. preventing fuel supply or ignition in the event of potentially dangerous conditions
    • B60K28/02—Safety devices for propulsion-unit control, specially adapted for, or arranged in, vehicles, e.g. preventing fuel supply or ignition in the event of potentially dangerous conditions responsive to conditions relating to the driver
    • B60K28/06—Safety devices for propulsion-unit control, specially adapted for, or arranged in, vehicles, e.g. preventing fuel supply or ignition in the event of potentially dangerous conditions responsive to conditions relating to the driver responsive to incapacity of driver
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/08—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to drivers or passengers
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/08—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to drivers or passengers
    • B60W40/09—Driving style or behaviour
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/16—Devices for psychotechnics; Testing reaction times ; Devices for evaluating the psychological state
    • A61B5/163—Devices for psychotechnics; Testing reaction times ; Devices for evaluating the psychological state by tracking eye movement, gaze, or pupil change
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00—Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08—Interaction between the driver and the control system
    • B60W50/14—Means for informing the driver, warning the driver or prompting a driver intervention
    • B60W2050/143—Alarm means

Landscapes

  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Cardiology (AREA)
  • General Health & Medical Sciences (AREA)
  • Animal Behavior & Ethology (AREA)
  • Molecular Biology (AREA)
  • Public Health (AREA)
  • Surgery (AREA)
  • Veterinary Medicine (AREA)
  • Biophysics (AREA)
  • Pathology (AREA)
  • Biomedical Technology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Medical Informatics (AREA)
  • Physiology (AREA)
  • Automation & Control Theory (AREA)
  • Mechanical Engineering (AREA)
  • Transportation (AREA)
  • Mathematical Physics (AREA)
  • Hospice & Palliative Care (AREA)
  • Child & Adolescent Psychology (AREA)
  • Developmental Disabilities (AREA)
  • Educational Technology (AREA)
  • Pulmonology (AREA)
  • Psychiatry (AREA)
  • Psychology (AREA)
  • Social Psychology (AREA)
  • Chemical & Material Sciences (AREA)
  • Combustion & Propulsion (AREA)
  • Human Computer Interaction (AREA)
  • Traffic Control Systems (AREA)
  • Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)

Abstract

本发明是驾驶员状态感应装置及其方法，根据本发明的驾驶员状态感应装置，包括：信息获取部(10)，其获取驾驶员行驶车辆信息、驾驶员操作车辆信息及驾驶员状态信息；计算部(20)，其以在所述信息获取部(10)获取的信息为基础计算驾驶员的驾驶负荷量；判断部(30)，其比较并判断在所述计算部(20)计算的驾驶负荷量与已设定的闲余负荷量；警告部(40)，其在所述判断部(30)计算的驾驶负荷量超出已设定的闲余负荷量的情况警告驾驶员。根据本发明，了解驾驶员的精神及身体状态来判断驾驶员是否安全驾驶，在判断不是安全驾驶状态时，利用表示警告、产生警告音、振动提醒、强制控制车辆等多种方法诱导安全驾驶来保护驾驶员。

Description

驾驶员状态感应装置及其方法
技术领域
本发明涉及驾驶员状态感应装置及其方法，更详细地说驾驶员状态感应装置及其方法是，了解与驾驶员行驶车辆或操作车辆相关的精神及身体状态，判断驾驶员是否是安全驾驶，在判断不是安全驾驶的状态时，利用多种方法诱导安全驾驶来保护驾驶员。
背景技术
一般地说，汽车给人类提供了移动的便利性及时间的效率性，但是因驾驶员不注意不仅是驾驶员还可能给周围的人带来伤害，因此在利用汽车时需多加注意。尤其是，在最近利用汽车与ICT(Information&CommunicationTechnology，信息通信技术)的技术融合，车辆逐渐变得智能化及高级化，据此在汽车内实现的安全驾驶支援***，识别危险状况并执行将其危险状况告知驾驶员的操作。如同在韩国注册专利公报第10-0282903号(2000.12.02)的记载，现有的汽车的安全驾驶支援***识别危险状况的方式，主要是通过外部传感器(雷达、摄像头等)收集信息来判断是否危险(脱离车道、预测碰撞等)的形态来进行。另外，将其告知驾驶员的方法，有将危险状况表示在表示装置(例如，点亮及熄灭警告灯等)或语音引导的方法。但是，利用点灭表示装置或语音提醒等警告驾驶员的***，根据高速行驶被噪音淹没，或驾驶员注视前方集中驾驶或疲劳驾驶的情况，存在很多难以用视听觉识别的情况，另外为了安全驾驶，了解驾驶员的精神及身体状态也是重要的要素，但是利用现有的技术无法了解驾驶员是否产生发作或感情异常状态、呼吸困难、注意力怠慢、瞌睡、不安等驾驶员的精神及身体状态的问题，就算产生这种问题也没有对应方法，因此不足以保护驾驶员。
(先行技术文献)
(专利文献)
韩国注册专利公报第10-0282903号(2000.12.02)
发明内容
(要解决的问题)
本发明是为了解决上述问题而提出的，本发明的目的在于，了解驾驶员的精神及身体状态，判断驾驶员是否安全驾驶，在不是安全驾驶的状态，则利用多种方法诱导驾驶员安全驾驶来保护驾驶员。
(解决问题的手段)
为了解决上述问题，根据本发明一侧面的驾驶员状态感应装置，包括：信息获取部10，其获取驾驶员行驶车辆信息、驾驶员操作车辆信息及驾驶员状态信息；计算部20，其以在所述信息获取部10获取的信息为基础计算驾驶负荷量，其中驾驶负荷量是以定量数值表示妨碍驾驶员安全驾驶的要素；判断部30，比较并判断在所述计算部20计算的驾驶负荷量与已设定的闲余负荷量；警告部40，其在所述判断部30计算的驾驶负荷量超出已设定的闲余负荷量的情况，警告驾驶员。
所述信息获取部10，包括车辆行驶信息获取部11、车辆操作信息获取部12、驾驶员状态信息获取部13。
所述车辆行驶信息获取部11，为了获取在驾驶员行驶车辆时产生的信息，其在加速度踏板操作传感器、刹车踏板操作传感器、转向盘操作传感器、多功能开关操作传感器、离合器踏板操作传感器、变速器操作传感器中包括一个以上。
所述车辆操作信息获取部12，为了获取在驾驶员操作车辆时产生的信息，其在空调装置开关操作传感器、AVN开关操作传感器中包括一个以上。
所述驾驶员状态信息获取部13，为了获取正在驾驶的驾驶员状态的信息，其在麦克风、注视驾驶员摄像头、ECG(Electrocardiogram，心电图)传感器、EEG(Electroencephalogram，脑电图)传感器、PPG(Photoplethysmography，光电容积图传感器中的包括一个以上。
所述EEG传感器、ECG传感器或PPG传感器是便携式(wearable)传感器。
所述计算部20，包括车辆行驶负荷量计算部21、车辆操作负荷量计算部22、驾驶员状态负荷量计算部23。
所述判断部30包括储存部50，所述储存部50保存已设定的闲余负荷量数据。
所述警告部40，其在警告音输出装置41、驾驶负荷量表示装置42、车辆控制装置43中包括一个以上。
根据本发明另一侧面的驾驶员状态感应方法，包括：获取信息的步骤S100，获取驾驶员行驶车辆信息、驾驶员操作车辆信息及驾驶员的状态信息；计算的步骤S200，以在所述获取信息的步骤S100获取的信息为基础计算驾驶负荷量，其中所述驾驶负荷量是以定量化的数值表示驾驶员负荷；判断步骤S300，比较在所述计算的步骤S200计算的驾驶员的驾驶负荷量与已设定的闲余负荷量；警告步骤S400，在所述判断步骤S300驾驶员的驾驶负荷量超出已设定的闲余负荷量的情况警告驾驶员。
所述获取信息的步骤S100，包括获取车辆行驶信息的步骤S110、获取车辆操作信息的步骤S120、获取驾驶员状态信息的步骤S130。
所述获取车辆行驶信息的步骤S110，为了获取在驾驶员行驶车辆时产生的信息，在获取加速度踏板操作信息的步骤S111、获取刹车踏板操作信息的步骤S112、获取转向盘操作信息的步骤S113、获取多功能开关操作信息的步骤S114中包括一个以上。
所述获取车辆行驶信息的步骤S110，在手动变速车辆的情况，其在获取离合器踏板操作信息的步骤S115、获取变速器操作信息的步骤S116中包括一个以上。
所述获取车辆操作信息的步骤S120，为了获取在驾驶员操作车辆时产生的信息，其在获取AVN操作信息的步骤S121、获取空调装置操作信息的步骤S122中包括一个以上。
所述获取驾驶员状态信息的步骤S130，为了获取正在驾驶的驾驶员状态信息，其在获取驾驶员的语音信息的步骤S131、获取驾驶员注视前方信息的步骤S132、获取驾驶员闭眼信息的步骤S133、获取驾驶员脑波信息的步骤S134、获取驾驶员心电图信息的步骤S135、获取驾驶员PPG信号信息的步骤S136中包括一个以上。
所述计算的步骤S200，包括计算车辆行驶负荷量的步骤S210、计算车辆操作负荷量的步骤S220、计算驾驶员状态负荷量的步骤S230、计算驾驶负荷量的步骤S240，其中计算驾驶负荷量的步骤S240是合并计算的各个负荷量来计算驾驶负荷量。
所述计算车辆行驶负荷量的步骤S210，包括计算加速度踏板操作负荷量的步骤S211、计算刹车踏板操作负荷量的步骤S212、计算多功能开关操作负荷量的步骤S213、计算转向盘操作负荷量的步骤S214、合并计算的各个操作负荷量的步骤S217。
所述计算车辆行驶负荷量的步骤S210，在手动变速车辆的情况，其在计算离合器踏板操作负荷量的步骤S215、计算变速器操作负荷量的步骤S216中包括一个以上。
所述计算加速度踏板操作负荷量的步骤S211，将已设定的时间期间操作加速度踏板的次数与已设定的加速度踏板操作负荷量加重值相乘。
所述计算刹车踏板操作负荷量的步骤S212，将已设定的时间期间操作刹车踏板的次数与已设定的刹车踏板操作负荷量加重值相乘。
所述计算多功能开关操作负荷量的步骤S213，将已设定的时间期间操作多功能开关的次数与已设定的多功能开关操作负荷量加重值相乘。
所述计算转向盘操作负荷量的步骤S214，将已设定时间期间转向盘的各个变化量与已设定的转向盘操作负荷量加重值相乘。
所述计算离合器踏板操作负荷量的步骤S215，将已设定时间期间操作离合器踏板的次数与已设定的离合器踏板操作负荷量加重值相乘。
所述计算变速器操作负荷量的步骤S216，将已设定时间期间操作变速器的次数与已设定的变速器操作负荷量加重值相乘。
所述计算车辆操作负荷量S220，包括计算根据AVN操作的负荷量的步骤S221、计算根据操作空调的负荷量的步骤S222、合并计算的各个操作负荷量的步骤S223。
所述计算AVN操作负荷量的步骤S221，将已设定时间期间操作AVN的次数及操作AVN的时间，与已设定的AVN操作负荷量加重值相乘。
所述计算空调装置操作负荷量的步骤S222，在已设定的时间期间操作空调装置的次数及操作空调装置的时间，与已设定的空调装置操作负荷量加重值相乘。
所述计算驾驶员状态负荷量的步骤S230，包括计算语音负荷量的步骤S231、计算瞌睡负荷量的步骤S232、计算注视怠慢负荷量的步骤S233、合并计算的各个负荷量的步骤S234。
所述计算语音负荷量的步骤S231，将已设定的时间期间接收基准值以上的语音数据的时间，与已设定的语音负荷量加重值相乘。
所述计算瞌睡负荷量的步骤S232，在已设定的时间期间闭眼的次数与闭眼的时间相乘的值，乘以已设定的瞌睡负荷量加重值。
在驾驶员的眼皮角度的合是已设定的基准值以下的情况，则判断驾驶员闭上了眼睛。
所述计算注意力怠慢负荷量的步骤S233，在已设定的时间期间驾驶员的视野超出无负荷行驶的可视范围的时间，乘以已设定的注视怠慢负荷量加重值。
所述无负荷行驶的可视范围，是根据从车辆正面的车轮角度来决定。
驾驶员的视野是否超出所述无负荷行驶的可视范围，是由测量驾驶员的脸部角度与驾驶员眼球的位置来判断的。
所述警告的步骤S400，在驾驶员负荷量是第1闲余负荷量以上并且不足第2闲余负荷量的情况，执行第1警告步骤S410，其中所述第1警告步骤S410在通过音响产生警告音的步骤S411、通过AVN或HUD表示警告的步骤S412、通过振动转向盘或座椅振动提醒的步骤S413中包括一个以上。
所述警告的步骤S400，在驾驶负荷量是第2闲余负荷量以上并且不足第3闲余负荷量的情况，执行保持AVN功能的第2警告步骤S420。
所述警告的步骤S400，在驾驶负荷量是第3闲余负荷量以上的情况，执行强制停车的第3警告步骤S430。
包括应用ECG(Electrocardiogram，心电图)判断驾驶员状态的步骤S500，在所述获取信息的步骤S100之后，从所述驾驶员的心电图信息与所述驾驶员的PPG信号信息判断驾驶员状态。
所述应用ECG(Electrocardiogram)判断驾驶员状态的步骤S500包括检测HRV信号的步骤S510，所述检测HRV信号的步骤S510从所述驾驶员的心电图信息与所述驾驶员的PPG(Photoplethysmography，光电容积图)信号信息检测HRV(HeartRateVariability，心率变异性)信号。
所述应用ECG判断驾驶员状态的步骤S500包括导出心率分布图及心率直方图的步骤S520，所述导出心率分布图及心率直方图的步骤S520是从所述检测HRV信号的步骤S510检测的结果导出驾驶员的心率分布图及心率直方图。
所述应用ECG判断驾驶员状态的步骤S500包括判断驾驶员状态的步骤S530，所述判断驾驶员状态的步骤S530是从所述导出心率分布图及心率直方图的步骤S520的结果判断驾驶员状态是否是非正常。
所述应用ECG(Photoplethysmography)判断驾驶员状态的步骤S500包括紧急控制的步骤S540，所述紧急控制的步骤S540在所述判断所述驾驶员状态的步骤S530判断驾驶员状态为非正常的情况控制车辆。
所述紧急控制的步骤S540，在开窗门的步骤S541、生成阴离子的步骤S542、播放音乐的步骤S543、通过AVN或HUD警告驾驶员的步骤S544、安全停车步骤S545中包括一个以上。
包括应用EEG(Electroencephalogram，脑电图)判断驾驶员状态的步骤S600，在所述获取信息的步骤S100之后从所述驾驶员的脑波信息判断驾驶员状态。
所述应用EEG(Electroencephalogram)判断驾驶员状态的步骤S600包括分离脑波的步骤S610，所述分离脑波的步骤S610是从所述驾驶员的脑波信息将各个波形分离为频率。
所述应用EEG(Electroencephalogram)判断驾驶员状态的步骤S600包括推断驾驶员状态的步骤S620，所述推断驾驶员状态的步骤S620以在所述分离脑波的步骤S610按频率分别分离的各个波形为基础，通过贝叶斯网络(BayesianNetwork)推断驾驶员状态。
所述应用EEG(Electroencephalogram)判断驾驶员状态的步骤S600，在所述推断驾驶员状态的步骤S620第一次推断驾驶员状态为瞌睡状态的情况，执行第1警告瞌睡的步骤S630，所述第1警告瞌睡的步骤S630在通过音响播放音乐或产生警告音的步骤S621、通过AVN或HUD表示警告的步骤S622、通过振动转向盘或座椅振动提醒的步骤S623中包括一个以上。
所述应用EEG(Electroencephalogram)判断驾驶员状态的步骤S600，在所述推断驾驶员状态的步骤S620推断驾驶员状态不是第1瞌睡状态的情况，执行安全停车的第2警告瞌睡的步骤S640。
所述应用EEG判断驾驶员状态的步骤S600包括提示引导行驶的步骤S650，提示引导行驶的步骤S650在所述推断驾驶员状态的步骤S620推断驾驶员状态为不安状态的情况，通过AVN或HUD提示引导行驶。
所述应用EEG判断驾驶员状态的步骤S600，在所述推断驾驶员状态的步骤S620推断驾驶员状态为安全状态的情况，在所述计算的步骤S200计算驾驶负荷量时，加上根据如下的数学式的脑波负荷量。
WEED＝脑波负荷量
Φ＝已设定的脑波负荷量加重值
αwave＝在单位时间期间提取的α波的平均频率
βwave＝在单位时间期间提取的β波的平均频率
所述应用EEG判断驾驶员状态的步骤S600，在所述推断驾驶员状态的步骤S620推断驾驶员状态为集中状态的情况，在所述计算的步骤S200不在驾驶负荷量加脑波负荷量。
(发明的效果)
如上所述，根据本发明了解与驾驶员行驶车辆或操作车辆相关的精神及身体状态，判断驾驶员是否是安全驾驶，在判断不是安全驾驶状态的情况，利用表示警告、产生警告音、振动提醒、强制控制车辆等多种方法来诱导安全驾驶来保护驾驶员。尤其是，在现有的技术难以判断的，了解驾驶员的发作或感情异常、呼吸苦难、注意力怠慢、驾驶不熟练等驾驶员的精神及身体状态，进而可保护驾驶员，因此其效用非常大。
附图说明
图1是根据本发明一实施例，概略地图示驾驶员状态感应装置构成的框图。
图2是根据本发明其他另一实施例，概略地图示信息获取部构成的图面。
图3是根据本发明其他另一实施例的ECG传感器、PPG传感器的示例图。
图4是根据本发明其他另一实施例的EEG传感器的示例图。
图5是根据本发明其他另一实施例的驾驶负荷量表示装置的示例图。
图6是根据本发明其他另一实施例，按顺序概略地图示驾驶员状态感应方法的流程图。
图7及图8是根据本发明其他另一实施例的驾驶员状态感应方法的获取信息步骤的流程图。
图9及图10是根据本发明其他另一实施例的驾驶员状态感应方法的计算步骤的流程图。
图11是根据本发明其他另一实施例的驾驶员状态感应方法的第1警告步骤的流程图。
图12及图13是根据本发明其他另一实施例的驾驶员状态感应方法的流程图。
图14是根据本发明其他另一实施例，说明在驾驶员状态感应方法判断驾驶员闭眼的方法的图面。
图15是根据本发明其他另一实施例，说明在驾驶员状态感应方法根据车轮角度的行驶无负荷可视范围的图面。
图16及图17是根据本发明其他另一实施例，说明在驾驶员状态感应方法判断驾驶员视野范围的方法的图面。
图18是根据本发明其他另一实施例，包括应用ECG判断驾驶员状态的步骤的概略性流程图。
图19是根据本发明其他另一实施例的应用ECG判断驾驶员状态步骤的详细流程图。
图20及图21是根据本发明其他另一实施例，说明在驾驶员状态感应方法从驾驶员的心率分布图及心率直方图判断驾驶员状态的方法的图面。
图22是根据本发明其他另一实施例，包括应用EEG的判断驾驶员状态步骤的概略性流程图。
图23及图24是根据本发明其他另一实施例，应用EEG判断驾驶员状态步骤的详细流程图。
图25是根据本发明其他另一实施例，说明在驾驶员状态感应方法应用EEG来判断驾驶员状态的方法的概略图。
图26是表示各个脑波的频域及特征的公式。
图27是说明利用贝叶斯网络来找出各个脑波的频率范围的方法的图面。
图28是根据本发明其他另一实施例，利用贝叶斯网络推断驾驶员状态步骤的概念图。
图29至图32是根据本发明其他另一实施例的应用ECG、EEG判断驾驶员状态的方法的详细流程图。
(附图标记说明)
10：信息获取部
11：车辆行驶信息获取部
12：车辆操作信息获取部
13：驾驶员状态信息获取部
20：计算部
21：车辆行驶负荷量计算部
22：车辆操作负荷量计算部
23：车辆状态负荷量计算部
30：判断部
40：警告部
41：警告音输出装置
42：驾驶负荷量表示装置
43：车辆控制装置
具体实施方法
在本说明书及权利要求范围使用的用于或单词，不得定义为通常的或词典的含义，发明者为了以最佳的方法说明自己的发明，本着可适当定义用语的概念的原则，应该只解释为符合本发明技术思想的含义与概念。因此，在本说明书记载的实施例与在图面图示的构成只不过是本发明最优选的实施例，并不代表本发明的技术思想，因此应理解为在本申请的观点有将其代替的多样的均等的变形例。另外，省略使本发明要点不清楚的公知功能及构成的详细说明。以下，参照附图将详细说明本发明优选实施例。
图1是根据本发明一实施例，概略地图示驾驶员状态感应装置构成的框图。图2是根据本发明其他另一实施例，概略地图示信息获取部构成的图面。图3是根据本发明其他另一实施例的ECG传感器、PPG传感器的示例图。图4是根据本发明其他另一实施例的EEG传感器的示例图。图5是根据本发明其他另一实施例的驾驶负荷量表示装置的示例图。参照图1至图5，根据本发明一实施例的驾驶员状态感应装置，包括：信息获取部10，其获取驾驶员状态信息、车辆行驶信息及驾驶员操作车辆信息；计算部20，其以在所述信息获取部10获取的信息为基础，计算驾驶员的驾驶负荷量；判断部30，其判断并比较在所述计算部20计算的驾驶负荷量与已设定的闲余负荷量；警告部40，在所述判断部30计算的驾驶负荷量超出已设定的闲余负荷量的情况，其警告驾驶员。所述信息获取部10是为了获取车辆的行驶信息、车辆操作信息及驾驶员状态信息的构成。
车辆行驶信息作为在驾驶员行驶车辆时产生的信息，例如，驾驶员有多经常踩踏加速度踏板，驾驶员有多经常踩踏刹车踏板，驾驶员有多经常操作转向盘，驾驶员有多经常操作多功能开关等信息。另外，手动变速车辆的情况，除了上述信息以外，也可包括驾驶员有多经常踩踏离合器踏板，驾驶员有多经常操作变速器等的信息。所述多功能开关意味着雨刮器、方向指示灯、照明灯等的开关，这是在车辆行驶上需要的要素，因此多功能开关的操作信息可包括在车辆行驶信息。
车辆操作信息作为在驾驶员操作车辆时产生的信息，例如可包括驾驶员有多么经常操作AVN(AUDIOVIDEONAVIGATION，音频、视频、导航)，驾驶员有多经常操作空调装置等的信息。
驾驶员状态信息作为正在驾驶的驾驶员状态的信息，例如可包括驾驶员有多长时间期间进行对话(包括通话)，驾驶员是否在瞌睡，驾驶员是否注视前方，在驾驶员的心电图或脑波是否产生异常状态等。
为了获取如上所述的信息，信息获取部10可包括车辆行驶信息获取部11、车辆操作信息获取部12、驾驶员状态信息获取部13。其中车辆行驶信息获取部11可包括加速度踏板传感器、刹车踏板传感器、转向盘传感器、多功能开关传感器、离合器踏板传感器、变速器传感器。车辆操作信息获取部12，可包括空调装置传感器、AVN传感器。另外，驾驶员状态信息获取部13可包括麦克风、注视驾驶员摄像头、ECG(Electrocardiogram，心电图)传感器、EEG(Electroencephalogram脑电图)传感器、PPG(Photoplethysmography，光电容积图)传感器。
所述麦克风是为了识别驾驶员是否对话(包括通话)的构成，注视驾驶员摄像头是拍摄驾驶员脸部影像或眼睛区域影像，为了识别驾驶员是否瞌睡或是否注视前方的构成，所述ECG传感器是为了识别驾驶员心电图的构成，所述PPG传感器是为了识别驾驶员PPG信号的构成，PPG信号可意味着光电容积图波，所述ECG传感器及PPG传感器可由便携式(Wearable)传感器构成，尤其是可由胸带形状或手表形状等易于携带的构造构成，其携带在驾驶员的身体可精密地测量心电图及光电容积脉搏波，所述EEG传感器是为了获取驾驶员的脑波信息，EEG传感器可由便携式(Wearable)传感器构成，尤其是可由头戴式形状等便于携带的构造构成。其携带在驾驶员的身体可精密地测量脑波。
计算部20，其以在信息获取部10获取的信息为基础计算驾驶负荷量，其中驾驶负荷量是将影响驾驶员安全驾驶的负面要素换算为定量数值。计算部20，可由车辆行驶负荷量计算部21、车辆操作负荷量计算部22、驾驶员状态负荷量计算部23构成，合并在各个计算部21、22、23计算的各个负荷量，可计算驾驶负荷量。
判断部30判断并比较在计算部20计算的驾驶负荷量与已设定的闲余负荷量，在驾驶负荷量是已设定的闲余负荷量以下的情况，判断为安全驾驶状态。相反，在驾驶负荷量超出已设定的闲余负荷量的情况，判断为不是安全驾驶状态。已设定的闲余负荷量可以是，通过根据被试验者的条件的实验，从车辆行驶负荷量、车辆操作负荷量及驾驶员状态负荷量之和提取的实验值。另外，已设定的闲余负荷量可以是以根据驾驶员现有驾驶模式的信息为基础计算驾驶负荷量的值。判断部30可包括储存部50，储存部50保存已设定的闲余负荷量值。储存部50作为为了保存数据的保存手段，可以是非挥发性储存器。
警告部40作为在所述判断部判断不是安全驾驶状态的情况警告驾驶员的构成，可包括警告音输出装置41、驾驶负荷量表示装置42、车辆控制装置43。如图5所示，可在车辆仪表板安装驾驶负荷量表示装置42，另外也可通过AVN或HUD(HeadUpDisplay，平视显示器)表示驾驶负荷量。警告音输出装置41在判断不是安全驾驶状态的情况，对驾驶员产生警告音或可播放语音引导告知不是安全驾驶的状态。警告音输出装置41也可应用设置在车辆的音响，车辆控制装置43作为在判断不是安全驾驶状态的情况安全停车的装置，可包括控制设置在车辆的转向盘、变速器、刹车的装置。
所述信息获取部10、计算部20、判断部30、警告部40、储存部50相互间利用蓝牙(Bluetooth)、紫蜂(ZigBee)、WIFI等来无线连接，也可利用RS-232、RS-485、CAN等来有线连接。
图6是根据本发明其他另一实施例，按顺序概略地图示驾驶员状态感应方法的流程图。图7及图8是根据本发明其他另一实施例的驾驶员状态感应方法的获取信息步骤的流程图。图9及图10是根据本发明其他另一实施例的驾驶员状态感应方法的计算步骤的流程图。图11是根据本发明其他另一实施例的驾驶员状态感应方法的第1警告步骤的流程图。图12及图13是根据本发明其他另一实施例的驾驶员状态感应方法的流程图。图14是根据本发明其他另一实施例，说明在驾驶员状态感应方法判断驾驶员闭眼的方法的图面。图15是根据本发明其他另一实施例，说明在驾驶员状态感应方法根据车轮角度的行驶无负荷可视范围的图面。图16及图17是根据本发明其他另一实施例，说明在驾驶员状态感应方法判断驾驶员视野范围的方法的图面。参照图6至图17，根据本发明其他另一实施例的驾驶员状态感应方法，包括：获取信息的步骤S100，获取驾驶员状态信息及驾驶员操作车辆信息；计算的步骤S200，以在所述获取信息的步骤S100获取的信息为基础，计算驾驶员的驾驶负荷量；判断的步骤S300，比较在所述计算的步骤S200计算的驾驶员的驾驶负荷量与已设定的闲余负荷量；警告的步骤S400，在所述判断的步骤S300驾驶员的驾驶负荷量超出已设定的闲余负荷量的情况警告驾驶员。
所述获取信息的步骤S100，根据传感器、麦克风、摄像头等，获取对驾驶员的信息。所述获取信息的步骤S100，包括：获取车辆行驶信息的步骤S110，测量驾驶员为了行驶车辆的踏板等的操作次数及操作时间等；获取车辆操作信息的步骤S120，测量驾驶员为了操作车辆的附加机器的开关等的操作次数及操作时间等；获取驾驶员状态信息的步骤S130，测量驾驶员的对话时间、闭眼时间、未注视前方的时间、脑波、心电图等。
其中获取车辆行驶信息的步骤S110，包括：获取加速度踏板操作信息的步骤S111，测量在已设定的单位时间期间驾驶员操作加速度踏板的次数；获取刹车踏板操作信息的步骤S112，测量在已设定的单位时间期间驾驶员操作刹车踏板的次数；获取转向盘操作信息的步骤S113，测量在已设定的单位时间期间驾驶员旋转转向盘的各个变化量；获取多功能开关操作信息的步骤S114，测量在已设定的单位时间期间驾驶员操作雨刮器或方向指示灯等的多功能开关的次数。尤其是，在手动变速车辆的情况，还可包括：获取离合器踏板操作信息的步骤S115，测量在已设定的单位时间期间驾驶员操作离合器踏板的次数；获取变速器操作信息的步骤S116，测量在已设定的单位时间期间驾驶员操作变速器的次数。
获取车辆操作信息的步骤S120，包括：获取AVN操作信息的步骤S121，测量在已设定的单位时间期间驾驶员操作AVN的时间及操作次数；获取空调装置操作信息的步骤S122，测量在已设定的单位时间期间驾驶员操作加热器或空调等空调装置的时间及操作次数。
获取驾驶员状态信息的步骤S130，包括：获取驾驶员语音信息的步骤S131，通过安装在车辆内固定位置的麦克风感应驾驶员的语音，据此测量产生语音的时间，其中语音具有接收的语音数据的脉冲大小(语音大小)及基准值以上的脉冲大小；获取驾驶员注视前方信息的步骤S132，利用从安装在车辆内固定位置的摄像头接收的驾驶员脸部影像及眼睛区域影像，测量驾驶员视野范围超出无负荷行驶可视范围的时间，其中无负荷行驶可视范围是不妨碍安全驾驶的范围；获取驾驶员闭眼信息的步骤S133，利用从安装在车辆内固定位置的摄像头接收的驾驶员眼睛区域影像，测量驾驶员闭眼的次数及闭眼的时间；获取驾驶员脑波信息的步骤S134；获取驾驶员心电图信息的步骤S135；获取PPG信号信息的步骤S136，测量驾驶员光电容积图波信号。所述各个获取信息的步骤不必按顺序进行，而是可同时进行或变换顺序进行。
所述计算的步骤S200，包括：计算车辆行驶负荷量的步骤S210，计算车辆行驶负荷量，其中车辆行驶负荷量是以定量数值表示阻碍与驾驶员行驶车辆相关的安全行驶的要素；计算车辆操作负荷量的步骤S220，计算车辆操作负荷量，其中车辆操作负荷量是以定量数值表示阻碍与驾驶员操作车辆相关的安全行驶的要素；计算驾驶员状态负荷量的步骤S230，计算驾驶员状态负荷量，其中驾驶员状态负荷量是以定量数值表示阻碍与驾驶员精神及身体状态相关的安全行驶的要素；计算驾驶负荷量的步骤S240，合并计算的各个负荷量来计算驾驶负荷量。
计算车辆行驶负荷量的步骤S210，包括：计算加速度踏板操作负荷量的步骤S211、计算刹车踏板操作负荷量的步骤S212、计算多功能开关操作负荷量的步骤S213、计算转向盘操作负荷量的步骤S214、合并计算的各个操作负荷量的步骤S217。若驾驶员在正在驾驶时过于频繁地操作加速度踏板、刹车踏板、多功能开关、转向盘等，则可阻碍安全行驶，因此可包括如上所述的步骤。计算车辆行驶负荷量的步骤S210只在车辆速度超出已设定速度的情况进行，在根据本发明一实施例时，若已设定的速度是10km/h的情况驾驶员的车辆速度是9km/h，则车辆行驶负荷量时0。计算车辆行驶负荷量的步骤S210，计算各个项目的操作时间或操作次数与已设定在各个项目的加重值，计算车辆行驶负荷量，其中各个项目的操作时间或操作次数包括于在所述获取车辆行驶信息的步骤S110获取的车辆行驶信息。已设定的加重值可根据各个的车辆行驶负荷量的实验来设定，另外已设定的加重值可以是以根据驾驶员现有驾驶模式的信息为基础计算的值，已设定的加重值可保存在储存部50。
根据本发明其他另一实施例时，每200ms计算车辆行驶负荷量Wd。各项的测量是以50ms为单位测量的，并且通信方式由CAN构成。在启动引擎的状态，若车辆速度是10km/h以上则开始进行计算。
(1)IG是开启，车辆速度是10km/h以上，并且计时器1设定为200ms，计时器2设定为50ms的情况，每50ms测量是否操作加速度踏板，从储存器调用已设定的加速度踏板操作负荷量加重值。
(2)IG是开启，车辆速度是10km/h以上，并且计时器1设定为200ms，计时器2设定为50ms的情况，每50ms测量是否操作刹车踏板，从储存器调用已设定的刹车踏板操作负荷量加重值。
(3)IG是开启，车辆速度是10km/h以上，并且计时器1设定为200ms，在200ms期间测量是否操作多功能开关，从储存器调用已设定的多功能开关操作负荷量加重值。
(4)IG是开启，车辆速度是10km/h以上，并且计时器1设定为200ms，计时器2设定为50ms的情况，每50ms测量转向盘的各个变化量，从储存器调用已设定的转向盘操作负荷量加重值。
(5)根据以下的数学式，计算200ms期间的车辆行驶负荷量Wd。
W d = D A × n A × 50 ms + D B × n B × 50 ms + D M × n M + θ × n θ × 50 ms
Wd＝车辆行驶负荷量
DA＝加速度踏板操作负荷量加重值
nA＝加速度踏板操作次数
DB＝刹车踏板操作负荷量加重值
nB＝刹车踏板操作次数
DM＝多功能开关操作负荷量加重值
nM＝多功能开关操作次数
θ＝转向盘操作负荷量加重值
nθ＝转向盘的总变化量
(6)根据情况可增加或省略包括在这种车辆行驶信息及车辆行驶负荷量的各个项目。例如在手动变速车辆的情况，可增加离合器踏板操作负荷量及变速器操作负荷量来计算车辆行驶负荷量。
根据本发明其他另一实施例时，计算包括在所述获取的车辆操作信息的各个项目操作次数，与已设定在各个项目的加重值，可根据以下的数学式计算车辆操作负荷量WM。
WM＝车辆操作负荷量
T已设定的时间＝已设定的时间
DC＝AVN操作负荷量加重值
nC＝AVN操作次数
TC＝AVN操作时间
DD＝空调装置操作负荷量加重值
nD＝空调装置操作次数
TD＝空调装置操作时间
根据本发明其他另一实施例时，计算包括在所述获取驾驶员状态信息的各个项目操作时间，与已设定在各个项目的加重值，可计算驾驶员状态负荷量。
通过安装在车辆内固定位置的麦克风感应驾驶员的语音，据此可从接收的语音数据的脉冲大小(语音大小)及语音产生时间的信息计算语音负荷量v。
V＝语音负荷量
T已设定的时间＝已设定的时间
Tv＝具有基准值以上的脉冲大小的语音产生时间
Dv＝语音负荷量加重值
利用从安装在车辆内固定位置的摄像头接收的驾驶员的眼睛区域影像，可获取驾驶员闭眼信息。摄像头可包括近红外LED(NearInfraredLED，近红外LED)，以使在白天及夜间记录影像。参照图14时，在眼睛区域影像感应眼皮区域，在眼皮的角度∠A与∠B之和是已设定的基准值∠C以下∠A+∠B≤∠C的情况，判断为驾驶员是闭眼。每已设定的时间确认驾驶员眼皮的角度，感应驾驶员闭眼次数，计算已设定时间期间闭眼次数与闭眼时间，可根据以下的数学式计算瞌睡负荷量。
P＝瞌睡负荷量
T已设定的时间＝已设定的时间
Tp＝闭眼时间
np＝闭眼次数
Dp＝瞌睡负荷量加重值
利用从安装在车辆内固定位置的摄像头接收的驾驶员脸部影像及眼睛区域影像，可获取驾驶员注视前方的信息。摄像头可包括近红外LED(NearInfraredLED)，以使在白天及夜间记录影像。参照图15时，行驶无负荷可视范围(a、b)是以车轮的角度为基础决定的，即根据在中央的方向变化角度量θA、θB决定。参照图16及图17时，驾驶员的视野范围是根据利用摄像头获取的驾驶员脸部角度(图16)与驾驶员眼球位置(图17)来决定。在现在的驾驶员的视野范围超出行驶无负荷可视范围(a、b)的情况，产生注视怠慢负荷量。根据与现在的驾驶员视野范围相当的范围，可使已设定的注视怠慢负荷量加重值不同。若在启动引擎的状态车辆速度是10km/h以上，则开始计算注视怠慢负荷量，可根据以下的数学式计算注视怠慢负荷量。
E＝注视怠慢负荷量
T已设定的时间＝已设定的时间
TE＝驾驶员的视野范围超出无负荷行驶可视范围的时间
DE＝注视怠慢负荷量加重值
如上所述，在执行计算语音负荷量的步骤S231、计算瞌睡负荷量S232、计算注视怠慢负荷量的步骤S233之后，合并各个负荷量可如下的数学式计算驾驶员状态负荷量S234。另外，如上所述在执行计算车辆行驶负荷量的步骤S210、计算车辆操作负荷量的步骤S220、计算驾驶员状态负荷量的步骤S230之后，合并各个负荷量可如下的数学式计算驾驶负荷量S240。
Wi＝V+P+E
Wi＝驾驶员状态负荷量
V＝语音负荷量
P＝瞌睡负荷量
E＝注视怠慢负荷量
Wtotal＝Wd+WM+Wi
Wtotal＝驾驶负荷量
Wd＝车辆行驶负荷量
WM＝车辆操作负荷量
Wi＝驾驶员状态负荷量
判断的步骤S300，判断并比较在所述计算的步骤S200计算的驾驶负荷量与已设定的闲余负荷量。在驾驶负荷量是已设定的闲余负荷量以下的情况，判断为安全驾驶状态。相反，在驾驶负荷量超出已设定的闲余负荷量的情况，则判断不是安全驾驶状态。已设定的闲余负荷量，可以是通过根据被试验者的条件的实验，从车辆行驶负荷量、车辆操作负荷量及驾驶员状态负荷量之和提取的实验值。另外，已设定的闲余负荷量可以是以根据现有的驾驶模式的信息为基础计算驾驶负荷量的值，已设定的闲余负荷量包括第1闲余负荷量、第2闲余负荷量、第3闲余负荷量，已设定的闲余负荷量可保存在储存部50，储存部50作为保存数据的保存手段，可以是非挥发性储存器。
警告的步骤S400，如图11所示包括第1警告步骤S410、第2警告步骤S420、第3警告步骤S430。根据在所述判断的步骤S300传输的信号，执行强度不同的各个警告步骤，执行符合驾驶员状态的警告，据此是为了诱导安全驾驶。在驾驶负荷量是第1闲余负荷量以上并且不足第2闲余负荷量的情况，执行第1警告步骤S410，并且第1警告步骤S410包括通过音响产生警告音的步骤S411、通过AVN或HUD表示警告的步骤S412、通过振动转向盘或座椅的振动提醒的步骤S413。通过音响产生警告音的步骤S411，通过音响播放警告语音或警告音，来警告驾驶员状态不是安全驾驶。通过AVN或HUD表示警告的步骤S412，通过AVN的画面或HUD(HeadUpDisplay)表示警告语句或警告图标，来警告驾驶员状态不是安全驾驶。振动提醒的步骤S413，在转向盘或座椅产生振动诱导驾驶员提高警戒。第1警告步骤S410在警告步骤S400中是警告强度最低的步骤。
第2警告步骤S420，在驾驶负荷量是第2闲余负荷量以上并且不足第3负荷量的情况执行第1警告步骤S420，并且保持AVN功能。即在长时间操作AVN的情况，妨碍安全驾驶的可能性高，因此在这一情况为不能操作AVN的状态，进行诱导使驾驶员集中驾驶。第2警告步骤S420，在警告的步骤S400中警告强度是第2低的步骤。
第3警告步骤S430，在驾驶负荷量是第3闲余负荷量以上的情况执行，并且通过控制转向盘、控制变速器及控制刹车来安全停车的步骤。第3警告步骤S430在警告的步骤S400中是警告强度最高的步骤，在判断驾驶员再也无法安全驾驶的状态的情况，通过控制转向盘、控制变速器及控制刹车将车辆撤离并停在安全地带，来保护驾驶员安全的步骤。
根据本发明其他另一实施例，第1警告步骤S410在第一次警告的情况，可包括通过音响产生警告音的步骤S411、通过AVN或HUD表示警告的步骤S412、通过振动转向盘或座椅提醒的步骤S413。第1警告步骤S410是第一次警告，因此执行轻微程度的警告，使驾驶员认知为不是安全驾驶的状态。在执行第1警告的步骤S410之后重新返回到获取信息的步骤S100，重新执行所述计算的步骤S200、所述判断的步骤S300，来判断驾驶员是否回到安全驾驶的状态。若不顾第1警告的步骤S410判断驾驶员无法回到安全驾驶的状态，则执行第2警告的步骤S420。第2警告步骤S420在第二次警告的情况限制AVN功能，即不顾第1警告步骤S410驾驶员操作AVN的情况停止操作AVN，进而是为了提高驾驶员的警惕心。在所述第2警告步骤S420之后重新执行获取信息的步骤S100、计算的步骤S200、判断的步骤S300，判断驾驶员是否恢复到安全驾驶的状态。若不顾第2警告步骤S420判断驾驶员未回到安全驾驶状态，则执行第3警告步骤S430。第3警告步骤，在第3次警告的情况通过控制转向盘、控制变速器及控制刹车来安全停车，即驾驶员不顾第1及第2警告还未恢复到安全驾驶状态的情况，车辆不遵从驾驶员的控制自动撤离并停车在安全地带，进而可保护不能自动恢复到安全驾驶状态的驾驶员。
图18是根据本发明其他另一实施例，包括应用ECG判断驾驶员状态的步骤的概略性流程图。图19是根据本发明其他另一实施例的应用ECG判断驾驶员状态步骤的详细流程图。图20及图21是根据本发明其他另一实施例，说明在驾驶员状态感应方法从驾驶员的心率分布图及心率直方图判断驾驶员状态的方法的图面。参照图18至图21，为了分析对驾驶员直接的驾驶负荷，利用心电图测量值计算心率变异(HRV，HeartRateVariability)，心率变异(HRV)是驾驶员工作负荷(Workload)，即作为测量驾驶负荷的尺度，是与心率(HR)测量方法一起使用的方法。心率变异(HRV)明确表示身体对刺激反应的难易度，因此在测量驾驶负荷上可使用为数量化的指标。
如图19所示，在获取信息的步骤S100通过便携式传感器ECG传感器及PPG传感器，获取驾驶员的心电图及PPG信号信息，从在检测HRV信号的步骤S510获取的心电图及PPG信号信息检测HRV信号，在导出心率分布图及心率直方图的步骤S520，通过分析HRV信号的时间区域及频域导出心率分布图及心率直方图，在判断驾驶员状态的步骤S530导出的心率分布图及心率直方图判断驾驶员状态是正常还是非正常。
如图20及图21所示，正常状态时的心率分布图均匀且广泛地分布在在红色基准范围内，心率直方图构成较宽的三角形形状。相反，因为压力或副交感神经的活动非正常状态时的心率分布图集中体现在低数值，并且可确认到心率直方图构成窄三角形形状。
在判断所述驾驶员状态的步骤S530判断驾驶员状态是非正常状态的情况，不执行计算的步骤S200、判断的步骤S300、警告的步骤S400，单独执行紧急控制的步骤S540。紧急控制的步骤S540，可包括开窗门的步骤S541、生成阴离子的步骤S542、播放音乐的步骤S543、通过AVN或HUD警告驾驶员的步骤S544、通过控制转向盘、控制变速器及控制刹车的安全停车的步骤S545。如上所述，在应用ECG判断驾驶员状态的步骤S500判断驾驶员状态是非正常的情况，是给驾驶员的安全带来致命性危险的紧急状况，因此不执行计算的步骤S200、判断的步骤S300、警告的步骤S400，而是单独执行紧急控制步骤S540。
图22是根据本发明其他另一实施例，包括应用EEG的判断驾驶员状态步骤的概略性流程图。图23及图24是根据本发明其他另一实施例，应用EEG判断驾驶员状态步骤的详细流程图。图25是根据本发明其他另一实施例，说明在驾驶员状态感应方法应用EEG来判断驾驶员状态的方法的概略图。图26是表示各个脑波的频域及特征的公式。图27是说明利用贝叶斯网络来找出各个脑波的频率范围的方法的图面。图28是根据本发明其他另一实施例，利用贝叶斯网络推断驾驶员状态步骤的概念图。参照图22至图28，驾驶员的脑波具有在缓和紧张或瞌睡时增加α波，在紧张且不安时增加β波的倾向。脑波的激活度可将紧张与不安的程度数值化，可应用为判断驾驶负荷的定量性数据。
如图23及图24所示，通过头戴式形状的便携式传感器获取驾驶员的脑波信息S100，将获取的驾驶员脑波的各个波形分别分离为频率S610，作为贝叶斯网络(BayesianNetwork)找出各个脑波的频率范围来推断驾驶员状态S620。即，如图25至图28所示通过贝叶斯网络(BayesianNetwork)将不确定的状况表示为概率值，将复杂的推断过程简单化为定量的节点之间的关系，利用比较驾驶员的状态与现有的数据比较并判断的方法，可最终推断驾驶员状态，现有的数据可保存在所述储存部50。
在所述推断驾驶员状态的步骤S620推断驾驶员状态为瞌睡状态的情况，判断是否是第一次瞌睡状态，在第一次瞌睡状态的情况，执行第1警告瞌睡的步骤S630。所述第1警告瞌睡的步骤S630，包括通过音响播放音乐或产生警告音的步骤S621、通过AVN或HUD表示警告的步骤S622、通过振动转向盘或座椅振动提醒的步骤S623等，在瞌睡的状态能够叫醒驾驶员的步骤。在所述第1警告瞌睡的步骤S630之后，为了确认是否叫醒在瞌睡状态的驾驶员，重新执行所述获取信息的步骤S100、所述分离脑波的步骤S610、推断所述驾驶员状态的步骤S620。不顾所述第1警告瞌睡的步骤S630，在所述推断驾驶员状态的步骤S620第二次推断驾驶员状态为瞌睡状态的情况，执行第2警告瞌睡的步骤S640，其中第2警告瞌睡的步骤S640是通过控制转向盘、控制变速器及控制刹车来安全停车。即，驾驶员不顾第1及第2警告瞌睡也未能恢复清醒的状态的情况，车辆不遵从驾驶员的控制自动撤离并停车在安全地带，进而可保护瞌睡状态的驾驶员。如上所述在应用EEG判断驾驶员状态的步骤S600推断驾驶员状态为瞌睡状态的情况，是给驾驶员安全带来致命性危险的紧急状况，因此不执行计算的步骤S200、判断的步骤S300、警告的步骤S400，而是单独执行第1及第2警告瞌睡的步骤S640。
在所述推断驾驶员状态的步骤S620推断驾驶员状态为不安状态的情况，为了不使在车辆行驶的操作条件演算法出错，在***进行判断，通过AVN或HUD给驾驶员提示引导行驶S650。如上所述应用EEG的判断驾驶员状态的步骤S600推断驾驶员状态为不安状态的情况，是给驾驶员安全带来致命性危险的紧急状况，因此不执行计算的步骤S200、判断的步骤S300、警告的步骤S400，单独执行提示引导行驶的步骤S650。
在所述推断驾驶员状态的步骤S620推断驾驶员状态为集中状态或稳定状态的情况，包括脑波负荷量WEEG来执行所述计算的步骤S200。如下的数学式，通过集中与稳定状态的信号比计算脑波负荷量WEEG。
W EEG = αwave ( 8 ~ 12.99 Hz ) βwave ( 13 ~ 29.99 Hz )
分为在单位时间期间提取的α波与β波的平均频率值，α波值为极大值(12.99Hz)的情况，脑波负荷量WEEG的最大值接近于1，因此将脑波负荷量WEEG极大化，如下的数学式在计算的步骤S200合并在计算的脑波负荷量WEEG值乘以根据实验计算的脑波负荷量修正值Φ的值。
Wtotal＝驾驶负荷量
WD＝车辆行驶负荷量
WM＝车辆操作负荷量
Wi＝驾驶员状态负荷量
WEED＝脑波负荷量
Φ＝脑波负荷量修正值
图29至图32是根据本发明其他另一实施例的应用ECG、EEG判断驾驶员状态的方法的详细流程图。如图23所示，根据本发明一实施例的驾驶员状态感应方法，可按顺序执行获取信息的步骤S100、应用ECG判断驾驶员状态的步骤S500、应用EEG判断驾驶员状态的步骤S600、计算的步骤S200、判断的步骤S300、警告的步骤S400。根据本发明其他另一实施例的驾驶员状态感应方法，也可变换顺序执行所述应用ECG判断驾驶员状态的步骤S500、所述应用EEG判断驾驶员状态的步骤S600。即，可按顺序执行获取信息的步骤S100、应用EEG判断驾驶员状态的步骤S600、应用ECG判断驾驶员状态的步骤S500、计算的步骤S200、判断的步骤S300、警告的步骤S400。
上述实施例只不过是优选实施例，以使在本发明所属的技术领域具有通常知识的技术人员(以下称为技术人员)易于实施本发明，并不限定于上述实施例及附图，因此不得限定本发明的权利范围。因此，在不超过本发明的技术思想的范围内可进行各种替换、变形计变更，这对技术人员的明确的，并且明确根据技术人员易于可变更的部分也包括到权利范围。

Claims (17)

1.一种驾驶员状态感应装置，其特征在于，包括：
信息获取部，其获取驾驶员行驶车辆信息、驾驶员操作车辆信息及驾驶员状态信息；
计算部，其以在所述信息获取部获取的信息为基础计算驾驶负荷量，其中驾驶负荷量是以定量的数值表示妨碍驾驶员安全驾驶的要素；
判断部，其比较并判断在所述计算部计算的驾驶负荷量与已设定的闲余负荷量；
警告部，其在所述判断部计算的驾驶负荷量超出已设定的闲余负荷量的情况警告驾驶员。
2.根据权利要求1所述的驾驶员状态感应装置，其特征在于，
所述信息获取部，其包括车辆行驶信息获取部、车辆操作信息获取部、驾驶员状态信息获取部。
3.根据权利要求2所述的驾驶员状态感应装置，其特征在于，
所述车辆行驶信息获取部，其为了获取在驾驶员行驶车辆时产生的信息，在加速度踏板操作传感器、刹车踏板操作传感器、转向盘操作传感器、多功能开关操作传感器、离合器踏板操作传感器、变速器操作传感器中包括一个以上。
4.根据权利要求2所述的驾驶员状态感应装置，其特征在于，
所述车辆操作信息获取部，其为了获取在驾驶员操作车辆时产生的信息，在空调装置开关操作传感器、AVN开关操作传感器中包括一个以上。
5.根据权利要求2所述的驾驶员状态感应装置，其特征在于，
所述驾驶员状态信息获取部，其为了获取正在驾驶的驾驶员状态的信息，在麦克风、注视驾驶员的摄像头、ECG(Electrocardiogram，心电图)传感器、EEG(Electroencephalogram，脑电图)传感器、PPG(Photoplethysmography，光电容积图)传感器中包括一个以上。
6.根据权利要求1所述的驾驶员状态感应装置，其特征在于，
所述计算部，其包括车辆行驶负荷量计算部、车辆操作负荷量计算部、驾驶员状态负荷量计算部。
7.根据权利要1所述的驾驶员状态感应装置，其特征在于
所述判断部包括储存部，所述储存部保存已设定的闲余负荷量数据。
8.根据权利要求1所述的驾驶员状态感应装置，其特征在于，
所述警告部，其在警告音输出装置、驾驶负荷量表示装置、车辆控制装置中包括一个以上。
9.一种驾驶员状态感应方法，其特征在于，包括：
获取信息的步骤，获取驾驶员行驶车辆信息、驾驶员操作车辆信息及驾驶员状态信息；
计算的步骤，以在所述获取信息的步骤获取的信息为基础计算驾驶负荷量，其中所述驾驶负荷量是以定量化的数值表示驾驶员的负荷；
判断的步骤，比较在所述计算的步骤计算的驾驶员的驾驶负荷量与已设定的闲余负荷量；
警告的步骤，在所述判断的步骤驾驶员的驾驶负荷量超出已设定的闲余负荷量的情况警告驾驶员。
10.根据权利要求9所述的驾驶员状态感应方法，其特征在于，
所述获取信息的步骤，包括获取车辆行驶信息的步骤、获取车辆操作信息的步骤、获取驾驶员状态信息的步骤。
11.根据权利要求10所述的驾驶员状态感应方法，其特征在于，
所述获取车辆行驶信息的步骤，为了获取在驾驶员行驶车辆时产生的信息，在获取加速度踏板操作信息的步骤、获取刹车踏板操作信息的步骤、获取转向盘操作信息的步骤、获取多功能开关操作信息的步骤中包括一个以上。
12.根据权利要求10所述的驾驶员状态感应方法，其特征在于，
所述获取车辆操作信息的步骤，为了获取在驾驶员操作车辆时产生的信息，在获取AVN操作信息的步骤、获取空调装置操作信息的步骤中包括一个以上。
13.根据权利要求10所述的驾驶员状态感应方法，其特征在于，
所述获取驾驶员状态信息的步骤，为了获取根据正在驾驶的驾驶员状态的信息，在获取驾驶员语音信息的步骤、获取驾驶员注视前方信息的步骤、获取驾驶员闭眼信息的步骤、获取驾驶员脑波信息的步骤、获取驾驶员心电图信息的步骤、获取驾驶员PPG信号信息的步骤中包括一个以上。
14.根据权利要求9所述的驾驶员状态感应方法，其特征在于，
所述计算的步骤，包括计算车辆行驶负荷量的步骤、计算车辆操作负荷量的步骤、计算驾驶员状态负荷量的步骤、计算驾驶负荷量的步骤，其中计算驾驶负荷量的步骤是合并计算的各个负荷量来计算驾驶负荷量。
15.根据权利要求9所述的驾驶员状态感应方法，其特征在于，
所述警告的步骤，在驾驶员负荷量是第1闲余负荷量以上并且不足第2闲余负荷量的情况执行第1警告步骤，其中所述第1警告步骤在通过音响产生警告音的步骤、通过AVN或HUD表示警告的步骤、通过振动转向盘或座椅振动提醒的步骤中包括一个以上。
16.根据权利要求9所述的驾驶员状态感应方法，其特征在于
所述警告的步骤，在驾驶负荷量是第2闲余负荷量以上并且不足第3闲余负荷量的情况，执行保持AVN功能的第2警告步骤。
17.根据权利要求9所述的驾驶员状态感应方法，其特征在于
所述警告的步骤，在驾驶负荷量是第3闲余负荷量以上的情况，执行强制停车的第3警告步骤。
CN201410562445.9A 2014-07-23 2014-10-21 驾驶员状态感应装置及其方法 Active CN105313898B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR20140093168 2014-07-23
KR10-2014-0093168 2014-07-23

Publications (2)

Publication Number Publication Date
CN105313898A true CN105313898A (zh) 2016-02-10
CN105313898B CN105313898B (zh) 2018-03-20

Family

ID=55065749

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201410562445.9A Active CN105313898B (zh) 2014-07-23 2014-10-21 驾驶员状态感应装置及其方法

Country Status (3)

Country Link
US (1) US9682711B2 (zh)
CN (1) CN105313898B (zh)
DE (1) DE102015201790B4 (zh)

Cited By (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105847452A (zh) * 2016-06-14 2016-08-10 深圳爱易瑞科技有限公司 一种车辆联网安全管控方法
CN106274483A (zh) * 2016-11-10 2017-01-04 合肥工业大学 基于分心驾驶行为判别的车辆自动驾驶切换装置及方法
CN106364469A (zh) * 2016-08-29 2017-02-01 乐视控股（北京）有限公司 一种车辆刹车的控制方法和装置
CN106364487A (zh) * 2016-09-30 2017-02-01 上海沿锋汽车科技股份有限公司 一种用于监测驾驶员清醒状况的装置
CN107539319A (zh) * 2016-06-24 2018-01-05 丰田自动车株式会社 车辆行驶控制装置
CN107554528A (zh) * 2017-08-17 2018-01-09 上海擎感智能科技有限公司 驾乘人员的疲劳等级检测方法及装置、存储介质、终端
CN107635845A (zh) * 2016-05-08 2018-01-26 深圳市欸阿技术有限公司 车辆行驶控制的方法及装置
CN107628033A (zh) * 2016-07-13 2018-01-26 福特全球技术公司 基于乘员警觉性的导航
CN108068621A (zh) * 2016-11-14 2018-05-25 本田技研工业株式会社 停车控制装置、车辆及使车辆自动停车的方法
CN108482381A (zh) * 2018-03-27 2018-09-04 京东方科技集团股份有限公司 车辆控制***、车辆和车辆控制方法
CN109806552A (zh) * 2019-01-28 2019-05-28 北京航空航天大学 一种基于呼吸和力触觉协同控制的注意力训练方法及***
CN110723145A (zh) * 2019-09-12 2020-01-24 精电有限公司 车辆控制方法、装置、计算机可读存储介质及可穿戴设备
CN110834640A (zh) * 2018-08-10 2020-02-25 上海博泰悦臻网络技术服务有限公司 安全驾驶提醒方法、车机及车辆
CN110843764A (zh) * 2019-11-29 2020-02-28 长安大学 一种促使驾驶员安全驾驶的辅助***
CN111731302A (zh) * 2020-05-27 2020-10-02 武汉理工大学 基于副任务的汽车驾驶员大脑视觉负荷评估方法及***
CN112716457A (zh) * 2020-12-30 2021-04-30 武汉理工大学 基于副任务的汽车驾驶员大脑行为负荷测量***及方法
TWI744932B (zh) * 2020-06-03 2021-11-01 南開科技大學 智慧型頭盔系統及其運作方法
CN115398508A (zh) * 2020-03-31 2022-11-25 五十铃自动车株式会社 允许与否确定装置

Families Citing this family (27)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2013074919A2 (en) * 2011-11-16 2013-05-23 Flextronics Ap , Llc Universal bus in the car
WO2014176474A1 (en) * 2013-04-25 2014-10-30 GM Global Technology Operations LLC Ambient display
KR102051142B1 (ko) * 2014-06-13 2019-12-02 현대모비스 주식회사 차량용 운전자 위험 지수 관리 시스템 및 그 방법
CN106427570A (zh) * 2015-08-13 2017-02-22 华邦电子股份有限公司 行动载具安全装置及其安全监控方法
US10124779B2 (en) * 2016-05-20 2018-11-13 Toyota Jidosha Kabushiki Kaisha Supervising method for dynamic and large data loads in automotive systems
US10335045B2 (en) 2016-06-24 2019-07-02 Universita Degli Studi Di Trento Self-adaptive matrix completion for heart rate estimation from face videos under realistic conditions
CN106502177A (zh) * 2016-11-01 2017-03-15 合肥洛维信息科技有限公司 一种驾驶培训教练车的预警***
CN106617525A (zh) * 2016-11-09 2017-05-10 广州杰赛科技股份有限公司 一种防疲劳驾驶的智能手环
US10696249B2 (en) * 2017-02-10 2020-06-30 Koninklijke Philips N.V. Automatic car setting adjustments by identifying driver with health watch wearable or in-car sensors
KR20180104235A (ko) * 2017-03-10 2018-09-20 만도헬라일렉트로닉스(주) 운전자 상태 모니터링 방법 및 장치
US10446031B2 (en) * 2017-03-14 2019-10-15 Hyundai Mobis Co., Ltd. Apparatus and method of safety support for vehicle
US11164459B2 (en) 2017-03-14 2021-11-02 Hyundai Mobis Co., Ltd. Apparatus and method of safety support for vehicle
WO2018179406A1 (ja) * 2017-03-31 2018-10-04 本田技研工業株式会社 車載装置、情報管理サーバ、情報管理システム、および方法
MY192254A (en) * 2017-06-01 2022-08-11 Univ Kebangsaan Malaysia A system and a method to determine and control emotional state of a vehicle operator
JP6930247B2 (ja) * 2017-06-29 2021-09-01 株式会社アイシン 覚醒支援装置、覚醒支援方法、及び、覚醒支援プログラム
JP6915503B2 (ja) * 2017-11-09 2021-08-04 トヨタ自動車株式会社 ドライバモニタシステム
KR102302917B1 (ko) * 2017-12-18 2021-09-15 현대모비스 주식회사 안전운전 지원 장치 및 방법
US10780890B2 (en) 2018-01-03 2020-09-22 Toyota Research Institute, Inc. Vehicle systems and methods for detecting and mitigating an incapacitated driver
JP7068988B2 (ja) * 2018-10-26 2022-05-17 本田技研工業株式会社 走行制御装置、走行制御方法およびプログラム
JP7139889B2 (ja) * 2018-10-31 2022-09-21 トヨタ自動車株式会社 車両制御システム
US10696305B2 (en) * 2018-11-15 2020-06-30 XMotors.ai Inc. Apparatus and method for measuring physiological information of living subject in vehicle
DE102018221271A1 (de) * 2018-12-07 2020-06-10 Audi Ag Verfahren und Vorrichtung zum Bereitstellen eines korrigierten Elektroenzephalografie-Signals in einem Fahrzeug sowie Kraftfahrzeug
US11021147B2 (en) 2018-12-12 2021-06-01 Toyota Research Institute, Inc. Vehicles and methods for determining objects of driver focus
CN112319482B (zh) * 2019-08-01 2022-04-01 上海擎感智能科技有限公司 车辆及其疲劳驾驶预警方法、***、介质、及车载终端
US12005906B2 (en) * 2019-10-15 2024-06-11 Waymo Llc Using driver assistance to detect and address aberrant driver behavior
US11749109B2 (en) * 2019-12-19 2023-09-05 Etalyc Inc. Adaptive traffic management system
JP6936350B2 (ja) * 2020-02-05 2021-09-15 本田技研工業株式会社 車両制御装置および車両制御方法

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20050030184A1 (en) * 2003-06-06 2005-02-10 Trent Victor Method and arrangement for controlling vehicular subsystems based on interpreted driver activity
US20100185101A1 (en) * 2009-01-19 2010-07-22 Denso Corporation Apparatus for evaluating biological condition, method for the same, and computer program product
CN101980660A (zh) * 2008-09-19 2011-02-23 松下电器产业株式会社 注意力分散检测装置、注意力分散检测方法及计算机程序
US20120150412A1 (en) * 2010-12-14 2012-06-14 Electronics And Telecommunications Research Institute Driving work load measurement apparatus and method
CN103370252A (zh) * 2011-02-18 2013-10-23 本田技研工业株式会社 对驾驶员行为进行响应的***和方法
CN103380033A (zh) * 2011-02-03 2013-10-30 丰田自动车株式会社 车辆控制装置

Family Cites Families (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100282903B1 (ko) 1997-12-31 2001-03-02 정몽규 주행도로 차선 이탈 방지장치
JP2002002325A (ja) 2000-06-27 2002-01-09 Nissan Motor Co Ltd 車両用警報装置
US6580973B2 (en) 2000-10-14 2003-06-17 Robert H. Leivian Method of response synthesis in a driver assistance system
DE10103401A1 (de) 2001-01-26 2002-08-01 Daimler Chrysler Ag Gefahrenabwendungssystem für ein Fahrzeug
US6998972B2 (en) 2002-10-31 2006-02-14 General Motors Corporation Driving workload estimation
KR20040094926A (ko) 2003-05-06 2004-11-12 현대자동차주식회사 자동차의 휴대폰 사용 금지 제어방법
DE10322458A1 (de) * 2003-05-16 2004-12-02 Daimlerchrysler Ag Verfahren und Vorrichtung zur Beeinflussung der Beanspruchung eines Fahrers in einem Kraftfahrzeug
KR20050015771A (ko) 2003-08-07 2005-02-21 현대자동차주식회사 졸음운전 방지 시스템 및 그 방법
JPWO2005112764A1 (ja) 2004-05-24 2008-03-27 パイオニア株式会社 生体情報検出装置
JP4965162B2 (ja) 2006-05-10 2012-07-04 トヨタ自動車株式会社 車両用不整脈監視装置
JP2007331652A (ja) * 2006-06-16 2007-12-27 Toyota Motor Corp 車両停止装置
KR101173944B1 (ko) 2008-12-01 2012-08-20 한국전자통신연구원 차량 운전자의 감성 조절 시스템 및 방법
JP5444898B2 (ja) 2009-07-09 2014-03-19 アイシン精機株式会社 状態検出装置、状態検出方法及びプログラム
JP6192902B2 (ja) 2011-11-11 2017-09-06 サターン ライセンシング エルエルシーＳａｔｕｒｎ Ｌｉｃｅｎｓｉｎｇ ＬＬＣ 画像データ送信装置、画像データ送信方法、画像データ受信装置および画像データ受信方法
KR102013609B1 (ko) 2012-08-14 2019-08-23 엘지전자 주식회사 운전자의 생체 신호 측정 장치
JP5708614B2 (ja) 2012-11-02 2015-04-30 トヨタ自動車株式会社 セルモジュール、および、燃料電池スタック
TWI511092B (zh) * 2013-03-27 2015-12-01 原相科技股份有限公司 用於載人行動載具的安全監控裝置及安全監控方法
US9636063B2 (en) * 2014-03-18 2017-05-02 J. Kimo Arbas System and method to detect alertness of machine operator

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20050030184A1 (en) * 2003-06-06 2005-02-10 Trent Victor Method and arrangement for controlling vehicular subsystems based on interpreted driver activity
CN101980660A (zh) * 2008-09-19 2011-02-23 松下电器产业株式会社 注意力分散检测装置、注意力分散检测方法及计算机程序
US20100185101A1 (en) * 2009-01-19 2010-07-22 Denso Corporation Apparatus for evaluating biological condition, method for the same, and computer program product
US20120150412A1 (en) * 2010-12-14 2012-06-14 Electronics And Telecommunications Research Institute Driving work load measurement apparatus and method
CN103380033A (zh) * 2011-02-03 2013-10-30 丰田自动车株式会社 车辆控制装置
CN103370252A (zh) * 2011-02-18 2013-10-23 本田技研工业株式会社 对驾驶员行为进行响应的***和方法

Cited By (25)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107635845A (zh) * 2016-05-08 2018-01-26 深圳市欸阿技术有限公司 车辆行驶控制的方法及装置
CN105847452A (zh) * 2016-06-14 2016-08-10 深圳爱易瑞科技有限公司 一种车辆联网安全管控方法
CN107539319A (zh) * 2016-06-24 2018-01-05 丰田自动车株式会社 车辆行驶控制装置
CN107539319B (zh) * 2016-06-24 2020-04-07 丰田自动车株式会社 车辆行驶控制装置
CN107628033A (zh) * 2016-07-13 2018-01-26 福特全球技术公司 基于乘员警觉性的导航
CN107628033B (zh) * 2016-07-13 2022-04-19 福特全球技术公司 基于乘员警觉性的导航
CN106364469A (zh) * 2016-08-29 2017-02-01 乐视控股（北京）有限公司 一种车辆刹车的控制方法和装置
CN106364487A (zh) * 2016-09-30 2017-02-01 上海沿锋汽车科技股份有限公司 一种用于监测驾驶员清醒状况的装置
CN106274483A (zh) * 2016-11-10 2017-01-04 合肥工业大学 基于分心驾驶行为判别的车辆自动驾驶切换装置及方法
CN108068621A (zh) * 2016-11-14 2018-05-25 本田技研工业株式会社 停车控制装置、车辆及使车辆自动停车的方法
CN107554528A (zh) * 2017-08-17 2018-01-09 上海擎感智能科技有限公司 驾乘人员的疲劳等级检测方法及装置、存储介质、终端
CN108482381A (zh) * 2018-03-27 2018-09-04 京东方科技集团股份有限公司 车辆控制***、车辆和车辆控制方法
CN110834640A (zh) * 2018-08-10 2020-02-25 上海博泰悦臻网络技术服务有限公司 安全驾驶提醒方法、车机及车辆
CN110834640B (zh) * 2018-08-10 2022-05-03 上海博泰悦臻网络技术服务有限公司 安全驾驶提醒方法、车机及车辆
CN109806552B (zh) * 2019-01-28 2020-10-23 北京航空航天大学 一种基于呼吸和力触觉协同控制的注意力训练方法及***
CN109806552A (zh) * 2019-01-28 2019-05-28 北京航空航天大学 一种基于呼吸和力触觉协同控制的注意力训练方法及***
CN110723145A (zh) * 2019-09-12 2020-01-24 精电有限公司 车辆控制方法、装置、计算机可读存储介质及可穿戴设备
CN110843764A (zh) * 2019-11-29 2020-02-28 长安大学 一种促使驾驶员安全驾驶的辅助***
CN110843764B (zh) * 2019-11-29 2021-06-22 长安大学 一种促使驾驶员安全驾驶的辅助***
CN115398508A (zh) * 2020-03-31 2022-11-25 五十铃自动车株式会社 允许与否确定装置
CN115398508B (zh) * 2020-03-31 2024-01-05 五十铃自动车株式会社 允许与否确定装置
CN111731302A (zh) * 2020-05-27 2020-10-02 武汉理工大学 基于副任务的汽车驾驶员大脑视觉负荷评估方法及***
TWI744932B (zh) * 2020-06-03 2021-11-01 南開科技大學 智慧型頭盔系統及其運作方法
CN112716457A (zh) * 2020-12-30 2021-04-30 武汉理工大学 基于副任务的汽车驾驶员大脑行为负荷测量***及方法
CN112716457B (zh) * 2020-12-30 2024-03-08 武汉理工大学 基于副任务的汽车驾驶员大脑行为负荷测量***及方法

Also Published As

Publication number Publication date
DE102015201790A1 (de) 2016-01-28
DE102015201790B4 (de) 2019-07-11
CN105313898B (zh) 2018-03-20
US9682711B2 (en) 2017-06-20
US20160023666A1 (en) 2016-01-28

Similar Documents

Publication Publication Date Title
CN105313898A (zh) 驾驶员状态感应装置及其方法
JP7032966B2 (ja) 車両安全支援装置および方法
JP7324716B2 (ja) 情報処理装置、移動装置、および方法、並びにプログラム
CN107200022B (zh) 驾驶辅助***和方法
RU2561657C2 (ru) Транспортное средство с системой обеспечения безопасности, включающей в себя прогнозирование усталости водителя
JP6627684B2 (ja) 運転手状態判定装置、車両制御システム
CN105073474A (zh) 针对驾驶员行为的协调的车辆响应***和方法
KR20150143139A (ko) 차량용 운전자 위험 지수 관리 시스템 및 그 방법
KR20160055969A (ko) 운전자 거동에 응답하는 시스템 및 방법
KR102113767B1 (ko) 운전자 상태 감지 장치 및 그 방법
JPH11314534A (ja) 車両用注意能力低下防止装置
JP2017033125A (ja) 安全運転促進装置及び安全運転促進方法
JP2010063682A (ja) 運転者監視装置
EP2204784B1 (en) A system and method for monitoring the state of vigilance of the driver of a vehicle
TW201441080A (zh) 疲勞駕駛監測系統與方法
JP2008084219A (ja) 前方カーブ警報装置
JP2017084071A (ja) 車載機
JP3393463B2 (ja) 車両運転状態検出装置
KR20160133284A (ko) 차량용 졸음 운전 방지 시스템
WO2020003788A1 (ja) 運転支援装置
Sato Human interface based on an interaction between driver's capability and task demands
JP2023160506A (ja) 運転支援装置
JP2023131715A (ja) 車両用安全支援装置
JP2023160512A (ja) 感情判別装置
Langer et al. Driver Condition Detection

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant