CN107007292A - 用于获知疲劳的方法 - Google Patents

用于获知疲劳的方法 Download PDF

Info

Publication number
CN107007292A
CN107007292A CN201611129103.3A CN201611129103A CN107007292A CN 107007292 A CN107007292 A CN 107007292A CN 201611129103 A CN201611129103 A CN 201611129103A CN 107007292 A CN107007292 A CN 107007292A
Authority
CN
China
Prior art keywords
fatigue
time interval
data
fatigue data
value
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201611129103.3A
Other languages
English (en)
Other versions
CN107007292B (zh
Inventor
F.武尔夫
T.范多梅勒
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Robert Bosch GmbH
Original Assignee
Robert Bosch GmbH
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Robert Bosch GmbH filed Critical Robert Bosch GmbH
Publication of CN107007292A publication Critical patent/CN107007292A/zh
Application granted granted Critical
Publication of CN107007292B publication Critical patent/CN107007292B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/16Devices for psychotechnics; Testing reaction times ; Devices for evaluating the psychological state
    • A61B5/18Devices for psychotechnics; Testing reaction times ; Devices for evaluating the psychological state for vehicle drivers or machine operators
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/103Detecting, measuring or recording devices for testing the shape, pattern, colour, size or movement of the body or parts thereof, for diagnostic purposes
    • A61B5/11Measuring movement of the entire body or parts thereof, e.g. head or hand tremor, mobility of a limb
    • A61B5/1126Measuring movement of the entire body or parts thereof, e.g. head or hand tremor, mobility of a limb using a particular sensing technique
    • A61B5/1128Measuring movement of the entire body or parts thereof, e.g. head or hand tremor, mobility of a limb using a particular sensing technique using image analysis
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/72Signal processing specially adapted for physiological signals or for diagnostic purposes
    • A61B5/7235Details of waveform analysis
    • A61B5/7264Classification of physiological signals or data, e.g. using neural networks, statistical classifiers, expert systems or fuzzy systems
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/74Details of notification to user or communication with user or patient ; user input means
    • A61B5/746Alarms related to a physiological condition, e.g. details of setting alarm thresholds or avoiding false alarms
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K28/00Safety devices for propulsion-unit control, specially adapted for, or arranged in, vehicles, e.g. preventing fuel supply or ignition in the event of potentially dangerous conditions
    • B60K28/02Safety devices for propulsion-unit control, specially adapted for, or arranged in, vehicles, e.g. preventing fuel supply or ignition in the event of potentially dangerous conditions responsive to conditions relating to the driver
    • B60K28/06Safety devices for propulsion-unit control, specially adapted for, or arranged in, vehicles, e.g. preventing fuel supply or ignition in the event of potentially dangerous conditions responsive to conditions relating to the driver responsive to incapacity of driver
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60QARRANGEMENT OF SIGNALLING OR LIGHTING DEVICES, THE MOUNTING OR SUPPORTING THEREOF OR CIRCUITS THEREFOR, FOR VEHICLES IN GENERAL
    • B60Q5/00Arrangement or adaptation of acoustic signal devices
    • B60Q5/005Arrangement or adaptation of acoustic signal devices automatically actuated
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60QARRANGEMENT OF SIGNALLING OR LIGHTING DEVICES, THE MOUNTING OR SUPPORTING THEREOF OR CIRCUITS THEREFOR, FOR VEHICLES IN GENERAL
    • B60Q9/00Arrangement or adaptation of signal devices not provided for in one of main groups B60Q1/00 - B60Q7/00, e.g. haptic signalling
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/08Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to drivers or passengers
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08Interaction between the driver and the control system
    • B60W50/14Means for informing the driver, warning the driver or prompting a driver intervention
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B2503/00Evaluating a particular growth phase or type of persons or animals
    • A61B2503/20Workers
    • A61B2503/22Motor vehicles operators, e.g. drivers, pilots, captains
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/103Detecting, measuring or recording devices for testing the shape, pattern, colour, size or movement of the body or parts thereof, for diagnostic purposes
    • A61B5/11Measuring movement of the entire body or parts thereof, e.g. head or hand tremor, mobility of a limb
    • A61B5/1103Detecting eye twinkling
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/08Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to drivers or passengers
    • B60W2040/0818Inactivity or incapacity of driver
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/08Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to drivers or passengers
    • B60W2040/0818Inactivity or incapacity of driver
    • B60W2040/0827Inactivity or incapacity of driver due to sleepiness

Landscapes

  • Health & Medical Sciences (AREA)
  • Engineering & Computer Science (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Physics & Mathematics (AREA)
  • Biomedical Technology (AREA)
  • Surgery (AREA)
  • Medical Informatics (AREA)
  • Molecular Biology (AREA)
  • Animal Behavior & Ethology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Pathology (AREA)
  • Veterinary Medicine (AREA)
  • Public Health (AREA)
  • General Health & Medical Sciences (AREA)
  • Biophysics (AREA)
  • Mechanical Engineering (AREA)
  • Physiology (AREA)
  • Transportation (AREA)
  • Automation & Control Theory (AREA)
  • Psychiatry (AREA)
  • Mathematical Physics (AREA)
  • Dentistry (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Hospice & Palliative Care (AREA)
  • Psychology (AREA)
  • Social Psychology (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Child & Adolescent Psychology (AREA)
  • Developmental Disabilities (AREA)
  • Educational Technology (AREA)
  • Radiology & Medical Imaging (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • Human Computer Interaction (AREA)
  • Artificial Intelligence (AREA)
  • Acoustics & Sound (AREA)
  • Ophthalmology & Optometry (AREA)
  • Combustion & Propulsion (AREA)
  • Evolutionary Computation (AREA)
  • Fuzzy Systems (AREA)
  • Signal Processing (AREA)

Abstract

本发明涉及一种用于获知疲劳值的方法,该疲劳值表示汽车驾驶员的疲劳,该疲劳值基于至少一个疲劳特征在规定的时间间隔内周期地予以获知,其特征在于,在获知要评价的时间间隔的疲劳值时,除了考虑所述疲劳特征外,还考虑至少一个疲劳基本值。

Description

用于获知疲劳的方法
技术领域
本发明涉及一种用于获知疲劳值的方法,该疲劳值表示汽车驾驶员的疲劳,该疲劳值基于至少一个疲劳特征在规定的时间间隔内周期地予以获知。
背景技术
由现有技术例如已知专利申请DE 10 2014 210 279 A1。该文献涉及一种用于探测车辆驾驶员的注意状态的方法,按照该方法,把车辆速度的时间历程与参考历程相比较,并且,如果车辆速度的时间历程与参考历程相差规定的量,就产生一个相应于注意力降低状态的信号。这里还提到,考虑到驾驶员的手势、表情或眼睛动作,其中,如果驾驶员的手势、表情或眼睛动作表明了对于疲劳来说典型的动作,就产生一个相应于注意力降低状态的信号。
此外,由现有技术已知文献DE 10126224 A1。该文献涉及一种方法及其实施机构,以便表示汽车驾驶员的状态。驾驶员状态监视器获取驾驶员的生理状态参数。根据所获取的结果来影响汽车的控制单元以及驾驶员,以便采取适当的措施来保持驾驶员的或汽车的安全状态。作为所述生理状态参数,特别是获知且必要时存储借助脑电图得到的大脑电流、借助心电图得到的心脏状态、血压、心脏频率或脉搏、心脏跳动、皮肤温度和皮肤传导力。作为其它关键参数,可以检测驾驶员的眼皮频率、驾驶员握持方向盘的力及其在座椅上的移动,并以相关的方式加以分析,且与其它事件汇总,用于采取恰当的措施来影响车辆和驾驶员。
就现有的用于评估困意的***而言,为了评估困意(困意和疲劳在本文范畴内同义地使用),例如考察各次眨眼事件的特定特征,比如眼皮运动的幅度或速度。在此,分别考虑在一定的时段内的眨眼事件值,用来评价困意。在此,用于困意回归(Regression)的输入信号可以是与眨眼有关的值,比如眨眼幅度或持续时间。但也可以采用其它由眼皮开度信号算得的值,比如PERCLOS值—在一定的例如60秒的时段内求平均的眼睛开度。
就现有的用于评估驾驶员困意的***而言,所述评估仅仅基于当前存在的由眼皮开度信号算得的特征,比如PERCLOS或与眨眼有关的特征。在有些设计中,还在一定的时段内对输入值求平均。但始终都总是由一定时期的输入参数来获知所评估的困意值。在此,分别在下次估算的困意值与先前的时期无关。
在此并未考虑到的是,困意通常并非突然发展起来。在此原则上可能的是,例如由于针对驾驶员在特定点测量的状况,或者也由于可能的测量不准确或测量误差,困意估算的输出值具有高的跳跃。
发明内容
而本发明的方法能有利地实现提高结果的质量,特别是实现优化的分析,以高的可靠性获知驾驶员的实际疲劳状态。
根据本发明,这通过在独立权利要求1中给出的特征得以实现。本发明的其它设计是从属权利要求和其它独立权利要求的主题。
本发明的用于获知疲劳值的方法,该疲劳值表示汽车驾驶员的疲劳,该疲劳值基于至少一个疲劳特征在规定的时间间隔内周期地予以获知,其特征在于,在获知要评估的时间间隔的疲劳值时,除了考虑疲劳特征外,还考虑至少一个疲劳基本值。
术语“疲劳值”在此尤其包括对疲劳的分类。这种分类可以包括数据分析以及对车辆驾驶员的警惕性状态和/或反应力等的评估。获知疲劳值能实现及时地采取相应的动作,例如警告驾驶员。
对疲劳值的获知基于所谓的疲劳特征来进行。为此可以采用来自所谓的眼皮开度信号的数据,以便探测眨眼事件,并针对这些眨眼事件计算一定的参数(疲劳特征)。附加地,由眼皮开度信号还提取出其它并非与眨眼相关的特征比如PERCLOS,这些特征也可以用作疲劳特征。当然也可以考虑多个疲劳特征。为了获知疲劳值,首先规定并确定相关的疲劳特征。接下来在一段时间内对疲劳特征的构成进行数据采集。也就是说,例如在相应时间间隔的各个时间步骤内的疲劳特征的值。时间间隔系指规定的时段。该时段例如可以为若干秒例如30秒,直至数分钟例如20分钟。有利地,这种时间间隔为3分钟。用于测量疲劳特征的当前特性和参数各个时间步骤当然相应地更微小,即更短暂。通常,这些时间步骤决定于用于检测的技术装置,例如摄像机的图像频率。接下来对采集到的数据进行分析。这些步骤也可以通过各种不同的方法和/或各种不同的装置来执行。
在所述时间间隔内对疲劳特征的数据的获知可以有利地作为在该时间间隔内的连续的测量来进行。所述分析在规定的时间间隔内进行。为此可以有利地例如借助用于值的滤波的移动平均对数据予以预处理。
为了由疲劳特征获知疲劳值,可以有利地采用各种不同的方法。例如要提到分类法或回归法,比如多元线性回归、决策树(决策树)、人工神经网络,还要其它各种不同的方法。这些方法能够考虑输入参数的各种不同的加权。它们也可以部分地在所述方法本身的试验期间采用。
通过这种方法可以实现提高分析结果的质量。一方面,通过该方法将避免点式的瞬间采集(Momentaufnahme)。此外,由此可以实现实际结果的优化的精确性以及在分析和评价当前状况时的提高的可靠性。
在一种有利的实施方式中,该方法的特征在于,作为疲劳基本值,考虑先前的时间间隔的所获知的疲劳值。
如已述,在获知要评价的时间间隔的疲劳值时,考虑疲劳基本值。作为所述疲劳基本值,例如可以有利地采用已在先前的时间间隔内获知的疲劳值。这系指,先前的时间间隔在时间上处于要评价的时间间隔之前。有利地,要评价的时间间隔直接地紧接着先前的时间间隔。这系指,为了评估驾驶员的当前的困意,因此不仅采用对于该时间点有效的所获知的输入数据,而且采用在先前的步骤中评估的困意或者疲劳在反馈环节范畴内作为输入特征。
先前时期的疲劳值是当前疲劳的合适的指标,因为疲劳并不会突然大尺度地改变。通过考虑先前时间间隔的所获知的疲劳值,可以有利地实现在获知当前的疲劳值时参考先前的时期。由此可以有利地提高结果质量,其方式为,例如可以减小在时间上有限的事件的影响或者减少有误的测量。
在一种可行的设计中,所述方法以如下步骤为特点:
-在考虑先前时间间隔内的所获知的疲劳特征数据情况下获知先前的时间间隔的疲劳值;
-存储先前时间间隔的疲劳值;
-在考虑要评价的时间间隔内的所获知的疲劳特征数据以及考虑先前时间间隔的所存储的疲劳值情况下,获知要评价的时间间隔的疲劳值。
此外可以将如下步骤置于所述方法之前或者整合到所述方法中:规定并确定疲劳特征(或者所述那些特征);获知关于疲劳特征的数据;对关于疲劳特征的所获知的数据予以预处理。
这系指,对疲劳值进行中期存储,用于以后的加权,并获知后续时间间隔的疲劳特征。通过这种方案,可以在反馈环节的意义下借助简单的机构有利地对已经获知的疲劳特征进行考虑。
在一种优选的设计中,所述方法的特征在于,作为疲劳基本值,考虑多个先前的时间间隔的所获知的疲劳值,其中,这些先前的时间间隔特别是彼此相继的时间间隔。
这可以系指,疲劳基本值不仅可以由—如已述—一个早先获知的疲劳值构成,而且可以考虑和包括多个早先获知的疲劳值。这系指,先前的时间间隔在时间上处于要评价的时间间隔之前。此外,先前的时间间隔有利地是彼此相继的时间间隔。另外,要评价的时间间隔在时间上直接紧接于所述先前的时间间隔之一。
由此可以有利地考虑先前的时间间隔的已经获知的多个疲劳值。由此可以提高结果的质量。还可以有利地由此推导得出其它因素,例如关于疲劳值的历史和历程的判断。也可以例如推导得出推测。
还可以例如识别出出现关于早先时间间隔的所获知的疲劳值的极值。困意通常是连续地发展起来的。通过考虑多个早先的值,可以估计出发展情况,必要时也可以对极值求平均。这种偏差值(Ausreißer)既可以具有特定于驾驶员的原因,又可以具有测量技术的原因。在对此有所了解的情况下,可以例如以对结果滤波的形式通过减少考虑所获知的极值(“偏差值”)来考虑这种存在的状况。
在一种替代的改进中,所述方法的特点在于如下步骤:
-在考虑到相应的先前时间间隔内的所获知的疲劳特征数据情况下获知先前的时间间隔的疲劳值;
-存储先前的时间间隔的疲劳值;
-在考虑要评价的时间间隔内的所获知的疲劳特征数据以及考虑先前时间间隔的所存储的疲劳值情况下,获知要评价的时间间隔的疲劳值。
在一种有利的设计中,该方法的特征在于,在获知要评价的时间间隔的疲劳值时,对先前的时间间隔的所获知的疲劳值进行加权。
这系指,也可以不同程度地考虑早先时间间隔的所获知的疲劳值。由此例如可以有利地实现的是,对历经较长时间的值相比于未历经如此长时间的值进行较低程度的加权。当然也可以完全不考虑从一定的时间间隔起的值。这对计算要评价的时间间隔的疲劳值有影响。由此可以有利地实现改善结果质量。
在一种可行的设计中,所述方法的特征是,在获知要评价的时间间隔的疲劳值时,考虑先前的时间间隔的所获知的疲劳值的历程。
这系指,在获知当前的疲劳值时,可以考虑所获知的疲劳值的时间发展情况。历程尤其系指一种时间顺序。在此例如可以分析和考虑所获知的疲劳值关于时间的变化大小以及变化速度。可以有利地将这种历史以及时间发展情况用作将来的发展情况的合适的指标。在此基础上,例如可以实现推测。这种推测—例如除了要评价的时间间隔的实际获知的疲劳特征外—可以在获知当前的疲劳值时予以考虑。
在一种优选的设计中,该方法的特征在于,在获知要评价的时间间隔的疲劳值时,特别是针对驾驶员更换的情况和/或针对没有先前的时间间隔的疲劳值可用的情况,作为疲劳基本值,考虑规定的初始值。
这系指,当不存在来自先前的时间间隔的所获知的驾驶员疲劳值时,规定并采用初始的疲劳值。这例如在开始行驶时或者在辅助***起动时是可行的。行驶期间的暂停也可以是这种中断,其允许重新确定疲劳值,而不应采用先前获知的值。初始值在此可用设定为固定地规定的值,或者也可以根据相应状况和/或驾驶员的其它因素来估计。通过采用初始的疲劳值作为疲劳基本值,可以避免一个或多个第一测量间隔的瞬间采集。由此可以有利地特别是在判断质量的准确性和可靠性方面优化结果的质量。
在一种有利的改进中,该方法的特征是,初始值根据白天时间来规定。
这系指,所采用的初始疲劳值的高度或大小根据状况参数来调节。特别地,白天时间看起来适合于模拟驾驶员的生理节律,并实现对***的适度的预调节。替代地也可以考虑时钟时间、亮度或能相应地模拟生理节律的类似参数。
在一种优选的设计中,该方法的特征是,为了获知要评价的时间间隔的疲劳值和/或先前的时间间隔的疲劳值,获知和/或分析一个或多个疲劳特征。
如已述,基于疲劳特征来获知疲劳值。在此也可以有利地规定采用多个不同的疲劳特征。这系指,分析相应时间间隔的全部规定的疲劳特征,以便确定疲劳值。通过考虑多个参数即多个不同的疲劳特征,可以进一步提高结果质量。
在一种替代的设计中,所述方法的特征是,为了获知疲劳值,对数据特别是所获知的数据进行预处理。
对数据的获知根据特定的疲劳特征来进行。例如可以采用红外摄像机来获知眼皮闭合。在此获取的并且还要予以处理的数据当然涉及相应的疲劳特征。为了预处理这些数据,已知有众多的做法、方法和措施,比如对时间间隔的参数求平均。有利地可以通过该处理步骤使得所获知的数据处于一种能实现获知疲劳值的状态。
在一种有利的改进中,该方法的特征在于,为了获知疲劳值,对数据进行处理,特别是对所获知的和/或所存储的和/或所规定的数据进行处理。
规定的数据尤其系指规定的初始值(作为疲劳值)。所获知的和/或所存储的数据尤其系指先前时间间隔的已获知的疲劳值。替代地,这里也可以采用先前时间间隔的疲劳特征,即在相应时间间隔的时间步骤内的疲劳特征的值。为了处理数据以及获知疲劳值,有多种多样的做法、方法和措施可供采用。例如需要提及:多元线性回归、决策树、人工神经网络。
在一种优选的设计中,所述方法的特征是,基于要评价的时间间隔的疲劳值来规定在紧接于获知要评价的时间间隔的疲劳值之后的其它动作。
这系指,所获知的疲劳值的大小可以引发其它方法步骤。如果所获知的疲劳值表明驾驶员的危急的疲劳,则例如可以有利地输出相应的信号,以便激活信息。这种信息例如可以是发给驾驶员的提示或明确的警告。这种信息例如可以声学地和/或视觉地和/或触觉地予以实施。
此外根据本发明规定了一种被设计和构造用于实施所述方法的装置。
为此有利地设置了用于汽车的控制器和/或其它计算单元,该控制器经过构造即设计和/或具有一些机构,从而实施或支持—如前所述的—方法。
此外有利地,设置用于汽车的驾驶员辅助***。该驾驶员辅助***的特征在于,驾驶员辅助***经过构造即具有一些机构和经过设计,以便在常规地使用情况下实施所述方法。有利地,车辆设有用于对驾驶员摄像的室内摄像机。另外,车辆有利地配备有用来向驾驶员显示信息的显示器。该驾驶员辅助***经过有利设计,以便实现例如视觉地借助所显示的咖啡杯或者声学地借助警报信号或者触觉地借助方向盘振动向驾驶员传输信息。此外,驾驶员辅助***被有利地设计用来例如通过对车辆舒适功能的干预,比如调节室内灯光、激活或改变音响、调节室内温度等,改善驾驶员的注意力。
有利地还有一种带有程序代码的计算机程序产品或计算机程序,所述程序代码可以存储在机器可读的载体或存储介质比如半导体存储器、硬盘存储器或光学存储器上,且用于特别是当所述程序产品或程序在计算机或装置上执行时实施、执行和/或控制根据前述实施方式之一的所述方法的步骤。
需要指出,说明书中所述的各个特征可以采用任何在技术上有意义的方式相互组合,且体现了本发明的其它设计。本发明的其它特征和有益性可由参照附图对实施例的说明得到。
附图说明
在这些附图中:
图1为所述方法的根据一种可行设计的流程图;
图2为根据一种可行设计在汽车中采用所述方法的装置的示意图。
具体实施方式
图1示出一种示例性的方法。该方法由各种不同的步骤S构成,这些步骤部分地取决于判定或条件B。在该方法开始之后,首先进行第一次检查B1,即检查是否已存在由先前的时间间隔获知的疲劳值。如果满足此点—用符号Y表示,就在第二条件B2中检查是否已发生驾驶员更换。
如果条件B1未得到满足—用符号N表示,也就是说,在先前的时间间隔内没有疲劳值,就在步骤S1中选择一个规定的初始值,用于后续获知疲劳值。这个初始值可以根据白天时间来规定。也可以考虑相应驾驶员的人为特征。
当满足第二条件B2时,也就是说,当已识别出驾驶员更换时,也选择一个用于后续获知的规定的初始值。
如果第二条件B2未满足,也就是说,如果尚未识别出驾驶员更换,就考虑由先前的时间间隔获知的疲劳值。对此点的确定在步骤S2中进行。如果在多个先前的时间间隔内已存在多个疲劳值,则可以相应地一同考虑这些疲劳值。为此在另一步骤S6中对相应的值予以相应的加权。这种加权可以考虑所述获知的时间历程。因此,步骤S6是任选的。
此外,在所述方法开始之后,接着在步骤S3中针对一个或多个规定的疲劳特征进行数据采集。针对如此获知的数据,在步骤S4中进行预处理,即所谓的预处理。在此需要指出,步骤S3和S4是任选的。当然,也可以把在外部获知的原始数据以及预处理的数据整合到所述过程中。另外,在步骤S5中进行参数计算。在此例如对眨眼事件进行计算。
在接下来的步骤S7中,对要评价的时间间隔的疲劳值进行获知。在此对疲劳进行分类。为了所述获知,既考虑关于要评价的时间间隔的一个或多个所述疲劳特征的信息和数据,又考虑另一疲劳基本值。为此,例如可以采用先前的即早先的时间间隔的规定的初始值或所获知的疲劳值。当然也可以采用多个先前的时间间隔的多个所获知的疲劳值。这些疲劳值还可以在步骤S6中予以加权。
为了针对后续的时间间隔考虑要评价的时间间隔的所获知的疲劳值,在所示的步骤S8中对该值进行存储。通过这种方式,可以例如在下一个时间间隔中在步骤S6中对所获知的疲劳值进行加权。
在S7中获知疲劳值并对疲劳分类之后,在条件B3中检查,驾驶员的所获知的疲劳是否处于危急的范围内。如果情况如此(情况Y),就采取相应的规定的动作。在此例如可以对驾驶员进行警告。为此,该方法例如可以产生信号,并发送至相应的装置。如果所获知的疲劳未处于危急的范围内(情况N),就针对下一个后续的时间间隔实施所述方法。
图2所示为在汽车中采用所述方法的示例性装置的示意图。这里示出了处于汽车3中的驾驶员1。车辆3具有用于获知驾驶员1的疲劳的驾驶员辅助***4。为此,借助于室内传感机构7观察疲劳特征。在所示设计中,借助于被设计成摄像机的室内传感机构7观察驾驶员1的眼睛2的闭合动作。还设置有用来实施所述方法的调节和控制器8。另外,该调节和控制器8也可以被设计用于对借助室内传感机构7获取的数据予以预处理和/或进行参数计算。此外设有用来将信息6输出给驾驶员1的装置5。该装置5被设计成显示器,其把视觉的警告提示作为信息6输出给驾驶员。当然也可以采用能实现把信息6听觉地传递(例如扬声器)或者触觉地传输(例如通过方向盘振动或座椅振动)至驾驶员1的装置(例如扬声器)。

Claims (15)

1.一种用于获知疲劳值的方法,该疲劳值表示汽车驾驶员的疲劳,该疲劳值基于至少一个疲劳特征在规定的时间间隔内周期地予以获知,其特征在于,在获知要评价的时间间隔的疲劳值时,除了考虑所述疲劳特征外,还考虑至少一个疲劳基本值。
2.如权利要求1所述的方法,其特征在于,作为疲劳基本值,考虑先前的时间间隔的所获知的疲劳值。
3.如权利要求2所述的方法,其特征在于如下步骤:
-在考虑先前时间间隔内的所获知的疲劳特征数据情况下获知先前的时间间隔的疲劳值;
-存储先前时间间隔的疲劳值;
-在考虑要评价的时间间隔内的所获知的疲劳特征数据以及考虑先前时间间隔的所存储的疲劳值情况下,获知要评价的时间间隔的疲劳值。
4.如前述权利要求中任一项所述的方法,其特征在于,作为疲劳基本值,考虑多个先前的时间间隔的所获知的疲劳值,其中,所述先前的时间间隔特别是彼此相继的时间间隔。
5.如权利要求4所述的方法,其特征在于,在获知要评价的时间间隔的疲劳值时,对先前的时间间隔的所获知的疲劳值进行加权。
6.如权利要求4或5所述的方法,其特征在于,在获知要评价的时间间隔的疲劳值时,考虑先前的时间间隔的所获知的疲劳值的历程。
7.如前述权利要求中任一项所述的方法,其特征在于,在获知要评价的时间间隔的疲劳值时,特别是针对驾驶员更换的情况和/或针对没有先前的时间间隔的疲劳值可用的情况,作为疲劳基本值,考虑规定的初始值。
8.如权利要求7所述的方法,其特征在于,初始值根据白天时间来规定。
9.如前述权利要求中任一项所述的方法,其特征在于,为了获知要评价的时间间隔的疲劳值和/或先前的时间间隔的疲劳值,获知和/或分析一个或多个疲劳特征。
10.如前述权利要求中任一项所述的方法,其特征在于,为了获知疲劳值,对数据特别是所获知的数据进行预处理。
11.如前述权利要求中任一项所述的方法,其特征在于,为了获知疲劳值,对数据进行处理,特别是对所获知的和/或所存储的和/或所规定的数据进行处理。
12.如前述权利要求中任一项所述的方法,其特征在于,基于要评价的时间间隔的疲劳值来规定在紧接于获知要评价的时间间隔的疲劳值之后的其它动作。
13.一种被设计和构造用于实施根据权利要求1~12中任一项所述的方法的装置(4、5、6、8)。
14.一种被设计用于实施根据权利要求1~12中任一项所述的方法的计算机程序。
15.一种机器可读的存储介质,在该存储介质上存储着根据权利要求14的计算机程序。
CN201611129103.3A 2015-12-10 2016-12-09 用于获知疲劳的方法 Active CN107007292B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
DE102015224889.5 2015-12-10
DE102015224889.5A DE102015224889A1 (de) 2015-12-10 2015-12-10 Verfahren zur Müdigkeitsermittlung

Publications (2)

Publication Number Publication Date
CN107007292A true CN107007292A (zh) 2017-08-04
CN107007292B CN107007292B (zh) 2021-04-16

Family

ID=58773566

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201611129103.3A Active CN107007292B (zh) 2015-12-10 2016-12-09 用于获知疲劳的方法

Country Status (3)

Country Link
US (1) US9820687B2 (zh)
CN (1) CN107007292B (zh)
DE (1) DE102015224889A1 (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107776580A (zh) * 2017-11-16 2018-03-09 百度在线网络技术(北京)有限公司 用于处理信息的方法和装置

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
GB2539531B (en) * 2016-03-30 2018-10-03 Ford Global Tech Llc A method of operating an environmental control system

Citations (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE10126224A1 (de) * 2001-05-30 2002-12-12 Bosch Gmbh Robert Verfahren und Vorrichtung zur Charakterisierung des Zustandes des Fahrers eines Kraftfahrzeuges
CN101256706A (zh) * 2007-02-26 2008-09-03 株式会社电装 睡眠告警装置
CN102163362A (zh) * 2010-02-22 2011-08-24 谢国华 一种防酒后驾车和安全健康行车方法
US20120089553A1 (en) * 2010-09-20 2012-04-12 Daniel Joseph Mollicone Systems and Methods for Assessment of Fatigue-Related Contextual Performance Using Historical Incident Data
DE102011122414A1 (de) * 2011-12-24 2013-06-27 Volkswagen Ag Verfahren zum Erzeugen und Auslösen einer Pausenempfehlung
CN103318023A (zh) * 2013-06-21 2013-09-25 同济大学 车载实时智能疲劳监控及辅助装置
CN103976749A (zh) * 2013-06-09 2014-08-13 湖南纽思曼导航定位科技有限公司 一种实时疲劳提示的方法及装置
US8856615B1 (en) * 2012-06-11 2014-10-07 Western Digital Technologies, Inc. Data storage device tracking log-likelihood ratio for a decoder based on past performance
DE102013213236A1 (de) * 2013-07-05 2015-01-08 Robert Bosch Gmbh Verfahren zum Ermitteln eines Aufmerksamkeitsgrads eines Fahrzeugführers
CN104305964A (zh) * 2014-11-11 2015-01-28 东南大学 头戴式疲劳检测装置及方法
DE102013221188A1 (de) * 2013-10-18 2015-04-23 Robert Bosch Gmbh Verfahren zur Erkennung der Müdigkeit des Fahrers in einem Fahrzeug
CN104598993A (zh) * 2015-01-14 2015-05-06 南京信息工程大学 基于眨眼次数的驾驶员疲劳驾驶预测方法
US20150213519A1 (en) * 2014-01-28 2015-07-30 Nissan North America, Inc. Method and device for determining vehicle condition based on non-operational factors
CN104978853A (zh) * 2014-04-01 2015-10-14 ***通信集团公司 一种道路交通安全评估方法及***
DE102014206960A1 (de) * 2014-04-10 2015-10-15 Robert Bosch Gmbh Verfahren zur Unfallvermeidung oder Unfallfolgenverminderung in einem Fahrzeug
CN105096528A (zh) * 2015-08-05 2015-11-25 广州云从信息科技有限公司 一种疲劳驾驶检测方法及***
US9198575B1 (en) * 2011-02-15 2015-12-01 Guardvant, Inc. System and method for determining a level of operator fatigue
DE102014210279A1 (de) * 2014-05-30 2015-12-03 Robert Bosch Gmbh Verfahren zum Detektieren des Aufmerksamkeitszustandes des Fahrers eines Fahrzeugs

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7663495B2 (en) * 2005-10-12 2010-02-16 The Penn State Research Foundation Vigilance monitoring technique for vehicle operators

Patent Citations (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE10126224A1 (de) * 2001-05-30 2002-12-12 Bosch Gmbh Robert Verfahren und Vorrichtung zur Charakterisierung des Zustandes des Fahrers eines Kraftfahrzeuges
CN101256706A (zh) * 2007-02-26 2008-09-03 株式会社电装 睡眠告警装置
CN102163362A (zh) * 2010-02-22 2011-08-24 谢国华 一种防酒后驾车和安全健康行车方法
US20120089553A1 (en) * 2010-09-20 2012-04-12 Daniel Joseph Mollicone Systems and Methods for Assessment of Fatigue-Related Contextual Performance Using Historical Incident Data
US9198575B1 (en) * 2011-02-15 2015-12-01 Guardvant, Inc. System and method for determining a level of operator fatigue
DE102011122414A1 (de) * 2011-12-24 2013-06-27 Volkswagen Ag Verfahren zum Erzeugen und Auslösen einer Pausenempfehlung
US8856615B1 (en) * 2012-06-11 2014-10-07 Western Digital Technologies, Inc. Data storage device tracking log-likelihood ratio for a decoder based on past performance
CN103976749A (zh) * 2013-06-09 2014-08-13 湖南纽思曼导航定位科技有限公司 一种实时疲劳提示的方法及装置
CN103318023A (zh) * 2013-06-21 2013-09-25 同济大学 车载实时智能疲劳监控及辅助装置
DE102013213236A1 (de) * 2013-07-05 2015-01-08 Robert Bosch Gmbh Verfahren zum Ermitteln eines Aufmerksamkeitsgrads eines Fahrzeugführers
DE102013221188A1 (de) * 2013-10-18 2015-04-23 Robert Bosch Gmbh Verfahren zur Erkennung der Müdigkeit des Fahrers in einem Fahrzeug
US20150213519A1 (en) * 2014-01-28 2015-07-30 Nissan North America, Inc. Method and device for determining vehicle condition based on non-operational factors
CN104978853A (zh) * 2014-04-01 2015-10-14 ***通信集团公司 一种道路交通安全评估方法及***
DE102014206960A1 (de) * 2014-04-10 2015-10-15 Robert Bosch Gmbh Verfahren zur Unfallvermeidung oder Unfallfolgenverminderung in einem Fahrzeug
DE102014210279A1 (de) * 2014-05-30 2015-12-03 Robert Bosch Gmbh Verfahren zum Detektieren des Aufmerksamkeitszustandes des Fahrers eines Fahrzeugs
CN104305964A (zh) * 2014-11-11 2015-01-28 东南大学 头戴式疲劳检测装置及方法
CN104598993A (zh) * 2015-01-14 2015-05-06 南京信息工程大学 基于眨眼次数的驾驶员疲劳驾驶预测方法
CN105096528A (zh) * 2015-08-05 2015-11-25 广州云从信息科技有限公司 一种疲劳驾驶检测方法及***

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107776580A (zh) * 2017-11-16 2018-03-09 百度在线网络技术(北京)有限公司 用于处理信息的方法和装置
CN107776580B (zh) * 2017-11-16 2019-11-26 百度在线网络技术(北京)有限公司 用于处理信息的方法和装置

Also Published As

Publication number Publication date
US20170164883A1 (en) 2017-06-15
CN107007292B (zh) 2021-04-16
US9820687B2 (en) 2017-11-21
DE102015224889A1 (de) 2017-06-14

Similar Documents

Publication Publication Date Title
US10867218B2 (en) Biometric sensor fusion to classify vehicle passenger state
US10357195B2 (en) Pupillometry and sensor fusion for monitoring and predicting a vehicle operator's condition
US6346887B1 (en) Eye activity monitor
KR102045569B1 (ko) 조종사 상태의 통합 감시 제어 장치 및 이를 이용한 조종사의 임무 수행 능력 유도 방법
US11312384B2 (en) Personalized device and method for monitoring a motor vehicle driver
CN109791722A (zh) 用于监控机动车辆的驾驶员的设备和方法
CN102098955A (zh) 检测微入睡事件的方法和设备
KR102330385B1 (ko) 감성 인식 차량 제어 장치, 시스템 및 방법
CN107428245B (zh) 用于预测机动车辆驾驶员的警觉水平的设备和方法
CN113891823A (zh) 用于监测特别是自主车辆的乘员的通过驾驶操作调节的健康状态的方法和装置
CN109716411A (zh) 用以监测驾驶员的活动水平的方法和设备
JP2019531227A (ja) 運転者の快適レベルを決定するための制御装置、システム及び方法
JP3596158B2 (ja) 運転者モニター装置とこれを用いた安全装置
CN107007292A (zh) 用于获知疲劳的方法
KR102525413B1 (ko) 운전자 준비도를 예측하는 장치 및 방법, 운전자 지원 방법 및 시스템
KR20160120482A (ko) 생체 신호를 이용한 사용자 행동 예측 시스템 및 방법
JP7393537B2 (ja) 融合センサ測定値を判定する方法及び融合センサ測定値を用いる車両安全システム
CN117876807A (zh) 基于模拟情境多模态数据的人员状态调节训练方法和装置
DE102019208979A1 (de) Steuergerät zum Einsatz in einem Kraftfahrzeug
Anumas et al. Driver fatigue monitoring system using video face images & physiological information
CN109334669B (zh) 驾驶员驾驶状态下的体征安全监测方法及数据处理***
KR101375673B1 (ko) 간질 발작 경보 방법 및 이를 지원하는 단말기
JP3976035B2 (ja) 運転者モニター装置とこれを用いた安全装置
EP4061665A1 (en) Apparatus and method for controlling vehicle functions
Hu et al. Investigating the correlation between the neural activity and task performance in a psychomotor vigilance test

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant