CN107536617A - 基于驾驶员的生物识别信号检测驾驶员状态的装置和方法 - Google Patents
基于驾驶员的生物识别信号检测驾驶员状态的装置和方法 Download PDFInfo
- Publication number
- CN107536617A CN107536617A CN201611081026.9A CN201611081026A CN107536617A CN 107536617 A CN107536617 A CN 107536617A CN 201611081026 A CN201611081026 A CN 201611081026A CN 107536617 A CN107536617 A CN 107536617A
- Authority
- CN
- China
- Prior art keywords
- bio
- identification signal
- driver
- feature
- state
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Withdrawn
Links
- 238000000034 method Methods 0.000 title claims abstract description 37
- 238000001514 detection method Methods 0.000 title abstract description 6
- 238000005259 measurement Methods 0.000 claims abstract description 36
- 230000010354 integration Effects 0.000 claims abstract description 32
- 238000000605 extraction Methods 0.000 claims abstract description 24
- 230000008344 brain blood flow Effects 0.000 claims abstract description 20
- 238000002329 infrared spectrum Methods 0.000 claims abstract description 9
- 108010064719 Oxyhemoglobins Proteins 0.000 claims description 26
- 210000004556 brain Anatomy 0.000 claims description 14
- 210000004761 scalp Anatomy 0.000 claims description 10
- 239000000284 extract Substances 0.000 claims description 7
- 230000015654 memory Effects 0.000 description 21
- 238000010586 diagram Methods 0.000 description 9
- 230000017531 blood circulation Effects 0.000 description 7
- 230000008901 benefit Effects 0.000 description 6
- 210000003128 head Anatomy 0.000 description 4
- 239000011159 matrix material Substances 0.000 description 4
- 239000008280 blood Substances 0.000 description 3
- 210000004369 blood Anatomy 0.000 description 3
- 230000000694 effects Effects 0.000 description 3
- 238000005516 engineering process Methods 0.000 description 3
- 241000256844 Apis mellifera Species 0.000 description 2
- QVGXLLKOCUKJST-UHFFFAOYSA-N atomic oxygen Chemical compound [O] QVGXLLKOCUKJST-UHFFFAOYSA-N 0.000 description 2
- 230000007177 brain activity Effects 0.000 description 2
- 230000008859 change Effects 0.000 description 2
- 238000004891 communication Methods 0.000 description 2
- 229910052760 oxygen Inorganic materials 0.000 description 2
- 239000001301 oxygen Substances 0.000 description 2
- 108090000623 proteins and genes Proteins 0.000 description 2
- 102000004169 proteins and genes Human genes 0.000 description 2
- 210000003478 temporal lobe Anatomy 0.000 description 2
- 238000012546 transfer Methods 0.000 description 2
- 206010029260 Neuroblastoma Diseases 0.000 description 1
- 206010039203 Road traffic accident Diseases 0.000 description 1
- 206010041349 Somnolence Diseases 0.000 description 1
- 230000002159 abnormal effect Effects 0.000 description 1
- 230000000712 assembly Effects 0.000 description 1
- 238000000429 assembly Methods 0.000 description 1
- 210000003792 cranial nerve Anatomy 0.000 description 1
- 230000002500 effect on skin Effects 0.000 description 1
- 235000013601 eggs Nutrition 0.000 description 1
- 238000002565 electrocardiography Methods 0.000 description 1
- 238000000537 electroencephalography Methods 0.000 description 1
- 230000002996 emotional effect Effects 0.000 description 1
- 230000007613 environmental effect Effects 0.000 description 1
- 210000000744 eyelid Anatomy 0.000 description 1
- 210000001652 frontal lobe Anatomy 0.000 description 1
- 230000000004 hemodynamic effect Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 210000000653 nervous system Anatomy 0.000 description 1
- 230000036403 neuro physiology Effects 0.000 description 1
- 238000010606 normalization Methods 0.000 description 1
- 210000000869 occipital lobe Anatomy 0.000 description 1
- 230000008569 process Effects 0.000 description 1
- 238000012545 processing Methods 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 235000015170 shellfish Nutrition 0.000 description 1
- 230000009466 transformation Effects 0.000 description 1
Classifications
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/16—Devices for psychotechnics; Testing reaction times ; Devices for evaluating the psychological state
- A61B5/18—Devices for psychotechnics; Testing reaction times ; Devices for evaluating the psychological state for vehicle drivers or machine operators
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/72—Signal processing specially adapted for physiological signals or for diagnostic purposes
- A61B5/7235—Details of waveform analysis
- A61B5/7242—Details of waveform analysis using integration
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/0059—Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence
- A61B5/0075—Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence by spectroscopy, i.e. measuring spectra, e.g. Raman spectroscopy, infrared absorption spectroscopy
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/02—Detecting, measuring or recording pulse, heart rate, blood pressure or blood flow; Combined pulse/heart-rate/blood pressure determination; Evaluating a cardiovascular condition not otherwise provided for, e.g. using combinations of techniques provided for in this group with electrocardiography or electroauscultation; Heart catheters for measuring blood pressure
- A61B5/026—Measuring blood flow
- A61B5/0261—Measuring blood flow using optical means, e.g. infrared light
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/145—Measuring characteristics of blood in vivo, e.g. gas concentration, pH value; Measuring characteristics of body fluids or tissues, e.g. interstitial fluid, cerebral tissue
- A61B5/1455—Measuring characteristics of blood in vivo, e.g. gas concentration, pH value; Measuring characteristics of body fluids or tissues, e.g. interstitial fluid, cerebral tissue using optical sensors, e.g. spectral photometrical oximeters
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/24—Detecting, measuring or recording bioelectric or biomagnetic signals of the body or parts thereof
- A61B5/25—Bioelectric electrodes therefor
- A61B5/279—Bioelectric electrodes therefor specially adapted for particular uses
- A61B5/291—Bioelectric electrodes therefor specially adapted for particular uses for electroencephalography [EEG]
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/24—Detecting, measuring or recording bioelectric or biomagnetic signals of the body or parts thereof
- A61B5/316—Modalities, i.e. specific diagnostic methods
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/24—Detecting, measuring or recording bioelectric or biomagnetic signals of the body or parts thereof
- A61B5/316—Modalities, i.e. specific diagnostic methods
- A61B5/318—Heart-related electrical modalities, e.g. electrocardiography [ECG]
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/24—Detecting, measuring or recording bioelectric or biomagnetic signals of the body or parts thereof
- A61B5/316—Modalities, i.e. specific diagnostic methods
- A61B5/318—Heart-related electrical modalities, e.g. electrocardiography [ECG]
- A61B5/346—Analysis of electrocardiograms
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/24—Detecting, measuring or recording bioelectric or biomagnetic signals of the body or parts thereof
- A61B5/316—Modalities, i.e. specific diagnostic methods
- A61B5/318—Heart-related electrical modalities, e.g. electrocardiography [ECG]
- A61B5/346—Analysis of electrocardiograms
- A61B5/349—Detecting specific parameters of the electrocardiograph cycle
- A61B5/352—Detecting R peaks, e.g. for synchronising diagnostic apparatus; Estimating R-R interval
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/24—Detecting, measuring or recording bioelectric or biomagnetic signals of the body or parts thereof
- A61B5/316—Modalities, i.e. specific diagnostic methods
- A61B5/369—Electroencephalography [EEG]
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/24—Detecting, measuring or recording bioelectric or biomagnetic signals of the body or parts thereof
- A61B5/316—Modalities, i.e. specific diagnostic methods
- A61B5/369—Electroencephalography [EEG]
- A61B5/372—Analysis of electroencephalograms
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
- B60K28/00—Safety devices for propulsion-unit control, specially adapted for, or arranged in, vehicles, e.g. preventing fuel supply or ignition in the event of potentially dangerous conditions
- B60K28/02—Safety devices for propulsion-unit control, specially adapted for, or arranged in, vehicles, e.g. preventing fuel supply or ignition in the event of potentially dangerous conditions responsive to conditions relating to the driver
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W40/00—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
- B60W40/08—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to drivers or passengers
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/145—Measuring characteristics of blood in vivo, e.g. gas concentration, pH value; Measuring characteristics of body fluids or tissues, e.g. interstitial fluid, cerebral tissue
- A61B5/1455—Measuring characteristics of blood in vivo, e.g. gas concentration, pH value; Measuring characteristics of body fluids or tissues, e.g. interstitial fluid, cerebral tissue using optical sensors, e.g. spectral photometrical oximeters
- A61B5/14551—Measuring characteristics of blood in vivo, e.g. gas concentration, pH value; Measuring characteristics of body fluids or tissues, e.g. interstitial fluid, cerebral tissue using optical sensors, e.g. spectral photometrical oximeters for measuring blood gases
- A61B5/14553—Measuring characteristics of blood in vivo, e.g. gas concentration, pH value; Measuring characteristics of body fluids or tissues, e.g. interstitial fluid, cerebral tissue using optical sensors, e.g. spectral photometrical oximeters for measuring blood gases specially adapted for cerebral tissue
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W40/00—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
- B60W40/08—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to drivers or passengers
- B60W2040/0872—Driver physiology
Landscapes
- Health & Medical Sciences (AREA)
- Life Sciences & Earth Sciences (AREA)
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Public Health (AREA)
- General Health & Medical Sciences (AREA)
- Veterinary Medicine (AREA)
- Biophysics (AREA)
- Pathology (AREA)
- Biomedical Technology (AREA)
- Heart & Thoracic Surgery (AREA)
- Medical Informatics (AREA)
- Molecular Biology (AREA)
- Surgery (AREA)
- Animal Behavior & Ethology (AREA)
- Cardiology (AREA)
- Psychiatry (AREA)
- Psychology (AREA)
- Physiology (AREA)
- Hospice & Palliative Care (AREA)
- Educational Technology (AREA)
- Spectroscopy & Molecular Physics (AREA)
- Hematology (AREA)
- Social Psychology (AREA)
- Transportation (AREA)
- Mechanical Engineering (AREA)
- Developmental Disabilities (AREA)
- Child & Adolescent Psychology (AREA)
- Chemical & Material Sciences (AREA)
- Optics & Photonics (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Artificial Intelligence (AREA)
- Mathematical Physics (AREA)
- Automation & Control Theory (AREA)
- Signal Processing (AREA)
- Combustion & Propulsion (AREA)
- Measuring Pulse, Heart Rate, Blood Pressure Or Blood Flow (AREA)
- Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)
- Measurement And Recording Of Electrical Phenomena And Electrical Characteristics Of The Living Body (AREA)
Abstract
本发明提供一种基于驾驶员的生物识别信号检测驾驶员状态的装置和方法,其检测驾驶员的生物识别信号并基于生物识别信号将驾驶员分类为正常状态或疲劳状态。装置可以包括:生物识别信号测量部件,其配置为利用驾驶员的脑电图(EEG)、心电图(ECG)和功能性近红外光谱(fNIRS)来测量包括驾驶员的脑部血流速度的生物识别信号;生物识别信号整合部件,其配置为整合所测量的生物识别信号,从所测量的生物识别信号提取各个生物识别信号的特征,并随后整合经提取的特征,或者对生物识别信号的经提取的特征进行分类,并随后整合经分类的特征;以及驾驶员状态检测部件,其配置为基于所整合的生物识别信号来检测驾驶员的状态。
Description
相关申请的交叉引用
本发明基于2016年6月27日在韩国知识产权局提交的韩国专利申请第10-2016-0080410号并要求该申请的优先权权益,该申请的全部内容通过引用结合于此。
技术领域
本申请涉及一种基于驾驶员的生物识别信号来检测驾驶员的状态的装置和方法,更具体而言,涉及这样一种技术:其利用驾驶员的脑部血流速度、脑电图(electro-encephalography,EEG)和心电图(electro-cardiography,ECG)来检测驾驶员的生物识别信号。
背景技术
疲劳驾驶或者在驾驶时睡着的驾驶员是交通事故的重要起因。为了防止这种疲劳驾驶,近年来已研究了多种方法和装置。
例如,在通过对利用摄像机观察和感测到的驾驶员的身体变化(也即,眼皮的动作、眼睛的凝视方向和点头等)进行分析以感测驾驶员何时疲劳之后,如果感测的图像具有预定值或更高,则确定驾驶员处于疲劳驾驶状态,对昏昏欲睡的疲劳驾驶进行警告,从而避免疲劳驾驶。
另一种方法是通过感测和分析驾驶员的各种生物识别信号来确定驾驶员的疲劳和困倦状态,从而确定驾驶员是否处于疲劳驾驶状态。
也就是说,存在用于测量和分析驾驶员的脑电图(EEG)、眼电图(electro-oculography,EOG)和心电图(ECG)等的方法。
可以利用ECG传感器和皮肤电流阻力(galvanic skin resistance,GSR)传感器,通过在驾驶员的双手中流动的精细电流信号而检测上述驾驶员的身体状态和精神状态,当驾驶员的脑部活动时,可以利用EEG传感器和EOG传感器,通过从驾驶员的头部周围的皮肤检测的精细电流信号而更直接地检测驾驶员的身体状态和精神状态。
特别地,当使用EEG传感器和EOG传感器时,能够通过驾驶员的脑电图和眼电图的变化而感测驾驶员的疲劳驾驶情况或驾驶员的注意力不集中的状态。
然而,即便在利用多种传感器来收集驾驶员的生物识别信号的情况下,当在收集的生物识别信号中混杂有噪声时,存在难以精确地确定驾驶员的状态的问题。因此,为了精确地诊断驾驶员的疲劳状态和情绪状态,并对驾驶员提供这些状态的反馈,需要收集已去除周围环境因素(例如,噪声等)的驾驶员的生物识别信号。
发明内容
提出本申请来解决现有技术中存在的上述问题,同时完整地保持现有技术所实现的优点。
本申请的一个方面提供一种用于检测驾驶员的生物识别信号的装置和方法,所述装置和方法能够利用驾驶员的脑部血流速度、脑电图(EEG)和心电图(ECG)来分析驾驶员并将驾驶员分类为正常状态和疲劳状态,从而利用经分析的生物识别信号来量化驾驶员的疲劳水平。
本申请的其它目的和优点可以通过下述说明而得以理解,并且将通过本申请的示例性实施方案而得到清楚的描述。能够容易地了解,本申请的目的和优点可以通过在权利要求书中示出的手段及其结合而实现。
在本申请的示例形式中,一种基于驾驶员的生物识别信号来检测驾驶员的状态的装置包括:生物识别信号测量部件,其配置为利用驾驶员的脑电图(EEG)、心电图(ECG)和功能性近红外光谱(fNIRS)来测量包括驾驶员的脑部血流速度的生物识别信号;生物识别信号整合部件,其配置为整合所测量的生物识别信号,从所测量的生物识别信号提取各个生物识别信号的特征,并随后整合经提取的特征,或者对经提取的生物识别信号的特征进行分类,并随后整合经分类的特征;以及驾驶员状态检测部件,其配置为基于所整合的生物识别信号来检测驾驶员的状态。
所述生物识别信号测量部件可以包括:脑电图测量装置,其配置为测量脑部产生的脑电图;发射器,其配置为产生近场红外射线,以测量脑部的血流速度;以及检测器,其配置为检测发射器产生近场红外射线之后被反射的近场红外射线,并获得电信号。
当从所测量的生物识别信号提取各个生物识别信号的特征时,可以通过利用附接至驾驶员的头皮的电极提取相对电平(RPL)的特征,从而提取脑电图的特征。
当从所测量的生物识别信号提取各个生物识别信号的特征时,可以通过提取心电图的P、Q、R、S和T分量中的R分量,并且利用所提取的R分量来计算心率,从而提取心电图的特征。
当从所测量的生物识别信号提取各个生物识别信号的特征时,可以通过由检测器测量反射量、利用光的吸收率将光强度转换为氧合血红蛋白浓度和特定氧合血红蛋白浓度、并且利用该氧合血红蛋白浓度和特定氧合血红蛋白浓度,从而测量驾驶员脑部的血流速度。
可以通过将相同的权重应用于脑电图、心电图和脑部血流速度的值来计算驾驶状况水平。
在本申请的另一示例性形式中,一种基于驾驶员的生物识别信号来检测驾驶员的状态的方法包括:利用驾驶员的脑电图(EEG)、心电图(ECG)和功能性近红外光谱(fNIRS)来测量包括驾驶员的脑部血流速度的生物识别信号;整合所测量的生物识别信号,从所测量的生物识别信号提取各个生物识别信号的特征,并随后整合经提取的特征,或者对经提取的生物识别信号的特征进行分类,并随后整合经分类的特征;以及基于所整合的生物识别信号来检测驾驶员的状态。
当从所测量的生物识别信号提取各个生物识别信号的特征时,可以通过利用附接至驾驶员的头皮的电极提取相对电平(RPL)的特征,从而提取脑电图的特征。
当从所测量的生物识别信号提取各个生物识别信号的特征时,可以通过提取心电图的P、Q、R、S和T分量中的R分量,并且利用所提取的R分量来计算心率,从而提取心电图的特征。
当从所测量的生物识别信号提取各个生物识别信号的特征时,可以通过由检测器测量反射量、利用光的吸收率将光强度转换为氧合血红蛋白浓度和特定氧合血红蛋白浓度、并且利用该氧合血红蛋白浓度和特定氧合血红蛋白浓度,从而测量驾驶员的脑部血流速度。
可以通过将相同的权重应用于脑电图、心电图和脑部血流速度的值来计算驾驶状况水平。
附图说明
通过下述结合附图所呈现的具体实施方式,本申请的以上和其它目的、特征以及优点将会更加明显。
图1是示出了用于基于驾驶员的生物识别信号来确定驾驶员的状态的装置的结构图。
图2是示出了在用于检测驾驶员的状态的装置中的生物识别信号测量部件的示意图。
图3是示出了在用于检测驾驶员的状态的装置中的生物识别信号整合部件的示意图。
图4A至图4C是示出了用于整合在用于检测驾驶员的状态的装置中的生物识别信号整合部件的多模态生物识别信号的方法的示意图。
图5是示出了通过用于检测驾驶员的状态的装置中的生物识别信号整合部件来提取脑电图特征的方法的示意图。
图6是示出了通过用于检测驾驶员的状态的装置中的生物识别信号整合部件来提取心电图特征的方法的图。
图7是示出了通过用于检测驾驶员的状态的装置中的生物识别信号整合部件来提取功能性近红外光谱的特性的方法的示意图。
图8是示出了根据本申请的示例性实施方案的执行基于驾驶员的生物识别信号来检测驾驶员的状态的方法的计算***的框图。
附图中每个元件的附图标记
100:生物识别信号测量部件
110:生物识别信号整合部件
120:驾驶员状态检测部件
200:脑电图测量装置
210:检测器
220:发射器
1100:处理器
1200:总线
1300:内存
1310:ROM
1320:RAM
1400:用户界面输入设备
1500:用户界面输出设备
1600:存储器
1700:网络接口。
具体实施方式
本申请的优点和特征以及使之实现的方法将根据以下参考附图而得到具体描述的示例形式而得以描述。然而,本申请并不限于本文所述的示例形式,而是还可以以许多不同形式进行修改。本申请的示例形式仅提供用于具体描述本申请的精神,从而本领域技术人员可以容易地实现本申请的精神。
在附图中,本申请的示例形式并不限于所示出的特定形式,而是为了清楚而进行了夸大表示。在本说明书中,特定的术语仅出于描述本申请的目的而使用,并且不用于限制本申请的意义或限制本申请的范围(其公开在所附的权利要求书中)。
在本说明书中,表述“和/或”意为包括在该表述之前和之后列出的组件中的至少一个。另外,表述“连接至/耦接至”意为包括其中一个组件直接地连接至另一组件,或通过另一组件而间接地连接的情形。除非明确地进行相反的描述,在本说明书中,单数形态包括复数形态。另外,通过在本说明书中使用的“包括”或“包含”而述及的组件、步骤、操作和元件意指一个或多个其他组件、步骤、操作和元件的存在或添加。
下文将参考附图对本申请的示例形式进行详细描述。
图1是示出了用于基于驾驶员的生物识别信号来确定驾驶员的状态的装置的结构图。
参考图1,用于基于驾驶员的生物识别信号来检测驾驶员的状态的装置包括:生物识别信号测量部件100、生物识别信号整合部件110和驾驶员状态检测部件120。
生物识别信号测量部件100利用驾驶员的脑电图(EEG)、心电图(ECG)和功能性近红外光谱(fNIRS)来测量包括驾驶员的脑部血流速度的生物识别信号。
脑电图(EEG)是信号在驾驶员的神经***中的脑神经之间传递时产生的电的流动,脑电图(EEG)是测量脑部活动的重要指标,这是因为脑电图会根据驾驶员的心态和身体状态而不同地展现。上述脑电图可以通过附接至驾驶员的头皮的电极来测量,作为一种用于脑部的电活动的神经生理学测量方法。
ECG是在限定时间对人的心脏的电活动进行分析的指标,ECG在确定心率和心搏的恒定周期、心脏的尺寸和位置、心脏是否受到损伤等中起到重要作用。可以通过附接至驾驶员的皮肤的电极以及连接至驾驶员的躯体的外部设备而测量ECG。
根据fNIRS,近红外射线具有存在于可见光线和中红外光线之间的800nm至1300nm的范围的波形,通过附接至驾驶员的头皮的分光镜而在头皮的表面上对其进行分光(spectrographed),并且近红外射线穿过头皮,从而根据血流的氧饱和度而被吸收。当通过附接为隔开预定距离的测量器测量光线时,可以根据光线的吸收率来计算血流的氧饱和度,并且可以获得与之相关的脑部神经细胞的活动和脑部的活动的血液动力学信息。
在生物识别信号测量部件100中,利用生物识别信号测量装置测量的生物识别信号根据在硬件的主控制单元(MCU)中编程的数据包结构来配置数据包,并且通过紫蜂(Zigbee)通信网络以250Kbit每秒的速率传输至个人电脑(PC)。安装在个人电脑(PC)中的软件可以接收生物识别信号的数据包,并且通过转换算法而将生物识别信号输出至屏幕,并且生物识别信号可以采用矩阵结构存储在主控制单元(MCU)中(在所述矩阵结构中,将信道和时间形态进行结合)。
生物识别信号整合部件110分析测量的驾驶员的生物识别信号,并且将经分析的生物识别信号进行整合。
生物识别信号整合部件110可以利用依次或同时测量各种生物识别信号的多模态来测量生物识别信号。
例如,生物识别信号整合部件110将由生物识别信号测量部件100测量的生物识别信号数据整合,以利用整合的生物识别信号数据,同时测量各个生物识别信号(脑电图(EEG)、心电图(ECG)和脑部血流速度等)并且随后分别提取最佳地表示各个生物识别信号的特性的特征,并将经提取的特征整合为一个,以产生具有高可靠性的数据。
这里,在通过各种分类器将可以最佳地表示生物识别信号的特性的经提取的特征分类之后,各种分类器的最终输出值可以整合为一个。
驾驶员状态检测部件120基于经整合的生物识别信号来检测驾驶员的状态。
图2是示出了在用于检测驾驶员的状态的装置中的生物识别信号测量部件的示意图。
参考图2,在生物识别信号测量部件100中,利用生物识别信号测量装置测量的生物识别信号根据在硬件的主控制单元(MCU)中编程的数据包结构来配置数据包,并且通过紫蜂通信网络以250Kbit每秒的速率传输至个人电脑(PC)。安装在个人电脑(PC)中的软件可以接收生物识别信号的数据包,并且通过转换算法而将生物识别信号输出至屏幕,生物识别信号可以采用矩阵结构存储在主控制单元(MCU)中(在所述矩阵结构中,将信道和时间形态结合)。
例如,生物识别信号测量部件100包括:脑电图测量装置200、检测器210和发射器220,以便测量脑电图。
在头皮上,脑电图测量装置200测量(EEG测量)从脑部产生的电信号。
检测器210是这样的装置:其能够通过检测在发射器220产生近场红外射线之后被反射的近场红外射线来获得电信号,从而测量脑部的血流速率。
上述检测器210可以称作近场红外检测器或光子检测器。
发射器220是用于测量脑部的血流速率的近场红外产生装置。例如,发射器220可以包括发光二极管(LED)。
图3是示出了在用于检测驾驶员的状态的装置中的生物识别信号整合部件的示意图。
参考图3,生物识别信号整合部件可以利用依次或同时测量各种生物识别信号的多模态A来测量生物识别信号。
生物识别信号整合部件可以整合由生物识别信号测量部件测量的生物识别信号,从由生物识别信号测量部件测量的生物识别信号提取生物识别信号特征,并随后整合经提取的特征,或者将生物识别信号的提取的特征分类,并随后整合经分类的特征。
例如,生物识别信号整合部件整合测量到的生物识别信号数据,以利用经整合的生物识别信号数据,同时测量各个生物识别信号(脑电图(EEG)、心电图(ECG)和脑部血流速度等)并且随后分别提取最佳地表示各个生物识别信号的特性的特征,并将经提取的特征整合为一个,以产生具有高可靠性的数据,并且同时测量各个生物识别信号,并随后提取最佳地表示各个生物识别信号的特性的特征。在通过数个分类器将经提取的特征分类之后,这些分类器的最终输出值可以整合为一个。
图4A至图4C是示出了将根据本申请的示例性实施方案的用于检测驾驶员的状态的装置中的生物识别信号整合部件的多模态生物识别信号进行整合的方法的示意图。
参考图4A,生物识别信号整合部件可以立即整合(X)由生物识别信号测量部件测量的生物识别信号(原始数据)。
参考图4B,生物识别信号整合部件可以从生物识别信号测量部件测量的生物识别信号中提取生物识别信号的特征,并且可以随后整合(Y)提取到的生物识别信号的特征。
参考图4C,生物识别信号整合部件可以将经提取的生物识别信号的特征分类,并且可以随后整合(Z)经分类的生物识别信号。
图5是示出了根据本申请的示例性实施方案的通过用于检测驾驶员的状态的装置中的生物识别信号整合部件来提取脑电图的特征的方法的示意图。
参考图5,根据通过用于检测驾驶员的状态的装置中的生物学信号整合部件来提取脑电图的特征的方法,可以通过利用附接至驾驶员的头皮的电极提取相对电平(relative power level,PRL)特征、利用傅里叶变换将时间序列数据变换为频率数据、在变换为频率数据之后提取阿尔法波(8Hz至13Hz)和贝塔波(13Hz至30Hz)、并且通过将阿尔法波和贝塔波除以1Hz至50Hz的功率值而执行归一化,从而提取脑电图的特征。
例如,图5示出了正常驾驶员组(正常组)和人为地使之疲劳的驾驶员组(异常组或疲劳组)之间的EEG的比较,如图5所示,相比于正常驾驶员组,在人为地使之疲劳的驾驶员组中的阿尔法波的RPL值更大。
图5是从驾驶员的头部的上方观察的图,其中,驾驶员的头部的上部可以被称为额叶,头部的底部可以被称为枕叶,而左侧和右侧可以被称为颞叶。
在此,阿尔法波在异常组的颞叶B中显示得更明显(通过强或暗的颜色显示),而贝塔波在异常组的额叶C显示得较弱。
图6是示出了通过检测驾驶员的状态的装置中的生物识别信号整合部件来提取心电图特征的方法的示意图。
参考图6,根据通过检测驾驶员的状态的装置中的生物识别信号整合部件来提取心电图的特征的方法,可以通过提取心电图的分量P、Q、R、S和T中的R分量并且利用该提取的R分量来计算心率来提取心电图的特征。
例如,可以通过测量驾驶员的心电图、计算1分钟的R分量、并且利用所计算的R分量来计算心率。
图7是示出了通过检测驾驶员的状态的装置中的生物识别信号整合部件来提取功能性近红外光谱的特征的方法的示意图。
参考图7,根据通过检测驾驶员的状态的装置中的生物识别信号整合部件来提取功能性近红外光谱的特征的方法的形式,可以通过由检测器测量反射量、利用光吸收率(例如,修正比尔朗伯定律(modified Beer-Lambert Law,mBLL)而将光强度转换为氧合血红蛋白浓度和特定氧合血红蛋白浓度、并且将氧合血红蛋白和特定氧合血红蛋白作为特征,从而检测氧合血红蛋白浓度(HbO)和特定氧合血红蛋白浓度(HbR),并且可以利用该氧合血红蛋白浓度和特定氧合血红蛋白浓度来测量驾驶员的脑部血流速度。
具体而言,在图7中,发射器D产生近场红外射线,检测器E测量反射或散射的近场红外射线。
测量到的近场红外射线的值是光强度,可以利用修正比尔朗伯定律(mBLL)来测量脑部的氧合血红蛋白浓度和特定氧合血红蛋白浓度(HbO/HbR)。
具体而言,将根据本申请的示例性实施方案的用于检测驾驶员状态的装置中的驾驶员状态检测部件描述用于提取驾驶员的驾驶状况水平的方法。
根据在用于检测驾驶员的状态的装置中的驾驶员状态检测部件中的用于提取驾驶员的驾驶状况水平的方法,利用下述等式1来计算脑电图的值(阿尔法波、贝塔波)、心电图(心率)、脑部的血流速率(氧合血红蛋白浓度)。
【等式1】
在此,norm(x)是将三个具有不同量级范围的信号映射为从0至1的值的等式,而x意指从各个信号提取出的特征(其意指脑电图中的阿尔法波和贝塔波、心电图中的心率和脑部的血流速率中的氧合血红蛋白浓度(HbO))。
之后,通过向脑电图(阿尔法波、贝塔波)、心电图(心率)、脑部血流速度(氧合血红蛋白浓度)的值应用相同的权重来计算驾驶状况水平(driving condition level,DCL),如下述等式2所示。
【等式2】
图8是示出了根据本申请的示例性实施方案的执行基于驾驶员的生物识别信号来检测驾驶员的状态的方法的计算***的框图。
参考图8,计算***1000可以包括通过总线1200连接的至少一个处理器1100、内存1300、用户界面输入设备1400、用户界面输出设备1500、存储器1600和网络接口1700。
处理器1100可以是执行存储在内存1300和/或存储器1600中的指令的过程的中央处理单元(CPU)或半导体器件。内存1300和存储器1600可以包括各种类型的易失性或非易失性存储介质。例如,内存1300可以包括只读内存(ROM)和随机存取内存(RAM)。
因此,结合本说明书中公开的示例性实施方案而描述的方法和算法中的步骤可以直接在通过处理器1100执行的硬件、软件模块或其组合中实现。软件模块可以驻存在存储介质(即,内存1300和/或存储器1600),例如,随机存取内存(RAM)存储器、闪存存储器、只读内存(ROM)存储器、可擦可编程只读内存(EPROM)存储器、电可擦可编程只读内存(EEPROM)存储器、寄存器、硬盘、可换式磁盘或光盘只读存储器(CD-ROM)。说明用的存储介质可以联接至处理器1100,处理器1100可以从存储介质读取信息或将信息写入存储介质。可选地,存储介质还可以与处理器1100一体化。处理器和存储介质也可以存在于专用集成电路(ASIC)中。ASIC还可以存在于用户终端内。可选地,处理器和存储介质也可以作为独立部件而存在于用户终端中。
如上所述,根据本申请的示例性形式,用于检测驾驶员的生物识别信号的装置和方法可以利用驾驶员的脑部血流速度、脑电图(EEG)、心电图(ECG)而对驾驶员进行分析并将驾驶员分类为正常状态和疲劳状态,从而利用分析的生物识别信号来量化驾驶员的疲劳水平。
上文中,尽管本申请已经参考示例形式和附图而进行描述,但是本申请并不限于此,而是可以由本申请所述领域技术人员在不脱离所附权利要求书中所要求的本申请的精神和范围的情况下进行各种修改和改变。
Claims (11)
1.一种基于驾驶员的生物识别信号来检测驾驶员的状态的装置,所述装置包括:
生物识别信号测量部件,其配置为利用驾驶员的脑电图、心电图和功能性近红外光谱来测量包括驾驶员的脑部血流速度的生物识别信号;
生物识别信号整合部件,其配置为将所测量的生物识别信号整合,从所测量的生物识别信号提取各个生物识别信号的特征并随后整合所提取的特征,或者将所提取的生物识别信号的特征进行分类并随后整合经分类的特征;
驾驶员状态检测部件,其配置为基于经整合的生物识别信号来检测驾驶员的状态。
2.根据权利要求1所述的基于驾驶员的生物识别信号来检测驾驶员的状态的装置,其中,所述生物识别信号测量部件包括:
脑电图测量装置,其配置为测量从脑部产生的脑电图;
发射器,其配置为产生近场红外射线,以测量脑部的血流速度;
检测器,其配置为检测发射器产生近场红外射线之后被反射的近场红外射线,并获得电信号。
3.根据权利要求1所述的基于驾驶员的生物识别信号来检测驾驶员的状态的装置,其中,当从所测量的生物识别信号提取各个生物识别信号的特征时,生物识别信号整合部件配置为,通过利用附接至驾驶员的头皮的电极提取相对电平的特征,从而提取脑电图的特征。
4.根据权利要求1所述的基于驾驶员的生物识别信号来检测驾驶员的状态的装置,其中,当从所测量的生物识别信号提取各个生物识别信号的特征时,生物识别信号整合部件配置为,通过在心电图的P、Q、R、S和T分量中提取R分量来提取心电图的特征,并且利用所提取的R分量来计算心率。
5.根据权利要求1所述的基于驾驶员的生物识别信号来检测驾驶员的状态的装置,其中,当从所测量的生物识别信号提取各个生物识别信号的特征时,生物识别信号测量部件配置为,通过由检测器测量反射量、利用光的吸收率将光强度转换为氧合血红蛋白和特定氧合血红蛋白浓度、并且利用该氧合血红蛋白浓度和特定氧合血红蛋白浓度,从而测量驾驶员的脑部血流速度。
6.根据权利要求1所述的基于驾驶员的生物识别信号来检测驾驶员的状态的装置,其中,驾驶员状态检测部件配置为,通过将相同的权重应用于脑电图、心电图和脑部血流速度的值来计算驾驶状况水平。
7.一种基于驾驶员的生物识别信号来检测驾驶员的状态的方法,所述方法包括:
利用驾驶员的脑电图、心电图和功能性近红外光谱来测量包括驾驶员的脑部血流速度的生物识别信号;
整合所测量的生物识别信号,从所测量的生物识别信号提取各个生物识别信号的特征并随后整合经提取的特征,或者将经提取的生物识别信号的特征分类并随后整合经分类的特征;
基于整合的生物识别信号来检测驾驶员的状态。
8.根据权利要求7所述的基于驾驶员的生物识别信号来检测驾驶员的状态的方法,其中,当从所测量的生物识别信号提取各个生物识别信号的特征时,通过利用附接至驾驶员的头皮的电极提取相对电平的特征来提取脑电图的特征。
9.根据权利要求7所述的基于驾驶员的生物识别信号来检测驾驶员的状态的方法,其中,当从所测量的生物识别信号提取各个生物识别信号的特征时,通过在心电图的P、Q、R、S和T分量中提取R分量,并且利用所提取的R分量来计算心率,从而提取心电图的特征。
10.根据权利要求7所述的基于驾驶员的生物识别信号来检测驾驶员的状态的方法,其中,当从所测量的生物识别信号提取各个生物识别信号的特征时,通过由检测器测量反射量、利用光的吸收率将光强度转换为氧合血红蛋白浓度和特定氧合血红蛋白浓度、并且利用该氧合血红蛋白浓度和特定氧合血红蛋白浓度,从而测量驾驶员的脑部血流速度。
11.根据权利要求7所述的基于驾驶员的生物识别信号来检测驾驶员的状态的方法,其中,通过将相同的权重应用于脑电图、心电图和脑部血流速度的值来计算驾驶状况水平。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR10-2016-0080410 | 2016-06-27 | ||
KR1020160080410A KR20180001367A (ko) | 2016-06-27 | 2016-06-27 | 운전자의 생체 신호를 기반으로 하는 운전자의 상태 판별 장치 및 방법 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN107536617A true CN107536617A (zh) | 2018-01-05 |
Family
ID=60579777
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201611081026.9A Withdrawn CN107536617A (zh) | 2016-06-27 | 2016-11-30 | 基于驾驶员的生物识别信号检测驾驶员状态的装置和方法 |
Country Status (4)
Country | Link |
---|---|
US (1) | US10022082B2 (zh) |
KR (1) | KR20180001367A (zh) |
CN (1) | CN107536617A (zh) |
DE (1) | DE102016123159A1 (zh) |
Cited By (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN108742614A (zh) * | 2018-06-11 | 2018-11-06 | 上海交通大学 | 一种联合表面肌电肌音与近红外光谱的肌肉疲劳检测方法 |
CN109044379A (zh) * | 2018-06-26 | 2018-12-21 | 深圳市元征科技股份有限公司 | 一种疲劳驾驶判断方法、***、设备及计算机存储介质 |
CN109620205A (zh) * | 2018-12-26 | 2019-04-16 | 上海联影智能医疗科技有限公司 | 心电数据分类方法、装置、计算机设备和存储介质 |
CN110742602A (zh) * | 2019-10-15 | 2020-02-04 | 武汉理工大学 | 一种基于脑电与车辆行驶数据的激进驾驶状态识别方法 |
CN112154490A (zh) * | 2018-03-28 | 2020-12-29 | 罗伯特·博世有限公司 | 用于估计车辆座舱内部的场景的车内*** |
CN113261974A (zh) * | 2021-06-07 | 2021-08-17 | 吉林大学 | 一种基于多生理信号的运动疲劳监测方法 |
CN116350190A (zh) * | 2023-05-29 | 2023-06-30 | 中国第一汽车股份有限公司 | 一种驾驶能力确定方法、电子设备及存储介质 |
Families Citing this family (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US10922567B2 (en) | 2010-06-07 | 2021-02-16 | Affectiva, Inc. | Cognitive state based vehicle manipulation using near-infrared image processing |
US10379535B2 (en) | 2017-10-24 | 2019-08-13 | Lear Corporation | Drowsiness sensing system |
US10836403B2 (en) | 2017-12-04 | 2020-11-17 | Lear Corporation | Distractedness sensing system |
US10210409B1 (en) * | 2018-02-07 | 2019-02-19 | Lear Corporation | Seating system with occupant stimulation and sensing |
US10867218B2 (en) | 2018-04-26 | 2020-12-15 | Lear Corporation | Biometric sensor fusion to classify vehicle passenger state |
CN109710065B (zh) * | 2018-12-18 | 2021-12-28 | 苏州大学 | 基于大脑血红蛋白信息的行走调节意图的识别方法 |
KR20210009595A (ko) * | 2019-07-17 | 2021-01-27 | 주식회사 이엠텍 | 근적외선 조사부를 구비하는 뇌 전도 측정 전극 |
US11524691B2 (en) | 2019-07-29 | 2022-12-13 | Lear Corporation | System and method for controlling an interior environmental condition in a vehicle |
CN110507319B (zh) * | 2019-09-04 | 2022-04-15 | 杭州回车电子科技有限公司 | 一种疲劳度检测方法及设备 |
US11813060B2 (en) * | 2020-06-29 | 2023-11-14 | Lear Corporation | System and method for biometric evoked response monitoring and feedback |
CN112190235B (zh) * | 2020-12-08 | 2021-03-16 | 四川大学 | 一种基于不同情况下欺骗行为的fNIRS数据处理方法 |
Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2006280512A (ja) * | 2005-03-31 | 2006-10-19 | National Institute Of Information & Communication Technology | 乗り物操縦者への危険信号提示方法及び装置 |
CN101375796A (zh) * | 2008-09-18 | 2009-03-04 | 浙江工业大学 | 疲劳驾驶实时检测*** |
US20100245093A1 (en) * | 2009-03-30 | 2010-09-30 | Tobii Technology Ab | Eye closure detection using structured illumination |
CN102715902A (zh) * | 2012-06-15 | 2012-10-10 | 天津大学 | 特殊人群的情绪监护方法 |
CN104665849A (zh) * | 2014-12-11 | 2015-06-03 | 西南交通大学 | 一种基于多生理信号多模型交互的高铁调度员应激检测方法 |
CN105438174A (zh) * | 2016-01-02 | 2016-03-30 | 无锡桑尼安科技有限公司 | 出租车驾驶员状态自动预警平台 |
CN105559760A (zh) * | 2015-12-10 | 2016-05-11 | 深圳市智帽科技开发有限公司 | 头戴设备的人身模式识别方法 |
Family Cites Families (16)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2004110546A (ja) | 2002-09-19 | 2004-04-08 | Denso Corp | 表示装置、音響装置、およびアクチュエータ制御装置 |
DE10312519A1 (de) | 2003-03-20 | 2004-10-28 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. | Verfahren zum Auslösen insassenunterstützter Maßnahmen in einem Fahrzeug |
CA2649731C (en) * | 2008-11-05 | 2015-07-21 | The George Washington University | An unobtrusive driver drowsiness detection method |
US9144389B2 (en) * | 2010-03-12 | 2015-09-29 | Tata Consultancy Services Limited | System for vehicle security, personalization and cardiac activity monitoring of a driver |
KR20120068625A (ko) | 2010-12-17 | 2012-06-27 | 대구대학교 산학협력단 | 뇌파센서를 이용한 장애인용 드라이빙 시뮬레이터의 가감속 시스템 및 뇌파센서를 이용한 장애인용 차량의 가감속그 제어방법 |
US9292471B2 (en) * | 2011-02-18 | 2016-03-22 | Honda Motor Co., Ltd. | Coordinated vehicle response system and method for driver behavior |
US8725311B1 (en) * | 2011-03-14 | 2014-05-13 | American Vehicular Sciences, LLC | Driver health and fatigue monitoring system and method |
KR102013609B1 (ko) | 2012-08-14 | 2019-08-23 | 엘지전자 주식회사 | 운전자의 생체 신호 측정 장치 |
KR20140096609A (ko) | 2013-01-28 | 2014-08-06 | 주식회사 라이프사이언스테크놀로지 | 생체정보를 통한 운전자 개인인식 및 운전상태 변화정보 제공방법 |
JP2014167438A (ja) | 2013-02-28 | 2014-09-11 | Denso Corp | 情報通知装置 |
KR20140127977A (ko) | 2013-04-26 | 2014-11-05 | 주식회사 라이프사이언스테크놀로지 | 생체신호를 이용한 운전자의 졸음운전 판단장치 |
KR101526672B1 (ko) | 2013-07-24 | 2015-06-05 | 현대자동차주식회사 | 졸음 상태 판별 장치 및 방법 |
KR20150078476A (ko) | 2013-12-30 | 2015-07-08 | 광운대학교 산학협력단 | 차량 내 운전자의 생체 신호 모니터링 시스템 및 생체 신호 모니터링 방법 |
US9636063B2 (en) * | 2014-03-18 | 2017-05-02 | J. Kimo Arbas | System and method to detect alertness of machine operator |
KR101669436B1 (ko) | 2014-08-08 | 2016-10-26 | 최상식 | 사용자의 상태를 관리하는 머리착용형 장치 및 사용자의 상태를 관리하는 방법 |
KR20160080410A (ko) | 2014-12-29 | 2016-07-08 | 주식회사 레이언스 | 박막 두께측정 센서모듈 및 이를 포함한 박막 증착 장비 |
-
2016
- 2016-06-27 KR KR1020160080410A patent/KR20180001367A/ko not_active Application Discontinuation
- 2016-11-18 US US15/356,083 patent/US10022082B2/en active Active
- 2016-11-30 DE DE102016123159.2A patent/DE102016123159A1/de active Pending
- 2016-11-30 CN CN201611081026.9A patent/CN107536617A/zh not_active Withdrawn
Patent Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2006280512A (ja) * | 2005-03-31 | 2006-10-19 | National Institute Of Information & Communication Technology | 乗り物操縦者への危険信号提示方法及び装置 |
CN101375796A (zh) * | 2008-09-18 | 2009-03-04 | 浙江工业大学 | 疲劳驾驶实时检测*** |
US20100245093A1 (en) * | 2009-03-30 | 2010-09-30 | Tobii Technology Ab | Eye closure detection using structured illumination |
CN102715902A (zh) * | 2012-06-15 | 2012-10-10 | 天津大学 | 特殊人群的情绪监护方法 |
CN104665849A (zh) * | 2014-12-11 | 2015-06-03 | 西南交通大学 | 一种基于多生理信号多模型交互的高铁调度员应激检测方法 |
CN105559760A (zh) * | 2015-12-10 | 2016-05-11 | 深圳市智帽科技开发有限公司 | 头戴设备的人身模式识别方法 |
CN105438174A (zh) * | 2016-01-02 | 2016-03-30 | 无锡桑尼安科技有限公司 | 出租车驾驶员状态自动预警平台 |
Cited By (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN112154490A (zh) * | 2018-03-28 | 2020-12-29 | 罗伯特·博世有限公司 | 用于估计车辆座舱内部的场景的车内*** |
CN108742614A (zh) * | 2018-06-11 | 2018-11-06 | 上海交通大学 | 一种联合表面肌电肌音与近红外光谱的肌肉疲劳检测方法 |
CN109044379A (zh) * | 2018-06-26 | 2018-12-21 | 深圳市元征科技股份有限公司 | 一种疲劳驾驶判断方法、***、设备及计算机存储介质 |
CN109620205A (zh) * | 2018-12-26 | 2019-04-16 | 上海联影智能医疗科技有限公司 | 心电数据分类方法、装置、计算机设备和存储介质 |
CN110742602A (zh) * | 2019-10-15 | 2020-02-04 | 武汉理工大学 | 一种基于脑电与车辆行驶数据的激进驾驶状态识别方法 |
CN113261974A (zh) * | 2021-06-07 | 2021-08-17 | 吉林大学 | 一种基于多生理信号的运动疲劳监测方法 |
CN116350190A (zh) * | 2023-05-29 | 2023-06-30 | 中国第一汽车股份有限公司 | 一种驾驶能力确定方法、电子设备及存储介质 |
CN116350190B (zh) * | 2023-05-29 | 2023-08-18 | 中国第一汽车股份有限公司 | 一种驾驶能力确定方法、电子设备及存储介质 |
Also Published As
Publication number | Publication date |
---|---|
DE102016123159A1 (de) | 2017-12-28 |
US10022082B2 (en) | 2018-07-17 |
KR20180001367A (ko) | 2018-01-04 |
US20170367635A1 (en) | 2017-12-28 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN107536617A (zh) | 基于驾驶员的生物识别信号检测驾驶员状态的装置和方法 | |
US7403815B2 (en) | Brain state recognition system | |
CN104720796B (zh) | 一种用于癫痫发作时间段的自动检测***及方法 | |
EP2698112B1 (en) | Real-time stress determination of an individual | |
CN103610447B (zh) | 一种基于前额脑电信号的脑力负荷在线检测方法 | |
EP3698709A1 (en) | Electrocardiogram information processing method and electrocardiogram workstation system | |
CN110151203B (zh) | 基于多级雪崩式卷积递归网络eeg分析的疲劳驾驶识别方法 | |
CN109069081A (zh) | 用于预测、筛查和监测脑病/谵妄的设备、***和方法 | |
KR101689021B1 (ko) | 센싱장비를 이용한 심리상태 판단 시스템 및 그 방법 | |
CN112244765B (zh) | 一种大脑暂时性异常态的检测方法、装置和*** | |
US10318833B2 (en) | System and method for person identification and personality assessment based on EEG signal | |
EP3424425A1 (en) | Determination result output device, determination result provision device, and determination result output system | |
CN107252313A (zh) | 一种安全驾驶的监测方法及***、汽车、可读存储介质 | |
EP3424408B1 (en) | Fatigue state determination device and fatigue state determination method | |
CN112674782B (zh) | 癫痫患者发作间期痫样电活动检测装置和方法 | |
Jayawardana et al. | Analysis of temporal relationships between ASD and brain activity through EEG and machine learning | |
CN112089398A (zh) | 一种毒瘾程度检测方法 | |
CN109567832A (zh) | 一种基于智能手环的检测愤怒驾驶状态的方法及*** | |
Wang et al. | Detection of driver stress in real-world driving environment using physiological signals | |
CN114423341A (zh) | 用于血液生物标志物的基于相机的量化的***和方法 | |
Rundo et al. | Innovative saliency based deep driving scene understanding system for automatic safety assessment in next-generation cars | |
CN107307870A (zh) | 一种基于近红外光谱的驾驶状态脑监测***及方法 | |
JP2015039487A (ja) | 生理指標を用いる視線分析システムおよび方法 | |
Deshmukh | Study of Online Driver Distraction Analysis using ECG-Dynamics | |
Mohanty et al. | Driver assistant for the detection of drowsiness and alcohol effect |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
WW01 | Invention patent application withdrawn after publication |
Application publication date: 20180105 |
|
WW01 | Invention patent application withdrawn after publication |