JP5519413B2 - 瞳孔隠蔽状態検出装置及びそれを備えた車載カメラ - Google Patents
瞳孔隠蔽状態検出装置及びそれを備えた車載カメラ Download PDFInfo
- Publication number
- JP5519413B2 JP5519413B2 JP2010127448A JP2010127448A JP5519413B2 JP 5519413 B2 JP5519413 B2 JP 5519413B2 JP 2010127448 A JP2010127448 A JP 2010127448A JP 2010127448 A JP2010127448 A JP 2010127448A JP 5519413 B2 JP5519413 B2 JP 5519413B2
- Authority
- JP
- Japan
- Prior art keywords
- pupil
- driver
- gradient
- intensity
- concealed
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Classifications
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B3/00—Apparatus for testing the eyes; Instruments for examining the eyes
- A61B3/10—Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions
- A61B3/113—Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions for determining or recording eye movement
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B3/00—Apparatus for testing the eyes; Instruments for examining the eyes
- A61B3/0016—Operational features thereof
- A61B3/0025—Operational features thereof characterised by electronic signal processing, e.g. eye models
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/16—Devices for psychotechnics; Testing reaction times ; Devices for evaluating the psychological state
- A61B5/163—Devices for psychotechnics; Testing reaction times ; Devices for evaluating the psychological state by tracking eye movement, gaze, or pupil change
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/16—Devices for psychotechnics; Testing reaction times ; Devices for evaluating the psychological state
- A61B5/18—Devices for psychotechnics; Testing reaction times ; Devices for evaluating the psychological state for vehicle drivers or machine operators
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/18—Eye characteristics, e.g. of the iris
- G06V40/19—Sensors therefor
Landscapes
- Health & Medical Sciences (AREA)
- Life Sciences & Earth Sciences (AREA)
- Engineering & Computer Science (AREA)
- General Health & Medical Sciences (AREA)
- Physics & Mathematics (AREA)
- Veterinary Medicine (AREA)
- Animal Behavior & Ethology (AREA)
- Surgery (AREA)
- Public Health (AREA)
- Medical Informatics (AREA)
- Biophysics (AREA)
- Molecular Biology (AREA)
- Biomedical Technology (AREA)
- Heart & Thoracic Surgery (AREA)
- Ophthalmology & Optometry (AREA)
- Social Psychology (AREA)
- Pathology (AREA)
- Psychology (AREA)
- Psychiatry (AREA)
- Hospice & Palliative Care (AREA)
- Educational Technology (AREA)
- Developmental Disabilities (AREA)
- Human Computer Interaction (AREA)
- Child & Adolescent Psychology (AREA)
- Signal Processing (AREA)
- General Physics & Mathematics (AREA)
- Multimedia (AREA)
- Theoretical Computer Science (AREA)
- Traffic Control Systems (AREA)
- Image Processing (AREA)
- Fittings On The Vehicle Exterior For Carrying Loads, And Devices For Holding Or Mounting Articles (AREA)
- Image Analysis (AREA)
- Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)
- Studio Devices (AREA)
- Eye Examination Apparatus (AREA)
Description
10 撮像装置
11 レンズ部
12 撮像素子(撮像手段)
13 信号処理回路
20 瞳孔隠蔽状態検出装置
21 目領域検出手段
22 視線方向検出手段
23 輝度勾配算出手段
24 勾配強度算出手段
25 勾配強度保存手段
26 差分算出手段
27 評価値算出手段
28 評価値保存手段
29 瞳孔隠蔽判定手段
Claims (3)
- 車両の運転者が前記車両のインストルメントパネルの方向に視線を向けたときに前記運転者が直視可能な領域に設けられ、前記運転者の顔を撮像して顔画像のデータを予め定められたフレーム間隔で出力する撮像手段と、
前記顔画像から前記運転者の目領域を検出する目領域検出手段と、
前記目領域の画像から前記運転者の視線方向を検出する視線方向検出手段と、
前記目領域の画像を構成する各画素の輝度勾配を算出する輝度勾配算出手段と、
前記輝度勾配算出手段が算出した前記輝度勾配から前記目領域の画像の垂直座標ごとに前記輝度勾配の強度の和を算出することにより勾配強度垂直分布のデータをフレームごとに求める勾配強度算出手段と、
前記視線方向検出手段が検出した視線方向が、前記運転者が前記インストルメントパネルを見る方向であるときに前記勾配強度算出手段が求めた勾配強度垂直分布のデータを保存する勾配強度保存手段と、
前記勾配強度保存手段に保存された勾配強度垂直分布と現フレームでの勾配強度垂直分布との差分を算出する差分算出手段と、
前記差分算出手段が算出した差分に基づいて前記運転者の瞳孔が隠蔽されているか否かを判定する瞳孔隠蔽判定手段と、を備えたことを特徴とする瞳孔隠蔽状態検出装置。 - 前記差分算出手段が算出した差分に基づいて、前記運転者の瞳孔が隠蔽されている可能性を示す評価値をフレームごとに算出する評価値算出手段を備え、
前記瞳孔隠蔽判定手段は、予め定められたフレーム数閾値以上のフレームにわたって前記瞳孔が隠蔽されている可能性を示す評価値が連続したとき前記瞳孔が隠蔽されていると判定するものであることを特徴とする請求項1に記載の瞳孔隠蔽状態検出装置。 - 請求項1又は請求項2に記載の瞳孔隠蔽状態検出装置と、前記車両の運転者が前記車両のインストルメントパネルの方向に視線を向けたときに前記運転者が直視可能な領域に設けられ、前記運転者の顔を撮像して顔画像のデータを予め定められたフレーム間隔で出力する撮像手段を有する撮像装置と、を備えたことを特徴とする車載カメラ。
Priority Applications (5)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2010127448A JP5519413B2 (ja) | 2010-06-03 | 2010-06-03 | 瞳孔隠蔽状態検出装置及びそれを備えた車載カメラ |
CN201080003707.8A CN102368946B (zh) | 2010-06-03 | 2010-09-28 | 瞳孔遮蔽状态检测装置和具有它的车载照相机 |
EP20100849174 EP2417902B1 (en) | 2010-06-03 | 2010-09-28 | Pupil covering state detection device, and in-vehicle camera provided therewith |
PCT/JP2010/005805 WO2011151868A1 (ja) | 2010-06-03 | 2010-09-28 | 瞳孔隠蔽状態検出装置及びそれを備えた車載カメラ |
US13/171,524 US8405714B2 (en) | 2010-06-03 | 2011-06-29 | Pupil hidden state detecting apparatus and vehicle-mounted camera employing the same |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2010127448A JP5519413B2 (ja) | 2010-06-03 | 2010-06-03 | 瞳孔隠蔽状態検出装置及びそれを備えた車載カメラ |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2011253395A JP2011253395A (ja) | 2011-12-15 |
JP5519413B2 true JP5519413B2 (ja) | 2014-06-11 |
Family
ID=45066271
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2010127448A Active JP5519413B2 (ja) | 2010-06-03 | 2010-06-03 | 瞳孔隠蔽状態検出装置及びそれを備えた車載カメラ |
Country Status (4)
Country | Link |
---|---|
EP (1) | EP2417902B1 (ja) |
JP (1) | JP5519413B2 (ja) |
CN (1) | CN102368946B (ja) |
WO (1) | WO2011151868A1 (ja) |
Families Citing this family (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102657513A (zh) * | 2012-04-10 | 2012-09-12 | 中国航空无线电电子研究所 | 一种人眼红外图像瞳孔位置检测方法 |
CN104348938B (zh) * | 2013-07-23 | 2018-04-13 | 深圳市赛格导航科技股份有限公司 | 一种车载终端眼球识别自动拨号***及方法 |
FR3048544B1 (fr) * | 2016-03-01 | 2021-04-02 | Valeo Comfort & Driving Assistance | Dispositif et methode de surveillance d'un conducteur d'un vehicule automobile |
Family Cites Families (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP3214195B2 (ja) * | 1993-11-11 | 2001-10-02 | 三菱電機株式会社 | 運転者撮影装置 |
FR2719463B1 (fr) | 1994-05-03 | 1996-07-26 | Essilor Int | Procédé de métrologie optique. |
FR2773521B1 (fr) * | 1998-01-15 | 2000-03-31 | Carlus Magnus Limited | Procede et dispositif pour surveiller en continu l'etat de vigilance du conducteur d'un vehicule automobile, afin de detecter et prevenir une tendance eventuelle a l'endormissement de celui-ci |
DE19803158C1 (de) * | 1998-01-28 | 1999-05-06 | Daimler Chrysler Ag | Vorrichtung zur Vigilanzzustandsbestimmung |
JP3012226B2 (ja) * | 1998-07-24 | 2000-02-21 | マルチメディアシステム事業協同組合 | 居眠り運転防止装置 |
JP4204336B2 (ja) * | 2003-01-30 | 2009-01-07 | 富士通株式会社 | 顔の向き検出装置、顔の向き検出方法及びコンピュータプログラム |
US20050100191A1 (en) * | 2003-11-11 | 2005-05-12 | Harbach Andrew P. | Imaging system and method for monitoring an eye |
WO2008007781A1 (fr) * | 2006-07-14 | 2008-01-17 | Panasonic Corporation | Dispositif de détection de la direction d'axe visuel et procédé de détection de la direction de ligne visuelle |
WO2008091401A2 (en) * | 2006-09-15 | 2008-07-31 | Retica Systems, Inc | Multimodal ocular biometric system and methods |
JP4895797B2 (ja) * | 2006-12-26 | 2012-03-14 | アイシン精機株式会社 | 瞼検出装置、瞼検出方法及びプログラム |
US8106783B2 (en) * | 2008-03-12 | 2012-01-31 | Denso Corporation | Input apparatus, remote controller and operating device for vehicle |
-
2010
- 2010-06-03 JP JP2010127448A patent/JP5519413B2/ja active Active
- 2010-09-28 CN CN201080003707.8A patent/CN102368946B/zh active Active
- 2010-09-28 EP EP20100849174 patent/EP2417902B1/en not_active Not-in-force
- 2010-09-28 WO PCT/JP2010/005805 patent/WO2011151868A1/ja active Application Filing
Also Published As
Publication number | Publication date |
---|---|
WO2011151868A1 (ja) | 2011-12-08 |
EP2417902A1 (en) | 2012-02-15 |
CN102368946B (zh) | 2015-02-04 |
CN102368946A (zh) | 2012-03-07 |
EP2417902B1 (en) | 2014-11-05 |
JP2011253395A (ja) | 2011-12-15 |
EP2417902A4 (en) | 2013-11-13 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5466610B2 (ja) | 視線推定装置 | |
JP5576937B2 (ja) | 車両の周辺監視装置 | |
JP4364275B2 (ja) | 画像処理方法、画像処理装置及びコンピュータプログラム | |
WO2012169119A1 (ja) | 物体検出枠表示装置及び物体検出枠表示方法 | |
JP2008027309A (ja) | 衝突判定システム、及び衝突判定方法 | |
JP6601351B2 (ja) | 視線計測装置 | |
US8983147B2 (en) | Eyelid detection device | |
WO2017217062A1 (ja) | 撮影画像判定装置 | |
JP2008171108A (ja) | 顔状況判定処理装置および撮像装置 | |
JP5519413B2 (ja) | 瞳孔隠蔽状態検出装置及びそれを備えた車載カメラ | |
CN110199318B (zh) | 驾驶员状态推定装置以及驾驶员状态推定方法 | |
US8405714B2 (en) | Pupil hidden state detecting apparatus and vehicle-mounted camera employing the same | |
JP2009125518A (ja) | ドライバの瞬き検知方法及びドライバの覚醒度判断方法並びに装置 | |
JP4676375B2 (ja) | 車両運転者の視線方向の検出方法又は同装置 | |
JP2011134119A (ja) | 車両周辺監視装置 | |
US10242460B2 (en) | Imaging apparatus, car, and variation detection method | |
JP2019012429A (ja) | 車両用警報装置 | |
JP4739833B2 (ja) | 車両停止検出装置、カーナビゲーション装置 | |
JP6169446B2 (ja) | 視線検出装置 | |
US20240037787A1 (en) | Corneal reflected image identifying device and gaze detection device | |
KR20100026169A (ko) | 얼굴 검출 시스템 | |
JP2023061474A (ja) | 視線検出装置、視線検出システム、及び視線検出方法 | |
JP2021043637A (ja) | 運転者モニタ装置 | |
JP2007115129A (ja) | 障害物検出システム、障害物検出方法及びコンピュータプログラム | |
JP2005197900A (ja) | 電子カメラ |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20121204 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20131217 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20140124 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20140318 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20140403 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 5519413 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |