JP5042296B2 - 注視判定装置 - Google Patents
注視判定装置 Download PDFInfo
- Publication number
- JP5042296B2 JP5042296B2 JP2009274457A JP2009274457A JP5042296B2 JP 5042296 B2 JP5042296 B2 JP 5042296B2 JP 2009274457 A JP2009274457 A JP 2009274457A JP 2009274457 A JP2009274457 A JP 2009274457A JP 5042296 B2 JP5042296 B2 JP 5042296B2
- Authority
- JP
- Japan
- Prior art keywords
- angle
- face
- face orientation
- frequency distribution
- detection result
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Images
Landscapes
- Traffic Control Systems (AREA)
- Image Analysis (AREA)
- Fittings On The Vehicle Exterior For Carrying Loads, And Devices For Holding Or Mounting Articles (AREA)
- Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)
- Image Processing (AREA)
Description
また、従来、例えば運転者により左右のアウターミラーが操作されているときの運転者の顔向き角度を予め検出して記憶しておき、記憶した顔向き角度に基づき、運転中の顔向き角度を判定し、運転者が余所見をしているか否かを判定する余所見判定装置が知られている(例えば、特許文献2参照)。
また、上記従来技術に係る余所見判定装置においては、運転者により左右のアウターミラーが操作されているときの運転者の顔向き角度が予め検出されていない場合には、運転者が余所見をしているか否かを判定することが出来ないという問題が生じる。
また、所定範囲内に対応する顔向き角度の頻度分布の蓄積により第1領域および第2領域を設定することから、例えば運転者の姿勢が変化した場合などであっても、自動的に追従して適切な第1領域および第2領域を設定することができる。
本実施の形態による注視判定装置10は、例えば図1に示すように、乗員カメラ11と、処理装置12とを備えて構成され、さらに、処理装置12は、顔向き検知部21と、頻度分布検出部22と、頻度分布記憶部23と、最大頻度検出部24と、中間角度検出部25と、注視対象判定部26とを備えて構成されている。
例えば、頻度分布検出部22は、所定範囲(学習範囲)内に対応する角度範囲で運転者の顔向き角度が所定時間以上に亘って停留した場合に、この顔向き角度の頻度の度数を増大更新する。
なお、第1領域Aは、少なくとも左右のドアミラー33を内部に含む領域であって、第2領域Bは、少なくとも左右のドアミラー33よりも左右の外側方向であって、左右のドアガラス34の一部を含む領域である。
次に、ステップS02においては、顔画像に基づき、運転者の顔向き角度を検出する。
次に、ステップS03においては、運転者の顔向きの方向が左(例えば、運転席の正面から左)であるか否かを判定する。
この判定結果が「YES」の場合には、ステップS04に進み、このステップS04においては、左のドアミラー33に対して、後述する判定角度設定の処理を行なう。
一方、この判定結果が「NO」の場合には、ステップS05に進み、このステップS05においては、右のドアミラー33に対して、後述する判定角度設定の処理を行なう。
この判定結果が「YES」の場合には、ステップS07に進み、このステップS07においては、運転者の注視対象がドアミラー33であると判定して、エンドに進む。
一方、この判定結果が「NO」の場合には、ステップS08に進み、このステップS08においては、運転者の注視対象がドアミラー33以外であると判定して、エンドに進む。
先ず、例えば図5に示すステップS11においては、運転者の顔向き角度は車両のフロントガラス31両端に設けられたピラー32よりも左右の外側方向の所定範囲(学習範囲)内に対応する角度であるか否かを判定する。
この判定結果が「NO」の場合には、エンドに進む。
一方、この判定結果が「YES」の場合には、ステップS12に進む。
この判定結果が「NO」の場合には、エンドに進む。
一方、この判定結果が「YES」の場合には、ステップS13に進む。
次に、ステップS13においては、運転者の顔向き角度が第1領域A内に対応する角度範囲内であるか否かを判定する。
この判定結果が「YES」の場合には、ステップS14に進み、このステップS14においては、第1領域Aの頻度分布、つまり顔向き角度の頻度の度数を増大更新する。
一方、この判定結果が「NO」の場合には、ステップS15に進み、このステップS15においては、第2領域Bの頻度分布、つまり顔向き角度の頻度の度数を増大更新する。
この判定結果が「NO」の場合には、エンドに進む。
一方、この判定結果が「YES」の場合には、ステップS17に進む。
そして、ステップS17においては、頻度分布の標本数が所定閾値以上に到達した以後での運転者の顔向き角度の頻度分布が最大となる顔向き角度を検出する。
この判定結果が「NO」の場合には、エンドに進む。
一方、この判定結果が「YES」の場合には、ステップS19に進む。
そして、ステップS19においては、各領域A,B毎での運転者の顔向き角度の頻度分布が最大となる顔向き角度(最大頻度角度)θA,θBの中点の角度((θA+θB)/2)を検出して、この検出結果を判定角度として設定し、エンドに進む。
また、所定範囲内に対応する顔向き角度の頻度分布の蓄積により第1領域Aおよび第2領域Bを設定することから、例えば運転者の姿勢が変化した場合などであっても、自動的に追従して適切な第1領域Aおよび第2領域Bを設定することができる。
11 乗員カメラ(撮像手段)
21 顔向き検知部(顔向き検知手段)
22 頻度分布検出部(頻度分布検出手段)
23 頻度分布記憶部(記憶手段)
24 最大頻度検出部(最大頻度検出手段)
25 中間角度検出部(中間角度検出手段)
26 注視対象判定部(注視対象判定手段)
31 フロントガラス
32 ピラー
33 ドアミラー
Claims (1)
- 車両の運転席に着座した運転者の顔を撮像して顔画像を出力する撮像手段と、該撮像手段から出力された前記顔画像に基づき前記運転者の顔向き角度を検知して検知結果を出力する顔向き検知手段と、該顔向き検知手段から出力された前記顔向き角度の検知結果に基づいて前記運転者の注視対象を判定して判定結果を出力する注視対象判定手段とを備える注視判定装置であって、
前記顔向き検知手段から出力された前記顔向き角度の検知結果から、前記車両のフロントガラス両端に設けられた各ピラーよりも左右の外側方向の所定範囲内に対応する前記顔向き角度の頻度分布を検出して検出結果を出力する頻度分布検出手段と、
前記所定範囲を前記各ピラーから左右のドアミラーに向かう方向の近傍で前記各ピラーに接する第1領域と該第1領域よりも左右の外側方向の第2領域とに区分し、前記頻度分布検出手段から出力された前記頻度分布の検出結果を前記第1領域及び前記第2領域毎に記憶する記憶手段と、
前記記憶手段に記憶された前記頻度分布の検出結果から、前記第1領域及び前記第2領域毎に前記頻度分布が最大となる前記顔向き角度を検出して検出結果を出力する最大頻度検出手段と、
前記最大頻度検出手段から出力された前記顔向き角度の前記検出結果から、前記第1領域にて前記頻度分布が最大となる前記顔向き角度と前記第2領域にて前記頻度分布が最大となる前記顔向き角度との略中間の角度を検出して検出結果を出力する中間角度検出手段とを備え、
前記注視対象判定手段は、前記顔向き検知手段から出力された前記顔向き角度の検知結果において、前記顔向き角度が前記各ピラーに対応する角度と前記略中間の角度との間の角度範囲に存在する場合には、前記注視対象がドアミラーであると判定することを特徴とする注視判定装置。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2009274457A JP5042296B2 (ja) | 2009-12-02 | 2009-12-02 | 注視判定装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2009274457A JP5042296B2 (ja) | 2009-12-02 | 2009-12-02 | 注視判定装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2011116210A JP2011116210A (ja) | 2011-06-16 |
JP5042296B2 true JP5042296B2 (ja) | 2012-10-03 |
Family
ID=44282079
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2009274457A Expired - Fee Related JP5042296B2 (ja) | 2009-12-02 | 2009-12-02 | 注視判定装置 |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP5042296B2 (ja) |
Families Citing this family (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP5808974B2 (ja) * | 2011-07-29 | 2015-11-10 | セコム株式会社 | 顔画像認証装置 |
JP5367037B2 (ja) * | 2011-09-26 | 2013-12-11 | 本田技研工業株式会社 | 顔向き検出装置 |
CN103843047A (zh) * | 2011-10-06 | 2014-06-04 | 本田技研工业株式会社 | 警报装置 |
JP6187155B2 (ja) * | 2013-10-28 | 2017-08-30 | 株式会社デンソーアイティーラボラトリ | 注視対象物推定装置 |
JP7276083B2 (ja) * | 2019-11-11 | 2023-05-18 | マツダ株式会社 | 運転者状態推定装置 |
Family Cites Families (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP3785669B2 (ja) * | 1996-03-05 | 2006-06-14 | 日産自動車株式会社 | 視線方向計測装置 |
JP4385392B2 (ja) * | 2000-06-15 | 2009-12-16 | マツダ株式会社 | 車両用情報提供装置 |
JP4266774B2 (ja) * | 2003-10-29 | 2009-05-20 | シャープ株式会社 | 立体画像表示装置及び立体画像表示方法 |
JP2007225282A (ja) * | 2004-03-31 | 2007-09-06 | Pioneer Electronic Corp | 情報提示装置、情報提示プログラム及び情報提示方法等 |
JP2007069756A (ja) * | 2005-09-07 | 2007-03-22 | Toyota Motor Corp | 車両用入力操作規制装置 |
JP2008013070A (ja) * | 2006-07-06 | 2008-01-24 | Toyota Motor Corp | 車両用表示装置 |
JP4911453B2 (ja) * | 2006-08-03 | 2012-04-04 | トヨタ自動車株式会社 | 運転支援装置 |
JP2008162550A (ja) * | 2007-01-04 | 2008-07-17 | Toyota Motor Corp | 外部環境表示装置 |
-
2009
- 2009-12-02 JP JP2009274457A patent/JP5042296B2/ja not_active Expired - Fee Related
Also Published As
Publication number | Publication date |
---|---|
JP2011116210A (ja) | 2011-06-16 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP3979330B2 (ja) | 車両用画像表示装置 | |
JP5042296B2 (ja) | 注視判定装置 | |
WO2018150485A1 (ja) | 運転状態判定装置および運転状態判定方法 | |
JP5092776B2 (ja) | 視線方向検出装置及び視線方向検出方法 | |
JP5093611B2 (ja) | 車両周辺確認装置 | |
KR102091101B1 (ko) | 화상 표시 장치 | |
US20180335633A1 (en) | Viewing direction detector and viewing direction detection system | |
WO2015079657A1 (ja) | 視認領域推定装置 | |
CN111114434B (zh) | 视觉辅助成像方法、车载视觉辅助***及存储设备 | |
JP2016168877A (ja) | 車両用視認装置 | |
JP2011234095A (ja) | 車両用視認支援装置 | |
CN108482252A (zh) | 一种显示a柱盲区障碍视角图像的***、方法及车辆 | |
JP2006044596A (ja) | 車両用表示装置 | |
WO2019187283A1 (ja) | 画像処理装置、画像表示システムおよび画像処理方法 | |
US11198392B2 (en) | Vehicle monitoring device | |
JP4501708B2 (ja) | 運転者の顔向き判定装置 | |
WO2018154857A1 (ja) | 車両用表示制御装置、車両用表示制御システム、車両用表示制御方法およびプログラム | |
KR20160034681A (ko) | 차량의 주변 감시 장치 및 방법 | |
JP5150610B2 (ja) | 注視判定装置 | |
KR102010407B1 (ko) | 스마트 리어뷰 시스템 | |
JP2018162030A (ja) | 車両用表示装置 | |
KR20150073676A (ko) | 차량용 왜곡 보정 장치 및 방법 | |
CN115050089A (zh) | 校正装置、校正方法、行车记录仪、车辆以及存储介质 | |
JP2017061216A (ja) | 車載撮像システム、車両および撮像方法 | |
JP2018131089A (ja) | 画像表示装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20120612 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20120614 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20120710 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 5042296 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20150720 Year of fee payment: 3 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
LAPS | Cancellation because of no payment of annual fees |