JP2014186505A5 - - Google Patents

Download PDF

Info

Publication number
JP2014186505A5
JP2014186505A5 JP2013060585A JP2013060585A JP2014186505A5 JP 2014186505 A5 JP2014186505 A5 JP 2014186505A5 JP 2013060585 A JP2013060585 A JP 2013060585A JP 2013060585 A JP2013060585 A JP 2013060585A JP 2014186505 A5 JP2014186505 A5 JP 2014186505A5
Authority
JP
Japan
Prior art keywords
line
eye
sight
setting
face image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2013060585A
Other languages
English (en)
Other versions
JP6157165B2 (ja
JP2014186505A (ja
Filing date
Publication date
Application filed filed Critical
Priority to JP2013060585A priority Critical patent/JP6157165B2/ja
Priority claimed from JP2013060585A external-priority patent/JP6157165B2/ja
Priority to CN201410103773.2A priority patent/CN104063709B/zh
Priority to US14/221,804 priority patent/US9426375B2/en
Priority to EP14161033.7A priority patent/EP2782047A3/en
Publication of JP2014186505A publication Critical patent/JP2014186505A/ja
Publication of JP2014186505A5 publication Critical patent/JP2014186505A5/ja
Application granted granted Critical
Publication of JP6157165B2 publication Critical patent/JP6157165B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Description

本発明の視線検出装置は、顔画像を取得する取得手段と、前記取得手段によって取得された顔画像に対して目領域を設定する領域設定手段と、前記領域設定手段によって設定された目領域について、目の色の種別を判定する判定手段と、前記目の色の種別に基づいて、前記目領域に係る補正パラメータを設定するパラメータ設定手段と、前記補正パラメータに基づいて前記目領域の輝度が補正された輝度画像を生成する生成手段と、前記生成手段によって生成された輝度画像の目領域から、前記顔画像に係る顔の視線を検出する視線検出手段と、を有することを特徴とする。

Claims (13)

  1. 顔画像を取得する取得手段と、
    前記取得手段によって取得された顔画像に対して目領域を設定する領域設定手段と、
    前記領域設定手段によって設定された目領域について、目の色の種別を判定する判定手段と、
    前記目の色の種別に基づいて、前記目領域に係る補正パラメータを設定するパラメータ設定手段と、
    前記補正パラメータに基づいて前記目領域の輝度が補正された輝度画像を生成する生成手段と、
    前記生成手段によって生成された輝度画像の目領域から、前記顔画像に係る顔の視線を検出する視線検出手段と、
    を有することを特徴とする視線検出装置。
  2. 前記補正パラメータは、輝度補正に関する補正係数であり、前記生成手段は、前記補正係数に基づいて前記目領域を輝度補正することにより前記輝度画像を生成することを特徴とする請求項1に記載の視線検出装置。
  3. 前記補正パラメータは、カラー画像から輝度画像への変換係数であり、前記生成手段は、前記変換係数に基づいて前記目領域の輝度画像を生成することを特徴とする請求項1に記載の視線検出装置。
  4. 顔画像を取得する取得手段と、
    前記取得手段によって取得された顔画像に対して目領域を設定する領域設定手段と、
    前記領域設定手段によって設定された目領域について、目の色の種別を判定する判定手段と、
    複数の視線検出器の中から前記目の色の種別に対応する1つの視線検出器を選択する選択手段と、
    前記選択手段によって選択された視線検出器を用いて前記目領域から前記顔画像に係る顔の視線を検出する視線検出手段と、
    を有することを特徴とする視線検出装置。
  5. 前記判定手段は、前記目領域の平均輝度値または輝度値の総和を算出することによって目の種別を判定することを特徴とする請求項1〜4の何れか1項に記載の視線検出装置。
  6. 前記判定手段は、輝度値、もしくはカラーに関するヒストグラムを使用して目の種別を判定することを特徴とする請求項1〜5の何れか1項に記載の視線検出装置。
  7. 前記視線検出手段は、前記目領域から特徴を抽出することにより、前記顔が所定の方向を向いていることに関する尤度、もしくは、所定の軸を基準とした角度を算出することを特徴とする請求項1〜6の何れか1項に記載の視線検出装置。
  8. 請求項1〜7の何れか1項に記載の視線検出装置と、
    前記取得手段が取得すべき顔画像を含む被写体を撮像する撮像手段と、
    前記視線検出手段によって顔の視線が検出された顔画像を記録媒体に記録する記録手段と、
    を有することを特徴とする撮像装置。
  9. 前記視線検出手段によって検出された視線が撮影条件を満たすか否かを判断する判断手段と、
    前記判断手段により前記撮影条件を満たさないと判断された場合に、前記記録手段による前記顔画像の記録を抑止する制御手段と、
    を有することを特徴とする請求項8に記載の撮像装置。
  10. 顔画像を取得する取得工程と、
    前記取得工程において取得された顔画像に対して目領域を設定する領域設定工程と、
    前記領域設定工程において設定された目領域について、目の色の種別を判定する判定工程と、
    前記目の色の種別に基づいて、前記目領域に係る補正パラメータを設定するパラメータ設定工程と、
    前記補正パラメータに基づいて前記目領域の輝度が補正された輝度画像を生成する生成工程と、
    前記生成工程において生成された輝度画像の目領域から、前記顔画像に係る顔の視線を検出する視線検出工程と、
    を有することを特徴とする視線検出方法。
  11. 顔画像を取得する取得工程と、
    前記取得工程において取得された顔画像に対して目領域を設定する領域設定工程と、
    前記領域設定工程において設定された目領域について、目の色の種別を判定する判定工程と、
    複数の視線検出器の中から前記目の色の種別に対応する1つの視線検出器を選択する選択工程と、
    前記選択工程において選択された視線検出器を用いて前記目領域から前記顔画像に係る顔の視線を検出する視線検出工程と、
    を有することを特徴とする視線検出方法。
  12. 画像を取得する取得工程と、
    前記取得工程において取得された顔画像に対して目領域を設定する領域設定工程と、
    前記領域設定工程において設定された目領域について、目の色の種別を判定する判定工程と、
    前記目の色の種別に基づいて、前記目領域に係る補正パラメータを設定するパラメータ設定工程と、
    前記補正パラメータに基づいて前記目領域の輝度が補正された輝度画像を生成する生成工程と、
    前記生成工程において生成された輝度画像の目領域から、前記顔画像に係る顔の視線を検出する視線検出工程と、
    をコンピュータに実行させることを特徴とするプログラム
  13. 画像を取得する取得工程と、
    前記取得工程において取得された顔画像に対して目領域を設定する領域設定工程と、
    前記領域設定工程において設定された目領域について、目の色の種別を判定する判定工程と、
    複数の視線検出器の中から前記目の色の種別に対応する1つの視線検出器を選択する選択工程と、
    前記選択工程において選択された視線検出器を用いて前記目領域から前記顔画像に係る顔の視線を検出する視線検出工程と、
    をコンピュータに実行させることを特徴とするプログラム
JP2013060585A 2013-03-22 2013-03-22 視線検出装置及び撮像装置 Active JP6157165B2 (ja)

Priority Applications (4)

Application Number Priority Date Filing Date Title
JP2013060585A JP6157165B2 (ja) 2013-03-22 2013-03-22 視線検出装置及び撮像装置
CN201410103773.2A CN104063709B (zh) 2013-03-22 2014-03-19 视线检测装置及方法、图像捕获装置及其控制方法
US14/221,804 US9426375B2 (en) 2013-03-22 2014-03-21 Line-of-sight detection apparatus and image capturing apparatus
EP14161033.7A EP2782047A3 (en) 2013-03-22 2014-03-21 Line-of-sight detection apparatus and image capturing apparatus

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2013060585A JP6157165B2 (ja) 2013-03-22 2013-03-22 視線検出装置及び撮像装置

Publications (3)

Publication Number Publication Date
JP2014186505A JP2014186505A (ja) 2014-10-02
JP2014186505A5 true JP2014186505A5 (ja) 2016-05-19
JP6157165B2 JP6157165B2 (ja) 2017-07-05

Family

ID=50478684

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2013060585A Active JP6157165B2 (ja) 2013-03-22 2013-03-22 視線検出装置及び撮像装置

Country Status (4)

Country Link
US (1) US9426375B2 (ja)
EP (1) EP2782047A3 (ja)
JP (1) JP6157165B2 (ja)
CN (1) CN104063709B (ja)

Families Citing this family (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2015090569A (ja) * 2013-11-06 2015-05-11 ソニー株式会社 情報処理装置及び情報処理方法
KR102469507B1 (ko) 2014-12-17 2022-11-22 소니그룹주식회사 정보 처리 장치, 정보 처리 방법 및 프로그램
RU2596062C1 (ru) * 2015-03-20 2016-08-27 Автономная Некоммерческая Образовательная Организация Высшего Профессионального Образования "Сколковский Институт Науки И Технологий" Способ коррекции изображения глаз с использованием машинного обучения и способ машинного обучения
JP7091627B2 (ja) * 2016-12-05 2022-06-28 株式会社ニデック 眼科装置
CN107403148B (zh) * 2017-07-14 2020-07-07 Oppo广东移动通信有限公司 虹膜识别方法及相关产品
JP6946831B2 (ja) * 2017-08-01 2021-10-13 オムロン株式会社 人物の視線方向を推定するための情報処理装置及び推定方法、並びに学習装置及び学習方法
CN111712852B (zh) * 2018-02-19 2023-08-11 三菱电机株式会社 乘客状态检测装置、***和方法
JP7103443B2 (ja) * 2021-01-05 2022-07-20 日本電気株式会社 情報処理装置、情報処理方法、およびプログラム

Family Cites Families (20)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0694982A (ja) * 1992-09-14 1994-04-08 Nikon Corp 視線検出アダプター
JP2005253778A (ja) * 2004-03-12 2005-09-22 Gen Tec:Kk 視線検出方法及び同装置
JP2006095008A (ja) * 2004-09-29 2006-04-13 Gen Tec:Kk 視線検出方法
JP2007265367A (ja) * 2006-03-30 2007-10-11 Fujifilm Corp 視線検出方法および装置ならびにプログラム
JP4396720B2 (ja) * 2007-03-26 2010-01-13 ソニー株式会社 画像処理装置、画像処理方法、およびプログラム
JP2009059257A (ja) 2007-09-03 2009-03-19 Sony Corp 情報処理装置、および情報処理方法、並びにコンピュータ・プログラム
CN101677762B (zh) * 2008-02-28 2012-08-22 松下电器产业株式会社 视线检测装置以及视线检测方法
JP5061968B2 (ja) * 2008-03-07 2012-10-31 富士通株式会社 色温度設定装置、色温度設定プログラム、および色温度設定方法
JP5230748B2 (ja) * 2008-09-26 2013-07-10 パナソニック株式会社 視線方向判定装置及び視線方向判定方法
JP2010197656A (ja) * 2009-02-25 2010-09-09 Hitachi Ltd 映像表示装置
JP5474202B2 (ja) * 2009-09-29 2014-04-16 アルカテル−ルーセント 顔検出および画像測定に基づいて注視点を検出する方法および装置
JP5661043B2 (ja) * 2010-06-17 2015-01-28 パナソニック インテレクチュアル プロパティ コーポレーション オブアメリカPanasonic Intellectual Property Corporation of America 外光映り込み判定装置、視線検出装置及び外光映り込み判定方法
JP5529660B2 (ja) * 2010-07-20 2014-06-25 パナソニック株式会社 瞳孔検出装置及び瞳孔検出方法
JP5618686B2 (ja) * 2010-08-03 2014-11-05 キヤノン株式会社 視線検出装置、視線検出方法及びプログラム
JP2012038106A (ja) * 2010-08-06 2012-02-23 Canon Inc 情報処理装置、情報処理方法、およびプログラム
JP2012198781A (ja) * 2011-03-22 2012-10-18 Sony Corp 情報処理装置、情報処理方法およびプログラム
JP5719223B2 (ja) * 2011-04-25 2015-05-13 オリンパスイメージング株式会社 画像記録装置、記録方法およびプログラム
JP5285748B2 (ja) * 2011-07-08 2013-09-11 富士フイルム株式会社 オブジェクト検出装置、方法およびプログラム
US8885882B1 (en) * 2011-07-14 2014-11-11 The Research Foundation For The State University Of New York Real time eye tracking for human computer interaction
US9148537B1 (en) * 2012-05-18 2015-09-29 hopTo Inc. Facial cues as commands

Similar Documents

Publication Publication Date Title
JP2014186505A5 (ja)
JP2013219615A5 (ja)
JP2015228546A5 (ja) 撮像装置、その制御方法、および制御プログラム
JP2009171318A5 (ja)
JP2013206322A5 (ja)
JP2014188222A5 (ja)
JP2014145725A5 (ja)
JP2015005799A5 (ja)
JP2015056142A5 (ja)
JP2014123914A5 (ja)
JP2015152888A5 (ja) 画像処理装置およびその制御方法
JP2013214878A5 (ja)
JP2010010938A5 (ja)
JP2016129289A5 (ja)
JP2014140154A5 (ja)
JP2010183190A5 (ja)
JP2014171236A5 (ja)
JP2016197179A5 (ja)
JP2011188318A5 (ja)
JP2013219675A5 (ja)
JP2015046019A5 (ja)
JP2015037204A5 (ja)
JP2013186635A5 (ja)
JP2014121079A5 (ja)
JP2013062689A5 (ja) 画像処理装置、その制御方法、及びプログラム