JP6835223B2 - 顔認証装置、顔認証方法およびプログラム - Google Patents
顔認証装置、顔認証方法およびプログラム Download PDFInfo
- Publication number
- JP6835223B2 JP6835223B2 JP2019526808A JP2019526808A JP6835223B2 JP 6835223 B2 JP6835223 B2 JP 6835223B2 JP 2019526808 A JP2019526808 A JP 2019526808A JP 2019526808 A JP2019526808 A JP 2019526808A JP 6835223 B2 JP6835223 B2 JP 6835223B2
- Authority
- JP
- Japan
- Prior art keywords
- face
- feature point
- reliability
- image
- detected
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
- G06V40/168—Feature extraction; Face representation
- G06V40/171—Local features and components; Facial parts ; Occluding parts, e.g. glasses; Geometrical relationships
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/70—Determining position or orientation of objects or cameras
- G06T7/73—Determining position or orientation of objects or cameras using feature-based methods
- G06T7/74—Determining position or orientation of objects or cameras using feature-based methods involving reference images or patches
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/70—Arrangements for image or video recognition or understanding using pattern recognition or machine learning
- G06V10/74—Image or video pattern matching; Proximity measures in feature spaces
- G06V10/75—Organisation of the matching processes, e.g. simultaneous or sequential comparisons of image or video features; Coarse-fine approaches, e.g. multi-scale approaches; using context analysis; Selection of dictionaries
- G06V10/758—Involving statistics of pixels or of feature values, e.g. histogram matching
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
- G06V40/168—Feature extraction; Face representation
- G06V40/169—Holistic features and representations, i.e. based on the facial image taken as a whole
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
- G06V40/172—Classification, e.g. identification
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30196—Human being; Person
- G06T2207/30201—Face
Landscapes
- Engineering & Computer Science (AREA)
- Health & Medical Sciences (AREA)
- Theoretical Computer Science (AREA)
- Oral & Maxillofacial Surgery (AREA)
- General Health & Medical Sciences (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Multimedia (AREA)
- Human Computer Interaction (AREA)
- Artificial Intelligence (AREA)
- Computing Systems (AREA)
- Databases & Information Systems (AREA)
- Evolutionary Computation (AREA)
- Medical Informatics (AREA)
- Software Systems (AREA)
- Collating Specific Patterns (AREA)
- Image Analysis (AREA)
Description
特許文献1には、対象となるユーザの顔の向きを検出し、その顔の向きに応じた顔認識を実行して個人認証を行う個人認証装置が開示されている。
図1は、本発明の第1の実施形態に係る顔認証装置100の構成を示すブロック図である。図1に示すように、顔認証装置100は、検出部110、信頼度算出部120および選択部130を備える。
図2は、本発明の第2の実施形態に係る顔認証装置200の構成を示すブロック図である。図2に示すように、顔認証装置200は、入力部210、選択部230、認証部250および出力部270を備える。
顔特徴点は、顔の器官や骨格などの情報に基づいて定義される。例えば、口角や瞳中心などが、検出対象の顔特徴点として利用される。顔特徴点候補検出部231は、検出対象の顔特徴点のそれぞれについて、異なる複数の顔特徴点検出手法を用いて、複数の顔特徴点候補を検出する。
以上の手順で、顔認証に適した顔画像が選択される。
ここで、
m=(1/3)*(x1+x2+x3)
n=(1/3)*(y1+y2+y3)
である。なお、式(1)および以降の式において、「/」は除算、「*」は乗算、「^」は累乗を、それぞれ示す。
u=(1/5)*(v1+v2+v3+v4+v5)・・・(2)
続いて、信頼度算出部232は、以下の式(3)により、平均分散uの負の指数関数を求めることで、信頼度sを算出する。
s=exp(−u)・・・(3)
信頼度sは、0以上1以下の値をとる。
図8を参照して、認証部250による処理について説明する。
m=(1/3)*(x1+x2+x3)
n=(1/3)*(y1+y2+y3)
を、それぞれ、統合顔特徴点のx座標値およびy座標値として算出する。
f=<t1・t2>/(<t1・t1>×<t2・t2>)^(1/2)・・・(4)
ただし、<t1・t2>はt1とt2の内積を表す。
入出力インタフェース510は、データの入出力を行う。バス511は、各構成要素を接続する。
110 検出部
120 信頼度算出部
130 選択部
200 顔認証装置
210 入力部
230 選択部
231 顔特徴点候補検出部
232 信頼度算出部
233 顔画像選択部
250 認証部
251 統合顔特徴点算出部
252 正規化部
253 照合部
254 テンプレート記憶部
270 出力部
500 コンピュータ装置
501 プロセッサ
502 ROM
503 RAM
504 プログラム
505 記憶装置
506 記録媒体
507 ドライブ装置
508 通信インタフェース
509 ネットワーク
510 入出力インタフェース
511 バス
Claims (7)
- 対象の顔を含む複数の顔画像のそれぞれから、前記対象の顔の少なくとも1の顔特徴点について、複数の異なる手法を用いて、複数の顔特徴点候補を検出する検出手段と、
前記検出された複数の顔特徴点候補に基づいて得られる統計情報から、それぞれの顔画像の信頼度を算出する信頼度算出手段と、
前記算出された信頼度に基づいて、前記複数の顔画像のうち、前記対象の顔の認証に用いる顔画像を選択する選択手段と
を備えた顔認証装置。 - 前記選択手段により選択された顔画像において、前記検出された複数の顔特徴点候補に基づいて、前記対象の顔の認証に利用する統合顔特徴点を算出する統合顔特徴点算出手段 をさらに備えた請求項1記載の顔認証装置。
- 前記信頼度算出手段は、前記複数の顔特徴点候補の各位置の分散または標準偏差から、それぞれの前記顔画像の前記信頼度を算出する
請求項1または請求項2記載の顔認証装置。 - 前記信頼度算出手段は、前記検出手段により2以上の顔特徴点について、それぞれ複数の顔特徴点候補が検出された場合、前記顔特徴点ごとの前記複数の顔特徴点候補の各位置の分散の平均から、それぞれの前記顔画像の前記信頼度を算出する
請求項3記載の顔認証装置。 - 前記複数の顔画像は、動画像を構成する連続した顔画像である
請求項1乃至請求項4のうちいずれか1項記載の顔認証装置。 - 対象の顔を含む複数の顔画像のそれぞれから、前記対象の顔の少なくとも1の顔特徴点について、複数の異なる手法を用いて、複数の顔特徴点候補を検出し、
前記検出された複数の顔特徴点候補に基づいて得られる統計情報から、それぞれの顔画像の信頼度を算出し、
前記算出された信頼度に基づいて、前記複数の顔画像のうち、前記対象の顔の認証に用いる顔画像を選択する
顔認証方法。 - 対象の顔を含む複数の顔画像のそれぞれから、前記対象の顔の少なくとも1の顔特徴点について、複数の異なる手法を用いて、複数の顔特徴点候補を検出する処理と、
前記検出された複数の顔特徴点候補に基づいて得られる統計情報から、それぞれの顔画像の信頼度を算出する処理と、
前記算出された信頼度に基づいて、前記複数の顔画像のうち、前記対象の顔の認証に用いる顔画像を選択する処理と
を、コンピュータに実行させるプログラム。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2017124335 | 2017-06-26 | ||
JP2017124335 | 2017-06-26 | ||
PCT/JP2018/023066 WO2019003973A1 (ja) | 2017-06-26 | 2018-06-18 | 顔認証装置、顔認証方法およびプログラム記録媒体 |
Related Child Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2021014435A Division JP7230939B2 (ja) | 2017-06-26 | 2021-02-01 | 情報処理装置、情報処理方法および情報処理プログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JPWO2019003973A1 JPWO2019003973A1 (ja) | 2020-03-26 |
JP6835223B2 true JP6835223B2 (ja) | 2021-02-24 |
Family
ID=64741539
Family Applications (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2019526808A Active JP6835223B2 (ja) | 2017-06-26 | 2018-06-18 | 顔認証装置、顔認証方法およびプログラム |
JP2021014435A Active JP7230939B2 (ja) | 2017-06-26 | 2021-02-01 | 情報処理装置、情報処理方法および情報処理プログラム |
Family Applications After (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2021014435A Active JP7230939B2 (ja) | 2017-06-26 | 2021-02-01 | 情報処理装置、情報処理方法および情報処理プログラム |
Country Status (3)
Country | Link |
---|---|
US (5) | US11210498B2 (ja) |
JP (2) | JP6835223B2 (ja) |
WO (1) | WO2019003973A1 (ja) |
Families Citing this family (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2018033137A1 (zh) * | 2016-08-19 | 2018-02-22 | 北京市商汤科技开发有限公司 | 在视频图像中展示业务对象的方法、装置和电子设备 |
CN111353434A (zh) * | 2020-02-28 | 2020-06-30 | 北京市商汤科技开发有限公司 | 信息识别方法及装置、***、电子设备和存储介质 |
JP6817527B1 (ja) * | 2020-04-06 | 2021-01-20 | 富士通クライアントコンピューティング株式会社 | 情報処理装置、プログラムおよび情報処理システム |
CN111709288B (zh) * | 2020-05-15 | 2022-03-01 | 北京百度网讯科技有限公司 | 人脸关键点检测方法、装置以及电子设备 |
JP7272510B2 (ja) * | 2020-09-23 | 2023-05-12 | 日本電気株式会社 | 照合装置、照合方法、プログラム |
WO2022130616A1 (ja) | 2020-12-18 | 2022-06-23 | 富士通株式会社 | 認証方法、情報処理装置、及び認証プログラム |
US11967138B2 (en) | 2021-03-03 | 2024-04-23 | Nec Corporation | Processing apparatus, information processing method and recording medium |
CN113705455B (zh) * | 2021-08-30 | 2024-03-19 | 平安银行股份有限公司 | 身份核查方法、装置、电子设备及可读存储介质 |
Family Cites Families (18)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP4675492B2 (ja) | 2001-03-22 | 2011-04-20 | 本田技研工業株式会社 | 顔画像を使用した個人認証装置 |
JP4539494B2 (ja) * | 2005-08-23 | 2010-09-08 | コニカミノルタホールディングス株式会社 | 認証装置、認証方法及びプログラム |
TW200710018A (en) | 2005-08-30 | 2007-03-16 | Hitachi Maxell | Microlens array substrate and method of manufacturing microlens array substrate |
JP4795864B2 (ja) * | 2006-06-21 | 2011-10-19 | 富士フイルム株式会社 | 特徴点検出装置および方法並びにプログラム |
CN102150180A (zh) | 2008-10-14 | 2011-08-10 | 松下电器产业株式会社 | 人脸识别装置及人脸识别方法 |
JP5709410B2 (ja) * | 2009-06-16 | 2015-04-30 | キヤノン株式会社 | パターン処理装置及びその方法、プログラム |
JP5424819B2 (ja) * | 2009-11-04 | 2014-02-26 | キヤノン株式会社 | 画像処理装置、画像処理方法 |
EP2579210A4 (en) | 2010-05-26 | 2018-01-17 | Nec Corporation | Face feature-point position correction device, face feature-point position correction method, and face feature-point position correction program |
JP5560976B2 (ja) * | 2010-07-09 | 2014-07-30 | オムロン株式会社 | 情報処理装置および方法、並びにプログラム |
KR101381439B1 (ko) * | 2011-09-15 | 2014-04-04 | 가부시끼가이샤 도시바 | 얼굴 인식 장치 및 얼굴 인식 방법 |
KR101175597B1 (ko) * | 2011-09-27 | 2012-08-21 | (주)올라웍스 | 아다부스트 학습 알고리즘을 이용하여 얼굴 특징점 위치를 검출하기 위한 방법, 장치, 및 컴퓨터 판독 가능한 기록 매체 |
JP6071002B2 (ja) * | 2012-02-16 | 2017-02-01 | 日本電気株式会社 | 信頼度取得装置、信頼度取得方法および信頼度取得プログラム |
JP6026119B2 (ja) * | 2012-03-19 | 2016-11-16 | 株式会社東芝 | 生体情報処理装置 |
JP6287047B2 (ja) * | 2013-10-22 | 2018-03-07 | 富士通株式会社 | 画像処理装置、画像処理方法および画像処理プログラム |
JP6318775B2 (ja) * | 2014-03-31 | 2018-05-09 | オムロン株式会社 | 障害物判定装置、およびプログラム |
JP6431346B2 (ja) | 2014-11-26 | 2018-11-28 | アルパイン株式会社 | 顔認識装置 |
JP6526527B2 (ja) * | 2015-09-09 | 2019-06-05 | 株式会社東芝 | 識別装置及び認証システム |
WO2017064838A1 (ja) * | 2015-10-14 | 2017-04-20 | パナソニックIpマネジメント株式会社 | 顔検出装置およびこれを備えた顔検出システムならびに顔検出方法 |
-
2018
- 2018-06-18 US US16/623,478 patent/US11210498B2/en active Active
- 2018-06-18 WO PCT/JP2018/023066 patent/WO2019003973A1/ja active Application Filing
- 2018-06-18 JP JP2019526808A patent/JP6835223B2/ja active Active
-
2021
- 2021-02-01 JP JP2021014435A patent/JP7230939B2/ja active Active
- 2021-11-18 US US17/529,479 patent/US11915518B2/en active Active
-
2023
- 2023-07-17 US US18/222,715 patent/US20230360432A1/en active Pending
- 2023-07-18 US US18/223,450 patent/US20230360435A1/en active Pending
- 2023-07-18 US US18/223,357 patent/US20230360434A1/en active Pending
Also Published As
Publication number | Publication date |
---|---|
US11915518B2 (en) | 2024-02-27 |
JPWO2019003973A1 (ja) | 2020-03-26 |
US11210498B2 (en) | 2021-12-28 |
US20220075993A1 (en) | 2022-03-10 |
JP2021064424A (ja) | 2021-04-22 |
WO2019003973A1 (ja) | 2019-01-03 |
US20230360435A1 (en) | 2023-11-09 |
US20230360434A1 (en) | 2023-11-09 |
US20230360432A1 (en) | 2023-11-09 |
US20200184198A1 (en) | 2020-06-11 |
JP7230939B2 (ja) | 2023-03-01 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6835223B2 (ja) | 顔認証装置、顔認証方法およびプログラム | |
JP7365445B2 (ja) | コンピューティング装置及び方法 | |
CN106096582B (zh) | 区分真人面部与平坦表面 | |
Sukno et al. | 3-D facial landmark localization with asymmetry patterns and shape regression from incomplete local features | |
JP4372051B2 (ja) | 手形状認識装置及びその方法 | |
US9213897B2 (en) | Image processing device and method | |
US10496874B2 (en) | Facial detection device, facial detection system provided with same, and facial detection method | |
US20200364444A1 (en) | Information processing apparatus and method of authentication | |
JP6648639B2 (ja) | 生体情報処理装置、生体情報処理方法および生体情報処理プログラム | |
JPWO2010137157A1 (ja) | 画像処理装置、方法、プログラム | |
JP6784261B2 (ja) | 情報処理装置、画像処理システム、画像処理方法及びプログラム | |
WO2018078857A1 (ja) | 視線推定装置、視線推定方法及びプログラム記録媒体 | |
US11462052B2 (en) | Image processing device, image processing method, and recording medium | |
JP2007025900A (ja) | 画像処理装置、画像処理方法 | |
CN110826495A (zh) | 基于面部朝向的身体左右肢体一致性跟踪判别方法及*** | |
US11380132B2 (en) | Face image processing apparatus and face image processing method | |
JP7270304B2 (ja) | ユーザのバイオメトリック特性を有する画像中の物体を識別することにより当該ユーザのidを検証するための方法、及び当該方法を実施するためのモバイル装置 | |
JP6671133B2 (ja) | 画像照合装置及び画像照合方法 | |
JP5688514B2 (ja) | 視線計測システム、方法およびプログラム | |
US20210383098A1 (en) | Feature point extraction device, feature point extraction method, and program storage medium | |
JP3811474B2 (ja) | 顔部品位置検出方法及び顔部品位置検出装置 | |
WO2019155570A1 (ja) | 視線推定装置、視線推定方法、および記録媒体 | |
WO2023152983A1 (ja) | 人物相関判定装置、人物相関判定方法および人物相関判定プログラム | |
JP7103443B2 (ja) | 情報処理装置、情報処理方法、およびプログラム | |
US20220138458A1 (en) | Estimation device, estimation system, estimation method and program |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20191121 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20191121 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20210105 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20210118 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6835223 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |