JP2023521118A - 照明源を含むデバイスを使用する生体性検出 - Google Patents
照明源を含むデバイスを使用する生体性検出 Download PDFInfo
- Publication number
- JP2023521118A JP2023521118A JP2022561401A JP2022561401A JP2023521118A JP 2023521118 A JP2023521118 A JP 2023521118A JP 2022561401 A JP2022561401 A JP 2022561401A JP 2022561401 A JP2022561401 A JP 2022561401A JP 2023521118 A JP2023521118 A JP 2023521118A
- Authority
- JP
- Japan
- Prior art keywords
- image
- images
- neural network
- body part
- illumination source
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000005286 illumination Methods 0.000 title claims abstract description 47
- 238000001514 detection method Methods 0.000 title description 5
- 238000000034 method Methods 0.000 claims abstract description 86
- 238000013528 artificial neural network Methods 0.000 claims abstract description 81
- 238000004422 calculation algorithm Methods 0.000 claims abstract description 15
- 238000009826 distribution Methods 0.000 claims description 27
- 230000008569 process Effects 0.000 claims description 14
- 239000003086 colorant Substances 0.000 claims description 3
- 239000011159 matrix material Substances 0.000 description 75
- 238000007781 pre-processing Methods 0.000 description 7
- 230000006870 function Effects 0.000 description 6
- 230000003213 activating effect Effects 0.000 description 5
- 238000010586 diagram Methods 0.000 description 4
- 230000008901 benefit Effects 0.000 description 3
- 238000013527 convolutional neural network Methods 0.000 description 3
- 230000007613 environmental effect Effects 0.000 description 3
- 238000010606 normalization Methods 0.000 description 3
- 230000003287 optical effect Effects 0.000 description 3
- 230000002411 adverse Effects 0.000 description 2
- 230000003190 augmentative effect Effects 0.000 description 2
- 239000000284 extract Substances 0.000 description 2
- 238000000605 extraction Methods 0.000 description 2
- 230000009467 reduction Effects 0.000 description 2
- XUIMIQQOPSSXEZ-UHFFFAOYSA-N Silicon Chemical compound [Si] XUIMIQQOPSSXEZ-UHFFFAOYSA-N 0.000 description 1
- 210000003484 anatomy Anatomy 0.000 description 1
- 230000006399 behavior Effects 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 230000001427 coherent effect Effects 0.000 description 1
- 230000001419 dependent effect Effects 0.000 description 1
- 238000011156 evaluation Methods 0.000 description 1
- 230000003203 everyday effect Effects 0.000 description 1
- 238000002955 isolation Methods 0.000 description 1
- 230000007246 mechanism Effects 0.000 description 1
- 230000003278 mimic effect Effects 0.000 description 1
- 239000000203 mixture Substances 0.000 description 1
- 238000000926 separation method Methods 0.000 description 1
- 229910052710 silicon Inorganic materials 0.000 description 1
- 239000010703 silicon Substances 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/12—Fingerprints or palmprints
- G06V40/1382—Detecting the live character of the finger, i.e. distinguishing from a fake or cadaver finger
- G06V40/1388—Detecting the live character of the finger, i.e. distinguishing from a fake or cadaver finger using image processing
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/10—Image acquisition
- G06V10/12—Details of acquisition arrangements; Constructional details thereof
- G06V10/14—Optical characteristics of the device performing the acquisition or on the illumination arrangements
- G06V10/141—Control of illumination
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/40—Extraction of image or video features
- G06V10/50—Extraction of image or video features by performing operations within image blocks; by using histograms, e.g. histogram of oriented gradients [HoG]; by summing image-intensity values; Projection analysis
- G06V10/507—Summing image-intensity values; Histogram projection analysis
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/40—Extraction of image or video features
- G06V10/56—Extraction of image or video features relating to colour
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/40—Extraction of image or video features
- G06V10/60—Extraction of image or video features relating to illumination properties, e.g. using a reflectance or lighting model
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/70—Arrangements for image or video recognition or understanding using pattern recognition or machine learning
- G06V10/82—Arrangements for image or video recognition or understanding using pattern recognition or machine learning using neural networks
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/12—Fingerprints or palmprints
- G06V40/1382—Detecting the live character of the finger, i.e. distinguishing from a fake or cadaver finger
- G06V40/1394—Detecting the live character of the finger, i.e. distinguishing from a fake or cadaver finger using acquisition arrangements
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/40—Spoof detection, e.g. liveness detection
- G06V40/45—Detection of the body part being alive
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Multimedia (AREA)
- Human Computer Interaction (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Software Systems (AREA)
- Evolutionary Computation (AREA)
- Health & Medical Sciences (AREA)
- Artificial Intelligence (AREA)
- Computing Systems (AREA)
- Databases & Information Systems (AREA)
- General Health & Medical Sciences (AREA)
- Medical Informatics (AREA)
- Image Analysis (AREA)
- Collating Specific Patterns (AREA)
- Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)
Abstract
Description
Claims (13)
- ユーザを識別するためのコンピュータ実装方法であって、
前記方法は、作動されると可視光を発する照明源を有するコンピューティングデバイスを使用するものであり、
前記方法は、
バイオメトリック特徴を有する生体部分を含む可能性のあるシーンの2つの画像を取得する工程であって、第1の画像を前記照明源を作動させずに取得し、第2の画像を前記照明源が作動している状態で取得する工程と、
前記第1の画像及び前記第2の画像をニューラルネットワークに送る工程と、
前記第1の画像及び前記第2の画像を前記ニューラルネットワークによって処理する工程と、を含み、
前記処理する工程は、前記第1の画像と前記第2の画像とを比較し、これにより、前記第1の画像及び前記第2の画像が生体部分の画像であるか否かを判断する工程を含み、
前記方法は、
前記第1の画像及び前記第2の画像が生体部分の画像であると判断された場合、前記ユーザを識別するためのバイオメトリック特徴を見つけるために識別アルゴリズムを実行し、前記第1の画像及び前記第2の画像が生体部分の画像でないと判断された場合、前記識別アルゴリズムを実行しないことをさらに含む、方法。 - ユーザを識別するためのコンピュータ実装方法であって、
前記方法は、作動されると可視光を発する照明源を有するデバイスを使用するものであり、
前記方法は、
バイオメトリック特徴を有する生体部分を含む可能性のあるシーンの2つの画像を取得する工程であって、第1の画像を前記照明源を作動させずに取得し、第2の画像を前記照明源が作動している状態で取得する工程と、
前記第1の画像及び前記第2の画像から差分画像を取得する工程と、
前記差分画像をニューラルネットワークに送る工程と、
前記差分画像を前記ニューラルネットワークによって処理する工程と、を含み、
前記処理する工程は、
前記差分画像から輝度差分情報を決定する工程と、
前記輝度差分情報から、前記第1の画像及び前記第2の画像が生体部分の画像であるか否かを判断する工程と、
前記第1の画像及び前記第2の画像が生体部分の画像であると判断された場合、前記ユーザを識別するためのバイオメトリック特徴を見つけるために識別アルゴリズムを実行し、前記第1の画像及び前記第2の画像が生体部分の画像でないと判断された場合、前記識別アルゴリズムを実行しないことをさらに含む、方法。 - 前記第1の画像と前記第2の画像とを比較することが、前記画像のピクセル輝度分布に関して前記画像を比較することを含む、請求項1に記載の方法。
- 前記画像のピクセル輝度分布に関して前記画像を比較することが、
前記第1の画像のピクセルの赤、青及び緑の輝度中央値と、前記第2の画像のピクセルの赤、青及び緑の輝度中央値とを取得し、
前記第2の画像の前記輝度中央値が、所定の閾値だけ、前記第1の画像の前記ピクセルの前記輝度中央値を超える場合、前記画像が生体部分の画像であると判断することを含む、請求項3に記載の方法。 - 前記赤、青及び緑のピクセルの前記ピクセル輝度分布が、前記第1の画像と前記第2の画像について取得され、前記第1の画像の各色の取得された前記ピクセル輝度分布が、前記第2の画像の対応する色の取得された前記ピクセル輝度分布と比較される、請求項4に記載の方法。
- 前記画像を前記ニューラルネットワークによって処理する工程は、前記比較をする前に、前記ニューラルネットワークを使用して、体の一部を含む可能性が高い前記第1の画像及び/又は第2の画像の部分を特定し、前記部分に対応するピクセル情報を前記第1の画像及び前記第2の画像から抽出することを含み、
前記第1の画像と前記第2の画像とを比較することは、前記第1の画像及び前記第2の画像から抽出された前記部分に対応する前記ピクセル情報のみを比較することを含む、請求項1又は請求項3~5の何れか一項に記載の方法。 - 前記第1の画像及び前記第2の画像を取得する前に、照明チェック工程が実行され、
前記照明チェック工程は、現在の照明条件をチェックすることを含み、
前記方法は、前記現在の照明条件に対応する前記輝度が所定の閾値を超える場合、前記方法のさらなる工程は実行しないことをさらに含む、請求項1~6の何れか一項に記載の方法。 - 前記現在の照明条件に対応する前記輝度が所定の閾値を超える場合、前記現在の照明条件では前記識別を実行できない旨の情報を前記ユーザに提示する、請求項7に記載の方法。
- 前記方法の各工程は、モバイルコンピューティングデバイス上で実行され、
前記ニューラルネットワークが前記モバイルデバイスに完全にインストールされている、請求項1~8の何れか一項に記載の方法。 - 前記ニューラルネットワークは3つのサブネットワークを含み、
第1のサブネットワークが前記第1の画像を処理して前記第1の画像から第1の情報を抽出し、第2のサブネットワークが前記第2の画像を処理して前記第2の画像から第2の情報を抽出し、
第3のサブネットワークが、前記第1の画像及び前記第2の画像が生体部分の画像であるか否かを判断するために、前記第1の情報と前記第2の情報とを比較する、請求項1又は請求項1を引用する請求項3~9の何れか一項に記載の方法。 - 前記第1の画像及び前記第2の画像が生体部分の画像であるか否かを判断する工程は、前記第1の画像及び前記第2の画像が紙上の画像の画像であるか否か、及び/又は、前記第1の画像及び前記第2の画像がスクリーン上に提示された画像の画像であるか否か、及び/又は、前記第1の画像及び前記第2の画像が生体部分の三次元スプーフの画像であるか否か、及び/又は、前記第1の画像及び前記第2の画像が生体部分の画像であるか否かを決定することを含む、請求項1~10の何れか一項に記載の方法。
- 前記輝度差分は、前記差分画像を取得する際に、前記第1の画像と前記第2の画像の輝度値のピクセル単位の引き算から得られる、請求項2に記載の方法。
- 前記照明源は前記コンピューティングデバイスの明かりである、請求項1~12の何れか一項に記載の方法。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
EP20382290.3A EP3893147B1 (en) | 2020-04-09 | 2020-04-09 | Liveliness detection using a device comprising an illumination source |
EP20382290.3 | 2020-04-09 | ||
PCT/EP2021/059332 WO2021205016A1 (en) | 2020-04-09 | 2021-04-09 | Liveliness detection using a device comprising an illumination source |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2023521118A true JP2023521118A (ja) | 2023-05-23 |
JP7445335B2 JP7445335B2 (ja) | 2024-03-07 |
Family
ID=70391026
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2022561401A Active JP7445335B2 (ja) | 2020-04-09 | 2021-04-09 | 照明源を含むデバイスを使用する生体性検出 |
Country Status (10)
Country | Link |
---|---|
US (1) | US20230162534A1 (ja) |
EP (2) | EP3893147B1 (ja) |
JP (1) | JP7445335B2 (ja) |
KR (1) | KR20230004533A (ja) |
BR (1) | BR112022020413A2 (ja) |
CA (1) | CA3176955A1 (ja) |
ES (1) | ES2971682T3 (ja) |
MX (1) | MX2022012036A (ja) |
WO (1) | WO2021205016A1 (ja) |
ZA (1) | ZA202210744B (ja) |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2017138808A (ja) * | 2016-02-03 | 2017-08-10 | キヤノン株式会社 | 情報処理装置および情報処理方法 |
US20180173979A1 (en) * | 2015-06-29 | 2018-06-21 | Beijing Kuangshi Technology Co., Ltd. | Living body detection method, living body detection system, and computer program product |
WO2019163065A1 (ja) * | 2018-02-22 | 2019-08-29 | 日本電気株式会社 | なりすまし検知装置、なりすまし検知方法、及びコンピュータ読み取り可能な記録媒体 |
JP2019525358A (ja) * | 2016-08-24 | 2019-09-05 | アリババ・グループ・ホールディング・リミテッドAlibaba Group Holding Limited | ユーザ本人確認の方法、装置及びシステム |
Family Cites Families (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US10339362B2 (en) * | 2016-12-08 | 2019-07-02 | Veridium Ip Limited | Systems and methods for performing fingerprint based user authentication using imagery captured using mobile devices |
EP3552150A4 (en) * | 2016-12-08 | 2020-10-21 | Veridium IP Limited | SYSTEMS AND METHODS FOR PERFORMING FINGERPRINT-BASED USER AUTHENTICATION USING CAPTURED IMAGES USING MOBILE DEVICES |
EP3540635B1 (en) | 2018-03-16 | 2020-08-26 | Identy Inc. | Method for identifying an object within an image and mobile device for executing the method |
-
2020
- 2020-04-09 EP EP20382290.3A patent/EP3893147B1/en active Active
- 2020-04-09 EP EP23189541.8A patent/EP4246454A3/en active Pending
- 2020-04-09 ES ES20382290T patent/ES2971682T3/es active Active
-
2021
- 2021-04-09 JP JP2022561401A patent/JP7445335B2/ja active Active
- 2021-04-09 KR KR1020227036928A patent/KR20230004533A/ko unknown
- 2021-04-09 US US17/917,467 patent/US20230162534A1/en active Pending
- 2021-04-09 BR BR112022020413A patent/BR112022020413A2/pt unknown
- 2021-04-09 WO PCT/EP2021/059332 patent/WO2021205016A1/en active Application Filing
- 2021-04-09 MX MX2022012036A patent/MX2022012036A/es unknown
- 2021-04-09 CA CA3176955A patent/CA3176955A1/en active Pending
-
2022
- 2022-09-28 ZA ZA2022/10744A patent/ZA202210744B/en unknown
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20180173979A1 (en) * | 2015-06-29 | 2018-06-21 | Beijing Kuangshi Technology Co., Ltd. | Living body detection method, living body detection system, and computer program product |
JP2017138808A (ja) * | 2016-02-03 | 2017-08-10 | キヤノン株式会社 | 情報処理装置および情報処理方法 |
JP2019525358A (ja) * | 2016-08-24 | 2019-09-05 | アリババ・グループ・ホールディング・リミテッドAlibaba Group Holding Limited | ユーザ本人確認の方法、装置及びシステム |
WO2019163065A1 (ja) * | 2018-02-22 | 2019-08-29 | 日本電気株式会社 | なりすまし検知装置、なりすまし検知方法、及びコンピュータ読み取り可能な記録媒体 |
Non-Patent Citations (4)
Title |
---|
HAONAN CHEN ET AL: "A Cascade Face Spoofing Detector Based on Face Anti-Spoofing R-CNN and Improved Retinex LBP", IEEE ACCESS, vol. Volume 7, 2019, JPN6023042253, 25 November 2019 (2019-11-25), pages 170116 - 170133, ISSN: 0005175883 * |
HAONAN CHEN ET AL: "Attention-Based Two-Stream Convolutional Networks for Face Spoofing Detection", IEEE TRANSACTIONS ON INFORMATION FORENSICS AND SECURITY, vol. Vol.15 , 2020, JPN6023042254, 17 June 2019 (2019-06-17), pages 578 - 593, ISSN: 0005175884 * |
伊藤 康一: "顔認証システムのためのFully Convolutional Networkを用いた生体検知手法に関", 電子情報通信学会技術研究報告 VOL.117 NO.236, vol. BioX2017-27 (2017-10), JPN6023042255, 5 October 2017 (2017-10-05), JP, pages 11 - 15, ISSN: 0005175885 * |
海老原 章記: "フラッシュ反射光を利用した単眼可視光カメラによるなりすまし検知", 映像情報メディア学会技術報告 VOL.42 NO.14, vol. BioX2018-2 (2018-05), JPN6023042252, 17 May 2018 (2018-05-17), JP, pages 15 - 19, ISSN: 0005175882 * |
Also Published As
Publication number | Publication date |
---|---|
ZA202210744B (en) | 2023-04-26 |
EP4246454A2 (en) | 2023-09-20 |
MX2022012036A (es) | 2022-10-27 |
EP4246454A3 (en) | 2023-11-29 |
ES2971682T3 (es) | 2024-06-06 |
CA3176955A1 (en) | 2021-10-14 |
EP3893147B1 (en) | 2024-01-03 |
US20230162534A1 (en) | 2023-05-25 |
JP7445335B2 (ja) | 2024-03-07 |
WO2021205016A1 (en) | 2021-10-14 |
EP3893147A1 (en) | 2021-10-13 |
KR20230004533A (ko) | 2023-01-06 |
BR112022020413A2 (pt) | 2022-12-20 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP7304082B2 (ja) | 三次元実物体を実物体の二次元のスプーフと区別するための方法 | |
WO2021073364A1 (zh) | 一种人脸活体检测方法、装置、设备及存储介质 | |
Boulkenafet et al. | OULU-NPU: A mobile face presentation attack database with real-world variations | |
US11321963B2 (en) | Face liveness detection based on neural network model | |
CN108038456B (zh) | 一种人脸识别***中的防欺骗方法 | |
US20200184059A1 (en) | Face unlocking method and apparatus, and storage medium | |
KR101356358B1 (ko) | 눈의 이미지에 기초한 바이오메트릭 인증을 위한 기기 및 컴퓨터 구현 방법 | |
KR101309889B1 (ko) | 바이오메트릭 인증을 위한 텍스처 특징 | |
US11263442B1 (en) | Systems and methods for passive-subject liveness verification in digital media | |
WO2019152983A2 (en) | System and apparatus for face anti-spoofing via auxiliary supervision | |
WO2019137178A1 (zh) | 人脸活体检测 | |
CN105893920A (zh) | 一种人脸活体检测方法和装置 | |
US11373449B1 (en) | Systems and methods for passive-subject liveness verification in digital media | |
KR102038576B1 (ko) | 홍채 인식 시스템의 부정행위 검출 방법 | |
Hadiprakoso et al. | Face anti-spoofing using CNN classifier & face liveness detection | |
Song et al. | Face liveness detection based on joint analysis of rgb and near-infrared image of faces | |
JP7445335B2 (ja) | 照明源を含むデバイスを使用する生体性検出 | |
JP7360217B2 (ja) | ユーザのバイオメトリック特性を有する当該ユーザの物体の画像からデータを取得するための方法 | |
KR20210128274A (ko) | 라이브니스 검사 방법 및 장치 | |
CN113128269A (zh) | 一种基于图像风格迁移信息融合的活体检测方法 | |
CN116012248B (zh) | 图像处理方法、装置、计算机设备及计算机存储介质 | |
WO2023286251A1 (en) | Adversarial image generation apparatus, control method, and computer-readable storage medium | |
JP2021096831A (ja) | 判定装置、判定装置を含む携帯端末、および判定装置用のプログラム | |
WO2023043891A1 (en) | Spoof detection using eye boundary analysis |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20221202 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20231005 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20231017 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20240115 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20240130 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20240216 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7445335 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |