JP2007122237A - Forgery-deciding imaging device and individual identification device - Google Patents
Forgery-deciding imaging device and individual identification device Download PDFInfo
- Publication number
- JP2007122237A JP2007122237A JP2005311206A JP2005311206A JP2007122237A JP 2007122237 A JP2007122237 A JP 2007122237A JP 2005311206 A JP2005311206 A JP 2005311206A JP 2005311206 A JP2005311206 A JP 2005311206A JP 2007122237 A JP2007122237 A JP 2007122237A
- Authority
- JP
- Japan
- Prior art keywords
- color
- personal identification
- image data
- imaging
- light
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000003384 imaging method Methods 0.000 title claims abstract description 129
- 238000001514 detection method Methods 0.000 claims abstract description 42
- 238000012545 processing Methods 0.000 claims description 161
- 238000005286 illumination Methods 0.000 claims description 51
- 238000000295 emission spectrum Methods 0.000 claims description 13
- 238000003780 insertion Methods 0.000 claims description 7
- 230000037431 insertion Effects 0.000 claims description 7
- 230000001678 irradiating effect Effects 0.000 claims description 2
- 210000003462 vein Anatomy 0.000 abstract description 24
- 238000000034 method Methods 0.000 description 46
- 238000006243 chemical reaction Methods 0.000 description 26
- 238000010586 diagram Methods 0.000 description 12
- 230000035945 sensitivity Effects 0.000 description 11
- 230000006870 function Effects 0.000 description 10
- 238000012546 transfer Methods 0.000 description 9
- 238000012937 correction Methods 0.000 description 5
- 239000003086 colorant Substances 0.000 description 4
- 230000001276 controlling effect Effects 0.000 description 4
- 230000000875 corresponding effect Effects 0.000 description 4
- 230000003287 optical effect Effects 0.000 description 4
- 230000003595 spectral effect Effects 0.000 description 4
- 230000000694 effects Effects 0.000 description 3
- 230000010354 integration Effects 0.000 description 3
- 239000000203 mixture Substances 0.000 description 3
- 238000005070 sampling Methods 0.000 description 3
- 238000010521 absorption reaction Methods 0.000 description 2
- 238000009825 accumulation Methods 0.000 description 2
- 230000003321 amplification Effects 0.000 description 2
- 230000005540 biological transmission Effects 0.000 description 2
- 239000008280 blood Substances 0.000 description 2
- 210000004369 blood Anatomy 0.000 description 2
- 239000011159 matrix material Substances 0.000 description 2
- 238000010606 normalization Methods 0.000 description 2
- 238000003199 nucleic acid amplification method Methods 0.000 description 2
- 238000002834 transmittance Methods 0.000 description 2
- 102000001554 Hemoglobins Human genes 0.000 description 1
- 108010054147 Hemoglobins Proteins 0.000 description 1
- 206010042496 Sunburn Diseases 0.000 description 1
- 230000002238 attenuated effect Effects 0.000 description 1
- 230000000903 blocking effect Effects 0.000 description 1
- 238000004891 communication Methods 0.000 description 1
- 230000000295 complement effect Effects 0.000 description 1
- 238000011109 contamination Methods 0.000 description 1
- 230000002596 correlated effect Effects 0.000 description 1
- 230000001419 dependent effect Effects 0.000 description 1
- 239000000835 fiber Substances 0.000 description 1
- 210000004905 finger nail Anatomy 0.000 description 1
- 238000009499 grossing Methods 0.000 description 1
- 229910052736 halogen Inorganic materials 0.000 description 1
- 150000002367 halogens Chemical class 0.000 description 1
- 208000016339 iris pattern Diseases 0.000 description 1
- 230000006386 memory function Effects 0.000 description 1
- 210000001747 pupil Anatomy 0.000 description 1
- 230000002040 relaxant effect Effects 0.000 description 1
- 239000000758 substrate Substances 0.000 description 1
- 230000001629 suppression Effects 0.000 description 1
- 210000004243 sweat Anatomy 0.000 description 1
- 238000012795 verification Methods 0.000 description 1
Images
Abstract
Description
本発明は、人等の生体における指紋パターンあるいは静脈パターン等の身体固有の特徴部分のデータを利用して本人自身であることを認証する個人認証装置に関し、特に、その身体の特徴部分が偽造物ではないことを判定する機能を備える個人認証装置あるいはその撮像装置に関する。 The present invention relates to a personal authentication device that authenticates a person himself / herself using data of a characteristic part of a body such as a fingerprint pattern or a vein pattern in a living body such as a person, and in particular, the characteristic part of the body is a counterfeit. The present invention relates to a personal authentication device having a function of determining that it is not or an imaging device thereof.
近年になり、例えば建物の入退室管理や現金自動支払機の本人確認あるいは携帯電話やパソコン等のセキュリティ管理に個人認証の必要性が増しており、その個人認証の技術として生体の指紋パターンや静脈パターン等の身体固有のデータを用いるバイオメトリクスが知られている。 In recent years, for example, the need for personal authentication has increased for entrance / exit management of buildings, identity verification of cash dispensers, and security management of mobile phones, personal computers, etc. Biometrics using body-specific data such as patterns are known.
バイオメトリクスの中では、例えば、指の爪側の光源から光を投射してその指紋側表面で散乱した光を検出して指紋パターンを撮像する接触型の指紋認証装置、指又は手に近赤外光を透過させてその透過率が低い静脈パターンの配置を検出する静脈認証装置等が良く知られている。静脈認証装置は、静脈内を流れる血液中のヘモグロビンが近赤外光の波長に対して大きな減衰（吸収）率（波長依存性の特性）を有していることを利用している。 In biometrics, for example, a contact type fingerprint authentication device that projects light from a light source on the fingernail side of the finger and detects light scattered on the surface of the fingerprint side to image a fingerprint pattern, near-red on a finger or hand A vein authentication device that detects the arrangement of a vein pattern that transmits external light and has a low transmittance is well known. The vein authentication device utilizes the fact that hemoglobin in blood flowing in a vein has a large attenuation (absorption) rate (wavelength-dependent characteristic) with respect to the wavelength of near-infrared light.
従来の接触型の指紋認証装置では、例えば、指を接触させる透過板の接触面に指紋パターンが残留する問題や、他人も透過板に接触することから衛生面やユーザの心理的抵抗感の問題、あるいは、透過板に汗等の水分が付着した場合に指からの散乱光が変化して指紋パターンのコントラストが低下する問題等がある。 In conventional contact-type fingerprint authentication devices, for example, there is a problem that a fingerprint pattern remains on the contact surface of a transmissive plate with which a finger is brought into contact, and a problem of hygiene and user psychological resistance because other people also contact the transmissive plate. Or, when moisture such as sweat adheres to the transmission plate, there is a problem that the scattered light from the finger changes and the contrast of the fingerprint pattern is lowered.
この接触型の指紋認証装置における各種の問題については、指紋パターンの撮像を非接触で実施する非接触型の指紋認証装置を用いることで解決できることが知られている。また、非接触型の指紋認証装置の場合でも、例えば、近赤外光または赤の波長領域の光源とその波長に感度領域を有する撮像素子を用いて非接触型の指紋認証する場合には、指紋パターンと静脈パターンが重畳された画像が撮像されることになる。これについては、重畳画像データを平滑化することで線幅が狭い指紋パターンが除去されて静脈パターンのみが残り、さらにこの静脈パターンの画像を元の重畳画像から減じた差分画像では指紋パターンが得られることが知られている（例えば、特許文献１参照）。 It is known that various problems in this contact type fingerprint authentication apparatus can be solved by using a non-contact type fingerprint authentication apparatus that performs non-contact imaging of a fingerprint pattern. Further, even in the case of a non-contact type fingerprint authentication device, for example, when performing non-contact type fingerprint authentication using a light source in a near infrared light or red wavelength region and an image sensor having a sensitivity region at that wavelength, An image in which the fingerprint pattern and the vein pattern are superimposed is captured. For this, by smoothing the superimposed image data, the fingerprint pattern with a narrow line width is removed and only the vein pattern remains, and the fingerprint pattern is obtained in the difference image obtained by subtracting the vein pattern image from the original superimposed image. (For example, refer to Patent Document 1).
さらに、指紋パターンを模して製作された偽造指を指紋認証装置を用いた場合に、その偽造指の指紋パターンを認証してしまう可能性を有しているという問題があった。また、従来の静脈認証装置でも、指（又は手）の静脈パターンを模して製作された偽造指（手）を用いた場合に、その偽造指の静脈パターンを認証してしまう可能性を有しているという問題があった。 Furthermore, when a fingerprint authentication device is used for a counterfeit finger produced by imitating a fingerprint pattern, there is a problem that the fingerprint pattern of the counterfeit finger may be authenticated. In addition, even a conventional vein authentication device has a possibility of authenticating a vein pattern of a forged finger when a forged finger (hand) manufactured by imitating the vein pattern of a finger (or hand) is used. There was a problem that.
この認証装置がパターンを模して製作された偽造物を認証してしまう問題について、例えば、目の虹彩パターンを認証する場合には、照射光の光量変化に応じて虹彩の瞳孔径寸法が変化（大光量側に変化する場合に収縮し、小光量側に変化する場合に拡大）する特性を利用して、照射される光量を２段階に変化させるか、照射される光量を変化させるために２種類の光源を用いることで虹彩の偽造物を検出する方法が知られている（例えば、特許文献２参照）。 Regarding the problem that this authentication device authenticates a counterfeit manufactured by imitating the pattern, for example, when authenticating the iris pattern of the eye, the pupil diameter size of the iris changes according to the change in the amount of irradiation light In order to change the amount of light to be irradiated in two steps, or to change the amount of light to be irradiated, using the characteristic of contracting when changing to the large light amount side and expanding when changing to the small light amount side A method for detecting an iris forgery by using two types of light sources is known (see, for example, Patent Document 2).
しかしながら、従来の指紋パターンあるいは指や手の静脈パターンを認証する個人識別装置では、指や手の形状が照射される光量により変化する特性を有しているわけではないので、特許文献２の照射光の光量変化に応じて偽造物を検出する方法を適用することは不可能であった。 However, the conventional personal identification device for authenticating the fingerprint pattern or the finger or hand vein pattern does not have the characteristic that the shape of the finger or hand changes depending on the amount of light to be irradiated. It has been impossible to apply a method for detecting counterfeit according to the change in the amount of light.
本発明は上述したような課題を解決するためになされたもので、指紋パターンあるいは指や手の静脈パターンを認証する個人識別装置に用いられる偽造物を検出する偽造判定用撮像装置あるいはそのような偽造判定用撮像装置を含む個人識別装置を提供することを目的とする。 The present invention has been made to solve the above-described problems, and is a counterfeit determination imaging apparatus for detecting counterfeit used for a personal identification apparatus for authenticating a fingerprint pattern or a vein pattern of a finger or hand, or the like. An object of the present invention is to provide a personal identification device including an imaging device for counterfeit determination.
この発明に係る偽造判定用撮像装置は、生体の個人認証に用いられる身体固有の特徴部分を、被写体として少なくとも可視光によりカラーで撮像し、複数の色成分毎の画像データを出力する撮像手段と、
撮像手段からの各色成分毎の画像データから、生体の特徴部分の色を検出する色検出手段と、
身体の特徴部分が可視光により撮像された場合の画像データの値が予め記録されるデータ記録手段と、
色検出手段で検出された画像色を、データ記録手段に記録された画像データにより識別して適合するか否かを判定する色判定手段と、
撮像手段、色検出手段、データ記録手段及び色判定手段の各動作を制御すると共に、身体の特徴部分から検出された色が登録された画像データの色と適合しない場合に、生体の前記特徴部分を偽造物と判定する制御手段を備える。
An imaging device for forgery determination according to the present invention includes imaging means for imaging a body-specific characteristic portion used for personal authentication of a living body in color with at least visible light as a subject and outputting image data for each of a plurality of color components. ,
Color detection means for detecting the color of the characteristic part of the living body from the image data for each color component from the imaging means;
Data recording means for prerecording the value of image data when a body characteristic part is imaged by visible light;
Color determination means for determining whether or not the image color detected by the color detection means is identified by the image data recorded in the data recording means;
Control the operations of the imaging means, the color detection means, the data recording means, and the color determination means, and if the color detected from the body feature portion does not match the color of the registered image data, the feature portion of the living body Is provided with a control means for determining that a counterfeit.
この発明に係る個人識別装置は、上記した偽造判定用撮像装置の構成に加え、
データ記録手段には、さらに身体の特徴部分の画像データから少なくとも個人識別処理に用いる値が予め記録され、
撮像手段からの各色成分毎の画像データを、データ記録手段に登録された画像データと比較して適合するかを判定する個人識別処理手段を備え、
制御手段は、さらに個人識別処理手段の動作を制御すると共に、身体の特徴部分から検出された色が登録された画像データの色と適合する場合に、個人識別処理手段の処理を実施する。
In addition to the configuration of the imaging device for forgery determination described above, the personal identification device according to the present invention includes:
In the data recording means, at least a value used for personal identification processing is recorded in advance from image data of a characteristic part of the body,
A personal identification processing unit for determining whether the image data for each color component from the imaging unit is matched with the image data registered in the data recording unit;
The control means further controls the operation of the personal identification processing means, and executes the processing of the personal identification processing means when the color detected from the body feature matches the color of the registered image data.
本発明によれば、指紋パターンあるいは指や手の静脈パターンを認証する個人識別装置に用いられる偽造物を検出する偽造判定用撮像装置あるいはそのような偽造判定用撮像装置を含む個人識別装置を提供することができる。 According to the present invention, there is provided a forgery determination imaging device for detecting a forgery used in a personal identification device for authenticating a fingerprint pattern or a finger or hand vein pattern, or a personal identification device including such a counterfeit determination imaging device. can do.
実施の形態１．
図１は、本発明の実施の形態１に係る個人識別装置の基本構成を示すブロック図である。
Embodiment 1 FIG.
FIG. 1 is a block diagram showing a basic configuration of a personal identification device according to Embodiment 1 of the present invention.
個人識別用照明手段１は、被写体２を固体撮像素子４の反対側から赤色光又は近赤外光領域内の発光スペクトルで照射し、撮像処理手段６から照明切替制御信号ＣＢが入力され、被写体２を固体撮像素子４の反対側から、赤色光又は近赤外光の波長領域（７５０ｎｍから１０００ｎｍ）内の発光スペクトル特性を有する光を出射する。出射光は、被写体２を透過する際に、血液等の身体の成分の影響を受けて、例えば、指や手の中の静脈パターンに沿って吸収され、又、表面形状等の影響を受けて、例えば、指紋パターンに沿って散乱される。
The illumination means 1 for personal identification irradiates the
被写体２は、指又は手等の生体における個人認証に用いられる身体固有の特徴を備える部分であり、又、個人識別用照明手段１からの近赤外光が透過可能な生体の部分である。被写体２の個人識別処理は、被写体２を透過した近赤外光が固体撮像素子４で撮像されて画像データとして出力され、その画像データが信号処理されることにより可能となる。個人識別処理では、被写体２からの透過光に基づく画像データの成分から、静脈及び指紋に沿ってコントラストが変化するパターンが検出される。
The
レンズ３は、被写体２を透過して出射された近赤外光を、固体撮像素子４上に結像させて撮像するレンズ又はレンズ群であり、例えば自動焦点調整（合焦）機能を有する。また、レンズ３の焦点調整機能は、用途に応じて、例えば、固定焦点を手動により切換える構成、あるいは、パンフォーカスにより無調整とした構成等を用いてもよく、自動焦点調節機能を必ず備える必要はない。さらに、レンズ３の焦点調整の構成としては、複数枚のレンズを組み合わせてレンズ間距離を調整する構成、ズーム機能を備えた構成、又は、平行なビームパスを持つテレセントリックな光学系を備えた構成でもよい。
The
固体撮像素子４は、本実施の形態における撮像手段であり、生体の個人認証に用いられる身体固有の特徴部分を、被写体２として可視光によりカラーで撮像し、複数の色成分毎の画像データを出力し、また、可視光に加えて赤色光又は近赤外光領域内の発光スペクトルの照射光により撮像された画像データを出力する。固体撮像素子４には、撮像処理手段６から駆動パルスＰＡが入力され、可視光及び個人識別用照明手段１からの赤色光又は近赤外光の波長領域の発光スペクトルを受光し、例えば、撮像画像に対応するアナログＲＧＢ信号の画像データを出力する。又、固体撮像素子４は、可視光に加えて個人識別用照明手段１の照射光により撮像された画像データを出力可能である。
The solid-state
又、照明手段から被写体を透過又は被写体表面で反射された光をその固体撮像素子４の表面で受光して光電変換して電気信号を出力する光電変換素子を含む。本実施の形態の光電変換素子としては、例えば、フォトダイオードであり、固体撮像素子としては、例えば、ＣＣＤ撮像素子であるが、ＣＭＯＳ撮像素子等を用いることも可能である。固体撮像素子４は、その他に固体撮像素子４の表面で受光された光信号を所定の時間だけ蓄積する蓄積時間制御手段と、その所定の時間だけ蓄積された蓄積電荷を画素ごとに撮像出力として取り出す取出手段を備えている。
Also included is a photoelectric conversion element that receives light transmitted through the subject from the illumination means or reflected by the surface of the subject on the surface of the solid-
固体撮像素子４には、複数の色成分フィルタが各画素の上部に、例えば、ベイヤー配列、或いは、ハニカム配列等の所定順序で２次元的に配置（配列）される。色成分フィルタは、原色や補色型のカラーフィルタでも構成することが可能である。固体撮像素子４の駆動方法は、本実施の形態ではＣＣＤ撮像素子で垂直転送パルスが４層で水平転送パルスが２層の場合を示したが、例えば、撮像素子の構造により決定される層数（例えば３層等）の垂直転送パルス等を用いてもよい。
In the solid-
図２は、図１に示した固体撮像素子４の構成の一例を示す図である。
図２に示された固体撮像素子４は、被写体２から受光された光を光電変換してその光量に従った電気信号を出力するためのフォトダイオード１３〜１６と、各フォトダイオード１３〜１６に蓄積された電荷を垂直転送する垂直ＣＣＤ１７と、垂直転送された信号を水平転送し、撮像出力として画素単位で取り出すための水平ＣＣＤ１８と、水平ＣＣＤ１８からの電荷を撮像出力として取り出すフローティング・ドレイン・アンプ１９で構成されている。フォトダイオード１３〜１６は、その受光部の各画素上に例えばＲＧＢ等の原色のカラーのフィルタを所定の配列に従って配置することで各色データを選択することができる。
FIG. 2 is a diagram illustrating an example of the configuration of the solid-
The solid-
図３は、図１及び図２に示した固体撮像素子４のカラーフィルタの配置の一例を示す図である。
図３では、赤（Ｒ）、緑（Ｇ）、青（Ｂ）の原色系カラーフィルタをベイヤー配列に配置した場合の一般的な構成例（Ｇを市松状にＲとＢを線順次）を示している。カラーフィルタ及び画素の構成は、図３に示したベイヤー配列のみではなく、ハニカム配列を用いるようにしてもよい。
FIG. 3 is a diagram illustrating an example of the arrangement of the color filters of the solid-
FIG. 3 shows a general configuration example in which primary color filters of red (R), green (G), and blue (B) are arranged in a Bayer array (G is a checkered pattern and R and B are line-sequentially). Show. The configuration of the color filter and the pixel may be a honeycomb array as well as the Bayer array shown in FIG.
図４は、図１〜図３に示した固体撮像素子４のカラーフィルタの分光感度特性の一例を示す図である。
図４の横軸は入射光の波長（ｎｍ）であり、縦軸は受光感度出力（相対感度）である。波長の小さいほうに山がある点線の特性がＢのカラーフィルタの特性、真ん中に山がある一転鎖線の特性がＧのカラーフィルタの特性、波長の大きいほうに山がある実線の特性がＲのカラーフィルタの特性である。本実施の形態の個人認証装置では、被写体２による近赤外領域の光の透過特性及び吸収特性を用いて、被写体２の指紋パターン又は静脈パターンのコントラストを検出している。そのため、本実施の形態の固体撮像素子４のカラーフィルタの分光感度特性では、Ｒのカラーフィルタの受光感度特性が近赤外領域まで伸びている。
FIG. 4 is a diagram illustrating an example of spectral sensitivity characteristics of the color filter of the solid-
The horizontal axis of FIG. 4 is the wavelength (nm) of incident light, and the vertical axis is the light receiving sensitivity output (relative sensitivity). The characteristic of the color filter with the dotted line having the peak at the smaller wavelength is the characteristic of the color filter of B, the characteristic of the one-dot chain line with the peak at the middle is the characteristic of the color filter of G, and the characteristic of the solid line with the peak at the larger wavelength is R. This is a characteristic of the color filter. In the personal authentication device according to the present embodiment, the contrast of the fingerprint pattern or vein pattern of the subject 2 is detected by using the near-infrared light transmission characteristics and absorption characteristics of the
偽造判定用照明手段５は、撮像処理手段６から照明切替制御信号ＣＣが入力され、その反射光により被写体２を固体撮像素子４で撮像させるために、被写体２を固体撮像素子４の側から可視光の波長領域（３８０ｎｍから７８０ｎｍ）内の発光スペクトルで照射する。偽造判定用照明手段５は、例えば、蛍光灯、ハロゲンランプ、可視光域のＬＥＤ（Ｌｉｇｈｔ Ｅｍｉｔｔｉｎｇ Ｄｉｏｄｅ：例えば、Ｒ、Ｇ、Ｂ単色のＬＥＤや白色ＬＥＤ）、レーザ光源等である。
The forgery
被写体２の表面からの反射光や散乱光が固体撮像素子４で光電変換された画像データを、後述する撮像処理手段内の信号処理手段１０や個人識別処理装置７で利用するためには、固体撮像素子４の受光感度以上となるように被写体２が照明されている必要がある。この被写体２の照明としては、撮像装置が配置された周辺環境の外光（太陽光・蛍光灯）が十分に利用できる状況では省略することも可能であるが、例えば、太陽光は時間により変化し、被写体２が外光との間に位置する場合にはその照明光が遮られてしまうため、偽造判定用照明手段５により被写体２に照明で当てることで、安定して被写体２を照明することができる。
In order to use image data obtained by photoelectrically converting reflected light or scattered light from the surface of the subject 2 by the solid-
また、本実施の形態では、偽造判定用照明手段５を個人識別用照明手段１とは別体の構成として説明してきたが、例えば、偽造判定用照明手段５の位置に、個人識別用照明手段１の光源としても使用可能であるように発光スペクトルの切換が可能な光源装置を配置し、偽造判定用照明手段５の位置の光源からの出射光をミラー等や反射させたりファイバー等でして誘導個人識別用照明手段１の位置から照射させる構成にすることで、個人識別用照明手段１及びその駆動回路等を削減することができ、撮像装置を小型化することができる。
In the present embodiment, the forgery
撮像処理手段６は、例えば、個人識別処理手段７から撮像動作切替信号ＣＥが入力されて、偽造判定用照明手段５を点灯させると共に固体撮像素子４に駆動パルスＰＡを出力し、固体撮像素子４から出力されたアナログＲＧＢ信号を、サンプルホールドしてゲイン（利得）を制御し、デジタル信号に変換し、ホワイトバランスを制御し、階調補正して出力（ＳＣ）すると共に、ホワイトバランス制御された信号から被写体２の肌色を検出して判定し、さらに被写体２の形状も判定して肌色一致判定結果ＳＤを出力する。さらに詳しくは図５を用いて後述する。
For example, the
個人識別処理手段７は、固体撮像素子４からの各色成分毎の画像データを、後述するデータ記録手段７ａに登録された画像データと比較して適合するかを判定する。個人識別処理手段７には、少なくとも身体の特徴部分が可視光（偽造判定用照明手段５の照射光）により撮像された場合の画像データ（肌色を識別するための値ＤＴ）が予め記録されるデータ記録手段７ａが備えられる。尚、本実施の形態では、データ記録手段７ａを個人識別処理手段７に含ませるように構成したが、個人識別処理手段７の外部に設けられるが個人識別処理手段７に接続されるデータベースとして構成しても良い。
The personal
データ記録手段７ａ又はデータベースとして用いることが可能な記憶媒体としては、フラッシュメモリ、ＩＣカード、磁気カード、携帯電話など通信手段やネットワークを介したサーバー等の種々の構成を用いることができる。
As a storage medium that can be used as the
データ記録手段７ａ又はデータベースに登録されるデータの種類としては、指紋パターンや静脈パターン等の特徴点のデータ、被写体２の肌色に関するＬ＊ａ＊ｂ＊値、その肌色に関する値（登録データ）を登録した時の照明条件（色温度、照度）等が記録される。又、Ｌ＊ａ＊ｂ＊値の代わりに、ＸＹＺ３刺激値、或いは、ホワイトバランス制御手段１２のＲＧＢ出力を記録するようにしてもよい。 The types of data registered in the data recording means 7a or the database include feature point data such as fingerprint patterns and vein patterns, L * a * b * values related to the skin color of the subject 2, and values (registered data) related to the skin color. The lighting conditions (color temperature, illuminance), etc. at the time of registration are recorded. Further, instead of the L * a * b * value, the XYZ tristimulus value or the RGB output of the white balance control means 12 may be recorded.
データ記録手段７ａには、例えば、身体の特徴部分が可視光により撮像された場合の画像データの少なくとも肌色を識別するための値が予め記録される。詳しくは、偽造判定用照明手段５の照射光により照射された画像データから各色（少なくとも緑色）の輝度信号のレベルの平均値（ＡＰＬ）と、分割領域毎の各色（少なくとも緑色）の積算値と、個人識別用照明手段１の照射光により撮像された場合の身体の特徴部分の画像データのうち少なくとも個人識別処理に用いる値が予め記録される。この個人識別処理手段７の処理は、撮像処理手段６からの肌色一致判定結果ＳＤが一致を示している場合には、例えば偽造判定用照明手段５を消灯して個人識別用照明手段１を点灯させるように照明が切り替えられて実施されるが、肌色一致判定結果ＳＤが一致を示していない場合には実施されない。さらに詳しくは図５を用いて後述する。 In the data recording means 7a, for example, a value for identifying at least the skin color of the image data when the body characteristic part is imaged by visible light is recorded in advance. Specifically, the average value (APL) of the luminance signal level of each color (at least green) and the integrated value of each color (at least green) for each divided area from the image data irradiated by the irradiation light of the forgery determination illumination means 5 In addition, at least a value used for personal identification processing is recorded in advance among the image data of the body characteristic portion when imaged by the irradiation light of the personal identification illumination unit 1. When the skin color matching determination result SD from the imaging processing means 6 indicates a match, for example, the personal identification processing means 7 turns off the forgery determination lighting means 5 and turns on the personal identification lighting means 1. However, this is not performed when the skin color matching determination result SD does not indicate matching. Further details will be described later with reference to FIG.
図５は、図１の個人識別装置における撮像処理手段６の内部構成を示したブロック図である。
以下に、図５を用いて撮像処理手段６の詳細な構成と機能について説明する。なお、図１と同一の機能を有する部分については、同一の符号を付与して説明を省略する。
FIG. 5 is a block diagram showing an internal configuration of the imaging processing means 6 in the personal identification device of FIG.
The detailed configuration and function of the imaging processing means 6 will be described below with reference to FIG. In addition, about the part which has the same function as FIG. 1, the same code | symbol is provided and description is abbreviate | omitted.
アナログ信号処理手段８は、固体撮像素子４から出力された撮像信号（アナログＲＧＢ信号）と、タイミング生成手段１１からのサンプルホールドパルスＰＢと、制御手段１２からの利得制御信号ＣＦが入力され、アナログＲＧＢ信号に対してサンプルホールドパルスＰＢにより相関二重サンプリング処理（ＣＤＳ処理）が実施された後に、利得制御信号ＣＦによる増幅処理（ＡＧＣ）が実施される。この増幅処理（ＡＧＣ）では、例えば、制御手段１２で、Ａ／Ｄ変換信号ＳＡ等の撮像信号に比例した信号に対応させて利得制御信号ＣＦで増幅するゲイン（利得）の値を設定し、撮像信号のゲイン（利得）を制御することが可能である。
The analog signal processing means 8 receives an image pickup signal (analog RGB signal) output from the solid-state
Ａ／Ｄ変換手段９は、タイミング生成手段１１から出力されたＡ／Ｄ変換クロックＰＣが入力されて、アナログ信号処理手段８でゲイン（利得）が補正された後のアナログＲＧＢ信号に対して、Ａ／Ｄ変換クロックＰＣによりサンプリングしてＡ／Ｄ変換出力ＳＡ（以下、デジタルＲＧＢ信号ＳＡとも記載する）を出力する。Ａ／Ｄ変換手段９の分解能は、一般的な表示機器等では８ビットの分解能を有していれば十分であるが、本実施の形態では後段の信号処理手段１０による色検出能力、階調補正能力、Ｓ／Ｎ比の各問題の改善、及び、微少なコントラスト検出とダイナミックレンジ確保を考慮した場合、１０ビット以上のＡ／Ｄ分解能が必要である。 The A / D conversion unit 9 receives the A / D conversion clock PC output from the timing generation unit 11 and the analog RGB signal after the gain (gain) is corrected by the analog signal processing unit 8. Sampling is performed by the A / D conversion clock PC, and an A / D conversion output SA (hereinafter also referred to as a digital RGB signal SA) is output. The resolution of the A / D conversion means 9 is sufficient if it has a resolution of 8 bits in a general display device or the like, but in this embodiment, the color detection capability and gradation by the signal processing means 10 in the subsequent stage. A / D resolution of 10 bits or more is required in consideration of improvement of each problem of correction capability and S / N ratio, and detection of a minute contrast and securing a dynamic range.
信号処理手段１０は、Ａ／Ｄ変換手段９から出力されたＡ／Ｄ変換出力（デジタルＲＧＢ信号）ＳＡと、制御手段１２から出力されたホワイトバランス制御信号ＣＤと、個人識別処理手段７のデータ記録手段７ａに予め記録されている身体の特徴部分が可視光により撮像された場合の画像データの肌色を識別するための値ＤＴが入力されて、Ｒ画素とＧ画素の平均輝度値ＳＢと、分割領域毎のＧの積算値に対するＲＧＢ各色積算値ＳＦ（各分割領域毎のＧに対するＲとＢの積算値の比）と、ホワイトバランスに加えて階調も補正された後のデジタルＲＧＢ信号ＳＣと、肌色一致判定結果信号ＳＤが出力される。信号処理手段１０は、Ａ／Ｄ変換手段９の出力に対して、色成分に応じてカラー信号処理（カラーマトリクス処理）、ホワイトバランス、色成分ごとの分割領域毎のＲＧＢ各色積算値ＳＦ検出、階調変換などの画像処理を行う。
The signal processing means 10 includes an A / D conversion output (digital RGB signal) SA output from the A / D conversion means 9, a white balance control signal CD output from the control means 12, and data of the personal identification processing means 7. A value DT for identifying the skin color of the image data when the body characteristic portion recorded in advance in the recording means 7a is imaged with visible light is input, and the average luminance value SB of the R and G pixels, RGB RGB color integrated value SF (R ratio of R and B integrated values to G for each divided region) with respect to the integrated value of G for each divided region, and digital RGB signal SC after gradation is corrected in addition to white balance Then, a skin color match determination result signal SD is output. The
また、信号処理手段部１０は、Ａ／Ｄ変換手段から出力されたデジタルＲＧＢ信号の例えば階調を補間処理し、デジタルＲＧＢ信号を色差信号（ＹＣｂＣｒ）に変換する機能も有している。この階調を補間処理した後のデジタルＲＧＢ信号ＳＣは、図示しない表示装置に出力して表示させることや、図示しない外部記憶装置に保存することも可能である。
The
タイミング生成手段１１は、制御手段１２から駆動パルス切替制御信号ＣＡが入力され、撮像処理手段６の動作に関する全部分の同期を取るためにタイミング調整用の各種パルス（駆動パルスＰＡ、サンプルホールドパルスＰＢ、Ａ／Ｄ変換クロック、垂直同期信号ＰＤ）を生成して出力する。 The timing generation means 11 receives the drive pulse switching control signal CA from the control means 12 and receives various pulses for timing adjustment (drive pulse PA, sample hold pulse PB) in order to synchronize all the parts related to the operation of the imaging processing means 6. , An A / D conversion clock and a vertical synchronization signal PD).
タイミング生成手段１１は、例えば、固体撮像素子４に対する駆動パルスＰＡとして、以下の各パルス（ａ）〜（ｅ）を固体撮像素子４に規定された所定の手順に従って供給することで、固体撮像素子４に蓄積された電荷を撮像出力として読み出すことができる。
（ａ）水平ＣＣＤ１８を駆動して電荷を取り出すための水平転送パルス（例えば、２層駆動の場合は、位相がほぼ１８０度異なるφＨ１、φＨ２の２種類の駆動パルス）。
（ｂ）垂直ＣＣＤ１７で、電荷転送を実現するための垂直転送パルス（例えば、４層駆動の場合は、φＶ１、φＶ２、φＶ３、φＶ４と異なる４種類の駆動パルス）。
（ｃ）固体撮像素子４を構成するフォトダイオード１３〜１５から垂直ＣＣＤ１７へ電荷を読み出すためのゲートトランスファーパルス（φＴＧ）。
（ｄ）電子シャッタを実現するためのサブストレートパルス（φＳＵＢ）。
（ｅ）画素電荷をリセットするためのリセットゲートパルス（φＲＧ）。
The timing generation unit 11 supplies, for example, the following pulses (a) to (e) as drive pulses PA to the solid-
(A) Horizontal transfer pulses for driving the
(B) Vertical transfer pulses for realizing charge transfer in the vertical CCD 17 (for example, four types of drive pulses different from φV1, φV2, φV3, and φV4 in the case of four-layer drive).
(C) A gate transfer pulse (φTG) for reading out charges from the
(D) A substrate pulse (φSUB) for realizing an electronic shutter.
(E) A reset gate pulse (φRG) for resetting the pixel charge.
また、タイミング生成手段１１は、アナログ信号処理手段８に対して、アナログＲＧＢ信号にＣＤＳ処理を実施させるために、アナログＲＧＢ信号ならびに黒レベルをサンプルホールドするためのパルス（サンプルホールドパルスＰＢ）を供給する。さらに、タイミング生成部１１は、Ａ／Ｄ変換手段９へＡ／Ｄ変換クロックＰＣを供給し、制御手段１２へ垂直同期信号ＰＤを供給する。また、例えば、図５に示されていない後段の信号処理や、メモリ機能、表示装置等に対して、それらを制御するパルス又は同期信号を生成することも可能である。
Further, the timing generation means 11 supplies the analog RGB signal and a pulse for sampling and holding the black level (sample hold pulse PB) to cause the analog RGB signal to be subjected to CDS processing on the analog RGB signal. To do. Further, the timing generation unit 11 supplies the A / D conversion clock PC to the A / D conversion unit 9 and supplies the vertical synchronization signal PD to the
さらにタイミング生成手段１１は、制御手段１２からの駆動パルス切替制御信号ＣＡにより、上記した各パルス（駆動パルス）を切替て出力することができる。例えば、固体撮像素子４から全画素の電荷信号を読み出す全画素読出しや、固体撮像素子４から垂直ライン間引きして高速に電荷を読み出すドラフト読出し等のための各パルス（駆動パルス）を切り替えることができる。
Further, the timing generation means 11 can switch and output each pulse (drive pulse) described above by the drive pulse switching control signal CA from the control means 12. For example, it is possible to switch each pulse (drive pulse) for all pixel readout for reading out charge signals of all pixels from the solid-state
制御手段１２は、個人識別処理手段７から撮像動作切替信号ＣＥにより、固体撮像素子４、信号処理手段１０（特に、後述する色検出手段２３ａ及び色判定手段２３ｂ）、個人識別処理手段７（データ記録手段７ａを含む）の各動作を制御して、まず偽造判定用撮像装置としての処理を実施させると共に、身体の特徴部分から検出された肌色が登録された画像データの肌色と適合しない場合には、生体の前記特徴部分を偽造物と判定して、個人識別処理手段７の処理を中止するが、検出された肌色が登録された画像データの肌色と適合する場合には、撮像装置の動作を個別の個人識別処理に対応した最適な動作に切換え（例えば、個人識別用照明手段１を点灯させ）、個人識別処理手段７の処理を実施する。
The control means 12 receives the solid-
又、制御手段１２では、積算手段２２の結果をもとにホワイトバランスを制御（調整）する。例えば、分割領域毎のＲＧＢ各色積算値ＳＦにおける緑色の値に対する赤色と青色の値の比を求めホワイトバランス制御信号ＣＤを設定する。このホワイトバランス制御信号ＣＤをホワイトバランス制御手段２０に送信し、ホワイトバランス制御手段２０で各色の比を調整することで、ホワイトバランス制御が可能となる。ホワイトバランスが設定されることで、正確に肌色を検出することができる。また、ホワイトバランス制御手段２０で色温度を検出することで、偽造判定用照明手段５の光源の種類を特定することができる。さらに、被写体２の肌色以外の色も検出することができる。例えば、被写体２が汚れていた場合の、その汚れの位置を判別することができる。
Further, the control means 12 controls (adjusts) the white balance based on the result of the integrating
以下、撮像動作切替信号ＣＥに応じて撮像装置の動作切換のために制御手段１２から出力される各信号について説明する。駆動パルス切替制御信号ＣＡは、固体撮像素子４の駆動波形（例えば、全画素読出しや、ドラフト読出し等）を切換える制御（駆動制御）を行うための信号である。
Hereinafter, each signal output from the
個人識別用照明切替制御信号ＣＢ及び偽造判定用照明切替制御信号ＣＣは、個人識別用照明手段１と偽造判定用照明手段５の各々の「点灯・点滅・消灯」及び「照度」を、個別の個人識別処理に対応させて制御するための信号である。 The lighting switching control signal CB for personal identification and the lighting switching control signal CC for forgery determination are respectively used for individually turning on / flashing / turning off and “illuminance” of the lighting means 1 for personal identification and the lighting means 5 for forgery determination. It is a signal for controlling corresponding to personal identification processing.
ホワイトバランス制御信号ＣＤは、信号処理手段１０からのＲ画素とＧ画素の平均輝度値ＳＢから信号処理手段１０内のホワイトバランスを制御する機能部（後述するホワイトバランス制御手段２０）を、個別の個人識別処置に対応させて制御するための信号である。 The white balance control signal CD is a function unit (white balance control means 20 described later) that controls the white balance in the signal processing means 10 from the average luminance value SB of the R and G pixels from the signal processing means 10. It is a signal for controlling corresponding to a personal identification procedure.
利得制御信号ＣＦは、制御手段１２により、Ａ／Ｄ変換信号ＳＡ等の撮像信号に比例した信号に対応させてアナログ信号処理手段８に含まれる増幅手段（図示せず）でアナログＲＧＢ信号を増幅するゲイン（利得）の値を設定した信号である。信号処理手段１０では、例えば、緑信号や輝度信号のＲ画素とＧ画素の平均輝度値ＳＢが求められて制御手段１２に送られ、制御手段１２では、そのＲ画素とＧ画素の平均輝度値ＳＢから露出条件を検出して最適なゲイン（利得）となるように利得制御信号ＣＦを設定する。 The gain control signal CF is amplified by an amplifying means (not shown) included in the analog signal processing means 8 by the control means 12 so as to correspond to a signal proportional to the imaging signal such as the A / D conversion signal SA. This is a signal in which the value of the gain to be set is set. In the signal processing means 10, for example, the average luminance value SB of the R pixel and the G pixel of the green signal and the luminance signal is obtained and sent to the control means 12, and the control means 12 averages the average luminance value of the R pixel and the G pixel. The gain control signal CF is set so that the exposure condition is detected from the SB and the optimum gain (gain) is obtained.
また、制御手段１２から出力される駆動パルス切替制御信号ＣＡ、個人識別用照明切替制御信号ＣＢ、偽造判定用照明切替制御信号ＣＣ、及び、ホワイトバランス制御信号ＣＤの各制御信号は、タイミング生成手段１１からの垂直同期信号ＰＤにフレーム同期させて制御することができる。フレーム同期させた制御では、例えば、個人識別用照明切替制御信号ＣＢを用いるフレーム単位の個人識別用照明手段の消灯・点灯制御や、アナログ信号処理手段８の利得制御などを実施することができる。なお、フレーム同期する必要がない制御信号については、フレーム同期させないで制御することができる。 Further, the drive pulse switching control signal CA, the personal identification lighting switching control signal CB, the counterfeit judgment lighting switching control signal CC, and the white balance control signal CD, which are output from the control means 12, are supplied with timing generating means. 11 can be controlled in frame synchronization with the vertical synchronization signal PD from the frame 11. In the frame-synchronized control, for example, turn-off / light-on control of the personal identification lighting means using the personal identification lighting switching control signal CB, gain control of the analog signal processing means 8, and the like can be performed. Note that control signals that do not require frame synchronization can be controlled without frame synchronization.
個人識別処理手段７は、信号処理手段１０で信号処理された階調補正後のデジタルＲＧＢ信号ＳＣに基づいて、例えば、以下の処理を実施する。
（ｆ）第一の特徴点を抽出するために必要な画像領域を検出して切り出す処理（例えば、指紋パターンを第一の特徴点として抽出するために指の画像領域を検出して処理）と、
（ｇ）切り出した画像の正規化処理（例えば、画像の大きさ、輝度のばらつき、被写体２の傾き等を正規化する処理）、第一の特徴点を抽出する処理（例えば、切り出されて正規化された画像から指紋パターン又は静脈パターン等の特徴点又は特徴量を抽出し、その切り出された画像が適切か否かの判断を行い、適切でない場合には、再度画像の切り出しなど処理を行う。）と、
（ｈ）照合処理（データ記録手段７ａ又は他のデータベースに登録された特徴データと検出された第一の特徴点のデータを比較及び照合し、登録された特徴データと一致するか否かを判断する。）
The personal identification processing means 7 performs, for example, the following processing based on the digital RGB signal SC after gradation correction subjected to signal processing by the signal processing means 10.
(F) a process of detecting and cutting out an image area necessary for extracting the first feature point (for example, detecting and processing a finger image area to extract a fingerprint pattern as the first feature point); ,
(G) Normalization processing of the cut-out image (for example, processing for normalizing image size, luminance variation, inclination of the subject 2, etc.), processing for extracting the first feature point (for example, cut-out normalization) Extract a feature point or feature quantity such as a fingerprint pattern or vein pattern from the converted image, determine whether the extracted image is appropriate, and if it is not appropriate, perform processing such as image cutting again .)When,
(H) Collation processing (feature data registered in the data recording means 7a or other database and the data of the detected first feature point are compared and collated to determine whether or not they match the registered feature data. To do.)
本実施の形態では、信号処理手段１０（後述する色処理手段２３）から出力される肌色一致判定結果ＳＤに基づいて、個人識別処理手段７の処理を制御する。登録されていた肌色と検出された肌色が一致した場合は、個人識別処理手段７の個人識別処理を実行し、登録されていた肌色と検出された肌色が不一致の場合には、個人識別処理を実行しないことで、個人識別処理の処理時間を短縮させることができる。また、偽造判定用撮像素子と個人識別処理用撮像素子を共用させて１個にできるため、同一撮像素子で、肌色判別（偽造判定）と認識処理を実施でき、小型で高速な装置とすることができる。
In the present embodiment, the processing of the personal identification processing means 7 is controlled based on the skin color match determination result SD output from the signal processing means 10 (color processing means 23 described later). When the registered skin color matches the detected skin color, the personal
図６は、図５に示された撮像処理手段６内の信号処理手段１０の構成の一例を示す図である。
ホワイトバランス制御手段２０は、Ａ／Ｄ変換手段９から出力されたＡ／Ｄ変換信号（デジタルＲＧＢ信号）ＳＡと、制御手段１２から出力されたホワイトバランス制御信号ＣＤが入力され、ホワイトバランス制御信号ＣＤに対応させて応じてデジタルＲＧＢ信号ＳＡのホワイトバランスを制御（調整）する。これにより、後述する色検出手段２３ａに入力される各色成分毎の画像データのホワイトバランスが補正される。各色成分毎の画像データのホワイトバランスを補正するためのホワイトバランス制御信号ＣＤとしては、後述する偽造判定用輝度レベル検出手段２７からの画像データの輝度信号のレベルの平均値（ＡＰＬ）を入力させるようにしてもよい。
FIG. 6 is a diagram showing an example of the configuration of the signal processing means 10 in the imaging processing means 6 shown in FIG.
The white
階調変換手段２１は、ホワイトバランスが調整された後のデジタルＲＧＢ信号ＳＡをさらに階調補正（変換）する手段であり、後段の個人識別処理手段７で個人識別処理ができるコントラストを確保し、処理しやすい階調数になるように階調を補正する。
The
積算手段２２は、固体撮像素子４から出力された所定領域毎で各色成分毎の画像データを積算して出力する。より詳しくは、Ａ／Ｄ変換手段９の出力（デジタルＲＧＢ信号ＳＡ）から、各色の分割領域毎のＲＧＢ各色積算値を求め、その積算値をＧに対するＲとＢの比の信号ＳＦとして出力する手段である。積算結果は、予め設定された撮像画面の１画面をｎ×ｍ（ｎは画面水平方向の分割数、ｍは垂直方向の分割数：ｎ、ｍは正の整数）に分割した窓（分割領域）毎に求めることができる。ここで、分割された各窓のサイズは、積算手段２２又は制御手段１２に各窓のサイズを予め記録しておくことで問題はなくなり、例えば、均等分割されていても、不均等に分割されていてもよい。
The integrating
本実施の形態の色処理手段２３は、概略的に以下の５つの処理を実施する。
（Ａ）ＲＧＢ出力をＸＹＺ３刺激値に変換する処理
（Ｂ）ＸＹＺ３刺激値を、Ｌ＊ａ＊ｂ＊値へ変換する処理
（Ｃ）登録データの肌色・照明に関するデータを抽出する処理
（Ｄ）検出した肌色を照明条件に基づき補正する処理
（Ｅ）登録データと補正した肌色の一致／不一致の結果を出力する処理
The color processing means 23 of the present embodiment roughly performs the following five processes.
(A) Process for converting RGB output to XYZ3 stimulus value (B) Process for converting XYZ3 stimulus value to L * a * b * value (C) Process for extracting skin color / lighting data of registered data (D) Processing for correcting detected skin color based on lighting conditions (E) Processing for outputting registration data and corrected / matched skin color result
以下に（Ａ）から（Ｅ）の処理について説明する。
処理（Ａ）及び（Ｂ）は、ホワイトバランス制御手段２０から出力されるデジタルＲＧＢ信号（個人識別処理が実施される被写体２のホワイトバランスが調整されたデジタルＲＧＢ信号）にマトリクス演算を行う処理である。
演算の結果、ＸＹＺ３刺激値とＬ＊ａ＊ｂ＊値が得られる。
The processes from (A) to (E) will be described below.
Processes (A) and (B) are processes for performing a matrix operation on the digital RGB signal output from the white balance control means 20 (digital RGB signal in which the white balance of the subject 2 on which the personal identification process is performed) is adjusted. is there.
As a result of the calculation, an XYZ3 stimulus value and an L * a * b * value are obtained.
処理（Ｃ）は、個人識別装置７のデータ記録手段７ａ（又は個人識別装置７に接続された記録メディア）から、登録データを読み出す処理である。この処理では、特に肌色に関するデータ、及びそのデータ取得時の照明条件に関するデータを抽出する。 The process (C) is a process of reading registration data from the data recording means 7a of the personal identification device 7 (or a recording medium connected to the personal identification device 7). In this process, data relating to skin color and data relating to lighting conditions at the time of obtaining the data are extracted.
処理（Ｄ）は、検出した肌色を照明条件に基づいて補正する処理である。偽造判定用照明手段５の照明状態は、照明手段に固有のばらつきや、外光の状態（室外の太陽、蛍光灯、白熱灯）により影響を受ける。そのため、肌色検出結果も照明の影響を受けて変化する。この処理では、ホワイトバランス制御手段２０に入力するホワイトバランス制御信号ＣＤから得られる赤色と青色のゲイン（利得）をもとに、照明状態を判別し、肌色の検出結果を照明条件に応じてＶｏｎ Ｋｒｉｅｓの法則等の関係式を用いて補正する。照明状態の判別方法としては、青色のゲイン（利得）が低く、赤色のゲイン（利得）が高い場合は、色温度の高い照明光（蛍光灯）と判別する。赤色のゲイン（利得）が低く、青色のゲイン（利得）が高い場合は、色温度の低い照明光（白熱灯）と判別する。このようにして、照明状態を判別することができる。
The process (D) is a process for correcting the detected skin color based on the illumination condition. The illumination state of the forgery
処理（Ｅ）は、上記処理（Ｄ）で補正した肌色が登録データの肌色と一致するか否か（不一致）の結果を出力する処理である。
登録データのＬ＊ａ＊ｂ＊値を例えばＬ＊１、ａ＊１、ｂ＊１とし、補正後のＬ＊ａ＊ｂ＊値を例えばＬ＊２、ａ＊２、ｂ＊２として、補正後のＬ＊ａ＊ｂ＊値（Ｌ＊２、ａ＊２、ｂ＊２）が、以下の肌色の条件を示す（１）式を満足する場合に、一般的な肌色の範囲に含まれると判断する。
Ｌ＊２＞Ａ かつ ｜ａ＊２−ｂ＊２｜＞Ｂ ・・・（１）
但し、定数Ａ及びＢは、実験結果をもとに統計的に得られた数値である。
また、（１）式に示した判別条件は、比較的にハードウェア化しやすい条件を示しているが、統計的距離尺度を用いる条件でも良い。
The process (E) is a process for outputting a result of whether or not the skin color corrected in the process (D) matches the skin color of the registered data (non-match).
For example, L * a * b * values of registered data are L * 1, a * 1, b * 1, and L * a * b * values after correction are L * 2, a * 2, b * 2, for example. If the corrected L * a * b * value (L * 2, a * 2, b * 2) satisfies the following skin color condition (1), it is included in the general skin color range. Judge that
L * 2> A and | a * 2-b * 2 |> B (1)
However, the constants A and B are numerical values obtained statistically based on experimental results.
Further, the determination condition shown in the equation (1) indicates a condition that is relatively easy to be hardware, but may be a condition that uses a statistical distance measure.
続いて、（１）式を満足する場合、以下のばらつき範囲を示す（２）式を満足する場合に、Ｌ＊２はバラツキ範囲内に含まれると判断する。
α１ ＜＝ Ｌ＊１／Ｌ＊２ ＜＝ α２ ・・・（２）
ここで、α１およびα２は、実験結果をもとに統計的に得られた数値である。
また、（２）式に示したα１およびα２は、照明のばらつき、被写体２の体調、検出撮像素子のバラツキを考慮した設定がなされる。
Subsequently, when the expression (1) is satisfied, it is determined that L * 2 is included in the variation range when the expression (2) indicating the following variation range is satisfied.
α1 ≦ L * 1 / L * 2 ≦ α2 (2)
Here, α1 and α2 are numerical values obtained statistically based on the experimental results.
In addition, α1 and α2 shown in the equation (2) are set in consideration of illumination variations, physical condition of the subject 2, and variations in the detection image sensor.
上記したＬ＊２値と同様に、ａ＊２値、ｂ＊２値についても、（２）式と同様なバラツキを考慮した関係式が成り立つので、同様な式を用いて、ばらつき範囲内に含まれることを判断することができる。
以上から補正後のＬ＊ａ＊ｂ＊値（Ｌ＊２、ａ＊２、ｂ＊２）の各値とも、登録データ（Ｌ＊１、ａ＊１、ｂ＊１）に対する所定のバラツキ範囲内である場合に、肌色が一致であると判断することができる。
Similar to the above L * 2 value, the a * 2 value and the b * 2 value also have a relational expression that takes into account the variation similar to the expression (2). It can be determined that it is included.
From the above, the corrected L * a * b * values (L * 2, a * 2, b * 2) are all within a predetermined variation range with respect to the registered data (L * 1, a * 1, b * 1). If it is within the range, it can be determined that the skin colors are the same.
このように色処理手段２３に個人識別処理手段７のデータ記録手段７ａから登録データの肌色に関するデータＤＴが供給されることで、信号処理手段１０内の色処理手段２３では、検出された肌色が登録データと比較され、登録された肌色と同一か否かが判断される。そして一致と判断した場合は、色処理手段２３は、肌色一致判定結果ＳＤをＨとして出力し、不一致と判断した場合には、肌色一致判定結果ＳＤをＬとして出力する。
In this way, the
また、色処理手段２３は、被写体２の肌色を判別した肌色一致判定結果ＳＤを個人識別処理手段７に出力する。個人識別処理手段７では、肌色一致判定結果ＳＤが一致を示す場合に、点灯させていた偽造判定用照明手段５を消灯して個人識別用照明手段１を点灯させるように切り替えて、個人識別処理を実施する。つまり、肌色一致判定結果ＳＤは照明切替制御信号としても機能する。尚、本実施の形態では、上記したように肌色一致判定結果ＳＤを出力しているが、例えば色判別した結果そのものを個人識別処理手段７へ供給し、個人識別処理手段７内で、色座標を判断し、登録データ内に保存されたデータと照合することで、肌色が一致か否か判断するようにしてもよい。 Further, the color processing means 23 outputs the skin color match determination result SD obtained by determining the skin color of the subject 2 to the personal identification processing means 7. In the personal identification processing means 7, when the skin color matching determination result SD indicates a match, the forgery determination illumination means 5 that has been turned on is switched off so that the personal identification lighting means 1 is turned on, and personal identification processing is performed. To implement. That is, the skin color match determination result SD also functions as an illumination switching control signal. In the present embodiment, the skin color match determination result SD is output as described above. However, for example, the color determination result itself is supplied to the personal identification processing means 7, and the color coordinates in the personal identification processing means 7 are supplied. It is also possible to determine whether or not the skin colors match by comparing with the data stored in the registered data.
本実施の形態の色処理手段２３は、上記の処理を実施するために、その内部に色検出手段２３ａと色判定手段２３ｂを有している。色検出手段２３ａは、後述する被写体形状判定手段２８からの生体の特徴部分の領域の検出結果を受信して背景部分の領域を除外するようにして、ホワイトバランス制御手段２０の出力、即ちホワイトバランスが調整された後のデジタルＲＧＢ信号ＳＡから被写体２の肌色を検出し、色判定手段２３ｂは、その検出された肌色を、データ記録手段７ａに登録された肌色と照明のデータにより識別して適合するか否かを判定する。
The
以上のように、偽造判定用照明手段５の照射光により照射された被写体２の反射光が固体撮像素子４で撮像され、色検出手段２３ａは、その固体撮像素子４からの各色成分毎の画像データから、生体の特徴部分の肌色を識別するための値を演算することで肌色を検出している。その検出方法としては、生体の特徴部分の画像データから、生体の特徴部分の肌色を識別するための値として、少なくとも色相Ｈ及び彩度Ｓの値を演算しており、さらに明度Ｌの値を演算している。さらに具体的には、生体の特徴部分の画像データから、以下の（３）式を用いて少なくとも色相Ｈ及び彩度Ｓの値を演算する。
Ｌ＝Ｙ
Ｈ＝ａｒｃｔａｎ（Ｖ／Ｕ）
Ｓ＝（Ｕ×Ｕ＋Ｖ×Ｖ）１／２ ・・・（３）
但し、
Ｙ＝０．２９９Ｒ＋０．５８７Ｇ＋０．１１４Ｂ
Ｕ＝Ｂ−Ｙ
Ｖ＝Ｒ−Ｙ
（但し、Ｈ：色相、Ｓ：彩度、Ｌ：明度、Ｙ：輝度、Ｒ：赤色の出力値、Ｇ：緑色の出力値、Ｂ：青色の出力値）
As described above, the reflected light of the subject 2 irradiated by the irradiation light of the forgery
L = Y
H = arctan (V / U)
S = (U × U + V × V) 1/2 (3)
However,
Y = 0.299R + 0.587G + 0.114B
U = BY
V = R−Y
(However, H: Hue, S: Saturation, L: Lightness, Y: Luminance, R: Red output value, G: Green output value, B: Blue output value)
色判定手段２３ｂは、色検出手段２３ａで検出された画像色を、データ記録手段７ａに記録された画像データの肌色を識別するための値により識別して適合するか否かを判定する。色判定手段２３ｂは、全ての色成分で判定することも可能であるが、例えば、緑色の平均値により判定する。より詳しくは、色判定手段２３ｂは、色相Ｈの値が所定の最小値と所定の最大値の間にあり、彩度Ｓの値が所定の最大値以下であるという条件を満足する場合に適合すると判定する。この条件とする理由は、肌色は、被写体２の体調、日焼け等による変化、照明条件の変化等により変動があるため、肌色の識別には、登録された肌色にそれらの変動を考慮した範囲内に、検出された肌色が適合するか否かを判定するようにしたためである。
又、Ｇ（緑）の平均値を用いて、肌色判別のための色相Ｈ、彩度Ｓの判別条件を切り換えるようにしても良い。
Ｇの平均値が高い（白飽和に近い）状態や、Ｇの平均値が低い（暗い）状態の場合等には、クロマ抑圧処理が施される可能性が高くなるため誤判別されやすくなる。誤判別を防止するためには判別条件を緩和することで対応できる。また、条件を厳しくし、照度が暗く判別できない等の警告を発生させることも可能である。
The color determination unit 23b determines whether or not the image color detected by the color detection unit 23a is identified by a value for identifying the skin color of the image data recorded in the
Alternatively, the determination condition of hue H and saturation S for skin color determination may be switched using an average value of G (green).
In a state where the average value of G is high (close to white saturation) or a state where the average value of G is low (dark), etc., there is a high possibility that the chroma suppression process will be performed, and therefore erroneous determination is likely. In order to prevent erroneous discrimination, it can be dealt with by relaxing discrimination conditions. It is also possible to generate a warning that the conditions are strict and the illuminance is dark and cannot be determined.
尚、本実施の形態ではホワイトバランスが調整された後のデジタルＲＧＢ信号ＳＡを用いているが、例えば、ホワイトバランス制御における各色のゲイン（利得）が入力される場合は、Ａ／Ｄ変換手段の出力（ホワイトバランスが調整されていないデジタルＲＧＢ信号ＳＡ）を用いて、各色のゲイン（利得）を考慮して被写体２の肌色を検出及び判定してもよい。 In this embodiment, the digital RGB signal SA after the white balance is adjusted is used. For example, when gains of each color in white balance control are input, the A / D conversion means Using the output (digital RGB signal SA in which the white balance is not adjusted), the skin color of the subject 2 may be detected and determined in consideration of the gain of each color.
個人識別用輝度レベル検出手段２６は、積算手段２２の分割領域毎のＲＧＢ各色積算値ＳＦからＲ（赤）画素（又は赤感度の高い画素）の積算値を用いて、撮像画面の各色成分毎の画像データの輝度信号のレベルの平均値（ＡＰＬ）を検出する。
The personal identification luminance level detection means 26 uses the integrated value of R (red) pixels (or pixels with high red sensitivity) from the RGB color integrated values SF for each divided area of the integrating
偽造判定用輝度レベル検出手段２７は、積算手段２２から出力された分割領域毎のＲＧＢ各色積算値ＳＦと、固体撮像素子４の各色成分毎の画素数とから、各色成分毎の画像データの輝度信号のレベルの平均値（ＡＰＬ）を検出する。その画像データの輝度信号のレベルの平均値として、特に、緑色の輝度信号のレベルの平均値（ＡＰＬ）を検出する。例えば、固体撮像素子４の緑画素数と積算手段２２の分割領域毎のＲＧＢ各色積算値ＳＦのＧ（緑）の積算値に基づいて、撮像画面のＡＰＬレベルを検出する。
個人識別用輝度レベル検出手段２６の出力ならびに、偽造判定用輝度レベル検出手段２７の出力は、制御手段１２にＲ画素とＧ画素の平均輝度値ＳＢとして入力される。
The forgery determination luminance
The output of the personal identification luminance level detection means 26 and the output of the counterfeit determination luminance level detection means 27 are input to the control means 12 as an average luminance value SB of R and G pixels.
被写体形状判定手段２８は、明度の値を用いて、生体の特徴部分の形状パターン及び濃淡の変化から生体の特徴部分の領域を検出し、その領域の検出結果を色検出手段２３ａに送出する。色検出手段２３ａは、その領域の検出結果が入力されることにより、各色成分毎の画像データのうちの生体の特徴部分の領域のデータを背景部分の領域のデータと分離させて肌色を検出することができる。
The subject
図７は、図１及び図５に示した個人識別装置により偽造判定処理後に個人識別処理を実施する場合の一例を示したフローチャートである。なお、図中の処理ステップＳ３及びＳ７に示した撮像処理は、図８を用いてさらに詳しく後述する。 FIG. 7 is a flowchart illustrating an example of the case where the personal identification process is performed after the forgery determination process by the personal identification device illustrated in FIGS. 1 and 5. Note that the imaging processing shown in the processing steps S3 and S7 in the drawing will be described in more detail later with reference to FIG.
個人識別処理手段７では、図示されないユーザからの識別処理の開始要求を受けたか否かを判断している。又は、指あるいは手のひら等の生体の個人認証に用いられる身体固有の特徴部分が、所定の検出位置に配置されたか否かを検出している。つまり、個人識別処理手段７は、個人識別処理が開始されたか否かを判断している（Ｓ１）。そして、例えば開始要求を受けたか、所定の検出位置に身体固有の特徴部分が配置された場合（Ｓ１：ＹＥＳ）に、個人識別処理手段７は、制御手段１２に対して個人識別処理が開始されたこと、つまり偽造判別処理を開始しても良いことを撮像動作切替信号ＣＥにより通知する。開始要求が無い場合や検出位置に特徴部分が配置されない場合（Ｓ１：ＮＯ）には、個人識別処理手段７は、再びステップＳ１の処理を繰り返す。 The personal identification processing means 7 determines whether or not an identification processing start request from a user (not shown) has been received. Alternatively, it is detected whether or not a body-specific feature portion used for biometric personal authentication such as a finger or a palm is placed at a predetermined detection position. That is, the personal identification processing means 7 determines whether or not personal identification processing has been started (S1). For example, when a start request is received or a characteristic part unique to the body is arranged at a predetermined detection position (S1: YES), the personal identification processing means 7 starts the personal identification processing for the control means 12. That is, the fact that the forgery determination process may be started is notified by the imaging operation switching signal CE. When there is no start request or when the characteristic part is not arranged at the detection position (S1: NO), the personal identification processing means 7 repeats the process of step S1 again.
この通知を受けた制御手段１２では、偽造判定用照明手段５を点灯すると共にアナログ信号処理手段８の露出条件を可視光により肌色を検出するモード、即ち偽造判別モードに設定し（Ｓ２）、図８を用いて後述する撮像処理を実施する（Ｓ３）。
信号処理手段１０内の色処理手段２３は、撮像された結果から肌色を検出し、データ記録手段７ａから読み出した肌色の登録データと比較する（Ｓ４）。
Upon receiving this notification, the control means 12 turns on the forgery determination illumination means 5 and sets the exposure condition of the analog signal processing means 8 to a mode in which skin color is detected by visible light, that is, a forgery determination mode (S2). 8 is used to perform an imaging process to be described later (S3).
The color processing means 23 in the signal processing means 10 detects the skin color from the imaged result and compares it with the skin color registration data read from the data recording means 7a (S4).
検出された肌色が登録データの肌色と一致する場合（Ｓ５：ＹＥＳ）には、色処理手段２３から一致を示す肌色一致判定結果ＳＤが個人識別処理手段７に出力され、個人識別処理手段７は、制御手段１２に対して検出された肌色が登録データと一致したこと、つまり個人識別処理を開始しても良いことを撮像動作切替信号ＣＥにより通知する。 If the detected skin color matches the skin color of the registered data (S5: YES), the color processing means 23 outputs the skin color match determination result SD indicating the match to the personal identification processing means 7, and the personal identification processing means 7 The imaging means switching signal CE notifies the control means 12 that the detected skin color matches the registered data, that is, the personal identification process may be started.
制御手段１２は、個人識別処理を開始しても良いことを示す撮像動作切替信号ＣＥを受けて、偽造判定用照明手段５を消灯して個人識別用照明手段１を点灯するように照明を切り替えると共にアナログ信号処理手段８の露出条件を近赤外光により指紋パターン又は静脈パターンを検出するモード、即ち個人識別モードに設定し（Ｓ６）、図８を用いて後述する撮像処理を実施する（Ｓ７）。その後、制御手段１２は、身体固有の特徴部分を撮像したデータに基づいて、指紋パターン又は静脈パターンの照合等の信号処理を実施することにより個人識別処理を実施する（Ｓ８）。 The control means 12 receives the imaging operation switching signal CE indicating that the personal identification processing may be started, and switches the illumination so that the forgery determination illumination means 5 is turned off and the personal identification illumination means 1 is turned on. At the same time, the exposure condition of the analog signal processing means 8 is set to a mode in which a fingerprint pattern or vein pattern is detected by near-infrared light, that is, a personal identification mode (S6), and an imaging process described later with reference to FIG. 8 is performed (S7). ). Thereafter, the control means 12 performs personal identification processing by performing signal processing such as matching of a fingerprint pattern or vein pattern based on data obtained by imaging a characteristic part unique to the body (S8).
図８は、図７の撮像処理の一例を示すフローチャートである。
制御手段１２は、個人識別装置の個人識別処置手段７からの撮像動作切替信号ＣＥによる動作が、個人識別処理を開始するモード、つまり偽造判別処理が終了して個人識別処理を実施するモードになっているかを判断する（Ｓ１０）。
FIG. 8 is a flowchart illustrating an example of the imaging process of FIG.
In the control means 12, the operation by the imaging operation switching signal CE from the personal identification processing means 7 of the personal identification device is in a mode in which the personal identification process is started, that is, in the mode in which the forgery determination process ends and the personal identification process is performed. (S10).
個人識別モードになっている場合（Ｓ１０：ＹＥＳ）には、制御手段１２は、信号処理手段１０からのＲ画素とＧ画素の平均輝度値（ＡＰＬ）ＳＢからＲのＡＰＬを検出し（Ｓ１１）、そのＲのＡＰＬに基づいて個人識別処理に適した露出条件を設定して、アナログ信号処理手段８に対してその露出条件が反映された利得制御信号ＣＦを送出する（Ｓ１２）。その後、制御手段１２は、個人識別モードで生体の個人認証に用いられる身体固有の特徴部分を撮影する（Ｓ１３）。 When the personal identification mode is set (S10: YES), the control means 12 detects the APL of R from the average luminance value (APL) SB of the R and G pixels from the signal processing means 10 (S11). Based on the APL of R, an exposure condition suitable for personal identification processing is set, and a gain control signal CF reflecting the exposure condition is sent to the analog signal processing means 8 (S12). Thereafter, the control means 12 captures a body-specific feature portion used for biometric personal authentication in the personal identification mode (S13).
一方、個人識別モードになっていない場合（Ｓ１０：ＮＯ）には、制御手段１２は、信号処理手段１０からのＲ画素とＧ画素の平均輝度値（ＡＰＬ）ＳＢからＧのＡＰＬを検出し（Ｓ１４）、そのＧのＡＰＬに基づいて偽造判別処理に適した露出条件を設定して、アナログ信号処理手段８に対してその露出条件が反映された利得制御信号ＣＦを送出する（Ｓ１２）。その後、制御手段１２は、偽造判別モードで生体の個人認証に用いられる身体固有の特徴部分を撮影する（Ｓ１３）。
On the other hand, when the personal identification mode is not set (S10: NO), the
上記では説明の便宜上から図７の処理と図８の処理に分けて説明したが、実際の処理は図７と図８の処理を組み合わせて実施してもよい。まずステップＳ６、Ｓ７、Ｓ１１及びＳ１２の個人識別モードについて説明する。個人識別モードは、個人識別用照明手段１を用いた被写体２の透過光を検出する処理であり、透過光を利用するため、赤の波長領域から近赤外光の波長領域までの信号成分のみしか存在しないため、図３のＲ（赤）画素に位置する受光素子（例えば図２の受光素子１３が図３のカラーフィルタの赤が配置されている位置の受光素子である場合）のみにデータが存在する。つまりＲの色信号のみが存在する。
In the above description, for convenience of explanation, the processing in FIG. 7 and the processing in FIG. 8 have been described separately. However, the actual processing may be implemented by combining the processing in FIG. 7 and FIG. First, the personal identification mode in steps S6, S7, S11 and S12 will be described. The personal identification mode is a process for detecting the transmitted light of the subject 2 using the lighting means 1 for personal identification. Since the transmitted light is used, only the signal component from the red wavelength region to the near infrared wavelength region is used. Therefore, data exists only in the light receiving element located at the R (red) pixel in FIG. 3 (for example, when the
信号処理手段１０では、分割領域毎のＲＧＢ各色積算値ＳＦからＲ画素の値（積算値）を検出し、受光素子の画素数で割る演算を実施することで、平均輝度レベル（ＡＰＬ：Ａｖｅｒａｇｅ Ｐｉｃｔｕｒｅ Ｌｅｖｅｌ）を検出し、Ｒ画素の平均輝度値ＳＢを制御手段１２に出力する。そして制御手段１２では、信号処理手段１０からのＲ画素の平均輝度値ＳＢに基づいて露出条件を判断し、タイミング生成手段１１（電子シャッタ制御）、アナログ信号処理手段８（利得制御）と、個人識別用照明手段１（照度制御）の制御を実施する。 The signal processing means 10 detects an R pixel value (integrated value) from the RGB color integrated values SF for each divided region, and performs an operation of dividing by the number of pixels of the light receiving element, thereby obtaining an average luminance level (APL: Average Picture). Level) is detected, and the average luminance value SB of the R pixel is output to the control means 12. Then, the control means 12 determines the exposure condition based on the average luminance value SB of the R pixel from the signal processing means 10, the timing generation means 11 (electronic shutter control), the analog signal processing means 8 (gain control), and the personal The identification illumination means 1 (illuminance control) is controlled.
Ｒ画素のみのデータを用いることで、Ｒ出力のダイナミックレンジを確保することができ、Ｒ信号のＳ／Ｎ改善、被写体２のコントラスト向上の効果がある。
By using data of only R pixels, the dynamic range of the R output can be secured, and there is an effect of improving the S / N of the R signal and improving the contrast of the
次にステップＳ２、Ｓ３、Ｓ１４及びＳ１２の偽造判別モードについて説明する。偽造判別モードは、偽造判定用照明手段５を用いた被写体２の反射光及び散乱光を検出する処理であり、反射光及び散乱光を利用するため、個人識別モードとは異なり、図３のＢ（青）画素に位置する受光素子や、Ｇ（緑）画素に位置する受光素子にもデータが存在する。従って、Ｒの色信号のみでなくＢの色信号やＧの色信号も存在する。 Next, the forgery determination mode in steps S2, S3, S14, and S12 will be described. The forgery determination mode is a process of detecting reflected light and scattered light of the subject 2 using the forgery determination illumination means 5 and uses reflected light and scattered light. Data also exists in the light receiving element located in the (blue) pixel and the light receiving element located in the G (green) pixel. Accordingly, not only the R color signal but also the B color signal and the G color signal exist.
そこで、信号処理手段１０では、分割領域毎のＲＧＢ各色積算値ＳＦからベイヤー配列においては輝度信号と同等であるＧ画素の値（積算値）を検出し、受光素子の画素数で割る演算を実施することで、平均輝度レベル（ＡＰＬ：Ａｖｅｒａｇｅ Ｐｉｃｔｕｒｅ Ｌｅｖｅｌ）を検出し、Ｇ画素の平均輝度値ＳＢを出力する。そして制御手段１２では、信号処理手段１０からのＧ画素の平均輝度値ＳＢに基づいて露出条件を判断し、タイミング生成手段１１（電子シャッタ制御）、アナログ信号処理手段８（利得制御）と、個人識別用照明手段１（照度制御）の制御を実施する。 Therefore, the signal processing means 10 detects the G pixel value (integrated value) equivalent to the luminance signal in the Bayer array from the RGB color integrated values SF for each divided region, and performs an operation of dividing by the number of pixels of the light receiving element. Thus, an average luminance level (APL) is detected, and an average luminance value SB of G pixels is output. The control means 12 determines the exposure condition based on the average luminance value SB of the G pixel from the signal processing means 10, the timing generation means 11 (electronic shutter control), the analog signal processing means 8 (gain control), The identification illumination means 1 (illuminance control) is controlled.
本実施の形態の個人識別装置では、個人識別処理を実施する前に肌色判別ができることから、被写体２の肌色のデータと、データ記録手段７ａ内の登録データとの照合を行うことで、被写体２の個人認証に用いられる特徴部分が偽造物であることを検出でき、偽造物による個人認証を防止することができる。また、被写体２の個人認証に用いられる特徴部分が、例えば油性フェルトペンや油により汚れていた場合、特徴部分の色が肌色とは異なる色であることを速やかに検知して、汚れている旨の警告をユーザへ示すことができるので、個人認証の精度が特徴部分の汚れにより低下する事態を避けることができる。
In the personal identification device according to the present embodiment, since the skin color can be discriminated before the personal identification process is performed, the
本実施の形態の個人識別装置では、カラーの固体撮像素子４を用いることで、従来の個人識別装置で問題になっていた偽造物の判別が困難という問題に対して、生体として重要な肌色のデータを用いることが可能となり、偽造判定の精度を向上させることができる。また、高精度で肌色を判定でき、その肌色検出結果に基づいて事前に偽造か否か判断することができ、その後の個人識別処理を実施するか、中止するかの選択が可能となり、システム全体の個人識別処理時間を短縮することができる。
In the personal identification device according to the present embodiment, the use of the color solid-state
このように本実施の形態では、指紋パターンあるいは指や手の静脈パターンを認証する個人識別装置に用いられる偽造物を検出する偽造判定用撮像装置あるいはそのような偽造判定用撮像装置を含む個人識別装置を提供でき、その際に特殊な機構部品や余分なメモリを用いないようにして低コストで小形であるが安全性が高いものを提供することができる。 As described above, in the present embodiment, a forgery determination imaging device for detecting a forgery used in a personal identification device for authenticating a fingerprint pattern or a finger or hand vein pattern, or a personal identification including such a forgery determination imaging device. An apparatus can be provided, and at that time, it is possible to provide a low-cost and small-sized but high-safety device without using special mechanical parts and extra memory.
実施の形態２．
図９及び図１０は、本発明の実施の形態２に係る個人識別装置の基本構成を示すブロック図である。
図９及び図１０の構成は、図１等に示した実施の形態１の構成に対して、近赤外光をカットするための赤外カットフィルタ（ＩＲＣＦ：Ｉｎｆｒａ Ｒｅｄ Ｃｕｔ Ｆｉｌｔｅｒ）２４が追加され、その赤外カットフィルタ２４を近赤外光を固体撮像素子４に受光させる位置と受光させない位置に制御するフィルタ位置制御手段（不図示）を有している点が異なっている。他の構成は実施の形態１と同様であるので重複する説明を省略する。
9 and 10 are block diagrams showing the basic configuration of the personal identification device according to
9 and 10, an infrared cut filter (IRCF: Infra Red Cut Filter) 24 for cutting near infrared light is added to the configuration of the first embodiment shown in FIG. 1 and the like. The
図９では、被写体２（又はレンズ３）から撮像素子４までの光路を横切るように、赤色光又は近赤外光領域内の発光スペクトルを遮光する赤外カットフィルタ２４がフィルタ位置制御手段により挿入位置と非挿入位置を切替可能に配置されている。つまり、赤外カットフィルタ２４は、近赤外光をカットするための有効位置に配置されている場合を示している。この配置の場合は、赤外カットフィルタ２４は光源からの出射光の中の近赤外成分を除去することができる。従って、個人識別用照明手段１から出射されて被写体２を透過した近赤外光は固体撮像素子４に結像される前に除去されて受光されない。
In FIG. 9, an
図１０では、レンズ３から撮像素子４までの光路を横切らないように赤外カットフィルタ２４がフィルタ位置制御手段により配置されている。つまり、赤外カットフィルタ２４は、近赤外光をカットするための有効ではない位置に配置されている場合を示している。この配置の場合は、赤外カットフィルタ２４は光源からの出射光の中の近赤外成分が除去されない。従って、個人識別用照明手段１から出射されて被写体２を透過した近赤外光は固体撮像素子４に結像されて受光される。
In FIG. 10, the
データ記録手段７ａには、赤色光又は近赤外光領域内の発光スペクトルの照射光により撮像された場合の画像データが予め記録される。制御手段１２は、赤外カットフィルタ２４をフィルタ位置制御手段により非挿入位置に配置させて偽造判定用撮像装置の処理を実施させ、身体の特徴部分から検出された色が登録された画像データの色と適合する場合には、赤外カットフィルタ２４をフィルタ位置制御手段により挿入位置に配置させて個人識別処理手段の処理を実施する。
In the data recording means 7a, image data when captured by irradiation light having an emission spectrum in the red light or near infrared light region is recorded in advance. The control means 12 arranges the
このように本実施の形態の個人識別装置では、実施の形態１の効果に加えて、指紋パターン、静脈パターンなどの特徴点検出精度を低下させることなく、受光された可視光の色再現性を向上させて、色を検出して肌色判別する精度を向上させることができる。 As described above, in the personal identification device according to the present embodiment, in addition to the effects of the first embodiment, the color reproducibility of the received visible light is reduced without reducing the accuracy of detecting feature points such as fingerprint patterns and vein patterns. It is possible to improve the accuracy of detecting the color and discriminating the skin color.
実施の形態３
図１１は、本発明の実施の形態３に係る固体撮像素子のカラーフィルタの配置を示す図である。
本実施の形態の固体撮像素子４は、個人識別用照明手段１の照射光（近赤外光）を減衰させないで受光するために、上部に複数の色成分フィルタが配列されない画素が所定順序で配列される。
FIG. 11 is a diagram showing the arrangement of the color filters of the solid-state imaging device according to
In the solid-
実施の形態３の構成は、図１等に示した実施の形態１あるいは図９等に示し他実施の形態２の構成に対して、図４に示した固体撮像素子４のカラーフィルタの配置が異なっている。より具体的には、本実施の形態では、図４のカラーフィルタの一部のＧ（例えばベイヤー配列における輝度データを得るためのＧ）に代えてＮＩＲ（Ｎｅａｒ Ｉｎｆｒａ Ｒｅｄ）と記載した画素が配置されている。このＮＩＲという記載は、フィルタが配置されず、近赤外光をそのまま透過させる画素であることを意味している。他の構成は、実施の形態１あるいは実施の形態２と同様であるので重複する説明を省略する。
In the configuration of the third embodiment, the arrangement of the color filters of the solid-
このように本実施の形態の個人識別装置では、実施の形態１の効果に加えて、ＮＩＲと示された画素では、実施の形態１等で用いていたＲのフィルタさえ配置されていないため、被写体２を透過した近赤外光がＲのフィルタにより減衰されないことになり透過率が高くなり、近赤外光の感度を高めることができる。また、１枚の固体撮像素子４上に近赤外光とその他の色成分の光を受光する画素が配置されることになるため、偽造判別モードの撮像処理と個人識別モードの撮像処理を一回の撮影で実施することができるので、偽造判別を伴う個人識別に必要となる時間を短縮することができる。
As described above, in the personal identification device according to the present embodiment, in addition to the effects of the first embodiment, even the R filter used in the first embodiment is not arranged in the pixel indicated as NIR. The near-infrared light transmitted through the
１ 個人識別用照明手段、 ２ 被写体、 ３ レンズ、 ４ 固体撮像素子、 ５ 偽造判定用照明手段、 ６ 撮像処理手段、 ７ 個人識別処理手段、 ７ａ データ記録手段（データベース）、 ８ アナログ信号処理手段、 ９ Ａ／Ｄ変換手段、 １０ 信号処理手段、 １１ タイミング生成手段、 １２ 制御手段、 １３ 第一の光電変換素子、 １４ 第二の光電変換素子、 １５ 第三の光電変換素子、 １６ 第四の光電変換素子、 １７ 垂直ＣＣＤ、 １８ 水平ＣＣＤ、 １９ フローティング・ドレイン・アンプ、 ２０ ホワイトバランス制御手段、 ２１ 階調補正手段、 ２２ 積算手段、 ２３ 色処理手段、 ２３ａ 色検出手段、 ２３ｂ 色判定手段、 ２４ 赤外カットフィルタ、 ２６ 個人識別用輝度レベル検出手段、 ２７ 偽造判定用輝度レベル検出手段、 ２８ 被写体形状判定手段。
DESCRIPTION OF SYMBOLS 1 Illumination means for personal identification, 2 Subject, 3 Lens, 4 Solid-state image sensor, 5 Illumination means for forgery determination, 6 Imaging processing means, 7 Personal identification processing means, 7a Data recording means (database), 8 Analog signal processing means, 9 A / D conversion means, 10 signal processing means, 11 timing generation means, 12 control means, 13 first photoelectric conversion element, 14 second photoelectric conversion element, 15 third photoelectric conversion element, 16 fourth
Claims (13)
前記撮像手段からの各色成分毎の画像データから、前記生体の特徴部分の色を検出する色検出手段と、
前記身体の特徴部分が可視光により撮像された場合の画像データが予め記録されるデータ記録手段と、
前記色検出手段で検出された画像色を、前記データ記録手段に記録された画像データにより識別して適合するか否かを判定する色判定手段と、
前記撮像手段、色検出手段、データ記録手段及び色判定手段の各動作を制御すると共に、前記身体の特徴部分から検出された色が登録された画像データの色と適合しない場合に、生体の前記特徴部分を偽造物と判定する制御手段
を備えることを特徴とする偽造判定用撮像装置。 An imaging means for imaging a body-specific characteristic portion used for biometric personal authentication as a subject with at least visible light in color, and outputting image data for each of a plurality of color components;
Color detection means for detecting the color of the characteristic part of the living body from image data for each color component from the imaging means;
Data recording means for pre-recording image data when the body characteristic part is imaged by visible light;
Color determination means for determining whether or not the image color detected by the color detection means is identified by the image data recorded in the data recording means; and
Controlling the operations of the imaging means, color detection means, data recording means, and color determination means, and when the color detected from the body characteristic part does not match the color of the registered image data, An imaging device for forgery determination, comprising: control means for determining a characteristic part as a counterfeit.
前記データ記録手段は、前記画像データの少なくとも色を識別するための値を予め記録し、
前記色判定手段は、前記画像色を、前記画像データの色を識別するための値により識別する
ことを特徴とする請求項１に記載の偽造判定用撮像装置。 The color detection means detects a color by calculating a value for identifying the color of the characteristic part of the living body,
The data recording means records in advance a value for identifying at least the color of the image data;
The forgery determination imaging apparatus according to claim 1, wherein the color determination unit identifies the image color by a value for identifying a color of the image data.
ことを特徴とする請求項１又は２に記載の偽造判定用撮像装置。 The color detecting means calculates at least values of hue H and saturation S as values for identifying the color of the biological feature portion from image data of the biological feature portion. The imaging device for forgery determination according to 1 or 2.
ことを特徴とする請求項３に記載の偽造判定用撮像装置。
Ｌ＝Ｙ
Ｈ＝ａｒｃｔａｎ（Ｖ／Ｕ）
Ｓ＝（Ｕ×Ｕ＋Ｖ×Ｖ）１／２
但し、
Ｙ＝０．２９９Ｒ＋０．５８７Ｇ＋０．１１４Ｂ
Ｕ＝Ｂ−Ｙ
Ｖ＝Ｒ−Ｙ
（但し、Ｈ：色相、Ｓ：彩度、Ｌ：明度、Ｙ：輝度、Ｒ：赤色の出力値、Ｇ：緑色の出力値、Ｂ：青色の出力値） The imaging device for counterfeit determination according to claim 3, wherein the color detection means calculates at least the values of hue H and saturation S from the image data of the characteristic portion of the living body using the following equations. .
L = Y
H = arctan (V / U)
S = (U × U + V × V) 1/2
However,
Y = 0.299R + 0.587G + 0.114B
U = BY
V = R−Y
(However, H: Hue, S: Saturation, L: Lightness, Y: Luminance, R: Red output value, G: Green output value, B: Blue output value)
ことを特徴とする請求項３又は４に記載の偽造判定用撮像装置。 The color determination unit determines that the hue H is suitable when the value of the hue H is between a predetermined minimum value and a predetermined maximum value, and the condition that the value of the saturation S is equal to or less than the predetermined maximum value is satisfied. The imaging device for counterfeit determination according to claim 3 or 4, characterized in that:
前記明度の値を用いて、前記生体の特徴部分の形状パターン及び濃淡の変化から、前記生体の特徴部分の領域を検出し、該検出結果を前記色検出手段に送出する被写体形状判定手段を備え、
前記色検出手段は、各色成分毎の画像データから、前記生体の特徴部分の領域のデータを背景部分の領域のデータと分離させて色を検出する
ことを特徴とする請求項３〜５の何れかに記載の偽造判定用撮像装置。 The color detection means further calculates a value of brightness L from the image data of the characteristic part of the living body,
Subject shape determining means for detecting a region of the feature portion of the living body from the shape pattern and shading change of the feature portion of the living body using the lightness value and sending the detection result to the color detecting means. ,
The color detecting means detects the color by separating the data of the region of the characteristic part of the living body from the data of the region of the background part from the image data for each color component. An imaging device for counterfeit determination according to claim 1.
ことを特徴とする請求項１〜６の何れかに記載の偽造判定用撮像装置。 The imaging unit includes a solid-state imaging device capable of imaging at least an emission spectrum of visible light, and a plurality of color component filters arranged in a predetermined order on top of each pixel. An imaging device for counterfeit determination according to any one of the above.
ことを特徴とする請求項１〜７の何れかに記載の偽造判定用撮像装置。 The forgery determination illumination means for irradiating the subject with an emission spectrum in a visible light region from the imaging means side in order to cause the imaging means to capture the subject with reflected light. The imaging device for counterfeit determination in any one of -7.
前記データ記録手段には、さらに前記身体の特徴部分の画像データから少なくとも個人識別処理に用いる値が予め記録され、
前記撮像手段からの各色成分毎の画像データを、前記データ記録手段に登録された画像データと比較して適合するかを判定する個人識別処理手段を備え、
前記制御手段は、さらに前記個人識別処理手段の動作を制御すると共に、前記身体の特徴部分から検出された色が登録された画像データの色と適合する場合に、個人識別処理手段の処理を実施する
ことを特徴とする個人識別装置。 In addition to the configuration of the imaging device for counterfeit determination according to any one of claims 1 to 8,
The data recording means further records in advance at least a value used for personal identification processing from the image data of the body characteristic portion,
Comprising individual identification processing means for determining whether or not the image data for each color component from the imaging means is compared with the image data registered in the data recording means,
The control means further controls the operation of the personal identification processing means, and executes the processing of the personal identification processing means when the color detected from the body feature matches the color of the registered image data. A personal identification device characterized by:
前記撮像手段は、前記可視光に加えて前記個人識別用照明手段の照射光により撮像された画像データを出力可能であり、
前記データ記録手段には、前記個人識別用照明手段の照射光により撮像された場合の画像データが予め記録され、
前記制御手段は、前記偽造判定用撮像装置の処理を実施させ、前記身体の特徴部分から検出された色が登録された画像データの色と適合する場合には、前記個人識別用照明手段を点灯させて前記個人識別処理手段の処理を実施する
ことを特徴とする請求項９に記載の個人識別装置。 Illuminating means for personal identification that irradiates the subject with a light emission spectrum in the red light or near infrared light region from the opposite side of the imaging means,
The imaging means is capable of outputting image data captured by the irradiation light of the personal identification illumination means in addition to the visible light,
In the data recording means, image data in the case of taking an image with the irradiation light of the personal identification illumination means is recorded in advance,
The control means causes the forgery determination imaging device to perform processing, and turns on the lighting means for personal identification when the color detected from the body feature matches the color of the registered image data. The personal identification device according to claim 9, wherein the processing of the personal identification processing means is performed.
前記撮像手段は、前記可視光に加えて前記赤色光又は近赤外光領域内の発光スペクトルの照射光により撮像された画像データを出力可能であり、
前記データ記録手段には、前記赤色光又は近赤外光領域内の発光スペクトルの照射光により撮像された場合の画像データが予め記録され、
前記制御手段は、前記赤外カットフィルタを非挿入位置に配置させて前記偽造判定用撮像装置の処理を実施させ、前記身体の特徴部分から検出された色が登録された画像データの色と適合する場合には、前記赤外カットフィルタを挿入位置に配置させて前記個人識別処理手段の処理を実施する
ことを特徴とする請求項９又は１０に記載の個人識別装置。 Between the subject and the imaging means, an infrared cut filter for shielding the emission spectrum in the red light or near infrared light region from the subject is provided so as to be able to switch between the insertion position and the non-insertion position.
The imaging means can output image data captured by irradiation light of an emission spectrum in the red light or near infrared light region in addition to the visible light,
In the data recording means, image data is recorded in advance when imaged by the irradiation light of the emission spectrum in the red light or near infrared light region,
The control means arranges the infrared cut filter at a non-insertion position to perform the processing of the imaging device for forgery determination, and the color detected from the characteristic part of the body matches the color of the registered image data 11. The personal identification device according to claim 9, wherein the personal identification processing means is implemented by arranging the infrared cut filter at an insertion position.
ことを特徴とする請求項９又は１０に記載の個人識別装置。 11. The solid-state imaging device, wherein pixels on which the plurality of color component filters are not arranged are arranged in a predetermined order in order to receive irradiation light of the personal identification illumination unit. The personal identification device described in 1.
ことを特徴とする請求項９〜１２の何れかに記載の個人識別装置。 The control means causes the forgery determination imaging device to perform processing, and if the color detected from the body feature portion does not match the color of the registered image data, the feature portion of the living body is forged. The personal identification device according to any one of claims 9 to 12, wherein the personal identification processing unit is stopped.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2005311206A JP2007122237A (en) | 2005-10-26 | 2005-10-26 | Forgery-deciding imaging device and individual identification device |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2005311206A JP2007122237A (en) | 2005-10-26 | 2005-10-26 | Forgery-deciding imaging device and individual identification device |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| JP2007122237A true JP2007122237A (en) | 2007-05-17 |
Family
ID=38146041
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2005311206A Pending JP2007122237A (en) | 2005-10-26 | 2005-10-26 | Forgery-deciding imaging device and individual identification device |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP2007122237A (en) |
Cited By (20)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2010070745A1 (en) | 2008-12-17 | 2010-06-24 | 富士通株式会社 | Biometric authentication device and biometric authentication method |
| WO2010143671A1 (en) | 2009-06-08 | 2010-12-16 | 日本電気株式会社 | Determination device, fingerprint input device, determination method, and determination program |
| WO2011108582A1 (en) * | 2010-03-04 | 2011-09-09 | 日本電気株式会社 | Foreign object assessment device, foreign object assessment method, and foreign object assessment program |
| WO2013093953A1 (en) * | 2011-12-19 | 2013-06-27 | 日立オムロンターミナルソリューションズ株式会社 | Biometric authentication device, blood vessel image photography device, and method |
| WO2013136553A1 (en) * | 2012-03-16 | 2013-09-19 | ユニバーサルロボット株式会社 | Personal authentication method and personal authentication device |
| US8855381B2 (en) | 2009-11-10 | 2014-10-07 | Nec Corporation | Fake-finger determination device, fake-finger determination method and fake-finger determination program |
| JP2016510467A (en) * | 2013-01-17 | 2016-04-07 | サイオニクス、エルエルシー | Biological imaging apparatus and related method |
| JP2017056029A (en) * | 2015-09-17 | 2017-03-23 | 日本電気株式会社 | Organism discrimination device, organism discrimination method and program |
| US9619690B2 (en) | 2012-03-27 | 2017-04-11 | Nec Corporation | Authentication apparatus, prism member for authentication and authentication method |
| CN107411705A (en) * | 2017-04-05 | 2017-12-01 | 展谱光电科技（上海）有限公司 | Multispectral shooting and projection arrangement and method |
| US20180018446A1 (en) * | 2011-06-03 | 2018-01-18 | Sensipass Ltd. | Method And Computer Program Product For Providing Authentication To Control Access To A Computer System Using A Previously Measured And Recorded Input |
| US9886618B2 (en) | 2011-03-25 | 2018-02-06 | Nec Corporation | Authentication apparatus and authentication method |
| US10229951B2 (en) | 2010-04-21 | 2019-03-12 | Sionyx, Llc | Photosensitive imaging devices and associated methods |
| US10244188B2 (en) | 2011-07-13 | 2019-03-26 | Sionyx, Llc | Biometric imaging devices and associated methods |
| US10269861B2 (en) | 2011-06-09 | 2019-04-23 | Sionyx, Llc | Process module for increasing the response of backside illuminated photosensitive imagers and associated methods |
| US10347682B2 (en) | 2013-06-29 | 2019-07-09 | Sionyx, Llc | Shallow trench textured regions and associated methods |
| US10361083B2 (en) | 2004-09-24 | 2019-07-23 | President And Fellows Of Harvard College | Femtosecond laser-induced formation of submicrometer spikes on a semiconductor substrate |
| US10361232B2 (en) | 2009-09-17 | 2019-07-23 | Sionyx, Llc | Photosensitive imaging devices and associated methods |
| US10374109B2 (en) | 2001-05-25 | 2019-08-06 | President And Fellows Of Harvard College | Silicon-based visible and near-infrared optoelectric devices |
| US10505054B2 (en) | 2010-06-18 | 2019-12-10 | Sionyx, Llc | High speed photosensitive devices and associated methods |
Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2003075135A (en) * | 2001-08-31 | 2003-03-12 | Nec Corp | Fingerprint image input device and organism discrimination method by fingerprint image |
| JP2004118627A (en) * | 2002-09-27 | 2004-04-15 | Toshiba Corp | Figure identification device and method |
| JP2005071118A (en) * | 2003-08-26 | 2005-03-17 | Hitachi Ltd | Personal identification device and method |
| JP2005204017A (en) * | 2004-01-15 | 2005-07-28 | Oki Electric Ind Co Ltd | Portable information terminal |
| JP2005295381A (en) * | 2004-04-02 | 2005-10-20 | Sony Corp | Imaging apparatus |
-
2005
- 2005-10-26 JP JP2005311206A patent/JP2007122237A/en active Pending
Patent Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2003075135A (en) * | 2001-08-31 | 2003-03-12 | Nec Corp | Fingerprint image input device and organism discrimination method by fingerprint image |
| JP2004118627A (en) * | 2002-09-27 | 2004-04-15 | Toshiba Corp | Figure identification device and method |
| JP2005071118A (en) * | 2003-08-26 | 2005-03-17 | Hitachi Ltd | Personal identification device and method |
| JP2005204017A (en) * | 2004-01-15 | 2005-07-28 | Oki Electric Ind Co Ltd | Portable information terminal |
| JP2005295381A (en) * | 2004-04-02 | 2005-10-20 | Sony Corp | Imaging apparatus |
Cited By (41)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US10374109B2 (en) | 2001-05-25 | 2019-08-06 | President And Fellows Of Harvard College | Silicon-based visible and near-infrared optoelectric devices |
| US10741399B2 (en) | 2004-09-24 | 2020-08-11 | President And Fellows Of Harvard College | Femtosecond laser-induced formation of submicrometer spikes on a semiconductor substrate |
| US10361083B2 (en) | 2004-09-24 | 2019-07-23 | President And Fellows Of Harvard College | Femtosecond laser-induced formation of submicrometer spikes on a semiconductor substrate |
| US8948464B2 (en) | 2008-12-17 | 2015-02-03 | Fujitsu Limited | Biometric authentication device and biometric authentication method |
| WO2010070745A1 (en) | 2008-12-17 | 2010-06-24 | 富士通株式会社 | Biometric authentication device and biometric authentication method |
| WO2010143671A1 (en) | 2009-06-08 | 2010-12-16 | 日本電気株式会社 | Determination device, fingerprint input device, determination method, and determination program |
| US9165178B2 (en) | 2009-06-08 | 2015-10-20 | Nec Corporation | Determination device, fingerprint input device, determination method and determination program for detecting the forgery of a finger |
| US8768015B2 (en) | 2009-06-08 | 2014-07-01 | Nec Corporation | Determination device, fingerprint input device, determination method, and determination program |
| US10361232B2 (en) | 2009-09-17 | 2019-07-23 | Sionyx, Llc | Photosensitive imaging devices and associated methods |
| US8855381B2 (en) | 2009-11-10 | 2014-10-07 | Nec Corporation | Fake-finger determination device, fake-finger determination method and fake-finger determination program |
| JP5709016B2 (en) * | 2009-11-10 | 2015-04-30 | 日本電気株式会社 | Fake finger determination device, fake finger determination method, and fake finger determination program |
| WO2011108582A1 (en) * | 2010-03-04 | 2011-09-09 | 日本電気株式会社 | Foreign object assessment device, foreign object assessment method, and foreign object assessment program |
| JP5725012B2 (en) * | 2010-03-04 | 2015-05-27 | 日本電気株式会社 | Foreign object determination device, foreign object determination method, and foreign object determination program |
| KR101413413B1 (en) | 2010-03-04 | 2014-06-27 | 닛본 덴끼 가부시끼가이샤 | Foreign object determination device, foreign object determination method and foreign object determination program |
| US9295415B2 (en) | 2010-03-04 | 2016-03-29 | Nec Corporation | Foreign object determination device, foreign object determination method and foreign object determination program |
| US10229951B2 (en) | 2010-04-21 | 2019-03-12 | Sionyx, Llc | Photosensitive imaging devices and associated methods |
| US10505054B2 (en) | 2010-06-18 | 2019-12-10 | Sionyx, Llc | High speed photosensitive devices and associated methods |
| US10922523B2 (en) | 2011-03-25 | 2021-02-16 | Nec Corporation | Authentication using prism |
| US11600104B2 (en) | 2011-03-25 | 2023-03-07 | Nec Corporation | Authentication using prism |
| US11010587B2 (en) | 2011-03-25 | 2021-05-18 | Nec Corporation | Authentication using prism |
| US9886618B2 (en) | 2011-03-25 | 2018-02-06 | Nec Corporation | Authentication apparatus and authentication method |
| US10956707B2 (en) | 2011-03-25 | 2021-03-23 | Nec Corporation | Authentication apparatus and authentication method |
| US11908232B2 (en) | 2011-03-25 | 2024-02-20 | Nec Corporation | Authentication using prism |
| US20180018446A1 (en) * | 2011-06-03 | 2018-01-18 | Sensipass Ltd. | Method And Computer Program Product For Providing Authentication To Control Access To A Computer System Using A Previously Measured And Recorded Input |
| US10269861B2 (en) | 2011-06-09 | 2019-04-23 | Sionyx, Llc | Process module for increasing the response of backside illuminated photosensitive imagers and associated methods |
| US10244188B2 (en) | 2011-07-13 | 2019-03-26 | Sionyx, Llc | Biometric imaging devices and associated methods |
| WO2013093953A1 (en) * | 2011-12-19 | 2013-06-27 | 日立オムロンターミナルソリューションズ株式会社 | Biometric authentication device, blood vessel image photography device, and method |
| JPWO2013093953A1 (en) * | 2011-12-19 | 2015-04-27 | 日立オムロンターミナルソリューションズ株式会社 | Biometric authentication device, blood vessel imaging device, and method |
| CN104246820A (en) * | 2012-03-16 | 2014-12-24 | 环球机器人株式会社 | Personal authentication method and personal authentication device |
| WO2013136553A1 (en) * | 2012-03-16 | 2013-09-19 | ユニバーサルロボット株式会社 | Personal authentication method and personal authentication device |
| JP5509459B2 (en) * | 2012-03-16 | 2014-06-04 | ユニバーサルロボット株式会社 | Personal authentication method and personal authentication device |
| US9594891B2 (en) | 2012-03-16 | 2017-03-14 | Universal Robot Kabushiki Kaisha | Personal authentication method and personal authentication device |
| CN104246820B (en) * | 2012-03-16 | 2018-12-25 | 环球机器人株式会社 | Authenticating method and person authentication device |
| US9619690B2 (en) | 2012-03-27 | 2017-04-11 | Nec Corporation | Authentication apparatus, prism member for authentication and authentication method |
| JP2016510467A (en) * | 2013-01-17 | 2016-04-07 | サイオニクス、エルエルシー | Biological imaging apparatus and related method |
| US11069737B2 (en) | 2013-06-29 | 2021-07-20 | Sionyx, Llc | Shallow trench textured regions and associated methods |
| US10347682B2 (en) | 2013-06-29 | 2019-07-09 | Sionyx, Llc | Shallow trench textured regions and associated methods |
| US10503958B2 (en) | 2015-09-17 | 2019-12-10 | Nec Corporation | Living body determination device, living body determination method, and program |
| JP2017056029A (en) * | 2015-09-17 | 2017-03-23 | 日本電気株式会社 | Organism discrimination device, organism discrimination method and program |
| WO2017047525A1 (en) * | 2015-09-17 | 2017-03-23 | 日本電気株式会社 | Living body determination device, living body determination method, and program |
| CN107411705A (en) * | 2017-04-05 | 2017-12-01 | 展谱光电科技（上海）有限公司 | Multispectral shooting and projection arrangement and method |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP2007122237A (en) | Forgery-deciding imaging device and individual identification device | |
| KR100835365B1 (en) | Method and device for iris recognition | |
| CN109074475B (en) | Electronic device including pinhole array mask and related methods | |
| US10360431B2 (en) | Electronic device including pin hole array mask above optical image sensor and related methods | |
| US9152850B2 (en) | Authentication apparatus, authentication method, and program | |
| US10579871B2 (en) | Biometric composite imaging system and method reusable with visible light | |
| KR102270674B1 (en) | Biometric camera | |
| JP4386096B2 (en) | Image input processing apparatus and method | |
| US20070189583A1 (en) | Infrared face authenticating apparatus, and portable terminal and security apparatus including the same | |
| KR101701559B1 (en) | Image correction apparatus, image correction method, and biometric authentication apparatus | |
| CN211062054U (en) | Biometric imaging arrangement and electronic device | |
| JP2012014668A (en) | Image processing apparatus, image processing method, program, and electronic apparatus | |
| JP4385284B2 (en) | Imaging apparatus and imaging method | |
| JP2009009403A (en) | Biometrics device and living body detection method | |
| US20160301844A1 (en) | System, method, and device for enhanced imaging device | |
| GB2500738A (en) | Method for detecting and tracking smiling faces | |
| WO2021041928A1 (en) | Systems and methods for creating a full-color image in low light | |
| KR101588225B1 (en) | Iris data Registration and Authentication device and the method in the camera of a mobile | |
| CN110574368B (en) | Solid-state imaging device, imaging system, and object recognition system | |
| CN113170046B (en) | Solid-state imaging device, solid-state imaging method, and electronic apparatus | |
| JP2008021072A (en) | Photographic system, photographic device and collation device using the same, and photographic method | |
| US20230282022A1 (en) | Electronic device | |
| JP2006031185A (en) | Photographing device and individual identification device | |
| JP2005327161A (en) | Iris authenticating apparatus | |
| EP2805514B1 (en) | Apparatus for ambient light spectrum detection in digital photography |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20071109 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20100112 |
|
| A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20100706 |