JP5144217B2 - IMAGING DEVICE, IMAGING DEVICE MANUFACTURING METHOD, AND DEVICE MOUNTING IMAGING DEVICE - Google Patents

IMAGING DEVICE, IMAGING DEVICE MANUFACTURING METHOD, AND DEVICE MOUNTING IMAGING DEVICE Download PDF

Info

Publication number
JP5144217B2
JP5144217B2 JP2007284505A JP2007284505A JP5144217B2 JP 5144217 B2 JP5144217 B2 JP 5144217B2 JP 2007284505 A JP2007284505 A JP 2007284505A JP 2007284505 A JP2007284505 A JP 2007284505A JP 5144217 B2 JP5144217 B2 JP 5144217B2
Authority
JP
Japan
Prior art keywords
light
layer
light emitting
imaging
emitting unit
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2007284505A
Other languages
Japanese (ja)
Other versions
JP2009110452A (en
Inventor
康隆 昆野
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hitachi Ltd
Original Assignee
Hitachi Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hitachi Ltd filed Critical Hitachi Ltd
Priority to JP2007284505A priority Critical patent/JP5144217B2/en
Publication of JP2009110452A publication Critical patent/JP2009110452A/en
Application granted granted Critical
Publication of JP5144217B2 publication Critical patent/JP5144217B2/en
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Description

本発明は、指静脈、掌静脈、手の甲静脈、指紋などを用いた認証装置用の撮像装置、及び、画像などを読み取る撮像装置、更に、これらを搭載した携帯電話、PHS、モバイル機器、ディスプレイ、TV、現金自動取引装置、認証装置、スキャナ、及びファックシミリ装置などの装置に関する。   The present invention relates to an imaging device for an authentication device using a finger vein, a palm vein, a back of a hand, a fingerprint, and the like, and an imaging device for reading an image, and a mobile phone, PHS, mobile device, display, The present invention relates to an apparatus such as a TV, an automatic cash transaction apparatus, an authentication apparatus, a scanner, and a fuck simili apparatus.

以下、指静脈認証装置を、本発明が適用される代表例として記す。   Hereinafter, a finger vein authentication device will be described as a representative example to which the present invention is applied.

本人を識別する認証方法として、これまでパスワードが広く用いられてきたが、より確実な認証技術が求められるにつれて、生体認証が注目されている。この認証では生体の一部や動作の特徴(生体情報)を使うため、鍵やパスワードに比べてセキュリティが高く、忘却や紛失などがないという利便性が高い。生体情報として指紋、虹彩、顔、掌形、手の甲、掌又は指の静脈、声紋、署名(筆跡)、匂いなどを用いた方法が研究されている。特に近年、指の静脈を用いた方式が注目されている。   Passwords have been widely used as an authentication method for identifying an individual, but biometric authentication has attracted attention as a more reliable authentication technique is required. Since this authentication uses a part of the living body and the characteristics of the operation (biological information), the security is higher than that of the key or password, and the convenience is high that there is no forgetting or loss. Methods using biometric information using fingerprints, irises, faces, palm shapes, backs of hands, palm or finger veins, voice prints, signatures (handwriting), odors, and the like have been studied. In particular, in recent years, a method using a finger vein has attracted attention.

指静脈を用いた認証装置は、特許文献1に記載されているように、近赤外光を用いて撮影した指の静脈像を用いて認証を行う。この特許文献1に記載された方法では、近赤外光源と撮像部とで指を挟んで置く構造を成し、指を透過した光を撮像部で画像化する。この画像から得られる血管パターン画像を、事前に登録してある血管パターン画像との間で照合し、個人を認証する。別の構成として、特許文献2及び特許文献3に記載された方法では、指に対して光源を撮像部と同じ側に配置し、指の内部で散乱した光を得ることで血管パターン画像を得る。このような構成では、撮像部の上部に開放されて空間ができ、利用者の圧迫感を低減できると共に、認証装置の小型化や薄型化が可能になる。   As described in Patent Document 1, an authentication apparatus using a finger vein performs authentication using a finger vein image captured using near-infrared light. In the method described in Patent Document 1, a structure is used in which a finger is sandwiched between a near-infrared light source and an imaging unit, and light transmitted through the finger is imaged by the imaging unit. The blood vessel pattern image obtained from this image is collated with a previously registered blood vessel pattern image to authenticate the individual. As another configuration, in the methods described in Patent Literature 2 and Patent Literature 3, a light source is disposed on the same side as the imaging unit with respect to the finger, and a blood vessel pattern image is obtained by obtaining light scattered inside the finger. . With such a configuration, a space is created by opening the upper part of the imaging unit, so that the user's feeling of pressure can be reduced, and the authentication device can be made smaller and thinner.

このような指静脈認証技術は、現在、銀行の現金自動取引装置や入退出管理装置などで利用されており、更なる適用として、携帯電話機などのモバイル機器への適用が期待されている。このようなアプリケーションでは、認証装置の小型化、薄型化が望まれている。また、表示装置と撮像装置との一体化が望まれている。更に、表示装置と撮像装置との一体化は、現行の装置においても表示による情報提供が可能となり、ユーザにとって利便性が向上する。   Such finger vein authentication technology is currently used in bank automatic cash transaction devices and entry / exit management devices, and is expected to be applied to mobile devices such as mobile phones. In such an application, it is desired to reduce the size and thickness of the authentication device. Moreover, integration of a display device and an imaging device is desired. Furthermore, the integration of the display device and the imaging device enables information provision by display even in the current device, which improves convenience for the user.

これを実現する方法として、光源の上に光検出素子アレイを配置した構造がある。特許文献4及び特許文献5には、ディスプレイの上に光検出素子アレイを配置し、被写体とディスプレイで光検出素子アレイを挟んだ構造を成す光源一体の撮像装置が記載されている。ディスプレイの光を透過する光検出素子アレイを用いることによって、ディスプレイの光を表示だけでなく、撮影の際に被写体に照射して画像を得ることもできる。   As a method for realizing this, there is a structure in which a light detection element array is arranged on a light source. Patent Documents 4 and 5 describe a light source integrated imaging device in which a light detection element array is arranged on a display, and the object and the display sandwich the light detection element array. By using a light detection element array that transmits light from the display, not only display light but also an image can be obtained by irradiating a subject at the time of photographing.

また特許文献6には、ディスプレイの上に光検出素子アレイを配置して、被写体とディスプレイで光検出素子アレイを挟んだ構造を有し、更に光検出素子アレイの素子とディスプレイの素子を互い違いにし、光検出素子アレイの素子間に光が通過できる構造の光源一体の撮像装置が記載されている。
特開2003−30632号公報 特開2005−323892号公報 特開2006−288872号公報 特開2005−242841号公報 特開2005−276030号公報 特開2006−86333号公報 特開平1−47166号公報
Further, Patent Document 6 has a structure in which a light detection element array is arranged on a display and the light detection element array is sandwiched between a subject and the display, and the elements of the light detection element array and the elements of the display are alternated. A light source integrated imaging device having a structure that allows light to pass between elements of a photodetecting element array is described.
JP 2003-30632 A JP 2005-338992 A JP 2006-288872 A JP 2005-242841 A JP 2005-276030 A JP 2006-86333 A JP-A-1-47166

しかし、表示装置と撮像装置を一体化した際に、高い検出効率で光を検出して画像化することは難しい。そのため光の検出率は低下する。特許文献4及び特許文献5に記載された構造では、光検出素子アレイが照射光を透過する必要があるため、光検出素子アレイの検出感度を高くすることができず、被写体からの反射光を十分に検出できないという問題があった。また、光検出素子アレイによって表示用及び撮影用の光が減衰されるため、表示される画像の質が低下する問題があった。また、利用できない光のために電力を消費する問題があった。さらに、照射される光が光検出素子アレイを透過するため、一部が検出されて擬似信号を生じる可能性があった。   However, when the display device and the imaging device are integrated, it is difficult to detect and image light with high detection efficiency. As a result, the light detection rate decreases. In the structures described in Patent Document 4 and Patent Document 5, since the light detection element array needs to transmit the irradiation light, the detection sensitivity of the light detection element array cannot be increased, and reflected light from the subject cannot be obtained. There was a problem that it could not be detected sufficiently. Further, since the light for display and photographing is attenuated by the photodetecting element array, there is a problem that the quality of the displayed image is deteriorated. In addition, there is a problem of consuming power due to light that cannot be used. Further, since the irradiated light passes through the light detection element array, a part of the light may be detected to generate a pseudo signal.

特許文献6に記載された構造では、表示用のスペースを設けるために、光検出素子アレイのフィルファクタを大きくできず、被写体からの反射光の十分に検出できないという問題があった。また、表示用及び撮影用の光は、光検出素子の間を通って出力されるため、表示が暗くなり、表示の位置分解能が悪くなり、表示される画像の質が低下する問題があった。さらには、利用できない光のために電力を消費する問題があった。また、光検出素子の間に光が透過する構造を実現するために、光検出素子アレイが高価になり、光検出素子アレイの製造に高い技術が必要になり、歩留まりが低下するなどの問題を生じる可能性があった。   In the structure described in Patent Document 6, since a display space is provided, there is a problem in that the fill factor of the photodetecting element array cannot be increased and the reflected light from the subject cannot be detected sufficiently. In addition, since the display and photographing light is output through the light detection elements, the display becomes dark, the position resolution of the display is deteriorated, and the quality of the displayed image is deteriorated. . Furthermore, there is a problem of consuming power due to light that cannot be used. In addition, in order to realize a structure in which light is transmitted between the photodetecting elements, the photodetecting element array becomes expensive, a high technology is required for manufacturing the photodetecting element array, and the yield decreases. Could have occurred.

一方、フィルファクタが小さい検出器でも、マイクロレンズを用いることで光の検出率を増大できる。例えば、特許文献7に示すように、光検出素子の入光部の前面に素子毎に設けられたマイクロレンズは、光を光検出素子に集光する。そのため、光検出素子の間などの不感領域に入射する光も光検出素子に集光して検出することができ、光の検出率を増大できる。更に光検出素子を小さくできることで、暗電流の低減なども可能となる。   On the other hand, even a detector with a small fill factor can increase the light detection rate by using a microlens. For example, as shown in Patent Document 7, a microlens provided for each element on the front surface of the light incident portion of the light detection element collects light on the light detection element. Therefore, the light incident on the insensitive area such as between the light detection elements can also be collected and detected on the light detection elements, and the light detection rate can be increased. Furthermore, since the photodetection element can be made smaller, it is possible to reduce the dark current.

しかし、第6実施形態のような表示装置を搭載した撮像装置では、マイクロレンズが表示の妨げになるため、マイクロレンズが設置できないという問題があった。これを検出装置101の断面図である図31を用いて説明する。第6実施形態では、一つの画素110中に、光検出素子113と発光ユニット111とを備える。この構成にマイクロレンズ127を設ける場合、光を光検出素子113に集光するために、図31に示すようにマイクロレンズ127の光軸145上に設ける必要がある。   However, in the imaging apparatus equipped with the display device as in the sixth embodiment, there is a problem that the microlens cannot be installed because the microlens hinders display. This will be described with reference to FIG. 31 which is a cross-sectional view of the detection apparatus 101. In the sixth embodiment, the light detection element 113 and the light emitting unit 111 are provided in one pixel 110. When the microlens 127 is provided in this configuration, it is necessary to provide the microlens 127 on the optical axis 145 of the microlens 127 as shown in FIG.

この場合、被写体129にある焦点139からの光130を光検出素子113に集光することはできるが、発光ユニット111は光軸145上に設けることができないため、発光ユニット111から発した光144は、マイクロレンズ127から所望の方向(例えば、光軸145の方向)に出力できない。また、この光144は、離れた位置にいる視者まで到達するために、平行光に近いことが望ましいが、第6実施形態の構成では、平行光を出力することはできない。また、発光ユニット111を光軸145付近に設けたとしても、マイクロレンズ127の焦点は、指を設ける比較的近い位置にあるため、照射される光144は平行光にはならず、大きく広がる。この場合、照射された光144は視者まで到達できない。   In this case, although the light 130 from the focal point 139 in the subject 129 can be condensed on the light detection element 113, the light emitting unit 111 cannot be provided on the optical axis 145, and thus the light 144 emitted from the light emitting unit 111 is used. Cannot be output from the micro lens 127 in a desired direction (for example, the direction of the optical axis 145). The light 144 is preferably close to parallel light in order to reach a viewer at a distant position, but the configuration of the sixth embodiment cannot output parallel light. Even if the light emitting unit 111 is provided in the vicinity of the optical axis 145, the focal point of the microlens 127 is relatively close to the position where the finger is provided, so that the irradiated light 144 does not become parallel light but spreads greatly. In this case, the irradiated light 144 cannot reach the viewer.

または、表示光をマイクロレンズの以外の場所を通して出力する場合、マイクロレンズの間などに空間が必要となり、光を光検出素子に集光できない不感領域が生じるため、光の検出率を十分に増大できないという問題があった。   Or, when the display light is output through a place other than the microlens, a space is required between the microlenses, etc., resulting in a dead area where the light cannot be focused on the light detection element, so the light detection rate is sufficiently increased. There was a problem that I could not.

本発明の代表的な一例を示せば以下の通りである。すなわち、光を屈折する集光手段と、第1面及び第2面を備え、前記集光手段と前記第1面で対向し、発光ユニットを備える表示層と、前記表示層の第2面と対向し、光検出素子を備える撮像層と、を備え、前記撮像層と撮影対象とが、前記集光手段及び前記表示層を挟む構造であることを特徴とする撮像装置である。   A typical example of the present invention is as follows. That is, a condensing unit that refracts light, a first surface and a second surface, a display layer that is opposed to the condensing unit on the first surface and includes a light emitting unit, and a second surface of the display layer, An imaging device comprising: an imaging layer facing each other and having a photodetecting element, wherein the imaging layer and the object to be photographed have a structure sandwiching the condensing means and the display layer.

本発明の一実施形態によると、表示機能や撮影用光源を有する薄型の撮像装置、特に生体認証用撮像装置を実現できる。更に、これらの撮像装置を搭載した認証装置、表示装置、画像読み取り装置、モバイル機器を実現することができる。   According to one embodiment of the present invention, a thin imaging device having a display function and a photographing light source, in particular, a biometric authentication imaging device can be realized. Furthermore, an authentication device, a display device, an image reading device, and a mobile device equipped with these imaging devices can be realized.

まず、本発明の実施形態の概要について説明する。   First, the outline | summary of embodiment of this invention is demonstrated.

本発明の実施の形態の撮像装置は、光を屈折する集光手段と、第1面及び第2面を備え、前記集光手段と前記第1面で対向し、発光ユニットを備える表示層と、前記表示層の第2面と対向し、光検出素子を備える撮像層と、を備え、前記撮像層と撮影対象とが、前記集光手段及び前記表示層を挟む構造であることを特徴とする。このような構造によって、表示付き撮像装置を薄型化することができる。更に、この撮像装置を搭載した装置を小型化、薄型化でき、表示による情報提供が可能となり、ユーザにとっての利便性が向上する。更に、表示光がマイクロレンズを透過する構造のため、マイクロレンズの間に表示光が透過するための空間を別途設ける必要がなく、光を光検出素子に集光できない不感領域を縮小または無くすことができるために、光の検出率が増大できる。更に、光の検出率の増加によってSNRが向上するため、被写体像の画質が向上する。   An imaging apparatus according to an embodiment of the present invention includes a light collecting unit that refracts light, a first surface and a second surface, a display layer that is opposed to the light collecting unit on the first surface and includes a light emitting unit. An imaging layer provided with a photodetecting element facing the second surface of the display layer, wherein the imaging layer and the object to be photographed have a structure sandwiching the condensing means and the display layer. To do. With such a structure, the imaging device with a display can be thinned. Furthermore, a device equipped with this imaging device can be reduced in size and thickness, information can be provided by display, and convenience for the user is improved. Further, since the display light is transmitted through the microlens, there is no need to provide a space for the display light to pass between the microlenses, and the insensitive area where the light cannot be focused on the light detection element is reduced or eliminated. Therefore, the light detection rate can be increased. Furthermore, since the SNR is improved by increasing the light detection rate, the image quality of the subject image is improved.

本構成の撮像装置では、表示光の焦点が、撮影光よりも撮像装置から離れた位置になる。または、撮影光は焦点を有するが、表示光は焦点を持たない平行光か、広がりを持った光となる。そのため、本構成の撮像装置は、撮影対象が、表示を見る利用者と同程度か、利用者より撮像装置の近くに設置される装置(例えば、指静脈、掌静脈、手の甲静脈、指紋などを用いた認証装置用の撮像装置や、画像などを読み取る撮像装置、更にこれらを搭載した携帯電話機、PHS、モバイル機器、ディスプレイ、TV、現金自動取引装置、認証装置、スキャナ、ファックシミリ装置などの装置)に適する。   In the imaging apparatus of this configuration, the focus of the display light is at a position farther from the imaging apparatus than the imaging light. Alternatively, the photographing light has a focal point, but the display light is a parallel light having no focal point or a light having a spread. For this reason, the imaging apparatus of this configuration has an imaging target that is the same level as the user viewing the display, or a device installed near the imaging apparatus by the user (for example, finger vein, palm vein, back of the hand, fingerprint, etc.). An imaging device for an authentication device used, an imaging device for reading an image, etc., and a mobile phone, PHS, mobile device, display, TV, automatic cash transaction device, authentication device, scanner, facsimile device, etc. equipped with these devices Suitable for).

このような構造の撮像装置は、少なくとも一部が透明な第1基板に発光ユニットを作製して表示層を形成する工程と、第2基板に光検出素子を作製して撮像層を形成する工程と、前記第1基板の第1面に前記第2基板を透明接着剤で接着する工程と、前記第1面に対向する前記第1基板の第2面と対向するように、光を屈折する集光手段を透明な接着剤で接着する工程と、を含む製造方法によって作製される。この製造方法によって、各層を別々に作製することができ、撮像装置を容易に作製することができる。   In the imaging device having such a structure, a step of forming a light emitting unit on a first substrate that is at least partially transparent to form a display layer, and a step of forming a light detection element on a second substrate to form an imaging layer And a step of adhering the second substrate to the first surface of the first substrate with a transparent adhesive, and refracting the light so as to face the second surface of the first substrate facing the first surface. And a step of adhering the light collecting means with a transparent adhesive. By this manufacturing method, each layer can be manufactured separately, and an imaging device can be easily manufactured.

また、このような構造の撮像装置は、対向する第1面と第2面を有し、少なくとも一部が透明な基板に対し、前記第1面に発光ユニットを作製し、前記第2面に光検出素子を作製する工程と、光を屈折する集光手段を前記第1面と対向するように、透明な接着剤で接着する工程と、を含む製造方法によっても作製できる。このような製造方法により、発光ユニットと光検出素子の位置関係を精度良く決定できる。また表示層と撮像層を接着する必要がなく、接着剤内で生じる気泡などによる光の減衰がないため、光の検出効率を向上できる。   In addition, the imaging device having such a structure has a first surface and a second surface facing each other, and a light emitting unit is manufactured on the first surface with respect to a substrate that is at least partially transparent. It can also be manufactured by a manufacturing method including a step of manufacturing a light detection element and a step of bonding a condensing means for refracting light with a transparent adhesive so as to face the first surface. With such a manufacturing method, the positional relationship between the light emitting unit and the light detection element can be determined with high accuracy. Further, it is not necessary to bond the display layer and the imaging layer, and light is not attenuated by bubbles generated in the adhesive, so that the light detection efficiency can be improved.

更に、本発明の実施の形態の撮像装置は、前記集光手段の光軸上に、前記光検出素子及び前記発光ユニットが配置されている。このような構造によって、撮影光を光検出素子に集光し、表示光をマイクロレンズから照射することができる。このときマイクロレンズは表示光の妨げにならず、表示の質が向上する。   Furthermore, in the imaging apparatus according to the embodiment of the present invention, the light detection element and the light emitting unit are arranged on the optical axis of the light collecting means. With such a structure, photographing light can be condensed on the light detection element, and display light can be irradiated from the microlens. At this time, the microlens does not hinder display light, and the display quality is improved.

更に、本発明の実施の形態の撮像装置は、前記発光ユニットが有機EL発光層を備える。このような構造によって、透明な表示層を実現できる。従って、被写体からの光が表示層で遮光されずに光検出素子に到達できるようになり、光検出素子での光の検出率が増大できる。   Furthermore, in the imaging device according to the embodiment of the present invention, the light emitting unit includes an organic EL light emitting layer. With such a structure, a transparent display layer can be realized. Accordingly, light from the subject can reach the light detection element without being blocked by the display layer, and the light detection rate of the light detection element can be increased.

更に、前記発光ユニットが、異なるスペクトル分布を持った光を放射する複数の発光層を備える。このような構造によって、カラー表示が可能となる。   Further, the light emitting unit includes a plurality of light emitting layers that emit light having different spectral distributions. With such a structure, color display is possible.

更に、前記複数の発光層は、積層された構造である。このような構造によって、利用者の位置によらずに各色の表示を行うことができる。   Further, the plurality of light emitting layers have a laminated structure. With such a structure, it is possible to display each color regardless of the position of the user.

更に、前記発光層が第1発光層、及び、前記第1発光層の波長よりも長い波長の光を発する第2発光層を備え、前記第1発光層が前記第2発光層より前記集光手段に近い位置に配置される。このような構造によって、各色の表示光の屈折率の違いによる色収差を低減、除去でき、表示装置を見る角度によって色が異なる現象を低減または防ぐことができる。   The light emitting layer further includes a first light emitting layer and a second light emitting layer that emits light having a wavelength longer than that of the first light emitting layer, and the first light emitting layer is more concentrated than the second light emitting layer. It is arranged at a position close to the means. With such a structure, it is possible to reduce or eliminate chromatic aberration due to the difference in the refractive index of display light of each color, and it is possible to reduce or prevent a phenomenon in which colors differ depending on the viewing angle of the display device.

更に、前記発光ユニットと前記光検出素子の間に遮光手段を備える。このような構造によって、隣接したマイクロレンズから光検出素子に光が入るクロストークを低減できる。また、発光ユニットを点灯した場合、離れた位置の光検出素子との間に遮光手段を設けることができるため、その発光ユニットからの直接光が入射せず、発光ユニットが点灯中でも光検出素子を動作させることができる。   Furthermore, a light shielding means is provided between the light emitting unit and the light detection element. With such a structure, it is possible to reduce crosstalk in which light enters an optical detection element from an adjacent microlens. In addition, when the light emitting unit is turned on, a light shielding unit can be provided between the light detecting element at a distant position, so that direct light from the light emitting unit is not incident, and the light detecting unit is not turned on even when the light emitting unit is turned on. It can be operated.

更に、本発明の実施の形態の撮像装置は、前記集光手段と前記撮像層の間に配置され、光を透過する入光口と光を反射する反射手段を具備する第1反射層と、該第1反射層と前記撮像層の間に配置され、光を透過する透明層と、第1反射層と向かい合い、光を反射する第2反射層とを備え、前記第1反射層及び前記第2反射層が、前記透明層及び前記撮像層を挟む構造である。このような構造によって、光検出素子が薄く検出感度が低い場合でも、透過光を第1反射層と第2反射層で反射することで複数回光検出素子に光を入射させることができ、光検出素子の検出感度を向上できる。更に、透明層によって第1反射層と撮像層の間に距離を有するように構成され、第2反射層で反射した光が入光口から逃げ難い構造となる。更に、第1反射層に凹凸などの構造を設けることが可能となり、第1反射層を効率的に光検出素子に再度入射させることができる。   Furthermore, an imaging apparatus according to an embodiment of the present invention includes a first reflective layer that is disposed between the condensing unit and the imaging layer, and includes a light entrance that transmits light and a reflective unit that reflects light; A transparent layer disposed between the first reflective layer and the imaging layer and transmitting light; and a second reflective layer facing the first reflective layer and reflecting light, the first reflective layer and the first reflective layer Two reflective layers sandwich the transparent layer and the imaging layer. With such a structure, even when the light detection element is thin and the detection sensitivity is low, light can be incident on the light detection element a plurality of times by reflecting the transmitted light by the first reflection layer and the second reflection layer. The detection sensitivity of the detection element can be improved. Further, the transparent layer is configured to have a distance between the first reflective layer and the imaging layer, and the light reflected by the second reflective layer is difficult to escape from the light entrance. Furthermore, it becomes possible to provide a structure such as irregularities in the first reflective layer, and the first reflective layer can be efficiently incident on the photodetecting element again.

更に、前記表示層の少なくとも一部が前記透明層を兼ねる。このような構造によって、材料や工程を低減でき、検出装置を薄型化できる。   Furthermore, at least a part of the display layer also serves as the transparent layer. With such a structure, materials and processes can be reduced, and the thickness of the detection device can be reduced.

更に、前記集光手段が、前記光検出素子毎に形成され、前記表示層の方向に凸形状を有するマイクロレンズから成る。このような構造によって、マイクロレンズを薄くできる。更に、マイクロレンズから出力される表示光の広がりを抑え、覗き見防止、表示光度の向上、電力の消費を抑えることができる。更に、発光ユニットからの光が単色でない場合、その色収差を低減、除去できる。   Further, the light collecting means is formed of a microlens formed for each of the light detection elements and having a convex shape in the direction of the display layer. With such a structure, the microlens can be thinned. Furthermore, it is possible to suppress the spread of the display light output from the microlens, prevent peeping, improve the display light intensity, and suppress the power consumption. Furthermore, when the light from the light emitting unit is not monochromatic, the chromatic aberration can be reduced and eliminated.

更に、前記発光ユニットが前記光検出素子から所定の距離以内の位置に設けられている。このような構造によって、表示光がマイクロレンズから出る角度を限定することができるために、表示光の照射範囲を絞ることができ、表示光度が向上し、電力の消費を抑えることができる。   Further, the light emitting unit is provided at a position within a predetermined distance from the light detection element. With such a structure, the angle at which the display light exits the microlens can be limited, so that the irradiation range of the display light can be narrowed, the display light intensity can be improved, and the power consumption can be suppressed.

特に、前記集光手段は、前記光検出素子毎に形成され、前記撮影対象方向に凸形状を有するマイクロレンズから成り、前記光検出素子及び前記発光ユニットは、前記マイクロレンズの光軸上に配置され、前記マイクロレンズの凸上の点A、前記点Aから光軸へ下ろした垂線と光軸との交点B、前記光軸と前記発光ユニットとの交点を点C、線分ABの長さW、前記点Bから前記光検出素子までの距離D、前記点Cから前記発光ユニットの端部までの距離M、前記点Aにおける前記マイクロレンズの法線と直線ABとの成す角α、前記マイクロレンズの屈折率をnとすると、前記所定の距離が下式で表されることを特徴とする。   In particular, the condensing means is formed for each of the light detection elements, and is composed of a microlens having a convex shape in the shooting target direction, and the light detection element and the light emitting unit are disposed on the optical axis of the microlens. The convex point A of the microlens, the intersection B of the perpendicular line extending from the point A to the optical axis and the optical axis, the intersection of the optical axis and the light emitting unit, the point C, and the length of the line segment AB W, a distance D from the point B to the light detection element, a distance M from the point C to the end of the light emitting unit, an angle α formed by the normal of the microlens at the point A and the straight line AB, When the refractive index of the microlens is n, the predetermined distance is expressed by the following equation.

Figure 0005144217
Figure 0005144217

このような構造によって、表示光の多くはマイクロレンズを透過後、光軸から18度(π/10 rad)以内の方向に照射される。これによって、視野角を限定でき、周囲からの覗き見を防止できる。更に、認証装置として、光源と、前記光源から照射された光のうち撮影対象からの光を検出する撮像装置と、前記撮像装置から出力された信号から、前記撮影対象の生体情報を含む生体情報画像を作成する画像作成手段と、前記撮影対象の生体情報データを予め記憶する記憶手段と、前記生体情報画像と前記生体情報データに含まれる前記生体情報を比較して個人認証を行う認証手段と、を備え、前記撮像装置は、光を屈折する集光手段と、第1面及び第2面を備え、前記集光手段と前記第1面で対向し、発光ユニットを備える表示層と、前記表示層の第2面と対向し、光検出素子を備える撮像層と、を備え、前記撮像層と撮影対象とが、前記集光手段及び前記表示層を挟む構造である。また、更に、前記生体情報は、指紋、指の静脈、掌の静脈、手の甲の静脈の少なくとも一つの情報である。このような構造によって、撮像装置が表示機能や、撮影用光源を有する、さまざまな生体認証装置を実現できる。   With such a structure, most of the display light is irradiated in a direction within 18 degrees (π / 10 rad) from the optical axis after passing through the microlens. Thereby, the viewing angle can be limited and peeping from the surroundings can be prevented. Further, as an authentication device, a light source, an imaging device that detects light from the imaging target among the light emitted from the light source, and biological information including biological information of the imaging target from a signal output from the imaging device Image creating means for creating an image; storage means for storing biometric information data to be imaged in advance; authentication means for performing personal authentication by comparing the biometric information image and the biometric information included in the biometric information data; The imaging apparatus includes a light collecting unit that refracts light, a first surface and a second surface, a display layer that is opposed to the light collecting unit on the first surface and includes a light emitting unit, and An imaging layer provided with a photodetecting element facing the second surface of the display layer, wherein the imaging layer and the object to be photographed sandwich the light condensing means and the display layer. Furthermore, the biometric information is at least one information of a fingerprint, a finger vein, a palm vein, and a back vein of the hand. With such a structure, it is possible to realize various biometric authentication devices in which the imaging device has a display function and a photographing light source.

更に、前記発光ユニットが前記光源を兼ねる。このような構造によって、撮影用の光源を別途設ける必要がなくなり、材料や製造工程の低減と、撮像装置を薄型化、小型化することができる。   Further, the light emitting unit also serves as the light source. With such a structure, it is not necessary to separately provide a light source for photographing, and it is possible to reduce materials and manufacturing processes, and to reduce the thickness and size of the imaging device.

更に、本発明の実施の形態の携帯端末は、光源と、前記光源から照射された光のうち撮影対象からの光を検出する撮像装置と、前記撮像装置から出力された信号から、前記撮影対象の生体情報を含む生体情報画像を作成する画像作成手段と、前記撮影対象の生体情報データを予め記憶する記憶手段と、前記生体情報画像と前記生体情報データに含まれる前記生体情報を比較して個人認証を行う認証手段と、を備え、前記撮像装置は、光を屈折する集光手段と、第1面及び第2面を備え、前記集光手段と第1の面で対向し、発光ユニットを備える表示層と、前記表示層の第2面と対向し、光検出素子を備える撮像層と、を備え、前記撮像層と撮影対象とが、前記集光手段及び前記表示層を挟む構造であることを特徴とする。このような構造によって、表示機能と撮影機能が一体の様々な携帯端末を実現できる。   Furthermore, the portable terminal according to the embodiment of the present invention includes a light source, an imaging device that detects light from the imaging target among light emitted from the light source, and a signal output from the imaging device. An image creating means for creating a biometric information image including the biometric information, a storage means for preliminarily storing the biometric information data to be imaged, and comparing the biometric information image and the biometric information included in the biometric information data. Authentication means for performing personal authentication, and the imaging apparatus includes a light collecting unit that refracts light, a first surface and a second surface, and faces the light collecting unit on the first surface, and a light emitting unit. A display layer comprising: a display layer; and an imaging layer provided with a photodetecting element facing the second surface of the display layer, wherein the imaging layer and the object to be photographed sandwich the light collecting means and the display layer. It is characterized by being. With such a structure, various portable terminals in which a display function and a photographing function are integrated can be realized.

更に、本発明の実施の形態の現金自動取引装置は、個人認証を行うために生体情報を取得する認証装置を具備する現金自動取引装置であって、前記認証装置が、光源と、前記光源から照射された光のうち撮影対象からの光を検出する撮像装置と、前記撮像装置から出力された信号から、前記撮影対象の生体情報を含む生体情報画像を作成する画像作成手段と、前記撮影対象の生体情報データを予め記憶する記憶手段と、前記生体情報画像と前記生体情報データに含まれる前記生体情報を比較して個人認証を行う認証手段と、を備え、前記撮像装置は、光を屈折する集光手段と、第1面及び第2面を備え、前記集光手段と第1の面で対向し、発光ユニットを備える表示層と、前記表示層の第2面と対向し、光検出素子を備える撮像層と、を備え、前記撮像層と撮影対象とが、前記集光手段及び前記表示層を挟む構造であることを特徴とする。このような構造によって、生体認証撮影装置を搭載した、表示機能を有する現金自動取引装置を実現できる。   Furthermore, the automatic teller machine according to the embodiment of the present invention is an automatic teller machine including an authentication device that acquires biometric information for performing personal authentication, and the authentication device includes a light source and the light source. An imaging device that detects light from the imaging target among the irradiated light, an image creation unit that creates a biological information image including biological information of the imaging target from a signal output from the imaging device, and the imaging target Storage means for preliminarily storing biometric information data, and authentication means for performing personal authentication by comparing the biometric information image and the biometric information included in the biometric information data, and the imaging device refracts light. A condensing means, a first surface and a second surface, facing the condensing means on the first surface, comprising a light emitting unit, facing a second surface of the display layer, and detecting light An imaging layer comprising an element, and And the imaging layer and the imaging target, characterized in that a structure sandwiching the focusing means and the display layer. With such a structure, it is possible to realize an automatic teller machine equipped with a biometric authentication photographing apparatus and having a display function.

以下、本発明の実施形態を図面を参照して説明する。   Hereinafter, embodiments of the present invention will be described with reference to the drawings.

(第1実施形態)
本実施形態は、本発明の適用対象の一例である表示機能付きの撮像装置であり、発光ユニット層が撮像層とマイクロレンズに挟まれた配置された構造を成す。以下、図1から図12を用いて、本発明の第1実施形態について説明する。
(First embodiment)
This embodiment is an imaging apparatus with a display function, which is an example of an application target of the present invention, and has a structure in which a light emitting unit layer is disposed between an imaging layer and a microlens. Hereinafter, the first embodiment of the present invention will be described with reference to FIGS.

図1は本実施形態の一例である撮像装置の外観を示す斜視図である。図2及び図3は撮像装置101の回路構成を説明するための回路図である。図4及び図5は、図1の位置107における撮像装置の断面図である。図6及び図7はマイクロレンズ、発光ユニット、及び光検出素子の配置を説明するための説明図である。図8から図10は、撮像装置101の作製方法の一例を説明するための説明図である。図11と図12は、画素構造の異なる別の例を説明するための断面図である。   FIG. 1 is a perspective view illustrating an appearance of an imaging apparatus which is an example of the present embodiment. 2 and 3 are circuit diagrams for explaining the circuit configuration of the imaging apparatus 101. FIG. 4 and 5 are cross-sectional views of the imaging device at position 107 in FIG. 6 and 7 are explanatory views for explaining the arrangement of the microlens, the light emitting unit, and the light detection element. 8 to 10 are explanatory diagrams for explaining an example of a method for manufacturing the imaging device 101. FIG. 11 and 12 are cross-sectional views for explaining another example having a different pixel structure.

まず、図1を用いて、本実施形態の概略を説明する。本撮像装置101は、表示光を照射する表示系(点線)と、光を検出して画像を取得する撮影系(実線)から成る。表示系は、発光ユニット111、発光ユニット用スイッチ117、発光ユニット用電力制御回路102、発光ユニット用シフトレジスタ118から成り、撮影系は、光検出素子113、光検出素子用スイッチ114、光検出素子用シフトレジスタ105、及び読み出し回路104を備える。発光ユニット111、光検出素子113、発光ユニット用スイッチ117、及び光検出素子用スイッチ114は、画素110を構成し、基板103上に2次元的に配置されている。ここで、本構成は実施形態の一例であり、本発明を限定するものではない。更にこの画素110の数は、説明を簡単にするためであり、本発明を限定するものではない。   First, the outline of the present embodiment will be described with reference to FIG. The imaging apparatus 101 includes a display system that irradiates display light (dotted line) and an imaging system that detects light and acquires an image (solid line). The display system includes a light emitting unit 111, a light emitting unit switch 117, a light emitting unit power control circuit 102, and a light emitting unit shift register 118. The imaging system includes a light detecting element 113, a light detecting element switch 114, and a light detecting element. Shift register 105 and readout circuit 104. The light emitting unit 111, the light detecting element 113, the light emitting unit switch 117, and the light detecting element switch 114 constitute the pixel 110 and are two-dimensionally arranged on the substrate 103. Here, this structure is an example of embodiment and does not limit the present invention. Further, the number of the pixels 110 is for simplifying the description, and does not limit the present invention.

本撮像装置は、生体認証に用いる画像を撮影する機能と、画像を表示する機能とを備え、それぞれの機能を、切り替えることができる。以下、本実施形態の撮影方法を、図2に示す撮影系の回路図、及び表示方法を図3に示す表示系の回路図を用いて説明する。ただし、本回路構成は実施、撮影方法、表示方法の一例であり、本発明を限定するものではない。   This imaging apparatus includes a function for capturing an image used for biometric authentication and a function for displaying an image, and can switch between these functions. Hereinafter, the imaging method of the present embodiment will be described with reference to the circuit diagram of the imaging system shown in FIG. 2 and the display method of the display system shown in FIG. However, this circuit configuration is an example of implementation, imaging method, and display method, and does not limit the present invention.

撮影時は、まず光源(図示せず)から被写体に向けて光を照射する。光源は、例えば、画素110から成る検出領域の周辺に設ける。そして、生体で透過、反射、散乱の少なくとも一つを行った光を光検出素子113で検出して、光検出素子113に電荷を発生させ、発生させた電荷を蓄積する。このとき光源には、例えば、600nmから1200nmの光を主に発光する発光ダイオードを用いるとよい。また、遮光体などによって、光源から画素110に直接光が入射しないようにする。光検出素子113は、例えば、アモルファスシリコンを用いたフォトダイオードを用いるとよい。   At the time of shooting, light is first irradiated from a light source (not shown) toward the subject. For example, the light source is provided in the vicinity of the detection region including the pixels 110. Then, the light that has been transmitted, reflected, or scattered by the living body is detected by the light detection element 113, charges are generated in the light detection element 113, and the generated charges are accumulated. At this time, for example, a light emitting diode that mainly emits light of 600 nm to 1200 nm may be used as the light source. In addition, light is not directly incident on the pixel 110 from the light source by a light shielding body or the like. As the light detection element 113, for example, a photodiode using amorphous silicon may be used.

撮影系は、図2に示すように、光検出素子113は光検出素子用スイッチ114のドレイン電極と接続される。スイッチ114は、そのゲート電極が光検出素子用制御線112を介して光検出素子用シフトレジスタ105に接続され、そのソース電極が信号線116を介して読み出し回路104に接続されている。更に、同一行のスイッチ114は、共通の制御線112に接続されているため、制御線112に電圧を供給することによって、光検出素子113で生じた電荷を、各列同時に読み出し回路104に導くことができる。   In the imaging system, as shown in FIG. 2, the light detection element 113 is connected to the drain electrode of the light detection element switch 114. The switch 114 has a gate electrode connected to the photodetection element shift register 105 via the photodetection element control line 112, and a source electrode connected to the readout circuit 104 via the signal line 116. Further, since the switches 114 in the same row are connected to the common control line 112, by supplying a voltage to the control line 112, the electric charges generated in the light detection elements 113 are guided to the reading circuit 104 simultaneously in each column. be able to.

読み出しでは、まず、読み出し開始用パッド106に開始の信号を入力すると、1行目の制御線112に、スイッチ114がオンとなる電圧を印加し、光検出素子113に蓄積された電荷を読み出す。読み出された電荷は、読み出し回路104の積分器109において蓄積され、電圧信号に変換される。次に、ICチップ108において、列ごとに信号をサンプルホールドして、アナログ信号をデジタル信号に変換(AD変換)し、変換されたデジタル信号を出力用電極パッド115から順次出力する。ここで、図3に示す電極パッド115の数は、説明を簡単にするためであり、本発明を限定するものではない。   In reading, first, when a start signal is input to the reading start pad 106, a voltage for turning on the switch 114 is applied to the control line 112 in the first row, and the charge accumulated in the light detection element 113 is read. The read charge is accumulated in the integrator 109 of the read circuit 104 and converted into a voltage signal. Next, in the IC chip 108, the signal is sampled and held for each column, the analog signal is converted into a digital signal (AD conversion), and the converted digital signal is sequentially output from the output electrode pad 115. Here, the number of the electrode pads 115 shown in FIG. 3 is for simplifying the description, and does not limit the present invention.

次に、1行目のスイッチ114をオフにし、シフトレジスタ105にて行を変えてスイッチ114をオンにし、撮影をする。このとき、同一列の光検出素子用スイッチ114は共通の信号線116に接続されているため、シフトレジスタ105で選択する行を切り替えることによって、列毎に共通の読み出し回路104において信号を読み出すことができる。このようにして、2行目、3行目、…、と順次撮影を行い、全ての画素110で撮影を行って、撮影対象の二次元画像を得ることができる。   Next, the switch 114 in the first row is turned off, the row is changed by the shift register 105, the switch 114 is turned on, and photographing is performed. At this time, since the photodetection element switches 114 in the same column are connected to the common signal line 116, the signal is read out in the common readout circuit 104 for each column by switching the row selected by the shift register 105. Can do. In this way, the second row, the third row,... Are sequentially photographed, and photographing is performed with all the pixels 110, thereby obtaining a two-dimensional image to be photographed.

一方、表示では、行毎に発光ユニット111を発光させる。発光ユニット111は、例えば有機EL材料から構成される。図3に示すように、発光ユニット111は発光ユニット用スイッチ117のドレイン電極と接続される。スイッチ117は、そのゲート電極が発光ユニット用制御線119を介して発光ユニット用シフトレジスタ118に接続され、そのソース電極が発光ユニット用電力線120を介して発光ユニット用電力制御回路102に接続されている。更に、同一行のスイッチ117は、共通の制御線119に接続されているため、制御線119に電力を供給することによって、発光ユニット111を発光できる。   On the other hand, in the display, the light emitting unit 111 emits light for each row. The light emitting unit 111 is made of, for example, an organic EL material. As shown in FIG. 3, the light emitting unit 111 is connected to the drain electrode of the light emitting unit switch 117. The switch 117 has a gate electrode connected to the light emitting unit shift register 118 via the light emitting unit control line 119, and a source electrode connected to the light emitting unit power control circuit 102 via the light emitting unit power line 120. Yes. Further, since the switches 117 in the same row are connected to the common control line 119, the light emitting unit 111 can emit light by supplying power to the control line 119.

表示では、まず、1行目の制御線119に電圧を印加して発光をする。その際、発光ユニット111に供給される電力を発光ユニット用電力制御回路102で制御することによって、光の強度を変更することができる。   In the display, first, light is emitted by applying a voltage to the control line 119 in the first row. At that time, the intensity of light can be changed by controlling the power supplied to the light emitting unit 111 by the power control circuit 102 for the light emitting unit.

次に、1行目のスイッチ117をオフにし、シフトレジスタ118にて行を変えてスイッチ117をオンにし、発光ユニット用電力制御回路102で次の行に電力を供給して表示を行う。このとき、同一列の発光ユニット用スイッチ117は共通の発光ユニット用電力線120に接続されているため、シフトレジスタ118で選択する行を切り替えることによって、列毎に共通の発光ユニット用電力線120にて表示を行うことができる。このようにして2行目、3行目、…、と順次撮影を行い、全ての画素110で表示を行って、二次元画像を表示できる。   Next, the switch 117 in the first row is turned off, the row is changed by the shift register 118, the switch 117 is turned on, and power is supplied to the next row by the light emitting unit power control circuit 102 to perform display. At this time, since the light emitting unit switches 117 in the same column are connected to the common light emitting unit power line 120, the common light emitting unit power line 120 is used for each column by switching the row selected by the shift register 118. Display can be made. In this way, the second row, the third row,... Can be sequentially photographed and displayed on all the pixels 110 to display a two-dimensional image.

本実施形態では、表示及び撮影を1行毎に行ったが、本発明はこれに限るものではなく、複数行単位や、複数素子からなるエリア単位で行ってもよい。   In the present embodiment, display and photographing are performed for each row, but the present invention is not limited to this, and may be performed in units of a plurality of rows or in units of areas including a plurality of elements.

次に、図1の位置107の断面図である図4及び図5を用いて、撮像装置101の構造を説明する。図4は撮影時の光路示し、及び図5は表示時の光路を示す。ただし、本構造は実施形態の一例であって、本発明を限定するものではない。   Next, the structure of the imaging apparatus 101 will be described with reference to FIGS. 4 and 5 which are cross-sectional views of the position 107 in FIG. FIG. 4 shows an optical path during photographing, and FIG. 5 shows an optical path during display. However, this structure is an example of the embodiment and does not limit the present invention.

本撮像装置101は、マイクロレンズ127、表示層132、撮像層133を備え、マイクロレンズ127と撮像層133が表示層132を挟み、透明なパッケージ用接着剤131、134によって、マイクロレンズ127、撮像層133及び表示層132が接合した構造を成す。基板125の上面には、光検出素子113が画素110ごとに形成されて撮像層133を成している。   The imaging apparatus 101 includes a microlens 127, a display layer 132, and an imaging layer 133. The microlens 127 and the imaging layer 133 sandwich the display layer 132, and the microlens 127 and the imaging are captured by transparent packaging adhesives 131 and 134. A structure in which the layer 133 and the display layer 132 are joined is formed. On the upper surface of the substrate 125, a light detection element 113 is formed for each pixel 110 to form an imaging layer 133.

光検出素子113は、透明電極123とアルミ電極121とによってアモルファスシリコン層122を挟んだ構造を成す。表示層132は、透明なガラス基板124の下面に、発光ユニット111が画素110毎に形成されている。発光ユニット111は、2つの透明電極135、138に、発光素子128が挟まれた構造を成す。   The photodetecting element 113 has a structure in which the amorphous silicon layer 122 is sandwiched between the transparent electrode 123 and the aluminum electrode 121. In the display layer 132, the light emitting unit 111 is formed for each pixel 110 on the lower surface of the transparent glass substrate 124. The light emitting unit 111 has a structure in which a light emitting element 128 is sandwiched between two transparent electrodes 135 and 138.

マイクロレンズ127は画素110毎に設けられ、その光軸145上に表示層132と光検出素子113が位置する。その材質は、例えば、シリコンやガラスから成るとよい。マイクロレンズに127には、図4に示すように、焦点139から出た光(入力光130)が光検出素子113に集光するように曲率を設ける。この曲率は、画素110ごとに異なっていても、同一であってもよい。接着剤134は、生体認証のために、光検出素子113で検出する撮影光130と、発光ユニットから出力される表示光144に対して透明である。なお、接着剤134は、少なくとも撮影光130に対して透明であればよい。ここで透明とは、例えば透過率が50%以上を意味する。   The microlens 127 is provided for each pixel 110, and the display layer 132 and the light detection element 113 are positioned on the optical axis 145 thereof. The material is preferably made of silicon or glass, for example. As shown in FIG. 4, the microlens 127 is provided with a curvature so that light (input light 130) emitted from the focal point 139 is condensed on the light detection element 113. This curvature may be different for each pixel 110 or may be the same. The adhesive 134 is transparent to the photographing light 130 detected by the light detection element 113 and the display light 144 output from the light emitting unit for biometric authentication. Note that the adhesive 134 only needs to be transparent to at least the photographing light 130. Here, “transparent” means, for example, a transmittance of 50% or more.

このような構造によって、図4に示すように、被写体の焦点から出て撮像装置101に入射する光130を、発光ユニット111に集光して検出することができる。また、図5に示すように、発光ユニット111から照射された表示光144を、マイクロレンズ127で屈折し、表示をすることも可能となる。   With such a structure, as shown in FIG. 4, the light 130 that comes out of the focus of the subject and enters the imaging apparatus 101 can be collected and detected on the light emitting unit 111. Further, as shown in FIG. 5, the display light 144 irradiated from the light emitting unit 111 can be refracted by the microlens 127 and displayed.

次に、撮影と表示を実現する撮影装置の構造を具体的に説明する。図6は撮影光の光路を示し、図7は表示光の光路を示す。本実施形態において、図6及び図7に示すように、点Aを通る撮影光及び表示光を考え、点Aから光軸145に下ろした垂線140と光軸145との交点をB、点Bから光検出素子113までの距離をD、線分ABの長さをW、点Aにおけるマイクロレンズ127の法線ベクトル141と直線ABとの成す角をα、マイクロレンズ127の屈折率をnとする。ここで説明を簡単にするために、点Aにおいてマイクロレンズ127は空気と接し、空気の屈折率は1とみなせるとする。また、同様に、ガラス基板124、接着剤134の屈折率はマイクロレンズ127と同程度とみなせ、点A以外の屈折は点Aでの屈折に比べて無視できるとする。   Next, the structure of the photographing apparatus that realizes photographing and display will be specifically described. 6 shows the optical path of the photographing light, and FIG. 7 shows the optical path of the display light. In this embodiment, as shown in FIGS. 6 and 7, taking the imaging light and display light passing through the point A, the intersection point of the perpendicular 140 and the optical axis 145 dropped from the point A to the optical axis 145 is represented by B and B. D is the distance from the light detection element 113, the length of the line segment AB is W, the angle between the normal vector 141 of the microlens 127 and the straight line AB at the point A is α, and the refractive index of the microlens 127 is n. To do. Here, for simplicity of explanation, it is assumed that the microlens 127 is in contact with air at the point A, and the refractive index of air can be regarded as 1. Similarly, the refractive indexes of the glass substrate 124 and the adhesive 134 can be regarded as being the same as those of the microlens 127, and refractions other than the point A can be ignored compared to refraction at the point A.

撮影の際、図6に示すように、撮影対象129中の発光点(焦点139)から出た撮影光130を光検出素子113に集光する。このためにマイクロレンズ127をおいて、αが所定の角度になるように設計する。この角度を求めるために、焦点139から点Bまでの距離をL、表示光130の入射角をθ2、屈折角をθ1とすると、スネルの法則と幾何学的条件より、以下の関係がある。   At the time of shooting, as shown in FIG. 6, the shooting light 130 emitted from the light emitting point (focal point 139) in the shooting target 129 is condensed on the light detection element 113. For this purpose, the microlens 127 is placed and designed so that α is a predetermined angle. In order to obtain this angle, assuming that the distance from the focal point 139 to the point B is L, the incident angle of the display light 130 is θ2, and the refraction angle is θ1, the following relationship is established according to Snell's law and geometric conditions.

Figure 0005144217
Figure 0005144217

Figure 0005144217
Figure 0005144217

これらの関係を用いると、n=1.54、L=2mm、D=100μm、W=50μmの場合、αを約28度に設ければ、撮影光130は光検出素子113に集光できる。   Using these relationships, when n = 1.54, L = 2 mm, D = 100 μm, and W = 50 μm, the imaging light 130 can be condensed on the light detection element 113 if α is provided at about 28 degrees.

一方、表示光では、撮像装置101を見る人(視者)まで、十分に光を到達する必要がある。このためマイクロレンズ127から光が出力される角度(表示角)を限定し、視者に十分な光度の光を到達させることが望ましい。更に、表示角を限定することによって、覗き見防止や光度の向上が実現できる。更に、目的方向以外に光を出力しないことによって、電力の低減が実現できる。ここで、表示角は、平行光である場合をゼロとし、平行光からの光の広がり角と定義する。   On the other hand, it is necessary for the display light to sufficiently reach the person (viewer) who views the imaging device 101. For this reason, it is desirable to limit the angle (display angle) at which light is output from the microlens 127 and to allow the viewer to receive light having a sufficient luminous intensity. Furthermore, by limiting the display angle, it is possible to prevent peeping and improve luminous intensity. Furthermore, power can be reduced by not outputting light in directions other than the target direction. Here, the display angle is defined as the spread angle of light from parallel light, with zero being the case of parallel light.

図7において、光軸145と発光ユニット111との交点をC、点Cから発光ユニット111の短部までの距離をM、発光ユニット111と光検出素子113の距離をX、表示光144の入射角をθ1、屈折角をθ2とする。このとき表示角は以下の関係がある。   In FIG. 7, the intersection of the optical axis 145 and the light emitting unit 111 is C, the distance from the point C to the short part of the light emitting unit 111 is M, the distance between the light emitting unit 111 and the light detecting element 113 is X, and the incident of the display light 144 The angle is θ1 and the refraction angle is θ2. At this time, the display angle has the following relationship.

Figure 0005144217
Figure 0005144217

またスネルの法則と幾何学的条件より、W>Mの場合に以下の関係がある。   From Snell's law and geometrical conditions, the relationship is as follows when W> M.

Figure 0005144217
Figure 0005144217

従って、例えばW>Mを満たす点Aにおいて、表示角を18度(π/10 rad)以下にするためには、下式を満たせばよい(以降、右辺をXmaxと記す)。   Therefore, for example, in order to make the display angle 18 degrees (π / 10 rad) or less at the point A satisfying W> M, the following expression should be satisfied (hereinafter, the right side will be expressed as Xmax).

Figure 0005144217
Figure 0005144217

この式を用いると、例えばn=1.54、α=28度、D=100μm、W=50μm、M=10μmの場合、Xは43μm以下となることが分かる。すなわち、発光ユニット111を光検出素子113から43μm以下の位置に設けることによって、表示光144の表示角を18度以下にすることが可能となる。   Using this equation, for example, when n = 1.54, α = 28 degrees, D = 100 μm, W = 50 μm, and M = 10 μm, it can be seen that X is 43 μm or less. That is, by providing the light emitting unit 111 at a position of 43 μm or less from the light detection element 113, the display angle of the display light 144 can be made 18 degrees or less.

本実施形態において、マイクロレンズ127は空気と接し、またガラス基板124、接着剤134の屈折率はマイクロレンズ127と同程度とみなし、点A以外の屈折は点Aでの屈折に比べて無視できるとしたが、これは一例であって、本発明を限定するものではない。使用するガラス基板124、接着剤134などの材料や、使用する媒体によっては、点A以外での媒体間での屈折も考慮して、発光ユニット111と光検出素子113の距離Xを設定するとよい。   In this embodiment, the microlens 127 is in contact with air, and the refractive index of the glass substrate 124 and the adhesive 134 is considered to be the same as that of the microlens 127, and refraction other than the point A can be ignored compared to refraction at the point A. However, this is only an example and does not limit the present invention. Depending on the materials used, such as the glass substrate 124 and the adhesive 134, and the medium used, the distance X between the light emitting unit 111 and the light detecting element 113 may be set in consideration of refraction between the medium other than the point A. .

このようにXmaxを、マイクロレンズ127上の各点で求め、Xがその全点の最小値以下になるよう発光ユニット111を設置することによって、発光ユニット111から出力される大部分の表示光を、表示角18度以下にすることが可能となる。   In this way, Xmax is obtained at each point on the microlens 127, and the most of the display light output from the light emitting unit 111 is obtained by installing the light emitting unit 111 so that X is less than the minimum value of all the points. The display angle can be made 18 degrees or less.

次に、本実施形態の構造による撮像装置101の作製方法を、図8から図10を用いて説明する。ただし、以下に説明する方法は作製方法の一例であり、本発明を限定するものではない。   Next, a method for manufacturing the imaging device 101 having the structure of the present embodiment will be described with reference to FIGS. However, the method described below is an example of a manufacturing method and does not limit the present invention.

図8を用いて表示系の作製方法を説明する。まず、工程1において、ガラス基板上124に、発光ユニット111への配線及びスイッチを作製する。図中では発光ユニット用電力線120のみを記すが、他にも発光ユニット用制御線119も作製しておく。これらの配線は、例えば、アルミニウムを用い、真空蒸着法にて形成する。また、発光ユニット用スイッチ117として、例えば、ポリシリコンを用いてTFTスイッチを作製する。   A method for manufacturing a display system will be described with reference to FIGS. First, in step 1, wiring and a switch to the light emitting unit 111 are manufactured on the glass substrate 124. Although only the light emitting unit power line 120 is shown in the figure, a light emitting unit control line 119 is also prepared. For example, these wirings are formed by vacuum deposition using aluminum. Further, as the light emitting unit switch 117, for example, a TFT switch is manufactured using polysilicon.

工程2では、工程1後の基板に、蛍光ユニット111の電極135を作製する。ここで蛍光ユニット111は検出光が透過する位置に設けられるため、透明であることが望ましい。そのため電極135は、例えば、ITO、酸化インジウム、酸化スズなどの酸化物半導体薄膜、金、銀、プラチナ、アルミニウムのような金属薄膜、スピネル形化合物、導電性窒化物薄膜、導電性ホウ化物薄膜、導電性高分子などを用いて作製する。その製造方法は、真空蒸着法、スパッタリング法、分子線エピタキシー法などの物理的蓄積法、熱CVD法やプラズマCVD法などの化学的蓄積法、ゾルーゲル法、めっき法、塗布法などの蓄積法や、酸化法、拡散法、イオン注入法などの基板侵入法など、どのような方法を用いてもよい。   In step 2, the electrode 135 of the fluorescent unit 111 is formed on the substrate after step 1. Here, since the fluorescent unit 111 is provided at a position where the detection light is transmitted, it is desirable that the fluorescent unit 111 be transparent. Therefore, the electrode 135 is made of, for example, an oxide semiconductor thin film such as ITO, indium oxide, or tin oxide, a metal thin film such as gold, silver, platinum, or aluminum, a spinel compound, a conductive nitride thin film, a conductive boride thin film, It is manufactured using a conductive polymer or the like. Its production methods include physical accumulation methods such as vacuum deposition, sputtering, and molecular beam epitaxy, chemical accumulation methods such as thermal CVD and plasma CVD, accumulation methods such as sol-gel method, plating method, and coating method. Any method such as a substrate penetration method such as an oxidation method, a diffusion method, or an ion implantation method may be used.

工程3では、工程2後の基板に、発光素子128を作製する。この発光素子128の材質は、例えば、有機EL材料である。有機EL材料には低分子発光材料と高分子発光材料があるが、どちらを用いてもよい。低分子発光材料は、例えば、ポリメチン系色素、多環芳香環化合物、ヘテロ芳香環化合物、ポリフェリン化合物、その他金属錯体や金属化合物などを用いることができる。高分子発光材料は、例えば、p−フェニレンビニレン系、ポリオイオフェン系、ポリフルオレン系、2置換ポリアセチレン系などのシリコン系導電性高分子を用いることができる。また、Ir、Eu、Ptなどの金属錯体や、それらを含む高分子を発光層として用いることによって、燐光を利用する有機EL用発光材料や、高分子と低分子の材料を分散した有機EL用発光材料なども用いることができる。   In step 3, the light-emitting element 128 is formed on the substrate after step 2. The material of the light emitting element 128 is, for example, an organic EL material. The organic EL material includes a low molecular weight light emitting material and a polymer light emitting material, either of which may be used. As the low-molecular light-emitting material, for example, polymethine dyes, polycyclic aromatic ring compounds, heteroaromatic ring compounds, polyferrin compounds, other metal complexes, metal compounds, and the like can be used. As the polymer light emitting material, for example, a silicon-based conductive polymer such as p-phenylene vinylene, polyiophene, polyfluorene, or disubstituted polyacetylene can be used. In addition, by using a metal complex such as Ir, Eu, Pt, or a polymer containing them as a light emitting layer, a light emitting material for organic EL that utilizes phosphorescence, or an organic EL material in which a polymer and a low molecular weight material are dispersed. A light emitting material can also be used.

発光素子128の作製方法は、低分子発光材料では、例えば、真空蒸着法を用いることができる。また、高分子発光材料を用いた作成方法は、例えば、真空蒸着法、キャスティング法、スピンコーティング法、インクジェット法、スクリーン印刷法、熱転写法などがあり、どの方法を用いてもよい。   As a method for manufacturing the light-emitting element 128, for a low-molecular light-emitting material, for example, a vacuum evaporation method can be used. In addition, examples of a production method using a polymer light emitting material include a vacuum deposition method, a casting method, a spin coating method, an ink jet method, a screen printing method, and a thermal transfer method, and any method may be used.

次に、工程4に示すように、工程2と同様に透明電極138を作製し、その上に、工程5に示すように、保護層137を設ける。このようにして表示層132を作製する。   Next, as shown in Step 4, a transparent electrode 138 is produced in the same manner as in Step 2, and a protective layer 137 is provided thereon as shown in Step 5. In this way, the display layer 132 is manufactured.

次に、図9を用いて、撮像層133の作製方法を説明する。   Next, a method for manufacturing the imaging layer 133 will be described with reference to FIGS.

まず、工程6では、基板125上に、光検出素子113の電極121、光検出素子113への配線、スイッチ、及び電極パッドを作製する。図中では、電極121と信号線116のみを記すが、他に、光検出素子用制御線112、出力用電極パッド115、及び読み出し開始用パッド106を作製する。これらの配線やパッドは、例えば、アルミニウムを用い、真空蒸着法にて形成する。また、光検出素子用スイッチ114は、例えば、ポリシリコンを用いてTFTスイッチを作製する。   First, in step 6, the electrode 121 of the light detection element 113, the wiring to the light detection element 113, the switch, and the electrode pad are formed on the substrate 125. Although only the electrode 121 and the signal line 116 are shown in the drawing, the photodetection element control line 112, the output electrode pad 115, and the readout start pad 106 are also produced. For example, these wirings and pads are formed by vacuum deposition using aluminum. The photodetection element switch 114 is made of a TFT switch using, for example, polysilicon.

工程7では、工程6後の基板に、光電変換材料として、例えば、水素を含むアモルファスシリコン122を積層する。アモルファスシリコンの積層方法は、例えば、プラズマCVD法、反応性スパッタ法、熱CVD法、光CVD法などを用いる。   In Step 7, for example, amorphous silicon 122 containing hydrogen is stacked on the substrate after Step 6 as a photoelectric conversion material. As a method for laminating amorphous silicon, for example, a plasma CVD method, a reactive sputtering method, a thermal CVD method, a photo CVD method, or the like is used.

工程8では、工程7後の基板に、透明電極123を作製する。透明電極の材質や作製方法は、工程2にて説明したものと同じでよい。工程9では、以上説明した工程によって作製された光検出素子113上に、保護層136を設ける。   In step 8, the transparent electrode 123 is formed on the substrate after step 7. The material and manufacturing method of the transparent electrode may be the same as those described in Step 2. In step 9, a protective layer 136 is provided on the photodetecting element 113 manufactured by the steps described above.

次に、図10に示すように、工程10では、工程5までで作成された表示層132を挟むように、工程9までで作成された撮像層133とマイクロレンズ127とを、透明なパッケージ用接着剤134を用いて接着する。更に、光検出素子用シフトレジスタ105、読み出し回路104、発光ユニット用電力制御回路102、及び発光ユニット用シフトレジスタ118を設置し、これらを結線する。更に、撮像層133と表示層132とを結線する。このような方法によって、撮像装置101を作製できる。   Next, as shown in FIG. 10, in step 10, the imaging layer 133 and the microlens 127 created up to step 9 are used for a transparent package so as to sandwich the display layer 132 created up to step 5. Adhesion is performed using an adhesive 134. Further, a photodetection element shift register 105, a readout circuit 104, a light emitting unit power control circuit 102, and a light emitting unit shift register 118 are installed and connected. Further, the imaging layer 133 and the display layer 132 are connected. The imaging device 101 can be manufactured by such a method.

このように本実施形態の撮像装置により、表示機能を有する薄型の撮像装置を実現できる。   As described above, the imaging device of the present embodiment can realize a thin imaging device having a display function.

本実施形態の撮像装置101の作製方法に記した材質や作製方法は一例であって、本発明を限定するものではない。また、工程1、及び工程6でアルミニウムを用いたが、本発明はアルミニウム材料に限定されず、金などの他の金属や、工程2で記した透明導電膜を用いてもよい。また、光検出素子用スイッチ114と発光ユニット用スイッチ117を、ポリシリコンを用いて作製したが、本発明はポリシリコン材料に限定されず、アモルファスシリコンを用いる場合など、さまざまなスイッチが考えられる。   The material and the manufacturing method described in the manufacturing method of the imaging device 101 of this embodiment are examples, and do not limit the present invention. In addition, although aluminum is used in steps 1 and 6, the present invention is not limited to the aluminum material, and other metals such as gold or the transparent conductive film described in step 2 may be used. In addition, although the photodetection element switch 114 and the light emitting unit switch 117 are manufactured using polysilicon, the present invention is not limited to the polysilicon material, and various switches such as a case where amorphous silicon is used are conceivable.

本実施形態の表示系は、アクティブな回路構成を示したが、本発明はこの構成に限るものではなく、発光ユニット用スイッチ117を持たないパッシブ型の回路構成や、1画素毎に表示用回路を有する構成など、さまざまな構成でもよい。また、本実施形態の撮影系は、パッシブな回路構成を示したが、本発明はこの構成に限るものではなく、画素毎にアンプを備えるアクティブ型の回路構成や、CCD回路構成、1画素毎に撮影用回路を有する構成など、さまざまな構成でもよい。   Although the display system of the present embodiment shows an active circuit configuration, the present invention is not limited to this configuration, and a passive circuit configuration without the light emitting unit switch 117 or a display circuit for each pixel. Various configurations such as a configuration including The imaging system of the present embodiment has shown a passive circuit configuration. However, the present invention is not limited to this configuration, and an active circuit configuration including an amplifier for each pixel, a CCD circuit configuration, and a pixel-by-pixel configuration. Various configurations such as a configuration having an imaging circuit in the camera may be used.

また、本実施形態では1列ごとに撮影、表示を行う場合について説明したが、本発明はこれに限るものではなく、同時に複数行ごとに撮影、表示しても、1画素毎に撮影、表示しても、ある特定の領域で同時に撮影、表示しても、全領域で同時に撮影、表示してもよい。   Further, in the present embodiment, the case where photographing and display are performed for each column has been described. However, the present invention is not limited to this, and even if photographing and display are performed for every plurality of rows at the same time, photographing and display are performed for each pixel. Alternatively, it may be photographed and displayed simultaneously in a specific area, or may be photographed and displayed simultaneously in all areas.

本実施形態の発光ユニット111は、有機EL材料から構成される場合を説明したが、発光素子128が所望の波長を発する構造や、発光ユニット111が色変換層を具備し、発光素子128が青色光を発し、色変換層で波長を変えて、被写体に照射する構造や、発光ユニット111がカラーフィルタを具備し、発光素子128が白色光を発し、カラーフィルタによって必要な波長の光のみを透過させて被写体に照射する構造など、さまざまな構造であってもよい。   The case where the light emitting unit 111 of the present embodiment is made of an organic EL material has been described. However, the structure in which the light emitting element 128 emits a desired wavelength, the light emitting unit 111 includes a color conversion layer, and the light emitting element 128 is blue. A structure that emits light, changes the wavelength in the color conversion layer, and irradiates the subject, the light emitting unit 111 includes a color filter, the light emitting element 128 emits white light, and the color filter transmits only light of a necessary wavelength. Various structures such as a structure for irradiating the subject to the object may be used.

更に、本実施形態の発光ユニット111は、発光素子128が両電極によって挟まれる構造であったが、これは本発明を限定するものではない。例えば、電極と発光素子128との間に、電流輸送層やホール輸送層のどちらか一方を有する構造や、電流輸送層やホール輸送層の両方を備える構造であってもよい。   Furthermore, the light emitting unit 111 of the present embodiment has a structure in which the light emitting element 128 is sandwiched between both electrodes, but this does not limit the present invention. For example, a structure having either a current transport layer or a hole transport layer between the electrode and the light emitting element 128, or a structure including both the current transport layer and the hole transport layer may be used.

更に、表示層132は、有機EL以外のさまざまな材料からなってもよい。例えば、表示層132が、無機EL材料から構成されていてもよい。更に、表示層132は、プラズマ発光素子や、電界放射型表示素子、発光ダイオード、レーザダイオード、又は液晶とバックライトから構成される液晶表示素子などであってもよい。更に、液晶ディスプレイ用バックライトのように光を導いて発光してもよく、光ファイバで光を導いて発光素子128を構成してもよい。   Further, the display layer 132 may be made of various materials other than the organic EL. For example, the display layer 132 may be made of an inorganic EL material. Further, the display layer 132 may be a plasma light emitting element, a field emission display element, a light emitting diode, a laser diode, or a liquid crystal display element including a liquid crystal and a backlight. Further, light may be guided to emit light like a backlight for a liquid crystal display, or the light emitting element 128 may be configured by guiding light with an optical fiber.

本実施形態に示した光検出素子113は、アモルファスシリコンからなる場合を説明したが、これは本発明を限定するものではない。例えば、結晶シリコン、ポリシリコン、ゲルマニウム、ガリウム化合物、セレン化合物、カドミテルル、カドミジンクテルル、及びヨウ化鉛などのさまざまな光電変換材や、フォトマルチプライヤーを用いた光検出器など、さまざまな材料、及び方式の光検出器であってもよい。また、それらの複数の材料から構成される構造や、複数の光検出器から構成される構造であってもよい。   The case where the photodetection element 113 shown in the present embodiment is made of amorphous silicon has been described, but this does not limit the present invention. For example, various materials such as various photoelectric conversion materials such as crystalline silicon, polysilicon, germanium, gallium compounds, selenium compounds, cadmitel, cadmium zinc, and lead iodide, and photodetectors using photomultipliers, And a photodetector of the type. Moreover, the structure comprised from those several materials and the structure comprised from several photodetectors may be sufficient.

本実施形態では、全ての画素110が、マイクロレンズ127、発光ユニット111、及び光検出素子113を備えたが、これは本発明を限定するものではない。例えば、図11に示すように、マイクロレンズ127と光検出素子113とから構成され、発光ユニット111を備えない画素110があってもよい。この場合、発光ユニット111の有無により、マイクロレンズ127の曲率が異なってもよい。更に、マイクロレンズ127と発光ユニット111とから構成され、光検出素子113を備えない画素110があってもよい。また、発光ユニット111の有無によって、その画素110の光検出素子113のサイズが異なってもよい。   In the present embodiment, all the pixels 110 include the microlens 127, the light emitting unit 111, and the light detection element 113, but this does not limit the present invention. For example, as illustrated in FIG. 11, there may be a pixel 110 that includes a microlens 127 and a light detection element 113 and does not include the light emitting unit 111. In this case, the curvature of the microlens 127 may be different depending on the presence or absence of the light emitting unit 111. Furthermore, there may be a pixel 110 that includes the microlens 127 and the light emitting unit 111 and does not include the light detection element 113. Further, the size of the light detection element 113 of the pixel 110 may be different depending on the presence or absence of the light emitting unit 111.

また、本実施形態では、一つの画素110に一つのマイクロレンズ127を設けたが、これは本発明を限定するものではない。例えば、図12に示すように、一つの画素に対して複数のマイクロレンズ127が設けられてもよい。また、これらのマイクロレンズ127の役割が同じである必要はない。図12において、マイクロレンズ127−1は入射光を光検出素子113に集光し、マイクロレンズ127−2は入射光を光検出素子113に集光し、表示光を屈折して照射する。ここで、図12では、一つの画素110に2つのマイクロレンズ127を設けたが、この個数は本発明を限定するものではなく、一つの画素110に幾つのマイクロレンズ127を設けてもよい。   In this embodiment, one microlens 127 is provided for one pixel 110, but this does not limit the present invention. For example, as shown in FIG. 12, a plurality of microlenses 127 may be provided for one pixel. Further, the roles of these micro lenses 127 are not necessarily the same. In FIG. 12, a microlens 127-1 condenses incident light on the light detection element 113, and a microlens 127-2 condenses incident light on the light detection element 113, and refracts and irradiates display light. Here, in FIG. 12, two microlenses 127 are provided in one pixel 110, but this number is not limited to the present invention, and any number of microlenses 127 may be provided in one pixel 110.

本実施形態では光源を、画素110から構成される検出領域の周辺に設けた場合を説明したが、本構造は一例である。例えば、光源を、画素110間に設けても、その他の撮像装置101に内蔵してもよい。更に、実施形態に記した撮像装置101以外に光源装置を備え、その光源装置が撮像装置101に隣接した位置に設けられても、撮像装置101と離れて設けられてもよい。また、光源が、被写体に接していてもよく、離れていてもよい。また、被写体から、撮像装置101と光源とが同じ側に配置される場合だけでなく、光源と撮像装置とで被写体を挟むように配置してもよく、光源の照射方向と撮像装置への光入射方向が垂直となるように光源を配置してもよく、被写体に対してさまざまな方向から光を入射し、被写体で反射、散乱、透過の少なくとも一つをした光を撮像装置で検出する配置でよい。   In the present embodiment, the case where the light source is provided around the detection area including the pixels 110 has been described, but this structure is an example. For example, the light source may be provided between the pixels 110 or may be incorporated in another imaging device 101. Furthermore, a light source device may be provided in addition to the imaging device 101 described in the embodiment, and the light source device may be provided at a position adjacent to the imaging device 101 or may be provided apart from the imaging device 101. Further, the light source may be in contact with the subject or may be separated. Further, not only when the imaging device 101 and the light source are arranged on the same side from the subject, the subject may be placed between the light source and the imaging device, and the irradiation direction of the light source and the light to the imaging device The light source may be arranged so that the incident direction is vertical, and the light is incident on the subject from various directions, and the imaging device detects the light that has been reflected, scattered, or transmitted by the subject. It's okay.

本実施形態では、光源がダイオードの場合を記したが、これは一例であり、本発明を限定するものではない。例えば、有機EL材料や無機EL材料から構成される発光素子、プラズマ発光素子、電界放射型表示素子、液晶とバックライトから構成される液晶表示素子、レーザダイオードなどでもよい。また、光源にハロゲンランプを使用しても、ハロゲンランプの光から光学フィルタを用いて波長を限定した光でも、光源にレーザを用いてもよい。更に、液晶ディスプレイ用バックライトのように、離れた位置の光源からの光を導いて発光させてもよく、光ファイバで光を導いてもよい。   In the present embodiment, the case where the light source is a diode is described, but this is an example, and the present invention is not limited thereto. For example, a light emitting element composed of an organic EL material or an inorganic EL material, a plasma light emitting element, a field emission display element, a liquid crystal display element composed of a liquid crystal and a backlight, a laser diode, or the like may be used. In addition, a halogen lamp may be used as the light source, or the light from the halogen lamp may be light whose wavelength is limited using an optical filter, or a laser may be used as the light source. Furthermore, like a backlight for a liquid crystal display, light from a light source at a distant position may be guided to emit light, or light may be guided by an optical fiber.

本実施形態に示す撮像装置101は、好ましくは、撮影対象129とマイクロレンズ127との間、マイクロレンズ127と表示層132との間の少なくとも一方にコリメータを備える。これによって、撮影対象129から撮像層133に、斜めに光が入射する散乱線を防ぐことができ、擬似像の低減、画像のコントラストの向上、認証精度の向上ができる。また、表示光の方向を限定でき、覗き見防止が可能となる。また、このコリメータはマイクロレンズ127と一体の構造であってもよい。   The imaging apparatus 101 shown in the present embodiment preferably includes a collimator between at least one of the imaging target 129 and the microlens 127 and between the microlens 127 and the display layer 132. Thereby, scattered rays in which light is obliquely incident on the imaging layer 133 from the imaging target 129 can be prevented, and a pseudo image can be reduced, an image contrast can be improved, and authentication accuracy can be improved. Further, the direction of the display light can be limited, and peeping can be prevented. Further, this collimator may have a structure integrated with the microlens 127.

本実施形態に示す撮像装置101は、好ましくは、光検出素子用スイッチ114に表示光及び撮影光が入射しないようにする遮光手段を備える。これによって、スイッチ114に光が入るために生じる擬似信号を抑えることができる。また、好ましくは、発光ユニット用スイッチ117が光の入射を防ぐ遮光手段を備える。これによって、光が入射することで生じる発光ユニット用スイッチ117の誤動作を防ぐことができる。   The imaging apparatus 101 shown in the present embodiment preferably includes a light shielding unit that prevents display light and photographing light from entering the light detection element switch 114. As a result, a pseudo signal generated when light enters the switch 114 can be suppressed. Preferably, the light emitting unit switch 117 is provided with a light shielding means for preventing light from entering. Thus, malfunction of the light emitting unit switch 117 caused by the incidence of light can be prevented.

(第2実施形態)
本実施形態の撮像装置は、図13に示すように、撮像層133と表示層132が、共通基板124の表と裏に、それぞれ形成され、表示層兼撮像層149を形成する点で、前述した第1実施形態と異なる。本実施形態の撮像装置の作製方法を、図14から図16を用いて説明する。
(Second Embodiment)
As shown in FIG. 13, the imaging device according to the present embodiment has the imaging layer 133 and the display layer 132 formed on the front and the back of the common substrate 124, respectively, so that the display layer / imaging layer 149 is formed. This is different from the first embodiment. A method for manufacturing the imaging device according to the present embodiment will be described with reference to FIGS.

まず、図14に示すように、表示系を作製する。ここで、この表示系の作製は、第1実施形態の表示層132の工程と同様である。   First, as shown in FIG. 14, a display system is manufactured. Here, the production of this display system is the same as the process of the display layer 132 of the first embodiment.

次に、図15に示すように、撮像系を、表示層132のガラス基板124の裏面に作製する。工程6において、基板125上に、光検出素子113への配線、スイッチ、電極パッドを作製する。図中では信号線116のみを記すが、他に、光検出素子用制御線112、出力用電極パッド115、読み出し開始用パッド106、光検出素子用スイッチ114も作製する。これらの材質及び作製方法は、第1実施形態と同様でよい。   Next, as shown in FIG. 15, an imaging system is formed on the back surface of the glass substrate 124 of the display layer 132. In step 6, wirings, switches, and electrode pads to the light detection element 113 are formed on the substrate 125. Although only the signal line 116 is shown in the drawing, a photodetection element control line 112, an output electrode pad 115, a read start pad 106, and a photodetection element switch 114 are also produced. These materials and manufacturing methods may be the same as those in the first embodiment.

工程7では、工程6後の基板に、透明電極123を作製する。これは光検出素子113の電極であり、図13に示すように、本構造ではガラス基板124側から光検出素子113に検出光が入射するため、光検出素子113の電極には透明電極を用いる。その材質や作製方法は、工程2に記すものと同じでよい。   In step 7, the transparent electrode 123 is formed on the substrate after step 6. This is an electrode of the light detection element 113. As shown in FIG. 13, in this structure, since the detection light is incident on the light detection element 113 from the glass substrate 124 side, a transparent electrode is used as the electrode of the light detection element 113. . The material and manufacturing method thereof may be the same as those described in step 2.

工程8では、工程7後の基板に、光電変換材料として、例えば、水素を含むアモルファスシリコン122を積層する。その方法は、第1実施形態と同じでよい。   In Step 8, for example, amorphous silicon 122 containing hydrogen is stacked on the substrate after Step 7 as a photoelectric conversion material. The method may be the same as in the first embodiment.

工程9では、工程8後の基板に、電極121を作製する。この材質及び作製方法としては、工程6の配線や電極パッドと同じでよい。   In step 9, the electrode 121 is formed on the substrate after step 8. This material and manufacturing method may be the same as the wiring and electrode pad in step 6.

工程10では、このように作製した光検出素子113上に、保護層136を設ける。このようにして表示層兼撮像層149を作製する。   In step 10, a protective layer 136 is provided on the photodetecting element 113 thus manufactured. In this way, the display layer / imaging layer 149 is manufactured.

次に、図16に示すように、工程11では、表示層兼撮像層149とマイクロレンズ127を、透明なパッケージ用接着剤134を用いて接着する。更に、光検出素子用シフトレジスタ105、読み出し回路104、発光ユニット用電力制御回路102、発光ユニット用シフトレジスタ118を設置し、これらを結線する。更に、撮像層133と表示層132とを結線する。このような方法によって、撮像装置101を作製できる。   Next, as shown in FIG. 16, in step 11, the display layer / imaging layer 149 and the microlens 127 are bonded using a transparent packaging adhesive 134. Further, a photodetection element shift register 105, a readout circuit 104, a light emitting unit power control circuit 102, and a light emitting unit shift register 118 are installed and connected. Further, the imaging layer 133 and the display layer 132 are connected. The imaging device 101 can be manufactured by such a method.

本実施形態の構造では、第1実施形態のように表示層132と撮像層133を接着する必要がないため、接着の際に、発光ユニット111と光検出素子112とに位置ずれが生じない。また、接着剤の非一様性や接着の際に生じる気泡などによって、検出光を吸収し、又は散乱することによって、検出光の集光率が低下したり、隣接する画素110への散乱が増えたりすることがない。   In the structure of this embodiment, since there is no need to bond the display layer 132 and the imaging layer 133 as in the first embodiment, there is no positional shift between the light emitting unit 111 and the light detection element 112 during bonding. Further, the detection light is absorbed or scattered by non-uniformity of the adhesive or bubbles generated at the time of adhesion, so that the light collection rate of the detection light is reduced or scattering to the adjacent pixels 110 is reduced. There is no increase.

本形態実施形態の作製方法は一例であり、本発明を限定するものではない。例えば、表示系と撮像系の作製順が逆であってもよい。   The manufacturing method of this embodiment is an example, and does not limit the present invention. For example, the production order of the display system and the imaging system may be reversed.

(第3実施形態)
本実施形態の撮像装置101は、マイクロレンズが表示層132及び撮像層133の方向に凸となる構造を有する点で、前述した第1実施形態と異なる。更に、本実施形態の撮像装置101の構造は、表示光が所定の表示角度となる条件が、第1実施形態と異なる。この条件について、図17及び図18を用いて説明する。ここで図17及び図18の点A、B、C、長さD、M、X、W、角度θ1、θ2、αは第1実施形態と同じに定義する。更に、光軸145とマイクロレンズ127の表面との交点をF、線分FBの距離をNと定義する。
(Third embodiment)
The imaging device 101 of this embodiment is different from the first embodiment described above in that the microlens has a structure that protrudes in the direction of the display layer 132 and the imaging layer 133. Furthermore, the structure of the imaging apparatus 101 of the present embodiment is different from that of the first embodiment in that the display light has a predetermined display angle. This condition will be described with reference to FIGS. Here, points A, B, and C, lengths D, M, X, and W, and angles θ1, θ2, and α in FIGS. 17 and 18 are defined in the same manner as in the first embodiment. Further, the intersection of the optical axis 145 and the surface of the microlens 127 is defined as F, and the distance of the line segment FB is defined as N.

図17を用いて、撮影光130について説明する。撮影光130は、マイクロレンズ127に点Eで入射し、点Aから出力し、入射点及び出力点で屈折する。ここで、説明を簡単にするために、表示装置101の外は空気で満たされ、その屈折率は”1”とみなせるとする。同様に、接着剤134も屈折率が空気と同じであり、ガラス基板132での屈折は無視できるほど小さいとする。   The photographic light 130 will be described with reference to FIG. The photographing light 130 is incident on the microlens 127 at the point E, is output from the point A, and is refracted at the incident point and the output point. Here, in order to simplify the explanation, it is assumed that the outside of the display device 101 is filled with air and the refractive index can be regarded as “1”. Similarly, it is assumed that the adhesive 134 has the same refractive index as air, and the refraction at the glass substrate 132 is negligibly small.

点Eにおける入射角をθ4、屈折角をθ3とすると、スネルの法則より、以下の関係がある。   When the incident angle at the point E is θ4 and the refraction angle is θ3, the following relationship is established according to Snell's law.

Figure 0005144217
Figure 0005144217

また、幾何学的条件より、以下の関係がある。   In addition, there is the following relationship based on geometric conditions.

Figure 0005144217
Figure 0005144217

同様に点Aにおける条件より、以下の関係がある。   Similarly, there is the following relationship based on the condition at point A.

Figure 0005144217
Figure 0005144217

これらの関係を用いると、n=1.54、L=2mm、D=100μm、W=50μm、N=300μmの場合、αを約55度に設ければ、撮影光130は光検出素子113に集光できる。この値を第1実施形態で説明した、上に凸のマイクロレンズを用いた場合の値(約28度)と比べると、大きいことが分かる。このように、下に凸のマイクロレンズを用いると、上に凸のマイクロレンズを用いた場合よりαが大きなマイクロレンズを必要とする。αが大きくなるにつれてマイクロレンズは薄くできるため、撮影装置101を薄型化することが可能となる。   Using these relationships, when n = 1.54, L = 2 mm, D = 100 μm, W = 50 μm, and N = 300 μm, if α is provided at about 55 degrees, the photographing light 130 is applied to the light detection element 113. It can be condensed. It can be seen that this value is larger than the value (about 28 degrees) in the case of using the upward convex microlens described in the first embodiment. As described above, when a downwardly convex microlens is used, a microlens having a larger α is required than when an upwardly convex microlens is used. Since the microlens can be made thinner as α increases, the photographing apparatus 101 can be made thinner.

次に、図18を用いて、表示光144について説明する。点Eにおける表示光144の入射角をθ3、屈折角(表示角)をθ4とする。このときスネルの法則より、下式の関係が成立する。   Next, the display light 144 will be described with reference to FIG. The incident angle of the display light 144 at the point E is θ3, and the refraction angle (display angle) is θ4. At this time, from Snell's law, the following equation holds.

Figure 0005144217
Figure 0005144217

また、幾何学的条件より、以下の関係がある。   In addition, there is the following relationship based on geometric conditions.

Figure 0005144217
Figure 0005144217

更に第1実施形態と同様に、以下の関係がある(W>Mの場合)。   Furthermore, as in the first embodiment, there is the following relationship (when W> M).

Figure 0005144217
Figure 0005144217

これらの関係を用いると、例えば、n=1.54、α=55度、D=100μm、W=50μm、M=10μmの場合であって、発光ユニット111からの光が点Aから出力できる限界、すなわちθ1が90度となる場合には、表示角θ4は9度となる。このとき発光ユニット111と光検出素子113の距離Xが91μmとなる。従って、設計において、目標の表示角を18度以下とするとき、発光ユニット111は光検出素子113から、距離91μmの間のどの位置に設けても実現できる。   Using these relationships, for example, when n = 1.54, α = 55 degrees, D = 100 μm, W = 50 μm, and M = 10 μm, the limit at which light from the light emitting unit 111 can be output from the point A That is, when θ1 is 90 degrees, the display angle θ4 is 9 degrees. At this time, the distance X between the light emitting unit 111 and the light detection element 113 is 91 μm. Therefore, in the design, when the target display angle is 18 degrees or less, the light emitting unit 111 can be provided at any position between the light detection element 113 and the distance of 91 μm.

この距離は、第1実施形態で説明した、上に凸のマイクロレンズを用いた場合の値と比べて大きい。これは、αが大きくなるにつれて、点Aでの屈折角θ2が小さくなるためである。下に凸のマイクロレンズを用いることによって、撮像装置の設計における、発光ユニット111の配置の自由度を向上できる。   This distance is larger than the value in the case of using the upward convex microlens described in the first embodiment. This is because the refraction angle θ2 at the point A becomes smaller as α becomes larger. By using a downwardly convex microlens, the degree of freedom of arrangement of the light emitting units 111 in the design of the imaging device can be improved.

本実施形態では、マイクロレンズにガラスを用いたが、これは一例であって、他の材料を用いてもよい。以下、ガラスよりも屈折率が大きな材料、例えば可視光に対する屈折率が約3.45のシリコンを用いた場合の変形例について説明する。   In this embodiment, glass is used for the microlens, but this is an example, and other materials may be used. Hereinafter, a modification example in which a material having a higher refractive index than glass, for example, silicon having a refractive index with respect to visible light of about 3.45 is used will be described.

ガラスの場合と同様に、スネルの法則及び幾何学的条件より求まる関係式から、撮影光のαを求める。ガラスの場合とα以外が同じジオメトリの場合、αは約79.5度になる。これはガラスの場合に比べて大きな値であることから、マイクロレンズを薄型化できることが分かる。   As in the case of glass, α of the photographing light is obtained from a relational expression obtained from Snell's law and geometric conditions. In the case of the same geometry except α for glass, α is about 79.5 degrees. Since this is a larger value than that of glass, it can be seen that the microlens can be made thinner.

次に、α以外がガラスの場合と同様のジオメトリである場合の、表示河野αの値を、シリコン製マイクロレンズとして先に求めた値(79.5度)の場合において考える。このとき、第1実施形態で求めた関係式から、発光ユニット111からの光が点Aから出力できる限界、すなわちθ1が90度となる場合を考えると、表示角θ4は約23度になる。この値は、ガラスの場合に比べて大きい。一方、屈折角が18度以下となる条件を、先に記した表示光における関係式を用いて求めると、下式のようになり、Xが75μm以下であることが必要だと分かる。   Next, the value of the display Kono α when the geometry other than α is the same as that in the case of glass will be considered in the case of the value (79.5 degrees) previously obtained as a silicon microlens. At this time, from the relational expression obtained in the first embodiment, considering the limit at which light from the light emitting unit 111 can be output from the point A, that is, the case where θ1 is 90 degrees, the display angle θ4 is about 23 degrees. This value is larger than that of glass. On the other hand, when the condition that the refraction angle is 18 degrees or less is obtained using the relational expression in the display light described above, the following expression is obtained, and it is understood that X needs to be 75 μm or less.

Figure 0005144217
Figure 0005144217

ただしマイクロレンズが上に凸形状のシリコンである場合は、同一の条件において、αが53度、Xが35μm以下となり、下に凸形状のマイクロレンズの場合の方が、発光ユニット111の位置設計の自由度が高いことが分かる。   However, when the microlens is an upwardly convex silicon, α is 53 degrees and X is 35 μm or less under the same conditions, and the position design of the light emitting unit 111 is the case of the downwardly convex microlens. It can be seen that the degree of freedom is high.

本実施形態において、表示装置101の外は空気で満たされ、その屈折率は1とみなせるとした。同様に接着剤134も屈折率が空気と同じであり、ガラス基板132での屈折は無視できるほど小さいとした。しかし、これは一例であって、本発明を限定するものではない。使用するガラス基板124、接着剤134などの材料や、使用する外部媒体によっては、点Aと点E以外での媒体間での屈折も考慮し、発光ユニット111と光検出素子113の距離Xを設定することが望ましい。   In this embodiment, the outside of the display device 101 is filled with air, and the refractive index can be regarded as 1. Similarly, the adhesive 134 has the same refractive index as air, and the refraction at the glass substrate 132 is assumed to be negligibly small. However, this is only an example and does not limit the present invention. Depending on the materials such as the glass substrate 124 and the adhesive 134 to be used and the external medium to be used, the distance X between the light emitting unit 111 and the light detecting element 113 is set in consideration of refraction between the media other than the points A and E. It is desirable to set.

本実施形態及び第1実施形態において、マイクロレンズは一方のみに凸の形状を有したが、これは本発明を限定するものではなく、両面に凸を有してもよい。更に、凸レンズのみでなく、マイクロレンズの少なくとも1面に凹レンズやフレネルレンズなどの様々なレンズを用いてもよい。   In the present embodiment and the first embodiment, the microlens has a convex shape on only one side, but this does not limit the present invention and may have a convexity on both sides. In addition to the convex lens, various lenses such as a concave lens and a Fresnel lens may be used on at least one surface of the microlens.

(第4実施形態)
本実施形態の撮像装置101は、発光ユニット111が、異なる発光スペクトルを有する2つの発光ユニットから構成され、多色表示が可能な点で、前述した第1実施形態と異なる。
(Fourth embodiment)
The imaging apparatus 101 of the present embodiment is different from the first embodiment described above in that the light emitting unit 111 is configured by two light emitting units having different emission spectra, and multicolor display is possible.

図19に示すように、本実施形態の発光ユニット111は、透明な絶縁層143を挟んで、青色発光ユニット層154と赤色発光ユニット層156が積層された構造を成す。これらの発光ユニット層は、例えば、有機EL材料から構成される。   As shown in FIG. 19, the light emitting unit 111 of the present embodiment has a structure in which a blue light emitting unit layer 154 and a red light emitting unit layer 156 are stacked with a transparent insulating layer 143 interposed therebetween. These light emitting unit layers are made of, for example, an organic EL material.

本実施形態のように、発光ユニットが多色の発光ユニット層を積層した構造である場合、マイクロレンズ127による色収差を低減、除去するために、発光スペクトルの波長(所望のピーク波長や平均波長)が短いものほど、マイクロレンズに近い位置に設置することが望ましい。これについて、図20を用いて詳しく説明する。   When the light emitting unit has a structure in which multicolored light emitting unit layers are stacked as in the present embodiment, the wavelength of the emission spectrum (desired peak wavelength or average wavelength) in order to reduce or eliminate chromatic aberration due to the microlens 127. It is desirable that the shorter the is, the closer to the microlens. This will be described in detail with reference to FIG.

図20は、青色発光ユニット層154と赤色発光ユニット層156から点Aに入射した光の光路の説明図である。それぞれの光の入射角はγ1及びγ2であり、入射した光は屈折角β1及びβ2でマイクロレンズ127から出力される。また、それぞれの発光点から点Bとの距離をH1、H2、青色発光ユニット層154と赤色発光ユニット層156の、屈折率を、それぞれn1、n2と定義する。このときスネルの法則より、以下の関係がある。   FIG. 20 is an explanatory diagram of an optical path of light incident on the point A from the blue light emitting unit layer 154 and the red light emitting unit layer 156. The incident angles of the respective lights are γ1 and γ2, and the incident light is output from the microlens 127 at the refraction angles β1 and β2. Further, the distances from the respective light emitting points to the point B are defined as H1 and H2, and the refractive indexes of the blue light emitting unit layer 154 and the red light emitting unit layer 156 are defined as n1 and n2, respectively. At this time, Snell's law has the following relationship.

Figure 0005144217
Figure 0005144217

また、幾何学的条件より、以下の関係がある。   In addition, there is the following relationship based on geometric conditions.

Figure 0005144217
Figure 0005144217

また第1実施形態と同様に、αを28度、Wを50μmとする。ここで青色発光ユニット層154の中心波長を450nm、赤色発光ユニット層156の中心波長を580nmとすると、屈折率n1は1.5536、屈折率n2は1.5442となり、両波長の光に対する屈折率は異なる。しかし、H1が96.6μm、H2が97.6μmを満たすように、発光ユニット層を設けると、β1とβ2は同一の62度になり、更に、表示角は0度(α+β1=α+β2=90度)になる。従って、屈折率の違いによる収差は生じない。   As in the first embodiment, α is 28 degrees and W is 50 μm. Here, when the center wavelength of the blue light emitting unit layer 154 is 450 nm and the center wavelength of the red light emitting unit layer 156 is 580 nm, the refractive index n1 is 1.5536, the refractive index n2 is 1.5442, and the refractive index for light of both wavelengths. Is different. However, if the light emitting unit layer is provided so that H1 satisfies 96.6 μm and H2 satisfies 97.6 μm, β1 and β2 are the same 62 degrees, and the display angle is 0 degrees (α + β1 = α + β2 = 90 degrees). )become. Therefore, no aberration due to the difference in refractive index occurs.

この位置の差(1.0μm)は、例えば、絶縁層143の厚みによって実現すればよい。一方、青色発光ユニット層154と赤色発光ユニット層156を逆に設けた場合は、表示角は同一にならない。このとき、各発光ユニット層から出た光の表示角が異なるので、見る位置や角度によって異なる色に見える可能性がある。   This position difference (1.0 μm) may be realized by the thickness of the insulating layer 143, for example. On the other hand, when the blue light emitting unit layer 154 and the red light emitting unit layer 156 are provided in reverse, the display angles are not the same. At this time, since the display angles of the light emitted from the respective light emitting unit layers are different, there is a possibility that different colors appear depending on the viewing position and angle.

従って、色収差の低減及び/又は除去するために、発光ユニット層の所望のピーク波長や平均波長が短い発光ユニット層を、マイクロレンズに近い位置に設置するとよい。   Therefore, in order to reduce and / or eliminate chromatic aberration, a light emitting unit layer having a short desired peak wavelength or average wavelength of the light emitting unit layer may be installed at a position close to the microlens.

本実施形態では、赤色の発光ユニット層と青色の発光ユニット層とによって発光ユニットを構成したが、さまざまな色の発光ユニット層の組み合わせから構成されてもよい。例えば、3つ以上の発光ユニット層によって発光ユニットが構成されてもよい。更に、発光ユニットが有機EL層によって構成される例を説明したが、その他の材質から構成されてもよく、異なる材質の複数の発光ユニットから構成されていてもよい。   In the present embodiment, the light emitting unit is configured by the red light emitting unit layer and the blue light emitting unit layer. However, the light emitting unit layer may be configured by a combination of light emitting unit layers of various colors. For example, the light emitting unit may be configured by three or more light emitting unit layers. Furthermore, although the example in which the light emitting unit is configured by the organic EL layer has been described, the light emitting unit may be configured by other materials, or may be configured by a plurality of light emitting units of different materials.

(第5実施形態)
本実施形態の撮像装置101は、発光ユニット111が撮影対象129の撮影用光源を兼ねる点で、前述した第1実施形態と異なる。図21は、図1の位置159における本実施形態の撮影装置101の断面構造を説明する断面図であり、図22と図23は撮影と発光のタイミングを説明するための撮影シーケンスを表すタイミング図である。
(Fifth embodiment)
The imaging apparatus 101 according to the present embodiment is different from the first embodiment described above in that the light emitting unit 111 also serves as an imaging light source for the imaging target 129. FIG. 21 is a cross-sectional view for explaining a cross-sectional structure of the photographing apparatus 101 of the present embodiment at the position 159 in FIG. 1, and FIGS. 22 and 23 are timing charts showing photographing sequences for explaining photographing and light emission timings. It is.

本実施形態の撮像装置101は、図21に示すように、表示層132と撮像層133の間に、遮光層148を有する。この遮光層148は、異なる画素の発光ユニット111からの直接光を遮光する。例えば、発光ユニット111−1の撮影光155−1は、遮光層148によって遮光され、光検出素子113−2には直接入射しない。一方、撮影対象129に向けて照射された撮影用光155−2、155−4は、撮影対象129で反射及び/又は散乱して、光検出素子113に至る。このとき撮影光155−4は、発光した発光ユニット111−1と同一画素の光検出素子113−1に至るが、光検出素子113−1には発光ユニット111−1からの直接光155−3が入射する。このため、検出される信号の雑音が大きいことから、この様な状況で光検出素子113−1によって検出された信号は、撮影対象129の画像に用いないことが望ましい。   As illustrated in FIG. 21, the imaging apparatus 101 according to the present embodiment includes a light shielding layer 148 between the display layer 132 and the imaging layer 133. The light shielding layer 148 shields direct light from the light emitting units 111 of different pixels. For example, the photographing light 155-1 of the light emitting unit 111-1 is shielded by the light shielding layer 148 and does not directly enter the light detection element 113-2. On the other hand, the imaging light 155-2 and 155-4 irradiated toward the imaging target 129 is reflected and / or scattered by the imaging target 129 and reaches the light detection element 113. At this time, the photographic light 155-4 reaches the light detection element 113-1 of the same pixel as the light emitting unit 111-1, and the light detection element 113-1 receives direct light 155-3 from the light emission unit 111-1. Is incident. For this reason, since the noise of the detected signal is large, it is desirable that the signal detected by the light detection element 113-1 in such a situation is not used for the image of the imaging target 129.

一方、撮影光155−4は、隣接画素の光検出素子113−2に至り、これを読み出す。この読み出しは、例えば、図22に示すように行う。図22は、発光ユニット111による光の照射と、光検出素子113によって検出された信号の読み出しのタイミングを表す。時間150は光を照射している時間を、時間151は信号を読み出している時間を、時間153は1画像を取得している時間を、それぞれ表す。   On the other hand, the photographing light 155-4 reaches the light detection element 113-2 of the adjacent pixel and reads it. This reading is performed, for example, as shown in FIG. FIG. 22 shows the timing of light irradiation by the light emitting unit 111 and reading of the signal detected by the light detection element 113. A time 150 represents a time during which light is irradiated, a time 151 represents a time during which a signal is read, and a time 153 represents a time during which one image is acquired.

この信号の読み出しは、1行目の発光ユニット111が光を照射した場合、それと同時に2行目の光検出素子113によって検出された信号を読み出す。次に、光を照射する発光ユニット111と、信号が読み出される光検出素子113を1行ずつ切り替え、同様に信号を読み出す。このようにしてN行分の信号を読み出し、撮影対象127の画像を得る。   When the light emitting unit 111 in the first row irradiates light, the signal detected by the light detecting elements 113 in the second row is read at the same time. Next, the light emitting unit 111 for irradiating light and the light detection element 113 from which a signal is read out are switched line by line, and the signal is read out in the same manner. In this way, signals for N rows are read out, and an image of the photographing target 127 is obtained.

更に、光検出素子113が信号読み出しを行う前に、光検出素子113に蓄積された信号をリセットしてもよい。このリセットでは、暗電流によって生じた信号や、本来の発光ユニット111以外が照射した光によって生じた信号、撮像装置101外の光によって生じた信号などを取り除き、本来の発光ユニット111が照射した光によって生じた信号のみを読み出せるようにする。   Further, the signal accumulated in the photodetection element 113 may be reset before the photodetection element 113 performs signal readout. This reset removes the signal generated by the dark current, the signal generated by the light emitted from other than the original light emitting unit 111, the signal generated by the light outside the imaging device 101, and the like, and the light emitted by the original light emitting unit 111. Only the signal generated by the can be read out.

このリセットは、例えば、図23に示すように行う。図23に示すシーケンスでは、読み出し時間151の直前に、リセットを行うリセット時間152を設ける。このリセット時間152では、例えば、読み出し時間151と同様に信号を読み出し、光検出素子113に蓄積された電荷を除去する。この時、読み出された信号は、画像化には用いない。これによって、時間150に照射された光によって生じた信号のみを、読み出し時間151の読み出しによって、得ることができる。   This reset is performed, for example, as shown in FIG. In the sequence shown in FIG. 23, a reset time 152 for resetting is provided immediately before the read time 151. In the reset time 152, for example, a signal is read out in the same manner as in the read time 151, and the charge accumulated in the photodetecting element 113 is removed. At this time, the read signal is not used for imaging. As a result, only a signal generated by the light irradiated at time 150 can be obtained by reading at the reading time 151.

発光ユニット111は、撮影用に、表示光の一部または全部を、そのまま用いてもよい。また、表示層132と撮像層133の間に、表示光中の所望の波長の光のみを透過する光学フィルタを設け、光学フィルタを透過した光を撮影に用いてもよい。   The light emitting unit 111 may use part or all of the display light as it is for photographing. Further, an optical filter that transmits only light having a desired wavelength in the display light may be provided between the display layer 132 and the imaging layer 133, and the light transmitted through the optical filter may be used for photographing.

更に、撮像装置101は、撮影用の発光ユニット層を備えてもよい。例えば、表示には用いない波長の光を照射する発光ユニット層を備え、撮影の際にこの発光ユニット層によって光を照射し、画像を得てもよい。   Furthermore, the imaging apparatus 101 may include a light emitting unit layer for photographing. For example, a light emitting unit layer that irradiates light having a wavelength that is not used for display may be provided, and an image may be obtained by irradiating light with the light emitting unit layer at the time of photographing.

また、同一の発光ユニットから、駆動条件を変えて、撮影用と表示用の光を別々に照射してもよい。このような発光ユニットとして、例えば、PPV系発光液晶ポリマーから成る有機EL素子がある。PPV系発光液晶ポリマーから成る有機EL素子に印加される電圧の極性を変えることによって、発光スペクトルを変えることができる。また、これらの撮影用の発光ユニット層を、全画素に設けても、特定の画素に設けてもよい。更に、発光ユニット111の一部または全部が、撮影用の発光ユニット層のみから構成されてもよい。   Further, from the same light emitting unit, the shooting conditions and the display light may be separately irradiated by changing the driving conditions. As such a light emitting unit, for example, there is an organic EL element made of a PPV light emitting liquid crystal polymer. The emission spectrum can be changed by changing the polarity of the voltage applied to the organic EL element composed of the PPV-based light emitting liquid crystal polymer. In addition, these light-emitting unit layers for photographing may be provided in all pixels or specific pixels. Furthermore, a part or all of the light emitting unit 111 may be composed of only a light emitting unit layer for photographing.

本実施形態では、発光した発光ユニット111の隣の光検出素子113によってその光を検出する場合を示したが、これは本発明を限定するものではなく、複数画素離れた位置の光検出素子113で光を検出し、撮影対象129を画像化してもよい。特に、発光ユニットに近接する画素では、撮影対象129表面で反射した光が多く、発光ユニットから離れた位置の画素では、撮影対象129の内部を散乱してきた光が多いと考えられる。よって、目的に合わせた距離の光検出素子113から信号読み出しをするとよい。   In the present embodiment, the case where the light is detected by the light detection element 113 adjacent to the light emitting unit 111 that emitted light is shown, but this does not limit the present invention, and the light detection element 113 at a position separated by a plurality of pixels. The light to be detected may be used to image the imaging target 129. In particular, it is considered that a pixel close to the light emitting unit has a lot of light reflected on the surface of the shooting target 129, and a pixel far from the light emitting unit has a lot of light scattered inside the shooting target 129. Therefore, it is preferable to read a signal from the light detection element 113 at a distance according to the purpose.

本実施形態では、1行毎に発光ユニット111から光を照射し、1行毎に光検出素子113の信号を読み出したが、これは本発明を限定するものではない。発光及び信号読み出しが、1画素毎、複数画素毎、複数行毎、列毎、複数列毎など様々な場合でもよい。更に、発光と信号読み出しを行う画素数が異なってもよい。   In this embodiment, light is emitted from the light emitting unit 111 for each row, and the signal of the light detection element 113 is read for each row. However, this does not limit the present invention. There may be various cases such as light emission and signal readout for every pixel, every plural pixels, every plural rows, every column, every plural columns. Further, the number of pixels for light emission and signal readout may be different.

本実施形態において説明したリセット方法は一例であり、これは本発明を限定するものではない。例えば、1行ごとではなく全行同時に行ってもよい。更に、リセットを行うためのリセット用回路を備え、これによって光検出素子に蓄積された電荷を除去してもよい。   The reset method described in the present embodiment is an example, and this does not limit the present invention. For example, all the lines may be performed simultaneously instead of every line. Further, a reset circuit for performing resetting may be provided, whereby the charge accumulated in the photodetecting element may be removed.

本実施形態において、直接光を入射しないために、表示層132と撮影層133の間に遮光層148を用いたが、これは直接光を入射しないための方法の一例であり、他にもさまざまな構造が考えられる。例えば、コリメータを用いるたり、ファイバーオプティカルプレートのように透過率に異方性を有する媒体を用いてもよい。   In the present embodiment, the light shielding layer 148 is used between the display layer 132 and the imaging layer 133 in order to prevent direct light from entering, but this is an example of a method for preventing direct light from entering, and there are various other methods. Can be considered. For example, a collimator may be used, or a medium having anisotropy in transmittance such as a fiber optical plate may be used.

(第6実施形態)
本実施形態の撮像装置101は、撮影光130の検出率を向上させる構造を有する点で、前述した第1実施形態と異なる。
(Sixth embodiment)
The imaging apparatus 101 of the present embodiment is different from the first embodiment described above in that it has a structure that improves the detection rate of the photographing light 130.

図24に示すように、本実施形態の撮像装置101の構造は、光を反射するアルミ電極121と反射体146とによって、光検出素子113の受光部122と表示層132とを挟む。この反射体146は、入射光130を透過する入光口157、光を反射する反射材158から構成され、反射材158は、ガラス基板124側から来た光を反射する。   As shown in FIG. 24, in the structure of the imaging apparatus 101 of this embodiment, the light receiving unit 122 and the display layer 132 of the light detection element 113 are sandwiched between the aluminum electrode 121 and the reflector 146 that reflect light. The reflector 146 includes a light entrance 157 that transmits the incident light 130 and a reflective material 158 that reflects light. The reflective material 158 reflects light coming from the glass substrate 124 side.

本実施形態において、入射光130はマイクロレンズ127で集光され、入光口157から光検出素子113に至る。この光が光検出素子113を透過した場合、アルミ電極121にて反射されて再度光検出素子113に入射する。更に、再度光検出素子113を透過した光は反射材158に至り、再度反射される。ここで、入光口157に至った光は外部に出力されて検出できないため、入光口157は小さい方が望ましい。次に、反射材158で反射した光は、再度光検出素子113に入射する。   In the present embodiment, the incident light 130 is collected by the microlens 127 and reaches the light detection element 113 through the light entrance 157. When this light passes through the light detection element 113, it is reflected by the aluminum electrode 121 and enters the light detection element 113 again. Further, the light transmitted through the light detection element 113 again reaches the reflecting material 158 and is reflected again. Here, since the light reaching the light entrance 157 is output to the outside and cannot be detected, the light entrance 157 is preferably small. Next, the light reflected by the reflective material 158 enters the light detection element 113 again.

このように、光検出素子113で検出されない光は、アルミ電極121と反射体146との間を往復し、何度も光検出素子113に入射される。すなわち、入射光130を複数回光検出素子113に入射できるため、入射光130の検出率を向上することができる。   In this way, light that is not detected by the light detection element 113 reciprocates between the aluminum electrode 121 and the reflector 146 and is incident on the light detection element 113 many times. That is, since the incident light 130 can enter the light detection element 113 a plurality of times, the detection rate of the incident light 130 can be improved.

本実施形態において、アルミ電極121と反射体146との間に、スペースを設けるとよい。スペースの幅は、例えば、入光口157の幅と同程度かそれ以上である。これによって、アルミ電極121から入光口157を臨む立体角を小さくすることができるため、入光口157から外に逃げ出る光を減らすことができる。更に、アルミ電極121及び反射材158に、光が大きな角度で散乱できる程度の大きさの凹凸を設けることができる。ただし、アルミ電極121と反射体146との間にスペースを設けることによって、撮像装置101が厚くなる。しかし、表示層132にて、このスペースを実現することによって、撮像装置101を厚くすることなく、検出率を向上した表示機能付き撮像装置101を実現することができる。   In the present embodiment, a space may be provided between the aluminum electrode 121 and the reflector 146. The width of the space is, for example, about the same as or larger than the width of the light entrance 157. As a result, the solid angle that faces the light entrance 157 from the aluminum electrode 121 can be reduced, so that light that escapes from the light entrance 157 can be reduced. Furthermore, the aluminum electrode 121 and the reflective material 158 can be provided with unevenness large enough to scatter light at a large angle. However, by providing a space between the aluminum electrode 121 and the reflector 146, the imaging device 101 becomes thick. However, by realizing this space in the display layer 132, the imaging device 101 with a display function with improved detection rate can be realized without increasing the thickness of the imaging device 101.

更に、本実施形態では、反射体146を、表示光の照射方向を限定するコリメータとして用いることもできる。このとき、反射体146は、他の画素のマイクロレンズ127へ光が入射するのを防ぐと共に、マイクロレンズ127への入射範囲を限定することによって、マイクロレンズ127から光が出力する際の表示角を限定することができる。これによって、覗き見の防止及び色収差を低減することができる。   Furthermore, in this embodiment, the reflector 146 can also be used as a collimator that limits the irradiation direction of the display light. At this time, the reflector 146 prevents the light from entering the microlens 127 of another pixel and limits the incident range to the microlens 127, thereby displaying the display angle when the light is output from the microlens 127. Can be limited. This can prevent peeping and reduce chromatic aberration.

本実施形態において、入射光130は多数回反射されることによって、光軸の垂直方向に広がるため、光検出素子113は画素に対して大きなフィルファクタを有するとよい。   In the present embodiment, since the incident light 130 is reflected many times and spreads in the direction perpendicular to the optical axis, the light detection element 113 preferably has a large fill factor with respect to the pixel.

本実施形態において、アルミ電極121を一方の反射層として用いたが、この構造は一例であり、本発明を限定するものではない。例えば、基板125の下面などに、別に反射層を備えてもよい。その場合には、アルミ電極121に凹凸を設ける必要がないため、光検出素子113の暗電流の低減などの特性を改善することができる。ただし、基板125への入射光130に対して透明な材質を用い、電極121に透明電極を用いるとよい。   In the present embodiment, the aluminum electrode 121 is used as one of the reflective layers, but this structure is an example and does not limit the present invention. For example, another reflective layer may be provided on the lower surface of the substrate 125 or the like. In that case, since it is not necessary to provide unevenness on the aluminum electrode 121, characteristics such as reduction in dark current of the light detection element 113 can be improved. However, a transparent material may be used for the incident light 130 on the substrate 125 and a transparent electrode may be used for the electrode 121.

本実施形態において、光検出素子113内で光を列方向に散乱する場合を示したが、これは一例であり、例えば行方向に散乱する場合や、その両方に散乱する場合も有り得る。更に、アルミ電極121での光散乱は光軸145に対して等方的でなくてもよく、光の反射方向に異方性を有するように、アルミ電極121に凸凹を作製する場合も有り得る。この場合、更に、光検出素子113も光軸145に対して非対称な構造し、光が多く反射される方向に広い構造にすることで、光を効率的に検出することが可能となる。   In the present embodiment, the case where light is scattered in the column direction in the light detection element 113 has been shown, but this is an example, and for example, the light may be scattered in the row direction or in both cases. Furthermore, the light scattering at the aluminum electrode 121 may not be isotropic with respect to the optical axis 145, and the aluminum electrode 121 may be uneven so as to have anisotropy in the light reflection direction. In this case, the light detection element 113 is also asymmetric with respect to the optical axis 145, and has a wide structure in a direction in which much light is reflected, whereby light can be detected efficiently.

(第7実施形態)
本実施形態は、前述した第1実施形態から第6実施形態で説明した撮像装置を搭載した指静脈認証装置である。
(Seventh embodiment)
The present embodiment is a finger vein authentication device equipped with the imaging device described in the first to sixth embodiments.

図25は、指静脈認証装置の一例の外観を説明するための斜視図である。図26は、図25の位置164での断面図である。図27は、個人認証を行うための処理のフローチャートである。図28は、本実施形態の変形例である現金自動取引装置の外観を説明するための斜視図である。   FIG. 25 is a perspective view for explaining the appearance of an example of a finger vein authentication device. FIG. 26 is a cross-sectional view at position 164 in FIG. FIG. 27 is a flowchart of a process for performing personal authentication. FIG. 28 is a perspective view for explaining the appearance of an automatic teller machine that is a modification of the present embodiment.

指静脈認証装置160は、撮影された指の静脈像を用いて、個人を特定する装置である。図25に示すように、装置パッケージ161上に設けられた指静脈認証装置の撮影窓165にかざされた指129が撮影される。この撮影窓165は、例えば、指の先から第2関節までの領域を撮影できる大きさである。指静脈認証装置160には、指位置決め治具174が備わり、指位置決め治具174に指129を乗せて、その先端に突き当てることによって、撮影の度、同一の位置に指を置くことができる。また、撮影時の指の位置の再現性を高めるために、指位置決め治具174は、指129を乗せることができるくぼみを備えるとよい。また、撮影の際、指が撮影窓173に触れると、指の静脈が潰れて形状や静脈のパターンが変わる場合があるため、指位置決め治具174は、指129が撮影窓173に触れないように、指129と撮影窓173との間に空間ができる構造とするとよい。   The finger vein authentication device 160 is a device that identifies an individual using a photographed finger vein image. As shown in FIG. 25, the finger 129 held over the photographing window 165 of the finger vein authentication device provided on the device package 161 is photographed. The imaging window 165 has a size capable of imaging an area from the tip of the finger to the second joint, for example. The finger vein authentication device 160 is provided with a finger positioning jig 174. By placing a finger 129 on the finger positioning jig 174 and abutting the tip of the finger 129, the finger can be placed at the same position every time photographing is performed. . In addition, in order to improve the reproducibility of the position of the finger at the time of shooting, the finger positioning jig 174 may include a recess in which the finger 129 can be placed. In addition, when a finger touches the shooting window 173 at the time of shooting, the finger veins may collapse and the shape and vein pattern may change, so the finger positioning jig 174 prevents the finger 129 from touching the shooting window 173. In addition, a structure in which a space is formed between the finger 129 and the photographing window 173 is preferable.

次に、図26の断面図を用いて、装置構成と撮影方法を説明する。指129を指静脈認証装置160の撮影窓165に置くと、撮影開始用スイッチ163に触れ、撮像装置101内の光源から指に光を照射し始める。この光源は、第1実施形態に示すように外部光源でもよいし、第5実施形態に示すように、表示層132でもよい。   Next, an apparatus configuration and a photographing method will be described using the cross-sectional view of FIG. When the finger 129 is placed in the photographing window 165 of the finger vein authentication device 160, the photographing start switch 163 is touched and light is emitted from the light source in the imaging device 101 to the finger. This light source may be an external light source as shown in the first embodiment, or may be the display layer 132 as shown in the fifth embodiment.

この光は、指の内部に入りやすいように、例えば、波長600nmから1200nmの近赤外光を用いるとよい。このような波長の光を表示層132から発光する場合、例えば、イオン性発光染料ドープPV系発光材、還元ホルフィリンドープAlq3発光材、ピラン系化合物ドープAlq3発光材、燐光発光性ランタニド系近赤外発光錯体、ジスチリル系赤色発光材などの有機EL材料を用いる。ただし、これ等の材料は一例であり、本発明を限定するものではない。   For example, near-infrared light having a wavelength of 600 nm to 1200 nm may be used so that the light can easily enter the finger. When light of such a wavelength is emitted from the display layer 132, for example, an ionic luminescent dye-doped PV-based luminescent material, a reduced formylline-doped Alq3 luminescent material, a pyran-based compound-doped Alq3 luminescent material, a phosphorescent lanthanide-based near red An organic EL material such as an outer light emitting complex or a distyryl red light emitting material is used. However, these materials are examples and do not limit the present invention.

指163の内部に入射した光は、指内部で吸収、散乱され、一部が表面から出力される。このとき、静脈内の血液中の脱酸素化ヘモグロビンの吸収が、他の組織、血液などと異なるため、指から出力された光を撮像装置101で撮像することによって、指静脈の画像を得ることができる。コリメータ162は、直接光の入射と、検出器にほぼ垂直な角度以外に入射する散乱線を除去する。また、コリメータ162は、指129に至るまでに撮影用光が拡散することも防ぐ。図26の光路130は、このような光の軌跡の一例を示す。   Light incident on the inside of the finger 163 is absorbed and scattered inside the finger, and a part of the light is output from the surface. At this time, since the absorption of deoxygenated hemoglobin in the blood in the vein is different from that in other tissues, blood, etc., an image of the finger vein is obtained by imaging the light output from the finger with the imaging device 101. Can do. The collimator 162 removes incident direct light and scattered rays other than an angle substantially perpendicular to the detector. The collimator 162 also prevents the photographing light from diffusing before reaching the finger 129. An optical path 130 in FIG. 26 shows an example of such a light locus.

次に、このようにして得た指静脈画像に画像処理を行い、指静脈による認証をする。この画像処理を行う処理手段は、本指静脈装置内に備わる(図示せず)。   Next, image processing is performed on the finger vein image obtained in this way, and authentication using the finger vein is performed. Processing means for performing this image processing is provided in the finger vein device (not shown).

この処理の一例を、図27を用いて説明する。   An example of this process will be described with reference to FIG.

まず、撮影した指静脈画像180から輪郭を抽出して、指部分の画像を切り出す切り出し処理181を行う。次に、この切り出された指部分の画像を用いて、指静脈に必要な周波数成分の画像を作成するフィルタ処理182を行う。このフィルタ処理182は、例えば、ハイパスフィルタ処理である。   First, a cutout process 181 is performed to extract a contour from the photographed finger vein image 180 and cut out an image of the finger portion. Next, filter processing 182 for creating an image of a frequency component necessary for the finger vein is performed using the cut image of the finger part. This filter process 182 is, for example, a high-pass filter process.

次に、指の角度の違いを補正する位置合わせ処置183を行う。次に、位置が補正された画像から個人認証で用いる指静脈画像185を抽出する情報抽出処理184を行う。この情報抽出処理184は、例えば、撮影によって得た画像における指静脈の太さや濃度から、個人認証で用いる指静脈だけを抽出する修理である。   Next, an alignment procedure 183 for correcting the difference in finger angle is performed. Next, an information extraction process 184 for extracting a finger vein image 185 used for personal authentication from the position-corrected image is performed. This information extraction process 184 is a repair for extracting only the finger vein used for personal authentication from the thickness and density of the finger vein in the image obtained by photographing, for example.

このようにして得られた画像を用いて個人認証を行うために、事前に登録された指静脈画像186と同一であるかを判定する検証処理187を行う。この事前に登録された指静脈画像186も、前述と同様の画像処理(181〜184)を行ったものである。また、この登録された画像186は、本指静脈装置内の記憶手段(図示せず)に記憶されている。この画像186は、1人分の画像が登録されていても、複数人分の画像が登録されていてもよい。検証処理187では、例えば、登録された指静脈画像と撮影された指静脈画像との相互相関から、両画像が一致するか否かを判定する。この判定によって、撮影された指静脈画像と同一の指静脈画像が登録されていた場合、登録された人の特定を完了する(189)。一方、撮影された指静脈画像と同一の指静脈画像が登録されていない場合は、登録人なしと判定する(188)。   In order to perform personal authentication using the image thus obtained, a verification process 187 is performed to determine whether the finger vein image 186 registered in advance is the same. This finger vein image 186 registered in advance is also obtained by performing the same image processing (181 to 184) as described above. The registered image 186 is stored in storage means (not shown) in the finger vein device. As for this image 186, an image for one person may be registered, or an image for a plurality of persons may be registered. In the verification process 187, for example, it is determined whether or not the two images match from the cross-correlation between the registered finger vein image and the captured finger vein image. If the same finger vein image as the photographed finger vein image is registered by this determination, the identification of the registered person is completed (189). On the other hand, if the same finger vein image as the photographed finger vein image is not registered, it is determined that there is no registered person (188).

この判定の結果は、例えば、この指静脈認証装置をパーソナルコンピュータに用いた場合、登録された人であると特定した場合にのみ、コンピュータの使用を有効にするための信号をコンピュータに送る。また、例えば、現金自動取引装置にこの指静脈認証装置を用いた場合、登録された人であると特定した場合にのみ、取引(例えば、現金の引き出し)を可能とするための信号を現金自動取引装置に送る。   As a result of this determination, for example, when this finger vein authentication device is used in a personal computer, a signal for enabling the use of the computer is sent to the computer only when it is specified that the person is a registered person. In addition, for example, when this finger vein authentication device is used for an automatic cash transaction apparatus, a signal for enabling a transaction (for example, cash withdrawal) only when the registered person is specified is a cash automatic Send to transaction equipment.

一方、撮影窓165に、認証に必要な情報を表示することが可能である。この表示により、指の置く位置や置き方、撮影のサポート情報を提供することによって、利用者が使い易い指静脈認証装置160を提供することができる。また、利用者へ、認証に必要な情報以外の様々な情報も提供でき、指静脈認証装置の多機能化を実現できる。   On the other hand, information necessary for authentication can be displayed on the photographing window 165. With this display, the finger vein authentication device 160 that is easy for the user to use can be provided by providing the finger placement position, placement method, and shooting support information. Further, various information other than information necessary for authentication can be provided to the user, and the multifunctional finger vein authentication device can be realized.

本実施形態において、図27に示した認証処理を実現する認証手段や、事前に登録した指静脈画像を記憶する記憶手段は、本指静脈認証装置内に搭載されていたが、これは一例であり、本発明を限定するものではない。例えば、ネットワーク接続部を備え、外部に設けられた記憶手段に事前に登録された指静脈像を用いて、認証を行ってもよい。   In the present embodiment, the authentication means for realizing the authentication processing shown in FIG. 27 and the storage means for storing the finger vein image registered in advance are mounted in the finger vein authentication apparatus, but this is an example. There is no limitation to the present invention. For example, authentication may be performed using a finger vein image that is provided with a network connection unit and registered in advance in a storage unit provided outside.

また、指静脈認証装置によって撮影された画像を、指静脈認証装置の外部に備わる認証手段に送り、指静脈認証装置の外部に備わる記憶手段に事前に登録された指静脈画像と比較してもよい。また、指静脈認証装置によって撮影された画像と、同装置に事前に登録された指静脈画像とを、ネットワーク手段を介して、指静脈認証装置の外部に備わる認証部に送り、認証部において認証を行ってもよい。   Further, the image captured by the finger vein authentication device is sent to an authentication unit provided outside the finger vein authentication device, and compared with a finger vein image registered in advance in a storage unit provided outside the finger vein authentication device. Good. Also, an image photographed by the finger vein authentication device and a finger vein image registered in advance in the device are sent to the authentication unit provided outside the finger vein authentication device via the network means, and the authentication unit authenticates. May be performed.

本実施形態で示した指静脈認証装置の外観、構造及び処理方法は一例であり、本発明を限定するものではない。例えば図27に示した処理の中で、一部の処理を省略しても、別の処理が追加されてもよい。その場合、本処理とは異なる認証方法を用いてもよい。また、例えば、撮影した指静脈画像180を、そのまま(処理181〜184を行うことなく)、事前に登録された指静脈画像186(処理181〜184を行うことなく登録された画像)と比較して、検証処理187を行ってもよい。また、撮影された指静脈画像180から特徴量を抽出し、事前に登録された特徴量と比較してもよい。   The appearance, structure, and processing method of the finger vein authentication device shown in this embodiment are merely examples, and the present invention is not limited thereto. For example, some of the processes shown in FIG. 27 may be omitted, or another process may be added. In that case, you may use the authentication method different from this process. Further, for example, the photographed finger vein image 180 is directly compared with the finger vein image 186 registered in advance (without performing the processes 181 to 184) (the image registered without performing the processes 181 to 184). Thus, the verification process 187 may be performed. Further, a feature amount may be extracted from the photographed finger vein image 180 and compared with a feature amount registered in advance.

また、本実施形態では、指静脈を用いて認証する指静脈認証装置を説明したが、これは本発明を限定するものではなく、指紋を用いた認証装置であってもよい。この場合、照射する光を、指静脈を撮影する場合に比べ、より指の表面で反射する波長の光、例えば、赤色の可視光を用いるとよい。ただし、この波長は、一例であり、本発明を限定するものではない。   In the present embodiment, a finger vein authentication device that performs authentication using a finger vein has been described. However, this does not limit the present invention, and an authentication device that uses a fingerprint may be used. In this case, it is preferable to use light having a wavelength that reflects more light on the finger surface, for example, red visible light, as compared with the case where the finger vein is photographed. However, this wavelength is an example and does not limit the present invention.

更に、図25に示したように、位置合わせ用治具174を用いて、指129を撮影窓165から若干離れた位置に置いた状態で撮影する構造でもよい。また、指が撮影窓165に触れるように配置された構造でもよい。   Furthermore, as shown in FIG. 25, the structure may be used in which the finger 129 is placed at a position slightly away from the photographing window 165 using the alignment jig 174. Moreover, the structure arrange | positioned so that a finger | toe may touch the imaging | photography window 165 may be sufficient.

また、指を移動させながら指紋や指静脈を撮影してもよい。その際には撮像装置101は複数の画像を取得するとよい。これらの画像をつなげて作成した画像を用いて認証してもよいし、それらの画像から抽出された生体情報を用いて認証してもよい。更に、その複数画像における生体情報の変化量を用いて、認証を行ってもよい。   Further, a fingerprint or finger vein may be photographed while moving the finger. In that case, the imaging device 101 may acquire a plurality of images. You may authenticate using the image produced by connecting these images, and you may authenticate using the biometric information extracted from those images. Further, authentication may be performed using the amount of change in biological information in the plurality of images.

更に、掌や手の甲の静脈を用いて認証する認証装置でもよい。また、これらの複数の方法による認証が行えてもよい。   Furthermore, an authentication device that performs authentication using the palm or the veins of the back of the hand may be used. Further, authentication by these plural methods may be performed.

また、本発明では、実施の段階において、その要旨を逸脱しない範囲でさまざまに変形して実施することが可能である。例えば、コリメータ162を備えなくてもよく、撮影開始用スイッチ163が光センサなどの非接触型のスイッチであってもよく、撮影開始用スイッチ163備えなくてもよい。   Further, in the present invention, various modifications can be made without departing from the scope of the invention at the stage of implementation. For example, the collimator 162 may not be provided, the imaging start switch 163 may be a non-contact type switch such as an optical sensor, and the imaging start switch 163 may not be provided.

本実施形態の指静脈認証装置の表示部は、指が撮影できる程度の小型のものであったが、これは一例であり、本発明を限定するものではない。   The display unit of the finger vein authentication device of the present embodiment is small enough to capture a finger, but this is an example and does not limit the present invention.

例えば、図28に示す現金自動取引装置のように、大面積の表示窓173を備えている場合、撮影が可能な撮影窓165が、表示窓173の一部であってもよい。このような大きな表示窓173を備える場合、多くの情報を提供でき、更に、利用者にとって見やすい情報提供が可能となる。例えば、置く指の位置175を表示して、その位置や置き方を表示することによって、利用者をサポートしてもよい。また、比較的大きなスペースを必要とする認証方法、例えば、暗証番号や、掌、手の甲などの画像を利用した生体認証方法も、表示窓173を用いて実現することができる。   For example, when a large-area display window 173 is provided as in the automated teller machine illustrated in FIG. 28, the photographing window 165 that can be photographed may be a part of the display window 173. When such a large display window 173 is provided, a large amount of information can be provided, and further, information that can be easily viewed by the user can be provided. For example, the user may be supported by displaying the position 175 of the finger to be placed and displaying the position and placement. In addition, an authentication method that requires a relatively large space, for example, a biometric authentication method that uses an image such as a personal identification number, a palm, or the back of a hand can be realized using the display window 173.

また、このような大きな撮影窓165を備える場合、指の位置の自由度が高く、更に、指位置の再現性が低い場合にも認証を行うことができる。この場合、図27に示した処理181のように、指部の画像を切り出す処理を行った後に認証を行うとよい。   Further, when such a large photographing window 165 is provided, authentication can be performed even when the degree of freedom of finger position is high and the reproducibility of the finger position is low. In this case, authentication may be performed after a process of cutting out the image of the finger part as in process 181 shown in FIG.

また、大きな撮影窓165を備える場合、置かれた指の位置を検出してから、再度、撮影用の光を照射してもよい。例えば、最初は弱い光で指を撮影して画像を取得して、取得した画像から輪郭を抽出し、抽出された輪郭に沿って、十分な生体情報を得ることができる強い撮影用の光を照射する。これによって、指の表面で反射する光を低減できるため、指の内部の散乱光を検出して生体認証用画像を得る認証方法(例えば、指静脈認証など)に有効である。   Further, in the case where the large photographing window 165 is provided, the photographing light may be irradiated again after detecting the position of the placed finger. For example, at first, a finger is photographed with weak light to acquire an image, a contour is extracted from the acquired image, and strong imaging light that can obtain sufficient biological information along the extracted contour is used. Irradiate. As a result, the light reflected on the surface of the finger can be reduced, which is effective for an authentication method (for example, finger vein authentication) that detects scattered light inside the finger and obtains a biometric authentication image.

また、例えば、撮影用光を、指部のみに照射したり、指部とその周辺のみに照射する。これによって、強い撮影用の光を全体に照射する場合に比べ、電力を低減することができる。更に、撮影領域を限定することができ、画像データを低減でき、撮影時間を短縮できる。ここで撮影用の光源は、第5実施形態に示したように、表示層132に備わっても、表示層132と別に設けてもよい。また、弱い光を照射するときに、指を撮影して、指の位置を検出したが、これは一例であり、本発明を限定するものではない。例えば、タッチパネルのような別の位置検出手段を設けて、指の位置を検出してもよい。   Further, for example, the photographing light is irradiated only on the finger part, or only on the finger part and its periphery. As a result, the power can be reduced as compared with the case of irradiating the whole with strong photographing light. Furthermore, the shooting area can be limited, image data can be reduced, and the shooting time can be shortened. Here, the light source for photographing may be provided in the display layer 132 or provided separately from the display layer 132 as shown in the fifth embodiment. Moreover, when the weak light is irradiated, the finger is photographed and the position of the finger is detected. However, this is an example, and the present invention is not limited thereto. For example, another position detection unit such as a touch panel may be provided to detect the finger position.

(第8実施形態)
本実施形態は、前述した第1実施形態から第6実施形態で説明した撮像装置を搭載した指静脈認証機能付き携帯電話機である。
(Eighth embodiment)
The present embodiment is a mobile phone with a finger vein authentication function equipped with the imaging device described in the first to sixth embodiments.

図29は、携帯電話機の一例の外観を説明するための斜視図である。図30は、図29の位置164での断面図である。   FIG. 29 is a perspective view for explaining the appearance of an example of a mobile phone. 30 is a cross-sectional view at position 164 in FIG.

図29に示す本実施形態の携帯電話機160は、撮影した指の静脈画像を用いて、個人を特定する機能を備える。サブディスプレイの表示に従って、サブディスプレイの撮影窓165上に指を置き、撮影開始用スイッチ163を押すと、撮影が開始される。このとき、指静脈を撮影するための光源の波長、及び発光素子の材質などは、例えば、前述した第7実施形態と同様のものを用いる。また、得られた画像に対する処理は、例えば、第7実施形態にて説明した方法を行う。   A cellular phone 160 of this embodiment shown in FIG. 29 has a function of specifying an individual using a photographed finger vein image. According to the display on the sub display, when a finger is placed on the shooting window 165 of the sub display and the shooting start switch 163 is pressed, shooting starts. At this time, the wavelength of the light source for photographing the finger vein, the material of the light emitting element, and the like are the same as those in the seventh embodiment described above, for example. Moreover, the process with respect to the obtained image performs the method demonstrated in 7th Embodiment, for example.

図30は、図29の位置164での断面図である。本実施形態の携帯電話166は、上面にサブティスプレイ、下面にメインティスプレイ168、その間に処理回路169を有する上部ユニット161−1と、プッシュボタン171、処理回路169、バッテリ170を有する下部ユニット161−2から構成される。上部ユニット161−1のメインティスプレイ167にはメインティスプレイ用撮像装置が備わる。サブティスプレイには第1実施形態から第6実施形態で示した撮影装置101が搭載される。   30 is a cross-sectional view at position 164 in FIG. The cellular phone 166 according to the present embodiment includes a sub display on the upper surface, a main display 168 on the lower surface, an upper unit 161-1 having a processing circuit 169 therebetween, a lower unit having a push button 171, a processing circuit 169, and a battery 170. 161-2. The main display 167 of the upper unit 161-1 includes a main display imaging device. The imaging device 101 shown in the first to sixth embodiments is mounted on the substrate.

この撮影装置101は、表示と指静脈撮影の両方を実現できるため、本携帯電話166は、コンパクト性や外観を損なわずに、指静脈認証機能を実現できる。また、サブディスプレイの表示機能によって、撮影のためのガイドを表示できるため、使用者にとって使い勝手がよい。   Since the photographing apparatus 101 can realize both display and finger vein photographing, the cellular phone 166 can realize a finger vein authentication function without impairing compactness and appearance. In addition, since the guide for shooting can be displayed by the display function of the sub-display, it is convenient for the user.

本実施形態ではサブティスプレイに撮影装置101を搭載した場合を記したが、メインティスプレイに用いても良いことは言うまでもない。   In the present embodiment, the case where the photographing apparatus 101 is mounted on the sub display is described, but it goes without saying that it may be used for the main display.

本実施形態で示した指静脈認証機能付き携帯電話の外観、構造及び処理方法は一例であり、本発明を限定するものではない。また、本実施形態では、指静脈を用いて認証する携帯電話を説明したが、これは本発明を限定するものではなく、指紋や、掌や手の甲の静脈を用いた認証装置であってもよい。また、これらの複数の方法による認証が行えてもよい。   The appearance, structure, and processing method of the cellular phone with a finger vein authentication function shown in this embodiment are merely examples, and the present invention is not limited thereto. Further, in the present embodiment, a mobile phone that performs authentication using a finger vein has been described. However, this does not limit the present invention, and an authentication device that uses a fingerprint or a vein on the back of a palm or hand may be used. . Further, authentication by these plural methods may be performed.

(変形例)
本発明は、前述した指静脈認証装置、及び指静脈認証機能が備わる携帯電話機及び現金自動取引装置に限らず、スキャナ、ファックス、TV、コンピュータ用ディスプレイ、PHS、その他のモバイル機器などに搭載してもよい。特に、本撮像装置は、撮影対象が、利用者と同じか、利用者よりも撮像装置の近くに配置される装置に適する。また、様々な波長の光を用いて撮影し、撮影対象からの光を検出する様々な撮像装置であってもよい。
(Modification)
The present invention is not limited to the above-described finger vein authentication device, mobile phone equipped with finger vein authentication function, and automatic cash transaction device, but is mounted on a scanner, a fax machine, a TV, a computer display, a PHS, and other mobile devices. Also good. In particular, the imaging apparatus is suitable for an apparatus in which the subject to be imaged is the same as that of the user or is located closer to the imaging apparatus than the user. In addition, various imaging devices that shoot using light of various wavelengths and detect light from the imaging target may be used.

更に、本発明は、前述した実施形態に限定されるものではなく、実施の段階では、その要旨を逸脱しない範囲でさまざまに変形して実施することが可能である。更に、前述した実施形態には様々な段階が含まれており、開示される複数の構成要素における適宜な組み合わせによって、様々な発明が抽出されることができる。例えば、実施形態に開示される全構成要素から幾つかの構成要素が削除されてもよい。   Furthermore, the present invention is not limited to the above-described embodiments, and various modifications can be made without departing from the scope of the invention at the stage of implementation. Further, the above-described embodiment includes various stages, and various inventions can be extracted by appropriately combining a plurality of disclosed constituent elements. For example, some components may be deleted from all the components disclosed in the embodiment.

特許請求の範囲に記載した以外の本発明の観点の代表的なものとして、次のものがあげられる。   The following are typical examples of aspects of the present invention other than those described in the claims.

(1)光源と、
前記光源から照射された光のうち撮影対象からの光を検出する撮像装置と、
前記撮像装置から出力された信号から、前記撮影対象の生体情報を含む生体情報画像を作成する画像作成手段と、
前記撮影対象の生体情報データを予め記憶する記憶手段と、
前記生体情報画像と前記生体情報データに含まれる前記生体情報を比較して個人認証を行う認証手段と、を備え、
前記撮像装置は、
光を屈折する集光手段と、
第1面及び第2面を備え、前記集光手段と前記第1面で対向し、発光ユニットを備える表示層と、
前記表示層の第2面と対向し、光検出素子を備える撮像層と、を備え、
前記撮像層と撮影対象とが、前記集光手段及び前記表示層を挟む構造であることを特徴とする認証装置。
(1) a light source;
An imaging device that detects light from a photographing target among the light emitted from the light source;
Image creating means for creating a biological information image including biological information of the imaging target from a signal output from the imaging device;
Storage means for preliminarily storing the biological information data of the imaging target;
An authentication unit for performing personal authentication by comparing the biometric information image and the biometric information included in the biometric information data,
The imaging device
A light collecting means for refracting light;
A display layer comprising a first surface and a second surface, opposed to the light condensing means on the first surface, and comprising a light emitting unit;
An imaging layer provided with a photodetecting element facing the second surface of the display layer,
The authentication apparatus, wherein the imaging layer and the imaging target have a structure sandwiching the light collecting means and the display layer.

(2) (1)に記載の認証装置であって、
前記生体情報は、指紋、指の静脈、掌の静脈、手の甲の静脈の少なくとも一つの情報であることを特徴とする認証装置。
(2) The authentication device according to (1),
The biometric information is at least one information of a fingerprint, a finger vein, a palm vein, and a back vein of the hand.

(3) (1)に記載の認証装置において、
前記発光ユニットが前記光源を兼ねることを特徴とする認証装置。
(3) In the authentication device according to (1),
The authentication apparatus, wherein the light emitting unit also serves as the light source.

(4)光源と、
前記光源から照射された光のうち撮影対象からの光を検出する撮像装置と、
前記撮像装置から出力された信号から、前記撮影対象の生体情報を含む生体情報画像を作成する画像作成手段と、
前記撮影対象の生体情報データを予め記憶する記憶手段と、
前記生体情報画像と前記生体情報データに含まれる前記生体情報を比較して個人認証を行う認証手段と、を備え、
前記撮像装置は、
光を屈折する集光手段と、
第1面及び第2面を備え、前記集光手段と第1の面で対向し、発光ユニットを備える表示層と、
前記表示層の第2面と対向し、光検出素子を備える撮像層と、を備え、
前記撮像層と撮影対象とが、前記集光手段及び前記表示層を挟む構造であることを特徴とする携帯端末。
(4) a light source;
An imaging device that detects light from a photographing target among the light emitted from the light source;
Image creating means for creating a biological information image including biological information of the imaging target from a signal output from the imaging device;
Storage means for preliminarily storing the biological information data of the imaging target;
An authentication unit for performing personal authentication by comparing the biometric information image and the biometric information included in the biometric information data,
The imaging device
A light collecting means for refracting light;
A display layer comprising a first surface and a second surface, facing the condensing means on the first surface, and comprising a light emitting unit;
An imaging layer provided with a photodetecting element facing the second surface of the display layer,
A portable terminal characterized in that the imaging layer and the object to be photographed have a structure sandwiching the light collecting means and the display layer.

(5)個人認証を行うために生体情報を取得する認証装置を具備する現金自動取引装置において、
前記認証装置が、
光源と、
前記光源から照射された光のうち撮影対象からの光を検出する撮像装置と、
前記撮像装置から出力された信号から、前記撮影対象の生体情報を含む生体情報画像を作成する画像作成手段と、
前記撮影対象の生体情報データを予め記憶する記憶手段と、
前記生体情報画像と前記生体情報データに含まれる前記生体情報を比較して個人認証を行う認証手段と、を備え、
前記撮像装置は、
光を屈折する集光手段と、
第1面及び第2面を備え、前記集光手段と第1の面で対向し、発光ユニットを備える表示層と、
前記表示層の第2面と対向し、光検出素子を備える撮像層と、を備え、
前記撮像層と撮影対象とが、前記集光手段及び前記表示層を挟む構造であることを特徴とする現金自動取引装置。
(5) In an automatic teller machine equipped with an authentication device that acquires biometric information in order to perform personal authentication,
The authentication device is
A light source;
An imaging device that detects light from a photographing target among the light emitted from the light source;
Image creating means for creating a biological information image including biological information of the imaging target from a signal output from the imaging device;
Storage means for preliminarily storing the biological information data of the imaging target;
An authentication unit for performing personal authentication by comparing the biometric information image and the biometric information included in the biometric information data,
The imaging device
A light collecting means for refracting light;
A display layer comprising a first surface and a second surface, facing the condensing means on the first surface, and comprising a light emitting unit;
An imaging layer provided with a photodetecting element facing the second surface of the display layer,
The automatic cash transaction apparatus, wherein the imaging layer and the imaging target have a structure sandwiching the light collecting means and the display layer.

本発明の第1実施形態の一例である撮像装置の外観を示す斜視図である。1 is a perspective view illustrating an appearance of an imaging apparatus that is an example of a first embodiment of the present invention. 本発明の第1実施形態の撮像装置の回路構成を説明するための回路図である。It is a circuit diagram for demonstrating the circuit structure of the imaging device of 1st Embodiment of this invention. 本発明の第1実施形態の撮像装置の回路構成を説明するための回路図である。It is a circuit diagram for demonstrating the circuit structure of the imaging device of 1st Embodiment of this invention. 本発明の第1実施形態の撮像装置の断面図である。It is sectional drawing of the imaging device of 1st Embodiment of this invention. 本発明の第1実施形態の撮像装置の断面図である。It is sectional drawing of the imaging device of 1st Embodiment of this invention. 本発明の第1実施形態のマイクロレンズ、発光ユニット、及び光検出素子の配置を説明するための説明図である。It is explanatory drawing for demonstrating arrangement | positioning of the microlens of 1st Embodiment of this invention, a light emission unit, and a photon detection element. 本発明の第1実施形態のマイクロレンズ、発光ユニット、及び光検出素子の配置を説明するための説明図である。It is explanatory drawing for demonstrating arrangement | positioning of the microlens of 1st Embodiment of this invention, a light emission unit, and a photon detection element. 本発明の第1実施形態の撮像装置の作製工程の一例を説明するための説明図である。It is explanatory drawing for demonstrating an example of the manufacturing process of the imaging device of 1st Embodiment of this invention. 本発明の第1実施形態の撮像装置の作製工程の一例を説明するための説明図である。It is explanatory drawing for demonstrating an example of the manufacturing process of the imaging device of 1st Embodiment of this invention. 本発明の第1実施形態の撮像装置の作製工程の一例を説明するための説明図である。It is explanatory drawing for demonstrating an example of the manufacturing process of the imaging device of 1st Embodiment of this invention. 本発明の第1実施形態の撮像装置の画素構造の異なる別の例を説明するための説明図である。It is explanatory drawing for demonstrating another example from which the pixel structure of the imaging device of 1st Embodiment of this invention differs. 本発明の第1実施形態の撮像装置の画素構造の異なる別の例を説明するための説明図である。It is explanatory drawing for demonstrating another example from which the pixel structure of the imaging device of 1st Embodiment of this invention differs. 本発明の第2実施形態の撮像装置の断面図である。It is sectional drawing of the imaging device of 2nd Embodiment of this invention. 本発明の第2実施形態の撮像装置の作製工程の一例を説明するための説明図である。It is explanatory drawing for demonstrating an example of the manufacturing process of the imaging device of 2nd Embodiment of this invention. 本発明の第2実施形態の撮像装置の作製工程の一例を説明するための説明図である。It is explanatory drawing for demonstrating an example of the manufacturing process of the imaging device of 2nd Embodiment of this invention. 本発明の第2実施形態の撮像装置の作製工程の一例を説明するための説明図である。It is explanatory drawing for demonstrating an example of the manufacturing process of the imaging device of 2nd Embodiment of this invention. 本発明の第3実施形態のマイクロレンズ、発光ユニット、及び光検出素子の配置を説明するための説明図である。It is explanatory drawing for demonstrating arrangement | positioning of the microlens of 3rd Embodiment of this invention, a light emission unit, and a photon detection element. 本発明の第3実施形態のマイクロレンズ、発光ユニット、及び光検出素子の配置を説明するための説明図である。It is explanatory drawing for demonstrating arrangement | positioning of the microlens of 3rd Embodiment of this invention, a light emission unit, and a photon detection element. 本発明の第4実施形態の撮像装置の断面図である。It is sectional drawing of the imaging device of 4th Embodiment of this invention. 本発明の第4実施形態のマイクロレンズ、発光ユニット、及び光検出素子の配置を説明するための説明図である。It is explanatory drawing for demonstrating arrangement | positioning of the microlens of 4th Embodiment of this invention, a light emission unit, and a photon detection element. 本発明の第5実施形態の撮像装置の断面図である。It is sectional drawing of the imaging device of 5th Embodiment of this invention. 本発明の第5実施形態の撮像装置の撮影と発光のタイミングを説明するためのタイミング図である。It is a timing diagram for demonstrating the imaging | photography and light emission timing of the imaging device of 5th Embodiment of this invention. 本発明の第5実施形態の撮像装置の撮影と発光のタイミングを説明するためのタイミング図である。It is a timing diagram for demonstrating the imaging | photography and light emission timing of the imaging device of 5th Embodiment of this invention. 本発明の第6実施形態の撮像装置の断面図である。It is sectional drawing of the imaging device of 6th Embodiment of this invention. 本発明の第7実施形態の指静脈認証装置の外観を示す斜視図である。It is a perspective view which shows the external appearance of the finger vein authentication apparatus of 7th Embodiment of this invention. 本発明の第7実施形態の指静脈認証装置の断面図である。It is sectional drawing of the finger vein authentication apparatus of 7th Embodiment of this invention. 本発明の第7実施形態の指静脈認証装置の処理を示すフローチャートである。It is a flowchart which shows the process of the finger vein authentication apparatus of 7th Embodiment of this invention. 本発明の第7実施形態の指静脈認証装置を搭載した現金自動取引装置の外観を示す斜視図である。It is a perspective view which shows the external appearance of the cash automatic transaction apparatus carrying the finger vein authentication apparatus of 7th Embodiment of this invention. 本発明の第8実施形態の一例である携帯電話機の外観を示す斜視図である。It is a perspective view which shows the external appearance of the mobile telephone which is an example of 8th Embodiment of this invention. 本発明の第8実施形態の携帯電話機の断面図である。It is sectional drawing of the mobile telephone of 8th Embodiment of this invention. 従来の指静脈認証装置の問題点を説明する図である。It is a figure explaining the problem of the conventional finger vein authentication apparatus.

符号の説明Explanation of symbols

101…撮像装置
102…発光ユニット用電力制御回路
103…基板
104…読み出し回路
105…光検出素子用シフトレジスタ
106…読み出し開始用パッド
107、159…断面位置
108…ICチップ
109…積分器
110…画素
111…発光ユニット
112…光検出素子用制御線
113…光検出素子
114…光検出素子用スイッチ
115…出力用電極パッド
116…信号線
117…発光ユニット用スイッチ
118…発光ユニット用シフトレジスタ
119…発光ユニット用制御線
120…発光ユニット用電力線
121…アルミ電極
122…アモルファスシリコン(受光部)
123、135、138…透明電極
124…ガラス基板
125…基板
126…遮光層
127…マイクロレンズ
128…発光素子
129…撮影対象
130…入射光
131、134…接着剤
132…表示層
133…撮像層
136、137…保護層
139…焦点
140…垂線
141…法線ベクトル
142…点
143…絶縁層
144…表示光
145…光軸
146…反射体
147…反射層
148…遮光層
149…表示層兼撮像層
150、151、152、153…時間
154…青色発光ユニット層
155…撮影用光
156…赤色発光ユニット層
157…入光口
158…反射材
160…指静脈認証装置
161…装置パッケージ
162…コリメータ
163…撮影開始用スイッチ
164…断面位置
165…撮影窓
166…携帯電話
167…メインディスプレイ
168…保護ガラス
169…処理回路
170…バッテリ
171…プッシュボタン
172…現金自動取引装置
173…表示窓
174…指位置決め治具
175…指搭載位置
DESCRIPTION OF SYMBOLS 101 ... Imaging device 102 ... Light-emitting unit power control circuit 103 ... Substrate 104 ... Reading circuit 105 ... Photodetection element shift register 106 ... Reading start pad 107, 159 ... Cross-sectional position 108 ... IC chip 109 ... Integrator 110 ... Pixel 111 ... Light-emitting unit 112 ... Photodetector control line 113 ... Photodetector 114 ... Photodetector switch 115 ... Output electrode pad 116 ... Signal line 117 ... Light-emitting unit switch 118 ... Light-emitting unit shift register 119 ... Light emission Unit control line 120... Light emitting unit power line 121... Aluminum electrode 122... Amorphous silicon (light receiving portion)
123, 135, 138 ... Transparent electrode 124 ... Glass substrate 125 ... Substrate 126 ... Light shielding layer 127 ... Micro lens 128 ... Light emitting element 129 ... Imaging object 130 ... Incident light 131, 134 ... Adhesive 132 ... Display layer 133 ... Imaging layer 136 DESCRIPTION OF SYMBOLS 137 ... Protective layer 139 ... Focus 140 ... Perpendicular 141 ... Normal vector 142 ... Point 143 ... Insulating layer 144 ... Display light 145 ... Optical axis 146 ... Reflector 147 ... Reflective layer 148 ... Light shielding layer 149 ... Display layer and imaging layer 150, 151, 152, 153 ... time 154 ... blue light emitting unit layer 155 ... photographing light 156 ... red light emitting unit layer 157 ... light entrance 158 ... reflecting material 160 ... finger vein authentication device 161 ... device package 162 ... collimator 163 ... Shooting start switch 164 ... cross-sectional position 165 ... shooting window 166 ... mobile phone 167 ... main display 68 ... protective glass 169 ... processing circuits 170 ... battery 171 ... pushbutton 172 ... automatic cash transaction apparatus 173 ... display windows 174 ... finger positioning jig 175 ... finger mounting position

Claims (14)

光を屈折する集光手段と、
第1面及び第2面を備え、前記集光手段と前記第1面で対向し、発光ユニットを備える表示層と、
前記表示層の第2面と対向し、光検出素子を備える撮像層と、を備え、
前記撮像層と撮影対象とが、前記集光手段及び前記表示層を挟む構造であることを特徴とする撮像装置。
A light collecting means for refracting light;
A display layer comprising a first surface and a second surface, opposed to the light condensing means on the first surface, and comprising a light emitting unit;
An imaging layer provided with a photodetecting element facing the second surface of the display layer,
The imaging apparatus, wherein the imaging layer and the subject to be photographed have a structure sandwiching the light collecting means and the display layer.
請求項1に記載の撮像装置において、
前記集光手段の光軸上に、前記光検出素子及び前記発光ユニットが配置されていることを特徴とする撮像装置。
The imaging device according to claim 1,
An image pickup apparatus, wherein the light detection element and the light emitting unit are arranged on an optical axis of the light collecting means.
請求項1に記載の撮像装置において、
前記発光ユニットが有機EL発光層を備えることを特徴とする撮像装置。
The imaging device according to claim 1,
The imaging device, wherein the light emitting unit includes an organic EL light emitting layer.
請求項1に記載の撮像装置において、
前記発光ユニットが、異なるスペクトル分布を持った光を放射する複数の発光層を備えることを特徴とする撮像装置。
The imaging device according to claim 1,
The imaging device, wherein the light-emitting unit includes a plurality of light-emitting layers that emit light having different spectral distributions.
請求項4に記載の撮像装置において、
前記複数の発光層は、積層された構造であることを特徴とする撮像装置。
The imaging apparatus according to claim 4,
The imaging device, wherein the plurality of light emitting layers have a stacked structure.
請求項5に記載の撮像装置において、
前記発光層が第1発光層、及び、前記第1発光層の波長よりも長い波長の光を発する第2発光層を備え、
前記第1発光層が前記第2発光層より前記集光手段に近い位置に配置されることを特徴とする撮像装置。
The imaging apparatus according to claim 5,
The light-emitting layer includes a first light-emitting layer and a second light-emitting layer that emits light having a wavelength longer than that of the first light-emitting layer;
The imaging apparatus, wherein the first light emitting layer is disposed closer to the light collecting unit than the second light emitting layer.
請求項1に記載の撮像装置において、
前記発光ユニットと前記光検出素子の間に遮光手段を備えることを特徴とする撮像装置。
The imaging device according to claim 1,
An imaging apparatus comprising a light shielding unit between the light emitting unit and the light detection element.
請求項1に記載の撮像装置において、
前記集光手段と前記撮像層の間に配置され、光を透過する入光口と光を反射する反射手段を具備する第1反射層と、
該第1反射層と前記撮像層の間に配置され、光を透過する透明層と、第1反射層と向かい合い、光を反射する第2反射層とを備え、
前記第1反射層及び前記第2反射層が、前記透明層及び前記撮像層を挟む構造であることを特徴とする撮像装置。
The imaging device according to claim 1,
A first reflective layer that is disposed between the light collecting means and the imaging layer and includes a light entrance that transmits light and a reflective means that reflects light;
A transparent layer that is disposed between the first reflective layer and the imaging layer and transmits light; and a second reflective layer that faces the first reflective layer and reflects light;
The imaging device, wherein the first reflective layer and the second reflective layer have a structure sandwiching the transparent layer and the imaging layer.
請求項8に記載の撮像装置において、
前記表示層の少なくとも一部が前記透明層を兼ねることを特徴とする撮像装置。
The imaging device according to claim 8,
An imaging apparatus, wherein at least a part of the display layer also serves as the transparent layer.
請求項1に記載の撮像装置において、
前記集光手段が、前記光検出素子毎に形成され、前記表示層の方向に凸形状を有するマイクロレンズから成ることを特徴とする撮像装置。
The imaging device according to claim 1,
The image pickup apparatus, wherein the light condensing means is formed of a microlens formed for each of the light detection elements and having a convex shape in the direction of the display layer.
請求項1に記載の撮像装置において、前記発光ユニットが前記光検出素子から所定の距離以内の位置に設けられていることを特徴とする撮像装置。   The imaging apparatus according to claim 1, wherein the light emitting unit is provided at a position within a predetermined distance from the light detection element. 請求項11に記載の撮像装置において、
前記集光手段は、前記光検出素子毎に形成され、前記撮影対象方向に凸形状を有するマイクロレンズから成り、
前記光検出素子及び前記発光ユニットは、前記マイクロレンズの光軸上に配置され、
前記マイクロレンズの凸上の点A、前記点Aから光軸へ下ろした垂線と光軸との交点B、前記光軸と前記発光ユニットとの交点を点C、線分ABの長さW、前記点Bから前記光検出素子までの距離D、前記点Cから前記発光ユニットの端部までの距離M、前記点Aにおける前記マイクロレンズの法線と直線ABとの成す角α、前記マイクロレンズの屈折率をnとすると、前記所定の距離が下式で表されることを特徴とする撮像装置。
Figure 0005144217
The imaging device according to claim 11,
The condensing unit is formed for each of the light detection elements, and includes a microlens having a convex shape in the shooting target direction,
The light detection element and the light emitting unit are disposed on an optical axis of the microlens,
The convex point A of the microlens, the intersection B of the perpendicular line extending from the point A to the optical axis and the optical axis, the intersection point of the optical axis and the light emitting unit as the point C, the length W of the line segment AB, A distance D from the point B to the light detection element, a distance M from the point C to an end of the light emitting unit, an angle α formed by a normal line of the microlens and a straight line AB at the point A, the microlens The imaging apparatus is characterized in that the predetermined distance is expressed by the following equation, where n is the refractive index of the image.
Figure 0005144217
少なくとも一部が透明な第1基板に発光ユニットを作製して表示層を形成する工程と、
第2基板に光検出素子を作製して撮像層を形成する工程と、
前記第1基板の第1面に前記第2基板を透明接着剤で接着する工程と、
前記第1面に対向する前記第1基板の第2面と対向するように、光を屈折する集光手段を透明な接着剤で接着する工程と、を含むことを特徴とする撮像装置の製造方法。
Producing a light emitting unit on a first substrate that is at least partially transparent to form a display layer;
Forming a photodetecting element on the second substrate to form an imaging layer;
Bonding the second substrate to the first surface of the first substrate with a transparent adhesive;
Adhering a condensing means for refracting light with a transparent adhesive so as to face the second surface of the first substrate facing the first surface. Method.
対向する第1面と第2面を有し、少なくとも一部が透明な基板に対し、前記第1面に発光ユニットを作製し、前記第2面に光検出素子を作製する工程と、
光を屈折する集光手段を前記第1面と対向するように、透明な接着剤で接着する工程と、を含むことを特徴とする撮像装置の製造方法。
Producing a light emitting unit on the first surface and producing a light detection element on the second surface with respect to a substrate having first and second surfaces facing each other and at least a part of which is transparent;
And a step of adhering a condensing means for refracting light with a transparent adhesive so as to face the first surface.
JP2007284505A 2007-10-31 2007-10-31 IMAGING DEVICE, IMAGING DEVICE MANUFACTURING METHOD, AND DEVICE MOUNTING IMAGING DEVICE Expired - Fee Related JP5144217B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2007284505A JP5144217B2 (en) 2007-10-31 2007-10-31 IMAGING DEVICE, IMAGING DEVICE MANUFACTURING METHOD, AND DEVICE MOUNTING IMAGING DEVICE

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2007284505A JP5144217B2 (en) 2007-10-31 2007-10-31 IMAGING DEVICE, IMAGING DEVICE MANUFACTURING METHOD, AND DEVICE MOUNTING IMAGING DEVICE

Publications (2)

Publication Number Publication Date
JP2009110452A JP2009110452A (en) 2009-05-21
JP5144217B2 true JP5144217B2 (en) 2013-02-13

Family

ID=40778843

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2007284505A Expired - Fee Related JP5144217B2 (en) 2007-10-31 2007-10-31 IMAGING DEVICE, IMAGING DEVICE MANUFACTURING METHOD, AND DEVICE MOUNTING IMAGING DEVICE

Country Status (1)

Country Link
JP (1) JP5144217B2 (en)

Families Citing this family (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4748257B2 (en) * 2008-08-04 2011-08-17 ソニー株式会社 Biometric authentication device
JP5712746B2 (en) * 2011-04-06 2015-05-07 セイコーエプソン株式会社 Sensing device and electronic device
JP2014022675A (en) * 2012-07-23 2014-02-03 Seiko Epson Corp Sensing device, inspection device, and electronic apparatus
JP6074981B2 (en) * 2012-09-26 2017-02-08 セイコーエプソン株式会社 Imaging device
JP6044239B2 (en) 2012-10-01 2016-12-14 セイコーエプソン株式会社 Imaging device and medical device
JP6424456B2 (en) 2013-07-17 2018-11-21 セイコーエプソン株式会社 Light emitting device, method of manufacturing light emitting device, light emitting and receiving device, electronic device
JP5910774B2 (en) * 2015-03-06 2016-04-27 セイコーエプソン株式会社 Vein imaging device and electronic device
JP6103103B2 (en) * 2016-03-30 2017-03-29 セイコーエプソン株式会社 Vein imaging device and electronic device
CN106847872B (en) * 2017-03-24 2020-03-20 京东方科技集团股份有限公司 Display device
US11610430B2 (en) 2018-06-19 2023-03-21 Sony Corporation Information processing apparatus, wearable device, information processing method, and program
WO2020248169A1 (en) 2019-06-12 2020-12-17 京东方科技集团股份有限公司 Skin ridge image acquisition method, skin ridge image acquisition circuit and display panel
JP7446785B2 (en) 2019-11-18 2024-03-11 株式会社ジャパンディスプレイ Detection device and display device

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH05236200A (en) * 1992-02-21 1993-09-10 Fuji Xerox Co Ltd Light source integral type image sensor
JP2002176162A (en) * 2000-08-10 2002-06-21 Semiconductor Energy Lab Co Ltd Area sensor and display device provided with area sensor
JP4886162B2 (en) * 2003-06-18 2012-02-29 キヤノン株式会社 Display device with imaging device
JP5364227B2 (en) * 2004-07-16 2013-12-11 株式会社半導体エネルギー研究所 Display device with reading function and electronic device using the same
JP2007033789A (en) * 2005-07-26 2007-02-08 Sony Corp Display device

Also Published As

Publication number Publication date
JP2009110452A (en) 2009-05-21

Similar Documents

Publication Publication Date Title
JP5144217B2 (en) IMAGING DEVICE, IMAGING DEVICE MANUFACTURING METHOD, AND DEVICE MOUNTING IMAGING DEVICE
JP4844481B2 (en) Imaging apparatus and apparatus equipped with the same
CN211349385U (en) Optical image acquisition unit, optical image acquisition system, and electronic apparatus
TWI750473B (en) Screen unlocking method and device for synchronously verifying fingerprint information
US9501686B2 (en) Multi-purpose thin film optoelectric sensor
CN113661493A (en) Optical fingerprint identification device and electronic equipment
US11210491B2 (en) Fingerprint sensor under a display module with tilted receiving optics
JP2008153361A (en) Solid-state imaging device, and light detector and authentication equipment using the same
US11922715B2 (en) Imaging device
TWI720484B (en) Touch element operation method and device for synchronously verifying fingerprint information
CN111095281B (en) Fingerprint detection device and electronic equipment
CN111133442B (en) Fingerprint detection device and electronic equipment
WO2020186415A1 (en) Device and method for fingerprint recognition, and electronic apparatus
CN210295124U (en) Fingerprint detection device and electronic equipment
CN111213152B (en) Optical image acquisition unit, optical image acquisition system, display screen and electronic equipment
CN111164607B (en) Fingerprint detection device and electronic equipment
CN210038815U (en) Optical image acquisition unit, optical image acquisition system, display screen and electronic equipment
JP4055108B2 (en) Image authentication device
CN209897141U (en) Optical image acquisition unit, optical image acquisition system, and electronic apparatus
CN111898397B (en) Grain recognition device
CN111837126A (en) Fingerprint detection device and electronic equipment
CN117253264A (en) Device for optically and directly recording security-relevant objects, such as skin prints

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20101004

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20111213

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20120309

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20121106

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20121122

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20151130

Year of fee payment: 3

R150 Certificate of patent or registration of utility model

Ref document number: 5144217

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

Free format text: JAPANESE INTERMEDIATE CODE: R150

LAPS Cancellation because of no payment of annual fees