EP3147823A2 - Vorrichtung und verfahren zur direkten optischen bildaufnahme von dokumenten und / oder lebenden hautbereichen ohne abbildende optische elemente - Google Patents
Vorrichtung und verfahren zur direkten optischen bildaufnahme von dokumenten und / oder lebenden hautbereichen ohne abbildende optische elemente Download PDFInfo
- Publication number
- EP3147823A2 EP3147823A2 EP16189928.1A EP16189928A EP3147823A2 EP 3147823 A2 EP3147823 A2 EP 3147823A2 EP 16189928 A EP16189928 A EP 16189928A EP 3147823 A2 EP3147823 A2 EP 3147823A2
- Authority
- EP
- European Patent Office
- Prior art keywords
- layer
- image
- light
- exposure time
- primary
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims abstract description 38
- 230000003287 optical effect Effects 0.000 title claims abstract description 30
- 238000003384 imaging method Methods 0.000 title claims abstract description 15
- 238000005516 engineering process Methods 0.000 claims abstract description 16
- 238000005286 illumination Methods 0.000 claims description 74
- 238000001514 detection method Methods 0.000 claims description 21
- 230000003595 spectral effect Effects 0.000 claims description 19
- 238000010191 image analysis Methods 0.000 claims description 12
- 238000001228 spectrum Methods 0.000 claims description 12
- 238000005096 rolling process Methods 0.000 claims description 8
- 238000010295 mobile communication Methods 0.000 claims description 7
- 238000004458 analytical method Methods 0.000 claims description 6
- 238000003860 storage Methods 0.000 claims description 6
- 230000008859 change Effects 0.000 claims description 5
- 239000010409 thin film Substances 0.000 claims description 5
- 238000012795 verification Methods 0.000 claims description 4
- 239000010408 film Substances 0.000 claims description 3
- 238000012545 processing Methods 0.000 claims description 3
- 238000004519 manufacturing process Methods 0.000 claims description 2
- 239000002131 composite material Substances 0.000 abstract description 3
- 239000010410 layer Substances 0.000 description 147
- 239000011241 protective layer Substances 0.000 description 18
- 230000006870 function Effects 0.000 description 6
- 230000035945 sensitivity Effects 0.000 description 6
- 238000013461 design Methods 0.000 description 5
- 230000008569 process Effects 0.000 description 5
- 238000010521 absorption reaction Methods 0.000 description 4
- 238000009826 distribution Methods 0.000 description 4
- 230000000694 effects Effects 0.000 description 4
- 239000011159 matrix material Substances 0.000 description 4
- 238000012634 optical imaging Methods 0.000 description 4
- 238000005033 Fourier transform infrared spectroscopy Methods 0.000 description 3
- 230000006978 adaptation Effects 0.000 description 3
- 230000003044 adaptive effect Effects 0.000 description 3
- 239000003086 colorant Substances 0.000 description 3
- 230000010354 integration Effects 0.000 description 3
- 239000004973 liquid crystal related substance Substances 0.000 description 3
- 230000035515 penetration Effects 0.000 description 3
- 229920003023 plastic Polymers 0.000 description 3
- 238000013459 approach Methods 0.000 description 2
- 230000008901 benefit Effects 0.000 description 2
- 238000004364 calculation method Methods 0.000 description 2
- 239000011521 glass Substances 0.000 description 2
- 230000002452 interceptive effect Effects 0.000 description 2
- 239000000463 material Substances 0.000 description 2
- 239000000758 substrate Substances 0.000 description 2
- 230000002123 temporal effect Effects 0.000 description 2
- 238000012360 testing method Methods 0.000 description 2
- 241001310793 Podium Species 0.000 description 1
- 230000009471 action Effects 0.000 description 1
- 230000004913 activation Effects 0.000 description 1
- 238000003491 array Methods 0.000 description 1
- 238000013475 authorization Methods 0.000 description 1
- 230000033228 biological regulation Effects 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 230000015572 biosynthetic process Effects 0.000 description 1
- 238000006243 chemical reaction Methods 0.000 description 1
- 238000004891 communication Methods 0.000 description 1
- 230000000052 comparative effect Effects 0.000 description 1
- 239000004020 conductor Substances 0.000 description 1
- 238000013480 data collection Methods 0.000 description 1
- 230000007717 exclusion Effects 0.000 description 1
- 230000001815 facial effect Effects 0.000 description 1
- 230000002349 favourable effect Effects 0.000 description 1
- 239000011888 foil Substances 0.000 description 1
- 238000000265 homogenisation Methods 0.000 description 1
- 230000003993 interaction Effects 0.000 description 1
- 238000003475 lamination Methods 0.000 description 1
- 239000012528 membrane Substances 0.000 description 1
- 238000005457 optimization Methods 0.000 description 1
- 230000036961 partial effect Effects 0.000 description 1
- 230000005855 radiation Effects 0.000 description 1
- 230000009467 reduction Effects 0.000 description 1
- 230000002829 reductive effect Effects 0.000 description 1
- 230000000284 resting effect Effects 0.000 description 1
- 238000007493 shaping process Methods 0.000 description 1
- 238000004904 shortening Methods 0.000 description 1
- 230000036548 skin texture Effects 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
- 230000001629 suppression Effects 0.000 description 1
- 238000012546 transfer Methods 0.000 description 1
- 238000011144 upstream manufacturing Methods 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/12—Fingerprints or palmprints
- G06V40/13—Sensors therefor
- G06V40/1318—Sensors therefor using electro-optical elements or layers, e.g. electroluminescent sensing
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/70—Circuitry for compensating brightness variation in the scene
- H04N23/71—Circuitry for evaluating the brightness variation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/70—Circuitry for compensating brightness variation in the scene
- H04N23/74—Circuitry for compensating brightness variation in the scene by influencing the scene brightness using illuminating means
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
- H04N25/50—Control of the SSIS exposure
- H04N25/53—Control of the integration time
- H04N25/531—Control of the integration time by controlling rolling shutters in CMOS SSIS
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
- H04N25/50—Control of the SSIS exposure
- H04N25/57—Control of the dynamic range
- H04N25/58—Control of the dynamic range involving two or more exposures
- H04N25/581—Control of the dynamic range involving two or more exposures acquired simultaneously
- H04N25/583—Control of the dynamic range involving two or more exposures acquired simultaneously with different integration times
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V30/00—Character recognition; Recognising digital ink; Document-oriented image-based pattern recognition
- G06V30/40—Document-oriented image-based pattern recognition
Definitions
- the invention relates to a device and a method for optical direct recording of safety - relevant objects without optically imaging elements, comprising a support surface for the objects, under which a sensor layer, the photosensitive elements in a two - dimensional regular pixel grid is arranged, in particular for receiving documents and Fingerprints of live autopods at border checkpoints or for other mobile applications for data collection with personal identification.
- a common border crossing scenario is, for example, the digital recording of a document, usually a passport or identity card.
- This ID document is verified, and various security features, some with illumination and detection wavelengths outside the visible wavelength range in the UV and IR must be applied.
- so-called RFID data (radio frequency identification) stored in the document are read out and a facial image is recorded and at least one fingerprint with high quality requirements is recorded.
- the recorded biometric data are compared with the RFID data or with the passport photograph of the personal document. If all tests are successful, the user receives an expression with the result or - in another scenario - a gate or a locked door is opened.
- the mobile application such as mobile border controls, for example, in buses and trains: here, the scanning of the card, scanning at least one fingerprint and a comparison of the same with that in the electronic chip of the card required.
- the mobile solution would benefit from a combination of lightweight and small skin and document capture technology.
- the contrast must reach at least 25.8%, while for a 1000 ppi system at 20 Lp / mm at least a contrast of 28% must be achieved.
- SNR signal-to-noise ratio
- Further requirements are a low distortion ⁇ 1%, the presence of at least 200 different gray values and a homogeneously illuminated image field both in the closer pixel environment and in the entire image.
- the last parameter is to control that no image corruption takes place. That is, the images are explicitly searched for unusual artifacts to detect image manipulation.
- FTIR Total Internal Reflection
- a prism is used, which provided for the recording of the impression surface due to mechanical and optical requirements must be greater than the required area for receiving the impression.
- the resulting size of the prism as often the largest component in the receiving channel affects the minimum size and minimum mass of a device crucial.
- the high image quality allows a fast and secure detection and identification of persons, especially for applications in which in addition to forensic accuracy (requirements of the FBI) and a high passenger throughput, such as border controls, is expected.
- Miniaturized arrangements with imaging optics such as in the US Pat. No. 7,379,570 B2 disclosed, generally do not meet the requirements of the FBI and still limit the minimization of fingerprint devices due to the optical beam path, and a document recording is not possible with these systems, since FTIR is used here and another beam path for image acquisition again the approach of miniaturization contradicts.
- Ultrasonic or piezoelectric sensors such as out US 4,394,773 A known, as well as capacitive sensors, such as in US 5 325 442 A described, allow the imaging of documents, but do not reach the quality requirements of the FBI fingerprints.
- Membrane switches such as B. off US 2005/0229380 A1 known, do not reach the FBI specifications and also do not allow document recording.
- the arrangement disclosed therein in which the finger is placed directly on a transparent plate above the substrate with the sensor array, picks up a fingerprint.
- the fingerprint corresponding brightness profile arises - as in arrangements with prisms - characterized in that the resting on the surface of the transparent glass or plastic plate mountains of skin (also called skin ridges or papillary) interfere with the internal reflection of light from the light source, while in the troughs (also called papillary body rows) no contact between skin and surface occurs and there the light of the light source is reflected internally on the surface of the transparent plate.
- the photosensitive areas of the sensor array thus creates a negative image of the fingerprint.
- This concept results in illumination wavelengths within the transparency range of the finger (from 600 nm to the NIR and IR ranges) and presents significant ambient light problems.
- the proposed use of spectral filters with transparent IR window and IR illumination reduces these problems, but then there is less sensitivity of conventional sensors and higher absorption of the finger, which degrades the signal-to-noise ratio.
- the wavelength of the illumination must be adjusted accordingly; this creates additional expense.
- the lighting concept is not suitable for document recording.
- the side lighting causes problems in the homogeneity of the illumination, in particular, it prevents the simultaneous recording of multiple fingers, as they would shade each other. Thus, this concept is only suitable for the recording of a finger.
- a light shield is necessary to prevent parts of the lighting from getting directly into the sensor. The side lighting and the light shield enlarge the device and it is more complex, inflexible and error-prone.
- the invention is based on the object, a new way of optically recording direct skin and document prints with the specified quality FBI standard, which excludes ambient light interference and does not require passive shadowing.
- the object in a device for optical direct recording of safety-relevant objects (without imaging optical elements), at least one object from the groups, personal documents, passports, driver's licenses and fingerprints or handprints, containing a support surface for the objects, under a sensor layer , which has photosensitive elements in a two-dimensional regular pixel grid, is achieved in that the sensor layer is embodied in a laminate with electronics based on the thin-film transistor (TFT) technology that the sensor layer is at least in the visible Wavelength range transparent carrier layer is that the photosensitive elements of the sensor layer have a distance to the male object on the support surface of less than the pixel pitch defined by the pixel pitch, that the photosensitive elements inside each of the sensor layer via an electronic control unit for controlling the exposure time and that a light source is designed as primary luminescent layer so that at least light components of the primary luminescent layer from the direction of the sensor layer through the support surface through the object to be illuminated can illuminate, all layers of the laminate which are located between the primary luminescent layer and the contact
- control unit for controlling the exposure time is designed as a rolling shutter. But it can also be preferably realized as a global shutter.
- the control unit for controlling the exposure time is expediently designed such that the exposure time of different pixels or groups of pixels (for example rows or columns) can be set differently for the same exposure.
- a cold cathode tube or a photoluminescent foil may preferably be arranged below the sensor layer.
- the primary luminescent layer may further include an array of singly arranged two-dimensionally arranged singular LEDs from the group LED, OLED, QLED, which is arranged below or within the sensor layer.
- the primary luminescent layer has a first wavelength spectrum and at least one secondary luminous unit with at least one second wavelength spectrum, which is not identical to the first wavelength spectrum, can be switched on as an alternative to the primary luminescent layer by at least one comparison image for a forgery detection in finger or handprint images or to record a verification of security features on documentary recordings at different reference wavelengths.
- the primary luminescent layer is replaced by a light-emitting display of a mobile communication device from the group of smartphones, tablet computers, laptops onto which the transparent carrier layer of the laminated body is placed.
- the secondary light unit is advantageously present between primary luminescent layer and support surface of the lampholder and expediently contains at least one light source from the group, LED, OLED, at least one light guide layer, wherein the secondary light unit for the light of Displays the mobile communication device is largely transparent.
- the object in a device for optical direct recording of safety-relevant objects of at least one object from the group single finger, Mehrfinger- or hand prints containing a support surface for the objects under which a sensor layer having photosensitive elements in a two-dimensional regular pixel grid, arranged is achieved in that the sensor layer is embodied in a layer body with an electronics based on the thin-film transistor (TFT) technology, that the photosensitive elements of the sensor layer a distance to the male object on the support surface of less than that by the Pixel grid of the sensor layer have defined pixel pitch, and that the photosensitive elements within the Pixel rasters each have an electronic control unit for controlling the exposure time.
- TFT thin-film transistor
- the illuminance is additionally evaluated in the image analysis, and upon detection of under- or overexposure, the illumination intensity of a primary luminous layer is adjusted below a contact surface.
- the method is carried out a plurality of times when the object is illuminated with different illumination wavelengths, wherein a plurality of images each with different spectral range and optimized exposure time are individually stored and superimposed in a further step by means of image processing algorithms, the plurality of individual images to a multi-colored overall image.
- the method can be further advantageously supplemented by additional image recordings in the UV and IR range for the examination of security features of documents are recorded and stored separately.
- the basic idea of the invention is based on the basic problem that in the optical recording of fingerprints, in particular by means of direct optical methods that do not require optical imaging elements, a mostly disturbing influence of the ambient light occurs and the recording is qualitatively deteriorated or falsified.
- the ambient light passes unhindered through the bearing surface on the sensor, which usually leads to overexposure around at least the applied skin areas, but also at the edges. Since a large part of the ambient light spectrum passes the applied autopods, overexposures may also occur within the applied skin area, depending on the ambient light situation.
- One way to address this problem is to use spectral filters between the bearing surface and the sensor array to restrict the illumination spectrum ( US 2004/0252867 A1 ).
- Concept of the invention is therefore a device comprising a sensor array based on TFT technology (see. WO 2012/067409 A3 . US Pat. No. 6,952,022 B2 . US Pat. No. 7,442,588 B2 ) and for adaptive exposure time regulation, including a shutter technology, for the detection of autopods and documents.
- Electronic shutters are mainly known from CMOS technology (cf. US Pat. No. 8,569,671 B2 ), but also already known for TFT technology (cf. US 7,769,252 B2 ) and correspond to the prior art.
- Disturbing influences due to ambient light are prevented by an active exposure time control in the sensor element.
- electronic shutters regulate the exposure time for the sensor elements, so that overexposure to the ambient light can be counteracted.
- Optical elements for reducing the spectral bandwidth, as used in optical direct scanners, ie without conventional optical imaging sensor arrays, against disturbing ambient light are therefore no longer necessary, so over a wide spectral range light can be detected.
- counterfeit detection of autopods and documents is greatly facilitated by the detectability in the entire visible wavelength spectrum, as well as in the UV and IR ranges.
- the direct-current sensor according to the invention has very large light-sensitive areas compared to conventional camera sensors and also makes use of all the wavelength portions available in the ambient light in which it is sensitive, and there are no spectral filters which limit the wavelength spectrum. Both properties mean that the sensor can be operated even at low light intensity. This makes power-saving, small and lightweight mobile systems possible.
- additional artificial lighting could be provided solely by the backlight of an additional mobile device, such as a smartphone or tablet. Equally possible is the complete renunciation of additional artificial light sources when taking live skin prints of autopods.
- light components are used, which pass through the finger, so that additional light-guiding elements are not necessary.
- the sensor layer can therefore be located at a shorter distance to the contact surface and thus the device according to the invention promises a higher image quality. It also includes a countermeasure to avoid overexposure through the active and adaptive control of the exposure time.
- Fig. 1a shows a plan view of a device for receiving such prints and documents 118.
- a support surface 103 and a frame 902 can be seen.
- This view is also the one that a user of the device mainly sees.
- the bearing surface 103 is generally the interface of a protective layer 117, which protects the underlying electronic components of a sensor layer 105 from dirt and scratches.
- the user places his recorded autopods 102 or documents 118 for recording on the support surface 103th
- Fig. 1b is a part of a section through the device containing a laminated body 100.
- the upper side of the laminated body 100 with the protective layer 117 forms the support surface 103.
- the latter is the upper boundary surface of the protective layer 117.
- the sensor layer 105 On the other side of the protective layer 117, facing away from the support surface 103, there is the sensor layer 105.
- the photosensitive elements 104 are, for example, photodiodes that are inside the sensor layer 105 by an electronic circuit, for example by TFT technology, are readable and have additional electronics for controlling the exposure time.
- Below the sensor layer 105 that is to say on the side facing away from the support surface 103, there is a carrier layer 701 which is transparent at least in the visible wavelength range.
- the material of this layer is, for example, glass or a transparent plastic.
- this transparent carrier layer 901 is the primary luminescent layer 700. It emits light in the visible wavelength range and thus ensures that the object which has been placed on the support surface 103 is illuminated for image acquisition.
- the wavelength spectrum generated in this primary luminescent layer 700 is ideally matched to the spectral sensitivity of the photosensitive elements 104 in the sensor layer 105.
- the device according to the invention as in Fig. 1a and 1b shown in the basic structure, and the associated method are characterized by a combination of multiple direct optical images at different lighting settings.
- the dynamics and the signal-to-noise ratio (SNR) can be further increased.
- the sensor array is read out at a fixed repetition rate. This results in the integration time for each of the photosensitive elements 104, that is, the time interval in which each of the photosensitive elements 104 receives the light integrating absorbs.
- exposure time control which is realized in the simplest case by an additional transistor in the pixel circuit, it is possible to read out each pixel before the end of this integration time.
- the sensitivity of the sensor can be adjusted depending on the situation.
- the ambient light situation plays a decisive role, which must preferably be recorded and taken into account in each individual recording of skin impressions in an upstream calibration image recording. This can be done on the one hand by utilizing the ambient light or on the other hand by suppression or compensation by means of the shutter-controlled exposure time adjustment.
- Fig.2 shows the principle underlying the invention to produce a high contrast recording of handprint details with a contrast> 0.4.
- An autopodium 102 contacts the contact surface 103 in the region 116.
- Light components of the illumination 114 of the primary luminous layer 700 pass through the transparent carrier layer 701, through the sensor layer 105, through the protective layer 117 and through the contact surface 103.
- a lighting portion 114a of the illumination light 114 from the primary luminescent layer 700 serves to illuminate the skin mountains, couples via the skin ridges (papillary lines) into the skin and generates (i) scattered light 107a coupled in via the skin mountains, which scatters forward and not directly from the photosensitive elements 104 of the sensor layer 105 is detected, and (ii) a scattered in the skin mountains detected illumination portion 113a, which scatters backwards, decouples from the skin, passes through the support surface 103 and the protective layer 117 in the sensor layer 105 and detected there by the photosensitive elements 104 becomes.
- Another illumination portion 114b of the illumination light 114 from the primary luminous layer 700 serves to illuminate the skin troughs and generates (i) stray light 107b coupled in via the skin valley, which is scattered forward and not detected by the photosensitive elements 104, and (ii) one scattered in the skin of the skin and undetected illumination portion 113b, which is scattered backwards in the region of the skin valley (papillary body row), decoupled from the skin and re-coupled elsewhere due to the Auskoppelwinkels and the geometry of the skin and thus is not directly detected by the photosensitive elements 104 and (iii ) a scattered in the skin and detected lighting portion 113c, which is scattered backwards in the skin, from the skin in the air volume, which surround the skin and the bearing surface 103 decouples, passes through the support surface 103 and the protective layer 117 in the sensor layer 105 and there through the light Sensitive elements 104 is detected.
- a portion of the scattered light 107a coupled in via a skin mountain serves to illuminate the skin peaks, and portions of the scattered light 107b coupled in via a skin valley are mainly scattered forward and no longer escape from the skin in the direction of the sensor layer 105.
- Other parts of the light 113a scattered in the skin mountains are scattered backwards, disconnect from the skin, pass through the support surface 103 and the protective layer 117 into the sensor layer 105 and are detected there by the photosensitive elements 104. Since the skin and the protective layer 117 have similar refractive indices, there are hardly any reflections at this border crossing.
- Another portion of the light 113b scattered in the troughs is scattered backwards, coupled out of the skin and elsewhere, due to the Auskoppelwinkels and the geometry of the skin valley, again.
- This light component 113b can therefore not be detected directly in the sensor layer 105.
- Fig. 3a shows the basic operation of the device according to the invention for capturing skin imprint images of living autopods 102 under the influence of ambient light 101.
- the region 116 of the bearing surface 103 contacted by the object is here the skin region of an autopodium 102 to be picked up.
- the illumination light 114 of the primary light-emitting layer 700 produces light of the illumination 107 scattered in the skin.
- the backward-scattered portion of the illumination light 113 which is detected passes through the support surface 103 and the protective layer 117 into the sensor layer 105 and is detected there by the light-sensitive Detected elements 104. Details on the high - contrast image recording of skin imprint details are in the text Fig. 2 described.
- the autopods 102 are illuminated by the ambient light 101.
- Shares 106 of ambient light 101 having wavelengths less than 600 nm produce scattered ambient light 115 having wavelengths less than 600 nm and are absorbed shortly after penetration into the skin.
- the penetration depth for light with wavelengths ⁇ 600 nm is sometimes significantly less than 0.5 mm, depending on the specific wavelength.
- Light components in the visible spectral range> 600 nm are scattered in the skin and tissue with much lower absorption.
- the penetration depth for visible light with wavelengths greater than 650 nm is up to 0.3 cm, depending on the wavelength.
- portions 108 of the ambient light 101 having wavelengths greater than 600 nm, the scattered ambient light 110 with wavelengths greater than 600 nm partially pass through the launched Autopodium 102 and proportionately pass the support surface 103 and the protective layer 117 and enter the sensor layer 105 and are detected by the photosensitive elements 104.
- An overexposure at too high an intensity of the ambient light 101 is counteracted by the electronically controllable exposure time in the control of the photosensitive elements 104 in the sensor layer 105.
- the exposure time is adjusted to achieve the optimum image quality, in particular the optimal gray value distribution in the image.
- Fig. 3b shows the basic operation of the device according to the invention for receiving a document 118 under the influence of ambient light 101.
- the region 116 of the support surface 103 contacted by the object is here the aucutting region of the document 118.
- the illumination light 114 of the primary luminous layer 700 on the side of the document 118 facing the support surface 103 generates light of the illumination 107 Backward scattered portion of the illumination light 113 which is detected, coupled by the support surface 103 and the protective layer 117 in the sensor layer 105 and is detected there by the photosensitive elements 104.
- Backscattering also means specular reflection in special cases.
- the document 118 is also illuminated by the ambient light 101.
- Shares 106 and 108 of the ambient light 101 with wavelengths less than 600 nm and greater than 600 nm produce scattered ambient light 115 and 110 with wavelengths less than 600 nm and greater than 600 nm on the side facing away from the support surface 103 of the document 118th Die Eindringtiefe für Licht in typical materials of a document 118, such as paper or plastic, is so small that typically no portions of the ambient light 101 can pass through the document and be detected by the photosensitive elements 104.
- the exposure time to achieve the optimum image quality, in particular the optimal gray value distribution in the image, is adjusted.
- Immediate recording of skin imprints of live autopods 102 and documents 118 is performed with no imaging elements in high resolution on the condition that the distance between support surface 103 and photosensitive elements 104 of sensor layer 105 is smaller than the pixel pitch defined by the pixel grid. This criterion is necessary because of the propagation of the light between support surface 103 and sensor layer 105, the CTF deteriorates with increasing distance.
- Fig. 4 shows by way of example the CTF for 20 ⁇ m distance 501, 40 ⁇ m distance 502 and 60 ⁇ m distance 503.
- the spatial resolution is plotted in line pairs per millimeter (LP / mm), on the ordinate is the contrast (Michelson contrast) applied.
- FBI requirements 504 for CTF on a 500 ppi system are also shown.
- a 500 ppi system requires, according to the Nyquist theorem, a period as a pixel pitch of at least 50.8 ⁇ m. If one sets this value as the distance between support surface 103 and sensor layer 105, FBI requirements 504 can no longer be satisfied. It must therefore be true that the distance between the support surface 103 and the photosensitive elements 104 in the sensor layer 105 must be smaller than the pixel pitch.
- Fig. 5 shows the basic method for receiving a safety-relevant object, such as a skin imprint of a living autopodium 102 or a document 118.
- the device is in sleep mode before beginning. The procedure starts with the start, the device switches to standby mode. This can be done automatically by proximity detection or manual input. After placing the object on the support surface 103, the device switches automatically by detecting the contact between the object and the support surface 103 or by manual input in the recording mode and the image recording takes place. At this time, the signal of the photosensitive elements 104 is read out.
- the photosensitive elements 104 are for example controlled by TFT technology (TFT, Thin Film Transistor) and are read out with the aid of further integrated electronics.
- the subsequent image storage shifts the read data into a local memory formed within the device or via a computer interface such as USB or even a wireless connection such as Bluetooth or WLAN to a memory residing in an external computer or computer a mobile device such as a tablet computer or smartphone.
- the captured and stored image is analyzed. This occurs either within the device by, for example, at least one internal arithmetic unit (for example, freely programmable logic circuit (FPGA), signal processor, microcontroller).
- FPGA freely programmable logic circuit
- one or more parameters is / are determined on the one hand to provide information about the quality of the image and, on the other hand, to change by adjusting the exposure time. For example, it is possible to generate such a parameter from the gray value distribution, for example using a gray scale histogram.
- the image is underexposed. If the gray scale frequency is distributed increasing to the maximum, the image is overexposed. A defined area in between is considered the correct exposure. This fact can be abstracted to one or more parameters. The query is made as to whether this parameter is in the interval or not. If the parameter is in the interval, if the exposure time was correct, the procedure is ended with the step "End". The device switches from the recording mode to the standby mode if further recordings are to take place or into the idle mode. The data is still in memory and can continue to be used.
- the parameter is used to calculate a new exposure time. If, for example, the captured image has been overexposed, a smaller value for the exposure time is calculated. The thus determined new exposure time is transferred to the sensor electronics and thus changed for the next image acquisition. A new image acquisition, image storage and image analysis takes place. Typically, the previously captured image will be overwritten by the new image. If the parameter is now in the interval, the procedure is terminated, if not, another iteration takes place. Typically, an abort criterion is defined. This, for example, can terminate the process after a certain number of iterations, even if the parameter is not reached in the interval. The user can then receive the information that the quality specification has not been reached.
- the described method can optionally be extended so that, instead of the method step 'end', the optimum exposure time is given a further calculation in which a 'list' of at least two exposure times determines the at least one shorter and one longer exposure time than the previously calculated optimal exposure time becomes. Then, exposure time of the sensor layer 105 is set to the first value of the 'list'. Subsequently, a picture is taken and saved. The first value of the 'List' is deleted. If there is another value on the list, the exposure time will be reset to the new first value of the list. It will take again image capture and storage. When saving, the images will not overwrite. This part of the process takes so long until there is no Value is more on the list and the last image is saved. The images are then superimposed using a software algorithm, resulting in an image with a particularly high dynamic range. This image is saved and is therefore available for further use.
- the in the process in Fig. 5 The adjustment of exposure time described is carried out electronically using TFT technology.
- the photosensitive element 104 in the sensor layer 105 is controlled and read by means of conductors and TFT technology.
- a transisor for each photosensitive element 104 is necessary.
- the so-called rolling shutter is possible.
- the rolling shutter is an exposure method that is used largely in CMOS sensor technology, but is also suitable for TFT technology.
- the exposure is not done as a 'one-time' simultaneous exposure, but in a graduated order.
- 'Call' the lines are exposed one after the other, line by line.
- this temporal offset in the form of distortions is also visible in the composite image.
- This effect is called a rolling shutter effect.
- the speed of the sensor also plays a role. It determines how fast the lines open and close. For a fast sensor with a maximum frame rate of 60 frames per second, the effect is less than one slow sensor with, for example, a maximum of 15 frames per second.
- the dynamic distortions of a rolling shutter will play no role, however, its advantage of the low noise floor outweigh.
- the implementation of the exposure time adjustment via a global shutter is suitable since this is a dynamic process and thus distortions could occur which are intolerable.
- Fig. 6 shows a preferred embodiment for an electronic circuit of a pixel in the sensor layer 105.
- the photosensitive element 104 is here a photodiode. Two transistors are shown: one transistor switches the photodiode in accordance with the timing, the other transistor performs an additional read-out circuit, thus enabling a shortening of the time interval in which light is collected by the photodiode, thus exposure timing after the rolling shutter Principle realized.
- the illumination of the object 102 or 118 takes place via the in Fig. 1 b shown primary illumination layer 703.
- Fig. 7a, Fig. 7b and Fig. 7c show preferred embodiments in which the object is illuminated with a homogeneous illumination 114 as possible.
- This homogeneous illumination 114 forms the in Fig. 1b shown primary luminous layer 700.
- the object may be either a document 118 or an autopodium 102. If the object is an autopodium 102, the illumination of the object can also be effected exclusively by the ambient light 101.
- spectral components 108 of the ambient light 101 with wavelengths greater than 600 nm generate a sufficiently large portion 112 of the ambient light 101 that is detected in conventional lighting situations, for example in the case of direct ceiling lighting in the room or direct sunlight.
- Fig. 7a shows a preferred embodiment in which the primary luminescent layer 700 of the basic layer structure, known from Fig. 1b , Photoluminiszenzfolie 702 contains.
- Fig. 7b shows a preferred embodiment in which the primary luminescent layer 700 of the basic layer structure, known from Fig. 1b a light guide layer 706 consisting of LEDs or OLEDs, and additional optical elements, such as waveguides, optical grids, mirrors and diffusers.
- the additional optical elements distribute the light of the LEDs or OLEDs as homogeneously as possible in the primary luminescent layer 700 and ensure that the illumination light 114 passes through the primary luminescent layer 700, the entire contact surface 103 with the same intensity as possible.
- Fig. 7c shows a preferred embodiment in which the primary luminescent layer 700 of the basic layer structure, known Fig. 1b is a backlight, as known from flat panel displays, that generates its light by means of cold cathode tubes 704. Diffusers or photoconductive or reflective elements are typically present for homogenization and directional radiation.
- the adjustment of the exposure time serves primarily to make the photosensitive elements 104 of the sensor layer 105 less sensitive in the case of excessively high intensities of the ambient light 101, so as not to overdrive it during image acquisition, since image information is lost in the event of overloading.
- the resistance to disturbing influences by ambient light and quality of the image acquisition can be further increased.
- adjustment of the illumination color wavelength-limited spectral ranges
- multicolor recording of objects, in particular color image recordings of documents is possible.
- Fig. 8a to 8f show particularly preferred embodiments in which the object is illuminated with a lighting 114 which is locally on and off. This allows structured illumination that can facilitate counterfeit detection and improve image quality. In addition, it allows a direct presentation of information on the support surface 103 and thus an intuitive and interactive user interface.
- This locally switched on and off luminous layer forms the in Fig. 1 b shown primary luminous layer 700.
- the object may be either a document 118 or an autopodium 102.
- Fig. 8a, Fig. 8b, Fig. 8c and Fig. 8e each show the device according to the invention, in which the structured illumination is realized by a layer 703 which switches locally in transmission, for example a switchable liquid crystal layer.
- a layer 703 which switches locally in transmission
- a switchable liquid crystal layer for example a switchable liquid crystal layer.
- homogeneous backlighting is necessary because the locally switching layer 703 itself does not generate light.
- This backlight is arranged below, ie on the side facing away from the transparent carrier layer 901, of the locally switching layer 703.
- the backlight can be like in Fig. 8a Photoluminescent film 702 or as in Fig. 8b a Lichtleit harsh 706, consisting of OLEDs or LEDs and beam shaping and wave guiding elements (see. Fig. 7b ), or cold cathode tubes 704 (cf. Fig. 7c ) or a two-dimensional active LED or OLED lighting arrangement 705 (see Fig. 8d and 8e ) (eg a matrix).
- Fig. 8d shows the primary light-emitting layer 700 implemented as LED or OLED matrix 705.
- Fig. 8f shows an embodiment in which the primary luminescent layer 700 is designed as an active LED or OLED matrix 705 within the sensor layer 105 as a combined transmitter-receiver layer 105a.
- the singular light sources are arranged in a second grid offset from the grid of the photosensitive elements 104.
- Fig. 9a, Fig. 9b and Fig. 9c show a particularly preferred embodiment.
- the primary luminescent layer 700 is realized by a locally switching layer 703 in conjunction with a light-conducting layer 706, cf. to Fig. 8b .
- a pure display area 906 for additional display of information.
- the display area 906 can also optionally be equipped with a touch function, for example for reading in signatures.
- Fig. 9b shows the layer structure which is completed by the display surface 906. It consists of the light-conducting layer 706, the locally switchable layer 703, the protective layer 117 and the support surface 103, that is to say has no sensor layer 105.
- Fig. 9c shows the layer structure which is completed by the support surface 103 (see. Fig. 8b ).
- Fig. 10 shows as a preferred embodiment, a method for receiving a safety-relevant object, such as a skin impression of a living autopodium 102 or a document 118, wherein in addition to adjusting the exposure time (by controlling the shutter pixels of the sensor layer 105), the illumination pattern (as a 2D intensity distribution) and the illuminance (in terms of overall brightness) can be adjusted.
- the basic course of the procedure shows Fig. 5 , The latter two adjustments may be optional and in any order, ideally, they work together with exposure timing and matched to obtain the best result.
- the optimized image acquisition can take place iteratively, cf. Fig. 5 ,
- the adaptation of the illumination pattern sets a device with locally switched on and off illumination, as in the examples of Fig. 8a-f shown ahead.
- an inhomogeneous illumination is used in a targeted manner in order to locally compensate for inhomogeneities in the image, such as disturbing effects of inhomogeneous ambient light 101.
- the image background is calculated from the stored image.
- the background image is understood as the brightness progression behind the detail structures.
- fingerprints this means that the papillary lines, or the fine images of the mountains and valleys of the fingerprint, are removed from the image.
- a closure filter so a combination of minimum and maximum filters are used.
- the illumination array generally has at least one different pixel number and a different brightness value range than the sensor layer 105.
- the stored image is adapted to the technical conditions of the illumination matrix.
- the customization includes, for example, image processing algorithms such as scaling, offset and inversion.
- the special propagation characteristic of the light in a special Object is considered by additional algorithms on the image.
- the primary illumination layer 703 is driven with this, so applied the illumination pattern.
- the adaptation of the exposure time primarily serves to make the photosensitive elements 104 of the sensor layer 105 less sensitive in the case of excessively high intensities of the ambient light 101 in order not to overdrive them during image acquisition, since image information is lost in the event of overloading.
- the adaptation of the illumination pattern serves to obtain a better image quality, since it homogenizes the image background and does not distort the image content.
- the adjustment of the illuminance is provided in contrast to the aforementioned quality features, in particular at low intensities of the ambient light 101. If, for example, the exposure time has already been set to the maximum and the gray-scale histogram of the stored image nevertheless shows an underexposure, the illumination intensity as a whole can be increased by corresponding activation of the primary illumination layer 700.
- the adjustment of the illumination color can on the one hand serve to optimize the image quality.
- a lighting color that is favorable for image recording can be set.
- a generation of true color images is possible by several differently colored shots and their superimposition.
- Fig. 10 shows the rough procedure, whereby in the check, parameters in the interval 'in this case, in addition to the image optimization parameters, a list of illumination colors is gone through, the first list element is deleted after each image acquisition, so that at the end several shots, which were taken at different spectral intervals , are stored.
- the device contains a primary luminescent layer 700, which allows adjustable illumination colors.
- a primary luminescent layer 700 which allows adjustable illumination colors.
- This can be realized for example by a locally switching layer 703 (eg switchable liquid crystal layer) with different color filters (for example red, green and blue filters) on their switchable segments (pixels) and a correspondingly broadband backlighting.
- the combination of these components can be embodied for example as an LCD (liquid crystal device).
- Embodiments are in Fig. 8a-8c such as Fig. 8e , each with different backlights by changing the emission principle of the luminescent layer 700, shown.
- Another possibility of realization is the use of a two-dimensional LED or OLED arrangement 705 with LEDs of different colors or OLEDs, as in FIG Fig. 8d shown, or the use of different colored LEDs or OLEDs in a combined transceiver layer 105a, as stylized in Fig. 8f is shown.
- the Fig. 11a and Fig. 11 b show particularly preferred embodiments, especially for counterfeit detection of objects such as living autopods 102 and documents 118.
- this arrangement allows at least one additional secondary light unit 707 to illuminate in other wavelength ranges such as IR or UV. This lighting can be switched on alternatively to the primary lighting or in addition.
- documents have security features that require illumination in the UV and IR to verify them.
- Living autopods 102 in turn have fundamentally different light-guiding and scattering characteristics in different Wavelength ranges (for example in UV, blue, red, IR).
- counterfeiting can be easily detected by capturing comparison images when lighting specific wavelength ranges.
- All layers of the laminate 100 that are located between the additional secondary lighting unit 707 and the support surface 103 must be substantially transparent to the wavelength spectrum of this secondary lighting unit 707. If the primary luminous layer 700 is located between the secondary luminous unit 707 and the primary luminous layer 700 is equipped with a locally switching layer 703, structured illumination by the additional secondary luminous unit 707 is also possible. This further enhances the possibilities of counterfeit detection.
- selective spotlighting can be selectively effected and the light propagation in the autopodium 102 can be recorded via the sensor.
- special security features for verification can be individually illuminated at points.
- Fig. 11a 10 shows a laminated body 100 containing an additional counterfeit detection secondary light emitting unit 707 formed in the form of photoluminescent film 702.
- Fig. 11b shows a laminated body 100, in which an additional secondary lighting unit 707 is formed in the form of a light-guiding layer 706.
- Fig. 12 shows as a particularly preferred Statessbesipiel a method in principle as in Fig. 5 but here with additional detection of objects such as live autopeds 102 or documents 118.
- Various adjustments are possible for counterfeit detection, each of which can take place optionally and in any desired sequence: adjust exposure time, adjust exposure pattern, adjust illuminance, add additional light source (s) - and off.
- the image capture and storage takes place.
- the stored image is a, based on the basic method described in Fig. 5 , additional image and does not replace in memory the one recorded first. It is possible to take several pictures with different adjustments, for example an image with the UV illumination switched on and another image to be stored separately with the IR illumination switched on.
- Fig. 13a-d show a particularly preferred,sbeipiel the device according to the invention for their use in the mobile field of application.
- the layered body 100 according to the invention is slightly modified in this case in that the primary luminescent layer 700 is initially not present on the lamination body 100 because the primary luminescent layer 700 can be replaced by the mostly very bright display 802 of a mobile device such as a tablet computer or smartphone.
- the reduced laminated body 100 is connected to the mobile device by placing the laminated body 100 with its bottom transparent carrier layer 701 on the display 802 of the mobile device and the mobile device is also used to information directly on the support surface 103 of the composite 100 to represent.
- silhouettes 904 of autopodies 102 may be displayed to facilitate their correct positioning intuitively, as in FIG Fig. 13a and 13b is shown.
- the mobile device also provides the necessary illumination of the object, in this example of an autopodium.
- the display 802 of the mobile device thus functions as a special embodiment of the primary luminescent layer 700.
- the device according to the invention is connected to the mobile device for data exchange. This connection can be made via a conventional wired computer interface, such as USB, or even wirelessly, such as by wireless or Bluetooth.
- Fig. 13a shows the device according to the invention connected to a tablet computer.
- the device according to the invention is located directly on the display 802 of the tablet computer.
- Fig. 13b shows the device according to the invention connected to a smartphone.
- the device according to the invention is located directly on the display 802 of the smartphone.
- Fig. 13c shows the cross section of the entire system, consisting of the device according to the invention and the mobile device.
- the mechanical connection takes place here via a fastening arrangement 803.
- Fig. 13d shows the cross section of the entire system, consisting of the device according to the invention and the mobile device. Compared to Fig. 13c is located in the layer structure, an additional secondary light unit 707 for counterfeit detection, this is transparent to the illumination of the display 802 of the mobile device so that it can present information on the support surface 103 substantially unhindered and can illuminate the object to be recorded.
- the mechanical connection takes place here as in Fig. 13c via a fastening arrangement 803.
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Credit Cards Or The Like (AREA)
- Image Input (AREA)
- Facsimile Heads (AREA)
- Facsimile Scanning Arrangements (AREA)
Abstract
Description
- Die Erfindung betrifft eine Vorrichtung und ein Verfahren zur optischen Direktaufnahme von sicherheitsrelevanten Objekten ohne optisch abbildende Elemente, enthaltend eine Auflagefläche für die Objekte, unter der eine Sensorschicht, die lichtempfindliche Elemente in einem zweidimensionalen regelmäßigen Pixelraster aufweist, angeordnet ist, insbesondere zur Aufnahme von Dokumenten und Fingerabdrücken lebender Autopodien an Grenzkontrollpunkten oder für andere mobile Einsätze zur Datenaufnahme mit Personenidentifikation.
- Während an Grenzübergängen zunehmend Fingerabdrücke aufgenommen und mit Datenbanken verglichen werden, sind für internationale Reisen zusätzlich Identifikationsdokumente (Personaldokumente) essentiell.
- Ein übliches Grenzübergangsszenario ist beispielsweise die digitale Aufnahme eines Dokumentes, überlicherweise eines Reisepasses oder eines Personalausweises. Dieses ID-Dokument wird verifiziert, wobei diverse Sicherheitsmerkmale, teilweise auch mit Beleuchtungs- und Detektionswellenlängen außerhalb des sichtbaren Wellenlängenbereiches im UV und im IR angewendet werden müssen. Des Weiteren werden im Dokument gespeicherte sog. RFID-Daten (engl. radio-frequency identification) ausgelesen und es wird ein Gesichtsbild aufgenommen sowie mindestens ein Fingerabdruck mit hohen Qualitätsanforderungen erfasst.
- Die aufgenommenen biometrischen Daten werden mit den RFID-Daten bzw. mit dem Passbild des Personaldokuments verglichen. Sind alle Tests erfolgreich, erhält der Benutzer einen Ausdruck mit dem Ergebnis oder - in einem anderen Szenario - wird ein Tor oder eine Sperrtür geöffnet.
- Bei der beschriebenen Prozedur sind wichtige Ziele die Schnelligkeit, Robustheit und Fehlerunanfälligkeit des Systems. Ein System, mit dem sowohl die Hautabdruck- als auch die Dokumentenaufnahme möglich sind, würde die Zuverlässigkeit der Identifikation von Personen anhand des aufgenommenen Hautabdrucks und ihrer vorgelegten Personaldokumente sowie eines Abgleichs beider Ergebnisse mit Daten einer Datenbank deutlich erhöhen. Außerdem könnte ein kombiniertes System den Platzbedarf und daraus abgeleitet den Aktionsradius des Kontrollbediensteten und somit die Abfertigungszeit des Reisenden verringern.
- Aber nicht nur an Grenzübergängen ist das Aufnehmen von Hautabdrücken und Dokumenten eine typische Prozedur. In südamerikanischen Banken beispielsweise müssen vor einer Kontoeröffnung die Fingerabdrücke aufgenommen werden. Danach wird der Ausweis (ID-Karte) kopiert und abgelegt. Auch dazu sind derzeit zwei unterschiedliche Geräte erforderlich.
- Ähnliche Szenarien gibt es auch bei Autovermietungen, wobei neben dem Fingerabdruck der Ausweis oder anstelle des Ausweises der Führerschein eingescannt wird.
- Ebenso werden bei Waffenkäufen in den USA die Abdrücke der Finger für einen Backgroundcheck, also ein polizeiliches Führungszeugnis, neben einer Aufnahme des Führerscheins, der in den USA defacto die ID-Karte ist, benötigt.
- In den USA gewinnt der sog. Backgroundcheck, für den die Kombination aus Finger- und Dokumentenaufnahme notwendig ist, zunehmend an Bedeutung. Weiterhin besteht ein wachsender Bedarf beim elektronischen Visum für Einreisende in die EU.
- Auch das Prüfen von Zugangsberechtigungen für Personal in sicherheitsrelevanten Bereichen, wie beispielsweise Flughäfen, Atomkraftwerken und Ölraffinerien, durch das Scannen der Fingerabdrücke und das Scannen des Firmenausweises, der diese Fingerabdrücke gespeichert hat, ist ein typisches Anwendungsfeld, in dem insbesondere kombinierte Haut-Dokument-Scanner gefragt sind.
- Ein weiteres Szenario ist die mobile Anwendung, wie mobile Grenzkontrollen, beispielsweise in Bussen und Zügen: hier sind das Scannen des Ausweises, Scannen mindestens eines Fingerabdrucks und ein Vergleich desselben mit dem im elektronischen Chip des Ausweises nötig. Viefältige weitere mobile Anwendungsgebiete sind denkbar. Insbesondere die mobile Lösung würde von einer Vereinigung einer leichten und kleinen Technologie zur Haut- und Dokumentenaufnahme profitieren.
- Alle Anforderungskriterien benötigen ein ausgewogenes und qualitativ hochwertiges Systemdesign. Bei einem optischen System bedeutet das, dass nicht nur der Aufnahmesensor den Anforderungen genügen muss, sondern auch die Beleuchtung und alle anderen für die Bilderzeugung notwendigen Komponenten.
- Bei den Systemen zur Erfassung von Finger- und Handabdrücken ist zu unterscheiden zwischen solchen Systemen, die zur Verifikation, d. h. zu einem Eins-zu-eins-Vergleich mit von einer bestimmten Person, beispielsweise für Zutritts- und Zugriffskontrolle, gespeicherten Fingerabdrücken, verwendet werden, und anderen Systemen, die zur Identifikation verwendet werden, also zum Suchen und Aufnehmen von Vergleichsdaten in einer von staatlichen Behörden verwalteten Datenbank, beispielsweise für Grenzkontrollen, Flugsicherheit und für den Einsatz bei der Polizei.
- Für die letztgenannten Systeme gibt es eine Vielzahl von Forderungen bezüglich Qualität, Auflösung und Originaltreue der von den Hauttexturen aufgenommenen Bilder. Außerdem existiert mit dem Anforderungskatalog des FBI ein hoher Grad der Standardisierung, um einerseits zweifelsfreie Erkennung zu sichern und andererseits Datensätze, die mit verschiedenen Systemen aufgenommen wurden, vergleichbar zu machen. Dieser Anforderungskatalog umfasst sechs wichtige Parameter. Zunächst müssen die Systeme entweder mindestens 500 ppi oder mindestens 1000 ppi Auflösung haben. Darunter ist jeweils keine Zertifizierung möglich. Einer der wichtigsten Parameter für die Zertifizierung ist die Kontrasttransferfunktion (Contrast Transfer Function, CTF). Der Anforderungskatalog beschreibt hierbei genau, welchen Wert die CTF bei den entsprechenden Ortsfrequenzen im Bild mindestens haben. Laut FBI-Vorgaben muss für ein 500 ppi-System bei 10 Lp/mm der Kontrast mindestens 25,8 % erreichen, während für ein 1000 ppi-System bei 20 Lp/mm mindestens ein Kontrast von 28% erreicht werden muss. Ein weiterer wichtiger Parameter ist das Signal-Rausch-Verhältnis (Signal Noise Ratio, SNR), das unabhängig von der Auflösung mindestens 42 dB haben soll. Weitere Anforderungen sind eine geringe Verzeichnung < 1 %, das Vorhandensein von mindestens 200 verschiedenen Grauwerten und ein homogen ausgeleuchtetes Bildfeld sowohl in der näheren Pixelumgebung als auch im gesamten Bild. Der letzte Parameter dient der Kontrolle, dass keine Bildverfälschung stattfindet. Das heißt, es wird in den Bildern explizit nach ungewöhnlichen Artefakten gesucht, um Bildmanipulationen zu erkennen.
- Für die Erfassung von Finger- und Handabdrücken mit den hohen Qualitätsanforderungen entsprechend dem Forderungskatalog des FBI, wie zum Beispiel für forensische Zwecke oder für die Personenidentifizierung an Grenzübergängen, werden derzeit vorwiegend optische Anordnungen, nach dem Prinzip der gestörten internen Totalreflexion (FTIR - frustrated total internal reflection), verwendet. Dabei kommt ein Prisma zum Einsatz, dessen für die Aufnahme des Abdruckes vorgesehene Fläche aufgrund mechanischer und optischer Anforderungen größer als die geforderte Fläche für die Aufnahme des Abdruckes sein muss. Die daraus resultierende Größe des Prismas als häufig größtes Bauteil im Aufnahmekanal beeinflusst die Mindestbaugröße und Mindestmasse eines Gerätes entscheidend. Die hohe Bildgüte erlaubt demgegenüber jedoch eine schnelle und sichere Erfassung und Identifizierung der Personen, insbesondere für Anwendungen, bei denen neben forensischer Genauigkeit (Anforderungen des FBI) auch ein hoher Personendurchsatz, wie beispielsweise bei Grenzkontrollen, erwartet wird.
- Nachteile solcher Anordnungen mit Prismen sind neben der Baugröße und der Masse die notwendigen komplexen mechanischen Bauteile sowie eine aufwändige Montage und Justierung. Eine Aufnahme von Dokumenten ist mit dem Strahlengang, der zur Fingerabdruckaufnahme benutzt wird und auf FTIR beruht, nicht möglich. Daher ist die Integration dieser Funktionalität in ein prismenbasiertes Gerät nur mit zusätzlichem Aufnahmekanal möglich, wie z. B. in
EP 2 120 182 B1 beschrieben. Üblicherweise wird für die geschilderten Anwendungsszenarien ein zweites Gerät zum Einlesen der Dokumente hinzugefügt. Dadurch entsteht allerdings das Problem, dass Benutzer oft die Auflageflächen beider Geräte verwechseln, die Rate der Fehlbedienung also hoch ist. Beide Varianten bringen außerdem einen enormen Kosten- und Platzaufwand mit sich. - Miniaturisierte Anordnungen mit abbildender Optik, wie beispielsweise in der
US 7 379 570 B2 offenbart, genügen im Allgemeinen nicht den Anforderungen des FBI und begrenzen aufgrund des optischen Strahlengangs immer noch die Minimierung der Fingerabdruckgeräte, und eine Dokumentenaufnahme ist mit diesen Systemen nicht denkbar, da auch hier FTIR eingesetzt wird und ein weiterer Strahlengang zur Bildaufnahme wiederum dem Ansatz der Miniaturisierung widerspricht. - Systeme ohne konventionelle optische Abbildung versprechen eine kleinere und leichtere Bauweise. Ultraschall- oder piezoelektrische Sensoren, wie beispielsweise aus
US 4 394 773 A bekannt, sowie kapazitive Sensoren, wie beispielsweise inUS 5 325 442 A beschrieben, ermöglichen die Abbildung von Dokumenten, erreichen aber bei Fingerabdrücken nicht die Qualitätsanforderungen des FBI. Folientastaturen, wie z. B. ausUS 2005/0229380 A1 bekannt, erreichen nicht die FBI-Vorgaben und ermöglichen auch keine Dokumentenaufnahme. - Für ein optisches Verfahren, das ohne konventionelle optisch abbildende Elemente auskommt, wurden in der
US 2012/0321149 A1 bereits Ansätze beschrieben. Die dort offenbarte Anordnung, bei der der Finger direkt auf eine transparente Platte über dem Substrat mit dem Sensorarray gelegt wird, nimmt einen Fingerabdruck auf. Das dem Fingerabdruck entsprechende Helligkeitsprofil entsteht dabei - wie bei Anordnungen mit Prismen - dadurch, dass die auf der Oberfläche der transparenten Glas- oder Kunststoffplatte aufliegenden Hautberge (auch genannt Hautleisten oder Papillarlinien) die interne Reflexion des Lichtes von der Lichtquelle stören, während in den Hauttälern (auch genannt Papillarkörperreihen) kein Kontakt zwischen Haut und Oberfläche auftritt und dort das Licht der Lichtquelle an der Oberfläche der transparenten Platte intern reflektiert wird. Auf den lichtempfindlichen Bereichen des Sensorarrays entsteht somit ein Negativbild des Fingerabdrucks. - Diese Lösung setzt voraus, dass die obere transparente Platte zur Auflage des Fingers eine Mindestdicke hat, damit das Licht bei Reflexion an der Unterseite der transparenten Platte auf die lichtempfindlichen Elemente des Sensorarrays treffen kann. Weiterhin ist es notwendig, dass die Beleuchtung bestimmte Anforderungen bezüglich Einfallsrichtung und Öffnungswinkel bzw. Kollimation erfüllt, was den technischen Aufwand für die Beleuchtung und auch deren Platzbedarf deutlich erhöht. Die vorgestellten Ausführungen der Beleuchtung sind für große Aufnahmeflächen für mehr als einen oder zwei Finger nicht oder nur mit erheblichem Aufwand realisierbar.
- Ein weiteres Konzept für eine flache Bauweise ohne abbildende Optik wird im Patent
US 7 366 331 B2 beschrieben. Hierbei wird Licht seitlich mittels einer flächigen Beleuchtung in den Finger und von diesem auch zur aufliegenden Hautpartie gekoppelt. Der Finger befindet sich in Kontakt mit einer transparenten Schicht zwischen Finger und Sensor. Somit koppelt vorzugsweise Licht aus den Hautbergen in diese Schicht und kann somit vom Flächensensor detektiert werden. - Dieses Konzept bedingt Beleuchtungswellenlängen innerhalb des Transparenzbereichs des Fingers (von 600 nm bis hinein in den NIR- und IR-Bereich) und bringt erhebliche Umgebungslichtprobleme mit sich. Die vorgeschlagene Verwendung von Spektralfiltern mit transparentem IR-Fenster und IR-Beleuchtung reduziert diese Probleme, jedoch besteht dann eine geringere Empfindlichkeit üblicher Sensoren und höhere Absorption des Fingers, wodurch sich das Signal-Rausch-Verhältnis verschlechtert. Bei Verwendung schmalbandiger Spektralfilter muss entsprechend die Wellenlänge der Beleuchtung angepasst werden; dies erzeugt zusätzlichen Aufwand. Das Beleuchtungskonzept ist nicht für die Dokumentenaufnahme geeignet. Außerdem verursacht die seitliche Beleuchtung Probleme bei der Homogenität der Ausleuchtung, insbesondere verhindert sie die gleichzeitige Aufnahme mehrerer Finger, da diese sich gegenseitig abschatten würden. Somit ist dieses Konzept nur für die Aufnahme eines Fingers geeignet. Außerdem ist ein Lichtschild notwendig um zu verhindern, dass Anteile der Beleuchtung direkt in den Sensor gelangen. Die seitliche Beleuchtung und der Lichtschild vergrößern das Gerät und es wird aufwändiger, unflexibler und fehleranfälliger.
- In
WO 2015/005959 A1 wird ein weiteres Konzept zur abbildungslosen Aufnahme von Fingerabdrücken vorgestellt. Dieses verwendet eine spezielle transparente Schicht, die das von Objekten reflektierte Licht auf der dem Objekt zugewandten Seite einkoppelt und auf der gegenüberliegenden Seite wieder auskoppelt. Das ausgekoppelte Licht wiederum wird konventionell geometrisch abgebildet. Prinzipiell scheint die Aufnahme von Dokumenten mit diesem Konzept möglich. Die konventionelle Abbildung übernimmt bei diesem Konzept im Allgemeinen eine Kamera, die einen entsprechenden geometrischen Strahlengang bedingt, der die Mindestbaugröße des Gerätes im Wesentlichen beeinflusst. Die Beleuchtung kann hier per Projektion appliziert werden, hat dann aber weiteren wesentlichen Platzbedarf. Sie kann aber auch als zusätzliche Schicht unterhalb der oben genannten speziellen transparenten Schicht angebracht werden. In diesem Fall wird die Abbildung mit der Kamera durch diese Beleuchtungsschicht hindurch erfolgen, was aufgrund der für die Abbildung notwendigen Transparenz hohe Anforderungen an diese Beleuchtungsschicht stellt. Ein prinzipielles Problem des Konzepts stellt störendes Umgebungslicht dar, dem hier lediglich per Software (Abzug des Bildhintergrundes) entgegengewirkt wird. Ein Schutz vor Überbelichtung ist dadurch nicht gewährleistet. - Der Erfindung liegt die Aufgabe zugrunde, eine neue Möglichkeit zur optischen Direktaufnahme von Haut- und Dokumentenabdrücken mit der vorgegebenen Qualität nach FBI-Standard zu finden, bei der Störungen durch das Umgebungslicht ausgeschlossen und keine passiven Abschattungsmaßnahmen notwendig sind.
- Erfindungsgemäß wird die Aufgabe bei einer Vorrichtung zur optischen Direktaufnahme von sicherheitsrelevanten Objekten (ohne abbildende optische Elemente), mindestens je eines Objekts aus den Gruppen, Personaldokumente, Reisepässe, Führerscheine und Finger- oder Handabdrücke, enthaltend eine Auflagefläche für die Objekte, unter der eine Sensorschicht, die lichtempfindliche Elemente in einem zweidimensionalen regelmäßigen Pixelraster aufweist, angeordnet ist, dadurch gelöst, dass die Sensorschicht in einem Schichtkörper mit einer Elektronik auf Basis der Dünnschicht-Transistor-(TFT-)Technologie ausgeführt ist, dass sich die Sensorschicht auf einer mindestens im sichtbaren Wellenlängenbereich transparenten Trägerschicht befindet, dass die lichtempfindlichen Elemente der Sensorschicht einen Abstand zu dem aufzunehmenden Objekt auf der Auflagefläche von weniger als dem durch das Pixelraster definierten Pixelmittenabstand aufweisen, dass die lichtempfindlichen Elemente innerhalb der Sensorschicht über jeweils eine elektronische Steuereinheit zur Steuerung der Belichtungszeit verfügen und dass eine Lichtquelle als primäre Leuchtschicht so ausgebildet ist, dass mindestens Lichtanteile von der primären Leuchtschicht aus Richtung der Sensorschicht durch die Auflagefläche hindurch das aufzunehmende Objekt beleuchten können, wobei alle Schichten des Schichtkörpers, die sich zwischen primärer Leuchtschicht und Auflagefläche befinden, mindestens Lichtanteile im sichtbaren Wellenlängenbereich transmittieren.
- Vorteilhaft ist die Steuereinheit zur Steuerung der Belichtungszeit als Rolling-Shutter ausgebildet. Sie kann aber auch vorzugsweise als Global-Shutter realisiert sein.
- Die Steuereinheit zur Steuerung der Belichtungszeit ist zweckmäßig so ausgebildet, dass die Belichtungszeit von verschiedenen Pixeln oder Pixelgruppen (beispielsweise Zeilen oder Spalten) für dieselbe Aufnahme unterschiedlich einstellbar ist.
- Als primäre Leuchtschicht kann bevorzugt eine Kaltkathodenröhre oder eine Photolumineszenzfolie unter der Sensorschicht angeordnet sein.
- Die primäre Leuchtschicht kann des Weiteren eine Anordnung von zweidimensional regelmäßig angeordneten singulären Leuchtdioden aus der Gruppe LED, OLED, QLED enthalten, die unterhalb oder innerhalb der Sensorschicht angeordnet ist.
- Es erweist sich als vorteilhaft, wenn die primäre Leuchtschicht ein erstes Wellenlängenspektrum aufweist und mindestens eine sekundäre Leuchteinheit mit mindestens einem zweiten, mit dem ersten Wellenlängenspektrum nicht identischen Wellenlängenspektrum alternativ zur primären Leuchtschicht einschaltbar ist, um mindestens ein Vergleichsbild für eine Fälschungserkennung bei Finger- oder Handabdruckaufnahmen oder eine Verifizierung von Sicherheitsmerkmalen bei Dokumentenaufnahmen bei jeweils unterschiedlichen Vergleichswellenlängen aufzunehmen.
- In einer besonders bevorzugten Ausführung ist die primäre Leuchtschicht durch ein lichtabstrahlendes Display eines mobilen Kommunikationsgerätes aus der Gruppe Smartphone, Tablet-Computer, Laptop ersetzt, auf das die transparente Trägerschicht des Schichtkörpers aufgelegt ist.
- Zusätzlich zur primären Leuchtschicht in Form des Displays des mobilen Kommunikationsgerätes ist die sekundäre Leuchteinheit vorteilhaft zwischen primärer Leuchtschicht und Auflagefläche des Schichtkörpers vorhanden und enthält zweckmäßig mindestens eine Lichtquelle aus der Gruppe, LED, OLED, mindestens eine Lichtleitschicht, wobei die sekundäre Leuchteinheit für das Licht des Displays des mobilen Kommunikationsgerätes weitgehend transparent ist.
- Ferner wird die Aufgabe bei einer Vorrichtung zur optischen Direktaufnahme von sicherheitsrelevanten Objekten mindestens eines Objekts aus der Gruppe Einzelfinger-, Mehrfinger- oder Handabdrücke, enthaltend eine Auflagefläche für die Objekte, unter der eine Sensorschicht, die lichtempfindliche Elemente in einem zweidimensionalen regelmäßigen Pixelraster aufweist, angeordnet ist, dadurch gelöst, dass die Sensorschicht in einem Schichtkörper mit einer Elektronik auf Basis der Dünnschicht-Transistor-(TFT-)Technologie ausgeführt ist, dass die lichtempfindlichen Elemente der Sensorschicht einen Abstand zu dem aufzunehmenden Objekt auf der Auflagefläche von weniger als dem durch das Pixelraster der Sensorschicht definierten Pixelmittenabstand aufweisen, und dass die lichtempfindlichen Elemente innerhalb des Pixelrasters über jeweils eine elektronische Steuereinheit zur Steuerung der Belichtungszeit verfügen.
- Des Weiteren wird die Aufgabe durch ein Verfahren zur Erzeugung von optischen Direktaufnahmen ohne optisch abbildende Elemente mit verbessertem Kontrast und / oder verbesserter Dynamik von mindestens je einem sicherheitsrelevanten Objekt aus den Gruppen Personaldokumente, Reisepässe oder Führerscheine und Einzelfinger-Mehrfinger- oder Handabdrücke, durch folgende Schritte gelöst:
- Auflegen des Objektes (102, 118),
- Aufnahme eines Bildes mit einer vordefinierten Belichtungszeit und Speicherung des Bildes,
- Analyse des Bildes mindestens hinsichtlich Über- oder Unterbelichtung,
- Ändern der Belichtungszeit, wenn die Analyse eine Über- oder Unterbelichtung festgestellt hat, durch Änderung der Shuttereinstellung der lichtempfindlichen Elemente (104) in der Sensorschicht (105),
- erneute Bildaufnahme, Bildspeicherung und Bildanalyse auf Über- oder Unterbelichtung, ob eine weitere Iteration zu Änderung der Belichtungszeit notwendig ist, und
- Speichern der Bildaufnahme als Ergebnisbild, wenn die Bildanalyse keine weitere Änderung der Belichtungszeit erforderlich macht.
- Vorteilhaft wird in der Bildanalyse zusätzlich die Beleuchtungsstärke bewertet und beim Feststellen einer Unter- oder Überbelichtung erfolgt eine Anpassung der Beleuchtungsstärke einer primären Leuchtschicht unterhalb einer Auflagefläche.
- Es erweist sich als zweckmäßig, das in der Bildanalyse zusätzlich die Homogenität der Bildausleuchtung bewertet und bei Feststellung einer lokalen Über- oder Unterbelichtung mindestens in Teilen der Bildaufnahme des Objekts eine weitere Bildaufnahme in Abhängigkeit von festgestellten Inhomogenitäten bei lokal angepasster Beleuchtungsstärke mittels einer primären Leuchtschicht vorgenommen wird, um die Inhomogenitäten zu reduzieren oder zu kompensieren.
- Ferner ist es vorteilhaft, das das Verfahren mehrfach bei Beleuchtung des Objekts mit unterschiedlichen Beleuchtungswellenlängen durchgeführt wird, wobei mehrere Bilder jeweils mit unterschiedlichem Spektralbereich und opimierter Belichtungszeit einzeln gespeichert und in einem weiteren Schritt mittels Bildbearbeitungsalgorithmen die mehreren einzelnen Bilder zu einem mehrfarbigen Gesamtbild überlagert werden.
- Das Verfahren lässt sich weiter vorteilhaft ergänzen, indem zusätzliche Bildaufnahmen im UV- und IR-Bereich für die Prüfung von Sicherheitsmerkmalen von Dokumenten aufgenommen und separat abgespeichert werden.
- Des Weiteren ist es zweckmäßig, wenn zusätzliche Bildaufnahmen bei Beleuchtung mit schmalbandigen sekundären Leuchteinheiten in unterschiedlichen Spektralbereichen zur Fälschungsprüfung von Finger- oder Handabdrücken aufgenommen, als Vergleichsbilder gespeichert und untereinander oder mit Referenzaufnahmen verglichen werden.
- Die Aufgabe wird ferner gelöst durch ein Verfahren zur Erzeugung von optischen Direktaufnahmen ohne abbildende optische Elemente mit verbessertem Kontrast und / oder verbesserter Dynamik von mindestens je einem sicherheitsrelevanten Objekt aus den Gruppen Personaldokumente, Reisepässe oder Führerscheine und Finger- oder Handabdrücke, mit den folgenden Schritten:
- Auflegen des Objektes,
- Aufnahme und Speicherung von mindestens zwei Bildern mit unterschiedlicher Belichtungszeit und
- Überlagerung der Bilder, um ein kontrastverbessertes oder dynamikbereichverbessertes Ergebnisbild zu errechnen.
- Der grundlegende Erfindungsgedanke fußt auf dem Grundproblem, dass bei der optischen Aufnahme von Fingerabdrücken, insbesondere mittels direkter optischer Verfahren, die ohne optisch abbildende Elemente auskommen, ein zumeist störender Einfluss des Umgebungslichts auftritt und die Aufnahme qualitativ verschlechtert oder verfälscht wird. Ohne externe Schutzvorrichtungen bzw. Schutzschilde gelangt das Umgebungslicht ungehindert durch die Auflagefläche auf den Sensor, was in der Regel zur Überbelichtung mindestens um die aufgelegten Hautbereiche herum führt, aber auch an deren Rändern. Da ein Großteil des Umgebungslichtspektrums die aufgelegten Autopodien passiert, können auch innerhalb des aufgelegten Hautbereiches, je nach Umgebungslichtsituation, Überbelichtungen stattfinden. Eine Möglichkeit, diesem Problem zu begegnen, ist der Einsatz spektraler Filter zwischen Auflagefläche und Sensorarray, um das Beleuchtungsspektrum einzuschränken (
US 2004/0252867 A1 ). Die zusätzliche Aufnahme von Personaldokumenten wäre mit demselben Sensorarray somit nur noch in diesem eingeschränkten Wellenlängenbereich möglich. Ein mit dem visuellen Eindruck vergleichbares Farbbild eines Dokumentes ist bei einem solchen Konzept unmöglich. Auch die Detektion von Sicherheitsmerkmalen, die eine Beleuchtung und / oder Detektion auch im UV- und IR-Wellenlängenbereich verlangen, ist in diesem Fall nicht möglich. - Konzept der Erfindung ist es deshalb, eine Vorrichtung, enthaltend ein Sensorarray, basierend auf TFT-Technologie (vgl.
WO 2012/067409 A3 ,US 6 952 022 B2 ,US 7 442 588 B2 ) und zur adaptiven Belichtungszeitregulierung, enthaltend eine Shuttertechnologie, zur Detektion von Autopodien und Dokumenten zu verwenden. Elektronische Shutter sind hauptsächlich aus der CMOS-Technologie bekannt (vgl.US 8 569 671 B2 ), aber auch bereits für TFT-Technologie bekannt (vgl.US 7 769 252 B2 ) und entsprechen dem Stand der Technik. - Störende Einflüsse durch Umgebungslicht werden durch eine aktive Belichtungszeitkontrolle im Sensorelement verhindert. Dabei regeln elektronische Shutter die Belichtungszeit für die Sensorelemente, so dass einer Überbelichtung durch das Umgebungslicht entgegengewirkt werden kann. Optische Elemente zur Reduzierung der spektralen Bandbreite, wie sie bei optischen Direkt-Scannern, also ohne konventionelle optische Abbildung arbeitenden Sensorarrays, gegen störendes Umgebungslicht eingesetzt werden, sind somit nicht mehr notwendig, sodass über einen breiten Spektralbereich Licht detektiert werden kann. Dadurch wird neben der Aufnahme von Hautabdrücken auch die vollfarbige Aufnahme von Dokumenten möglich. Zusätzlich wird die Fälschungserkennung von Autopodien und Dokumenten durch die Detektierbarkeit im gesamten sichtbaren Wellenlängenspektrum, sowie im UV- und im IR-Bereich, erheblich erleichtert.
- Neben dem Ausschluss von Störungen durch das Umgebungslicht kann dieses ausschließlich oder zusätzlich durch die aktive Belichtungskontrolle gezielt zur Aufnahme von Hautabdrücken lebender Autopodien genutzt werden. Die Nutzung von Umgebungslicht als Beleuchtungsquelle zur Detektion von Fingerabdrücken ist konzeptionell bereits in
US 2013/0119237 A1 vorgeschlagen. Allerdings koppelt hier das Umgebungslicht in einen Bereich neben den aufgelegten Fingern ein und wird durch spiegelnde und lichtleitende optische Elemente in die Schicht zwischen der Auflagefläche und einer Sensorschicht geführt. Um mit diesem Konzept einerseits eine hinreichend homogene Ausleuchtung und andererseits eine qualitativ hochwertige Bildgebung durch dieses Lichtleitelement hindurch zu erreichen, bedarf es einer sehr komplizierten und aufwändigen Ausführung des Lichtleitelements. Abstriche bei der Aufnahmequalität des Fingerabdrucks sind nicht vermeidbar. Außerdem gibt es bei dieser Anordnung keinen hinreichenden Schutz vor Überbelichtung des Sensors. - Der erfindungsgemäße Direktsensor weist, verglichen mit herkömmlichen Kamerasensoren, sehr große lichtempfindliche Bereiche auf und nutzt außerdem alle im Umgebungslicht zur Verfügung stehenden Wellenlängenanteile aus, bei denen er sensitiv ist, und es gibt keine Spektralfilter, die das Wellenlängenspektrum einschränken. Beide Eigenschaften bewirken, dass der Sensor schon bei geringer Lichtintensität betrieben werden kann. Damit sind stromsparende, kleine und leichte mobile Systeme möglich. Eine zusätzliche künstliche Beleuchtung könnte in diesem Szenario allein durch die Hintergrundbeleuchtung eines zusätzlichen mobilen Gerätes, wie Smartphone oder Tablet, gegeben sein. Ebenso möglich ist der gänzliche Verzicht auf zusätzliche künstliche Lichtquellen bei der Aufnahme von lebenden Hautabdrücken von Autopodien. Im Gegensatz zur vorgenannten
US 2013/0119237 A1 werden hier Lichtanteile genutzt, die durch den Finger hindurch gelangen, sodass zusätzliche Lichtleitelemente nicht nötig sind. Die Sensorschicht kann sich daher hier in geringerem Abstand zur Auflagefläche befinden und somit verspricht die erfindungsgemäße Vorrichtung eine höhere Bildqualität. Außerdem beinhaltet sie durch die aktive und adaptive Regelung der Belichtungszeit eine Gegenmaßnahme zur Vermeidung von Überbelichtung. - Die Erfindung soll nachstehend anhand von Ausführungsbeispielen näher erläutert werden. Die Zeichnungen zeigen:
- Fig. 1a-b
- eine Prinzipdarstellung des grundsätzlichen Aufbaus der Vorrichtung (a) in Draufsicht und (b) in einer seitlichen Ansicht, die den Schichtaufbau zeigt,
- Fig. 2
- das der Erfindung zugrunde liegende optische Prinzip zur kontrastreichen detaillierten Aufnahme von Hautabdrücken,
- Fig. 3a-b
- eine Darstellung der prinzipiellen Lichtwege von Umgebungslicht und Licht einer primären Lichtquelle von (a) einem lebenden Autopodium und (b) einem Dokument als alternativ aufzulegende Aufnahmeobjekte,
- Fig. 4
- eine typische CTF als Funktion der Ortsauflösung (LP/mm) für verschiedene Abstände zwischen dem Aufnahmeobjekt und den lichtempfindlichen Elementen,
- Fig. 5
- das prinzipielle Verfahren, um mit der erfindungsgemäßen Vorrichtung ein Bild mit optimierter Belichtungszeit aufzunehmen,
- Fig. 6
- ein Ausführungsbeispiel der Erfindung zur Realisierung einer elektronischen Belichtungszeiteinstellung,
- Fig. 7a-c
- Ausführungsbeispiele mit verschiedenen homogenen Beleuchtungsvorrichtungen,
- Fig. 8a-f
- Ausführungsbeispiele mit verschiedenen Beleuchtungsvorrichtungen, die pixelweise oder bereichsweise geschaltet werden können,
- Fig. 9a-c
- ein bevorzugtes Ausführungbeispiel mit LCD als Beleuchtung, wobei ein Teilbereich des LCD mit dem erfindungsgemäßen Sensor bedeckt ist,
- Fig. 10
- ein bevorzugtes Verfahren, bei dem zur Bildaufnahme neben der Belichtungszeit auch das Beleuchtungsmuster und die Beleuchtungsstärke angepasst werden,
- Fig. 11a-b
- ein bevorzugtes Ausführungsbeispiel, bei dem neben der primären Leuchtschicht für Wellenlängen im sichtbaren Spektralbereich eine zusätzliche sekundäre Leuchteinheit für weitere Wellenlängenbereiche angeordnet ist (z. B. für Bereich im UV oder IR),
- Fig. 12
- ein bevorzugtes Verfahren, bei dem zusätzlich zur Bildaufnahme mit optimaler Belichtungszeit eine weitere Bildaufnahme zur Fäschungserkennung durchgeführt wird, und
- Fig. 13a-d
- ein bevorzugtes Ausführungsbeispiel für die Nutzung eines mobilen Kommunikationsgerätes als Beleuchtung und Kommunikationsgerät - (a) Tablet-Computer in einer Draufsicht mit aufgelegter erfindungsgemäßer Vorrichtung und (b) in einem Querschnitt sowie (c) Smartphone in einer Draufsicht mit aufgelegter erfindungsgemäßer Vorrichtung und (d) in einem Querschnitt.
- Das grundlegende Design einer Vorrichtung zur Aufnahme von Abdrücken von durchbluteten Hautbereichen menschlicher Autopodien 102 oder Teilen davon sowie zur multispektralen Aufnahme von Dokumenten 118, wie Identitätskarten oder Personalausweisen, ist in
Fig. 1 in zwei Teilabbildungen (Fig. 1a und Fig. 1b ) dargestellt. -
Fig. 1a zeigt eine Draufsicht auf eine Vorrichtung zur Aufnahme von solchen Abdrücken und Dokumenten 118. In dieser Ansicht sind eine Auflagefläche 103 und ein Rahmen 902 zu sehen. Diese Ansicht ist auch die, die ein Anwender der Vorrichtung hauptsächlich sieht. Die Auflagefläche 103 ist im Allgemeinen die Grenzfläche einer Schutzschicht 117, die die darunter liegenden elektronischen Komponenten einer Sensorschicht 105 vor Schmutz und Kratzern schützt. Der Anwender legt seine aufzunehmenden Autopodien 102 oder Dokumente 118 zur Aufnahme auf die Auflagefläche 103. -
Fig. 1b ist ein Teil eines Schnittes durch die einen Schichtkörper 100 enthaltende Vorrichtung. Die Oberseite des Schichtkörpers 100 mit der Schutzschicht 117 bildet die Auflagefläche 103. Letztere ist die obere Grenzfläche der Schutzschicht 117. - Auf der anderen Seite der Schutzschicht 117, der Auflagefläche 103 abgewandt, befindet sich die Sensorschicht 105. Diese enthält lichtempfindliche Elemente 104, die in einem ersten regelmäßigen Pixelraster angeordnet sind. Die lichtempfindlichen Elemente 104 sind beispielsweise Photodioden, die innerhalb der Sensorschicht 105 durch eine elektronische Verschaltung, beispielsweise durch TFT-Technologie, auslesbar sind und zusätzliche Elektronik zur Steuerung der Belichtungszeit aufweisen. Unterhalb der Sensorschicht 105, also auf der der Auflagefläche 103 abgewandten Seite, befindet sich eine zumindest im sichtbaren Wellenlängenbereich transparente Trägerschicht 701. Das Material dieser Schicht ist beispielsweise Glas oder ein transparenter Kunststoff. Sie ist im Allgemeinen das Substrat, auf dem die elektronischen Komponenten des Sensors, wie beispielsweise die lichtempfindlichen Elemente 104 und deren Elektronik zum Auslesen und zum Steuern der Belichtungszeit, appliziert wurden und ist somit mit der Sensorschicht 105 direkt verbunden. Wiederum unterhalb dieser transparenten Trägerschicht 901 befindet sich die primäre Leuchtschicht 700. Sie sendet Licht im sichtbaren Wellenlängenbereich aus und sorgt damit dafür, das das Objekt, das auf die Auflagefläche 103 aufgelegt wurde, zur Bildaufnahme beleuchtet wird. Das Wellenlängenspektrum, das in dieser primären Leuchtschicht 700 erzeugt wird, ist idealerweise passend zur spektralen Empfindlichkeit der lichtempfindlichen Elemente 104 in der Sensorschicht 105 ausgebildet. Wesentliche Anteile der Beleuchtung 114 der primären Leuchtschicht 703 gelangen durch die transparente Trägerschicht 701, durch die Sensorschicht 105 sowie durch die Schutzschicht 117 und die Auflagefläche 103 hindurch, so dass sie das Objekt zur Bildaufnahme beleuchten können.
- Die Vorrichtung gemäß der Erfindung, wie in
Fig. 1a und 1b im Grundaufbau gezeigt, und das zugehörige Verfahren zeichnen sich durch eine Kombination mehrerer optischer Direkt-Aufnahmen bei jeweils verschiedenen Beleuchtungseinstellungen aus. Die Dynamik und das Signal-Rausch-Verhältnis (SNR) lassen sich damit zusätzlich erhöhen. Diese Bildverbesserungen und die mögliche alleinige Nutzung des Umgebungslichts zur Beleuchtung eines Aufnahmeobjekts sind vornehmlich für die Aufnahme von Hautbereichen relevant, da Dokumente 118 im Allgemeinen das Umgebungslicht komplett abschirmen und gezielte bzw. spezielle Beleuchtungsarten benötigen. - Im Grundmodus wird das Sensorarray mit einer festen Wiederholrate ausgelesen. Dadurch ergibt sich die Integrationszeit für jedes der lichtempfindlichen Elemente 104, also jenes Zeitintervall, in dem jedes der lichtempfindlichen Elemente 104 das Licht integrierend aufnimmt. Durch eine Belichtungszeitsteuerung, die im einfachsten Fall durch einen zusätzlichen Transistor in der Pixelschaltung realisiert wird, ist es möglich, jedes Pixel vor Ablauf dieser Integrationszeit auszulesen. Somit kann bei einer festen Bildwiederholrate die Empfindlichkeit des Sensors je nach Situation eingestellt werden.
- Unterschiedliche Situationen für einen kombinierten Hautabdruck- und Dokument-Aufnahmesensor sind:
- (i) das Aufnehmen und Auslesen von kontrastreichen Hautabdruckbildern (hier addiert sich das Umgebungslicht zur optional aus der Vorrichtung bereitgestellten "künstlichen" Beleuchtung),
- (ii) das farbige Aufnehmen und Auslesen von Dokumenten 118 geschieht durch mehrere Aufnahmen bei unterschiedlichen Wellenlängenbereichen, die verschiedenen Wellenlängenbereiche werden durch die in der Vorrichtung befindliche Beleuchtung bereitgestellt, Aufnahmen verschiedener Wellenlängenbereiche werden optional per Software zu einem Farbbild gewichtet überlagert,
- (iii) das (bei definierten Wellenlängen) multispektrale Aufnehmen und Auslesen von Sicherheitsmerkmalen von Dokumenten 118, wobei das Dokument 118 dabei beispielsweise im IR- und/ oder UV-Bereich beleuchtet wird und hierbei die Sensitivität des Sensors in Abhängigkeit von seiner spektralen Empfindlichkeit und der spektralen Beleuchtungsintensität angepasst werden muss,
- (iv) das bei unterschiedlichen Wellenlängen schmalbandige Aufnehmen und Auslesen von Hautabdruckbildern zur Lebenderkennung (Anti-Spoofing), bei dem die unterschiedliche Sensitivität des Sensors und die unterschiedliche Beleuchtungsstärke der Lichtquelle(n) kompensiert werden müssen.
- Zusätzlich zu den vorstehend erwähnten unterschiedlichen Aufnahmeanforderungen spielt die Umgebungslichtsituation eine entscheidende Rolle, die vorzugsweise bei jeder Einzelaufnahme von Hautabdrücken in einer vorgeschalteten Kalibrierbildaufnahme erfasst und entsprechend berücksichtigt werden muss. Das kann einerseits durch Ausnutzung des Umgebungslichts oder andererseits durch Unterdrückung oder Kompensation mittels der shuttergesteuerten Belichtungszeitanpassung erfolgen.
-
Fig.2 zeigt das der Erfindung zugrunde liegende Prinzip zur Erzeugung einer kontrastreichen Aufnahme von Handabdruckdetails mit einem Kontrast > 0,4. Ein Autopodium 102 kontaktiert die Auflagefläche 103 im Bereich 116. Lichtanteile der Beleuchtung 114 der primären Leuchtschicht 700 gelangen durch die transparente Trägerschicht 701, durch die Sensorschicht 105, durch die Schutzschicht 117 und durch die Auflagefläche 103 hindurch. - Ein Beleuchtungsanteil 114a des Beleuchtungslichts 114 aus der primären Leuchtschicht 700 dient der Beleuchtung der Hautberge, koppelt über die Hautberge (Papillarlinien) in die Haut ein und erzeugt (i) über die Hautberge eingekoppeltes Streulicht 107a, das vorwärts streut und nicht direkt von den lichtempfindlichen Elementen 104 der Sensorschicht 105 detektiert wird, und (ii) einen in den Hautbergen gestreuten detektierten Beleuchtungsanteil 113a, der rückwärts streut, aus der Haut auskoppelt, durch die Auflagefläche 103 und die Schutzschicht 117 in die Sensorschicht 105 gelangt und dort von den lichtempfindlichen Elementen 104 detektiert wird.
- Ein anderer Beleuchtungsanteil 114b des Beleuchtungslichts 114 aus der primären leuchtschicht 700 dient der Beleuchtung der Hauttäler und erzeugt (i) über das Hauttal eingekoppeltes Streulicht 107b, das vorwärts gestreut und nicht von den lichtempfindlichen Elementen 104 detektiert wird, und (ii) einen im Hauttal gestreuten und nicht detektierten Beleuchtungsanteil 113b, der im Bereich des Hauttals (Papillarkörperreihe) rückwärts gestreut wird, aus der Haut ausgekoppelt und an anderer Stelle aufgrund des Auskoppelwinkels und der Geometrie des Hauttals wieder einkoppelt und somit nicht direkt von den lichtempfindlichen Elementen 104 detektiert wird und (iii) einen im Hauttal gestreuten und detektierten Beleuchtungsanteil 113c, der im Hauttal rückwärts gestreut wird, aus der Haut in das Luftvolumen, das das Hauttal und die Auflagefläche 103 umschließen, auskoppelt, durch die Auflagefläche 103 und die Schutzschicht 117 in die Sensorschicht 105 gelangt und dort durch die lichtempfindlichen Elemente 104 detektiert wird.
- Ein Anteil des über einen Hautberg eingekoppelten Streulichts 107a davon dient der Beleuchtung der Hautberge und Anteile des über ein Hauttal eingekoppelten Streulichts 107b werden hauptsächlich vorwärts gestreut und gelangen nicht mehr in Richtung der Sensorschicht 105 aus der Haut heraus. Andere Anteile des in den Hautbergen gestreuten Lichtes 113a werden rückwärts gestreut, koppeln aus der Haut aus, gelangen durch die Auflagefläche 103 und die Schutzschicht 117 in die Sensorschicht 105 und werden dort von den lichtempfindlichen Elementen 104 detektiert. Da die Haut und die Schutzschicht 117 ähnliche Brechzahlen haben, gibt es bei diesem Grenzübergang kaum Reflexionen. Ein weiterer Anteil des in den Hauttälern gestreuten Lichtes 113b wird rückwärts gestreut, koppelt aus der Haut aus und an anderer Stelle, aufgrund des Auskoppelwinkels und der Geometrie des Hauttales, wieder ein. Dieser Lichtanteil 113b kann also nicht direkt in der Sensorschicht 105 detektiert werden. Ein letzter Anteil des rückwärts im Hauttal gestreuten Lichtes 113c koppelt aus der Haut aus in das Luftvolumen, das das Hauttal und die Auflagefläche 103 umschließen. Dieser Lichtanteil 113b gelangt dann durch die Auflagefläche 103 und die Schutzschicht 117 in die Sensorschicht 105.
- Bei den Grenzübergängen zwischen der Haut des Hauttals und dem Luftvolumen im Hauttal sowie beim Grenzübergang zwischen dem Luftvolumen im Hauttal und der Schutzschicht 117 entstehen aufgrund der unterschiedlichen Brechzahlen von Haut (rund 1,5), Luft (rund 1,0) und der Schutzschicht 117 (rund 1,5) Reflexionen. Diese Reflexionen im Hauttal sowie der gestreute und nicht detektierte Beleuchtungsanteil 113b, bewirken, dass der in den Hautbergen gestreute detektierte Beleuchtungsanteil 113a wesentlich größer ist, als der in den Hauttälern gestreute und detektierte Beleuchtungsanteil 113c. Das gesamte Streuproblem ist für verschiedene Brechzahlen der Schutzschicht 117 und Wellenlängen der primären Leuchtschicht 700 berechnet. Es ergibt sich für den gesamten optischen Wellenlängenbereich ein Kontrast zwischen Hautberg und Hauttal von 0,5 (+/- 0,1).
-
Fig. 3a zeigt die prinzipielle Funktionsweise der erfindungsgemäßen Vorrichtung zur Aufnahme von Hautabdruckbildern lebender Autopodien 102 unter Einwirkung von Umgebungslicht 101. - Der vom Objekt kontaktierte Bereich 116 der Auflagefläche 103 ist hier der aufzunehmende Hautbereich eines Autopodiums 102.
- Das Beleuchtungslicht 114 der primären Leuchtschicht 700 erzeugt in der Haut gestreutes Licht der Beleuchtung 107. Der rückwärts gestreute Anteil des Beleuchtungslichts 113, der detektiert wird, gelangt durch die Auflagefläche 103 und die Schutzschicht 117 in die Sensorschicht 105 und wird dort von den lichtempfindlichen Elementen 104 detektiert. Details zur kontrastreichen Bildaufnahme von Hautabdruckdetails sind im Text zur
Fig. 2 beschrieben. - Neben dem Beleuchtungslicht 114 der primären Leuchtschicht 700 werden die Autopodien 102 durch das Umgebungslicht 101 beleuchtet. Anteile 106 des Umgebungslichts 101 mit Wellenlängen kleiner als 600 nm erzeugen gestreutes Umgebungslicht 115 mit Wellenlängen kleiner als 600 nm und werden schon kurz nach dem Eindringen in die Haut absorbiert. Die Eindringtiefe für Licht mit Wellenlängen < 600 nm beträgt je nach spezieller Wellenlänge teilweise deutlich weniger als 0,5 mm.
- Lichtanteile im sichtbaren Spektralbereich > 600 nm werden in Haut und Gewebe bei wesentlich geringerer Absorption gestreut. Die Eindringtiefe für sichtbares Licht mit Wellenlängen größer als 650 nm ist je nach Wellenlänge bis zu 0,3 cm. Somit können Anteile 108 des Umgebungslichtes 101 mit Wellenlängen größer als 600 nm, die gestreutes Umgebungslicht 110 mit Wellenlängen größer als 600 nm erzeugen, teilweise durch das aufgelegte Autopodium 102 gelangen und anteilig die Auflagefläche 103 und die Schutzschicht 117 passieren und in die Sensorschicht 105 gelangen und von den lichtempfindlichen Elementen 104 detektiert werden.
- Einer Überbelichtung bei zu großer Intensität des Umgebungslichtes 101 (z. B. bei direkter Sonneneinstrahlung) wird durch die elektronisch regulierbare Belichtungszeit in der Steuerung der lichtempfindlichen Elemente 104 in der Sensorschicht 105 entgegengewirkt.
- Die Belichtungszeit wird zur Erzielung der optimalen Bildqualität, insbesondere der optimalen Grauwertverteilung im Bild, angepasst.
-
Fig. 3b zeigt die prinzipielle Funktionsweise der erfindungsgemäßen Vorrichtung zur Aufnahme eines Dokuments 118 unter Einwirkung von Umgebungslicht 101. - Der vom Objekt kontaktierte Bereich 116 der Auflagefläche 103 ist hier der autzunehmende Bereich des Dokumentes 118.
- Befindet sich auf der Auflagefläche 103 ein Dokument 118, so erzeugt das Beleuchtungslicht 114 der primären Leuchtschicht 700 auf der der Auflagefläche 103 zugewandten Seite des Dokuments 118 gestreutes Licht der Beleuchtung 107. Der rückwärts gestreute Anteil des Beleuchtungslichts 113, der detektiert wird, koppelt durch die Auflagefläche 103 und die Schutzschicht 117 in die Sensorschicht 105 und wird dort von den lichtempfindlichen Elementen 104 detektiert. Rückwärtsstreuung bedeutet hier im Spezialfall auch spiegelnde Reflexion.
- Neben dem Beleuchtungslicht 114 durch die primäre Leuchtschicht 700 wird das Dokument 118 auch durch das Umgebungslicht 101 beleuchtet. Anteile 106 und 108 des Umgebungslichts 101 mit Wellenlängen kleiner als 600 nm und größer 600 nm erzeugen gestreutes Umgebungslicht 115 und 110 mit Wellenlängen kleiner als 600 nm und größer als 600 nm auf der der Auflagefläche 103 abgewandten Seite des Dokumentes 118. Die Eindringtiefe für Licht in typischen Materialen eines Dokuments 118, wie Papier oder Kunsstoff, ist so gering, dass typischerweise keine Anteile des Umgebungslichtes 101 durch das Dokument gelangen und von den lichtempfindlichen Elementen 104 detektiert werden können.
- Gelangen doch Anteile des Umgebungslichtes 101 durch das Dokument 118 hindurch, wird einer Überbelichtung bei zu großer Intensität des Umgebungslichtes 101 (z. B. bei direkter Sonneneinstrahlung) durch die elektronisch regulierbare Belichtungszeit in der Steuerung der lichtempfindlichen Elemente 104 in der Sensorschicht 105 entgegengewirkt.
- Die Belichtungszeit zur Erzielung der optimalen Bildqualität, insbesondere der optimalen Grauwertverteilung im Bild, wird angepasst.
- Die Direktaufnahme von Hautabdrücken lebender Autopodien 102 und Dokumenten 118 wird ohne abbildende Elemente hochauflösend unter der Bedingung ausgeführt, dass der Abstand zwischen Auflagefläche 103 und lichtempfindlichen Elementen 104 der Sensorschicht 105 kleiner ist als der durch das Pixelraster definierte Pixelmittenabstand. Dieses Kriterium ist notwendig, da sich aufgrund der Ausbreitung des Lichts zwischen Auflagefläche 103 und Sensorschicht 105 die CTF mit größer werdendem Abstand verschlechtert.
-
Fig. 4 zeigt beispielhaft die CTF für 20 µm Abstand 501, 40 µm Abstand 502 und 60 µm Abstand 503. Auf der Abszisse ist die Ortsauflösung in Linienpaare pro Millimeter (LP/mm) aufgetragen, auf der Ordinate ist der Kontrast (Michelson-Kontrast) aufgetragen. Die FBI-Anforderungen 504 bezüglich CTF an ein 500-ppi-System sind ebenfalls dargestellt. Ein 500-ppi-System bedingt nach dem Nyquist-Theorem eine Periode, als einen Pixelmittenabstand, von mindestens 50,8 µm. Setzt man diesen Wert als Abstand zwischen Auflagefläche 103 und Sensorschicht 105 an, so können die FBI-Anforderungen 504 nicht mehr erfüllt werden. Es muss also gelten: der Abstand zwischen Auflagefläche 103 und den lichtempfindlichen Elementen 104 in der Sensorschicht 105 muss kleiner sein als der Pixelmittabstand. -
Fig. 5 zeigt das prinzipielle Verfahren zur Aufnahme eines sicherheitsrelevanten Objektes, wie eines Hautabdruckes eines lebenden Autopodiums 102 oder eines Dokumentes 118. Das Gerät befindet sich vor Beginn im Ruhemodus. Das Verfahren beginnt mit dem Start, die Vorrichtung schaltet dabei in den Bereitschaftsmodus. Dies kann automatisch durch Annäherungsdetektion oder auch manuelle Eingabe erfolgen. Nach dem Auflegen des Objektes auf die Auflagefläche 103 schaltet die Vorrichtung automatisch durch Detektion des Kontaktes zwischen Objekt und Auflagefläche 103 oder durch manuelle Eingabe in den Aufnahmemodus und die Bildaufnahme erfolgt. Dabei wird das Signal der lichtempfindlichen Elemente 104 ausgelesen. Die lichtempfindlichen Elemente 104 sind beispielsweise mittels TFT-Technologie (TFT, Thin Film Transistor) gesteuert und werden mit Hilfe weiterer integrierter Elektronik ausgelesen. Die darauf folgende Bildspeicherung verschiebt die ausgelesenen Daten in einen lokalen, innerhalb der Vorrichtung ausgebildeten Speicher oder aber über eine Computerschnittstelle, wie beispielsweise USB, oder auch eine drahtlose Verbindung, wie bespielsweise Bluetooth oder WLAN, in einen Speicher, der sich in einem externen Computer oder einem Mobilgerät, wie bespielsweise einem Tablet-Computer oder Smartphone, befindet. Als nächstes wird das aufgenommene und abgespeicherte Bild analysiert. Dies geschieht entweder innerhalb der Vorrichtung durch beispielsweise mindestens eine interne Recheneinheit (beispielsweise frei programmierbare Logikschaltung (FPGA), Signalprozessor, Mikrokontroller). Bei der Bildanalyse wird/werden ein oder mehrere Parameter bestimmt einerseits Aussagekraft über die Qualität der Aufnahme liefern und sich andererseits sich durch Anpassung der Belichtungszeit verändern. Beispielsweise lässt sich aus der Grauwertverteilung ein solcher Paramter erzeugen, bespielsweise über ein Grauwert-Histogramm. Sind die Grauwerte im Bild im Wesentlichen unter einem bestimmten Schwellwert verteilt, so ist das Bild unterbelichtet. Ist die Grauwerthäufigkeit bis zum Maximum ansteigend verteilt, so ist das Bild überbelichtet. Ein definierter Bereich dazwischen gilt als korrekte Belichtung. Dieser Sachverhalt kann auf einen oder mehrere Parameter abstrahiert werden. Es erfolgt die Abfrage, ob dieser Parameter im Intervall ist oder nicht. Befindet sich der Paramater im Intervall, war die Belichtungszeit also korrekt, wird das Verfahren mit Schritt "Ende" beendet. Die Vorrichtung schaltet aus dem Aufnahmemodus in den Bereitschaftsmodus, falls noch weitere Aufnahmen erfolgen sollen, oder in den Ruhemodus. Die Daten befinden sich weiterhin im Speicher und können weiter verwendet werden. - Wird die Abfrage "Paramter im Intervall?" mit nein beantwortet, so wird der Parameter verwendet, um eine neue Belichtungszeit zu berechnen. Ist das aufgenommene Bild beispielweise überbelichtet gewesen, so wird ein kleinerer Wert für die Belichtungszeit berechnet. Die so ermittelte neue Belichtungszeit wird an die Sensorelektronik übergeben und somit für die nächste Bildaufnahme geändert. Eine erneute Bildaufnahme, Bildspeicherung und Bildanalyse erfolgt. Typischerweise wird das zuvor aufgenommene Bild durch das neue Bild überschrieben. Falls nun der Parameter im Intervall ist, wird das Verfahren beendet, falls nicht, erfolgt eine weitere Iteration. Typischerweise wird ein Abbruchkriterium definiert. Dies beispielsweise kann das Verfahren nach einer bestimmten Anzahl von Iterationen beenden, auch wenn der Parameter im Intervall nicht erreicht wird. Der Benutzer kann dann die Information erhalten, dass die Qualitätsvorgabe nicht erreicht wurde.
- Das beschriebene Verfahren kann optional erweitert werden, sodass anstelle des Verfahrensschrittes 'Ende', die optimale Belichtungszeit eine weitere Berechnung übergeben wird, in der eine 'Liste' von mindestens zwei Belichtungszeiten die mindestens eine kürzere und eine längere Belichtungszeit als die vorher berechnete optimale Belichtungszeit bestimmt wird. Dann wird Belichtungszeit des Sensorschicht 105 auf den ersten Wert der 'Liste' eingestellt. Nachfolgend wird ein Bild aufgenommen und abgespeichert. Der erste Wert der 'Liste' wird gelöscht. Ist ein weiterer Wert auf der Liste so wird die Belichtungszeit erneut auf den neuen ersten Wert der Liste gesetzt. Es findet wieder Bildaufnahme und Speicherung statt. Bei der Speicherung werden die Bilder nicht überschreiben. Dieser Teil des Verfahrens dauert so lange, bis sich kein Wert mehr auf der Liste befindet und das letzte Bild abgespeichert ist. Die Bilder werden dann mittels eines Softwarealgorithmus überlagert, sodass ein Bild mit besonders hohem Dynamikumfang entsteht. Dieses Bild wird gespeichert und steht damit zur weiteren Verwenung zur Verfügung.
- Die im Verfahren in
Fig. 5 beschriebene Einstellung der Belichtungszeit erfolgt elektronisch, mit Hilfe von TFT-Technologie. Das lichtempfindliche Element 104 in der Sensorschicht 105 wird mittels Leitern und genannter TFT-Technologie gesteuert und ausgelesen. Im einfachsten Fall ist dazu ein Transisor für jedes lichtempfindliche Element 104 notwendig. Durch Hinzufügen eines weiteren Transistors zum Abtransport der Elektronen sowie der entspprechenden Verschaltung ist die einfachste Form der Belichtungszeitsteuerung, der sogenannte Rolling-Shutter, möglich. Der Rolling-Shutter ist ein Belichtungsverfahren, das gro ßtenteils in der CMOS-Sensortechnologie eingesetzt wird, sich aber auch für die TFT-Technologie eignet. Die Belichtung erfolgt im Unterschied zum Global-Shutter nicht als 'einmalige' zeitgleiche Belichtung, sondern in abgestufter Reihenfolge. Beim 'Auslo sen' werden die Zeilen nacheinander, also Zeile fu r Zeile, belichtet. Je nach Belichtungszeit kann es dabei zu U berlappungen kommen.Ist die letzte Bildzeile vollsta ndig belichtet, beginnt der na chste Bildeinzug wieder von vorne, bei der ersten Zeile. Durch die einfache Schaltung mit nur zwei Transistoren entsteht weniger Wa rme und Stromverbrauch (dies ist gerade bei mobilder Anwendung wichtig) und das Grundrauschen ist deutlich niedriger als beim Global-Shutter, dessen vier bis fünf Transistoren vergleichsweise hohes Grundrauschen und viel Wa rme produzieren. Andererseits entstehen beim Rolling-Shutter speziell bei bewegten Objekten oft Verzerrungen, die in bestimmten Anwendungen ein akzeptables Maß u berschreiten.Diese Verzerrungen entstehen dadurch, dass sich das Objekt beziehungsweise die Kamera in dem Zeitraum, in dem die zeilenweise Belichtung erfolgt, weiter bewegt. Beim Auslesen der Bilddaten werden die belichteten Zeilen in der gleichen Reihenfolge wieder zu einem Gesamtbild zusammengesetzt. Bedingt durch die zeitliche Verzo gerung beim Belichten der einzelnen Zeilen wird auch im zusammengesetzten Bild dieser zeitliche Versatz in Form von Verzerrungen sichtbar. Dieser Effekt wird als Rolling-Shutter-Effekt bezeichnet. Neben der Belichtungszeit spielt dabei auch die Geschwindigkeit des Sensors eine Rolle. Sie bestimmt, wie schnell die Zeilen o ffnen und wieder schließen. Bei einem schnellen Sensor mit einer Bildrate von maximal 60 Bildern pro Sekunde ist der Effekt geringer, als bei einem langsamen Sensor mit zum Beispiel maximal 15 Bildern pro Sekunde. Für das statische Aufnehmen von bespielsweise Fingerabdrücken oder Dokumenten werden die dynamischen Verzerrungen eines Rolling-Shutters keine Rolle spielen hingegen dessen Vorteil des geringen Grundrauschens überwiegen. Beim der Aufnahme abgerollter Fingerabdrückeist die Umsetzung der Belichtunszeitanpassung über einen Global-Shutter geeignet, da dies ein dynamischer Prozess ist und somit Verzerrungen auftreten könnten, die nicht tolerierbar sind. -
Fig. 6 zeigt ein bevorzugtes Ausführungsbeispiel für eine elektronische Schaltung eines Pixels in der Sensorschicht 105. Das lichtempfindliche Element 104 ist hier eine Photodiode. Zwei Transistoren sind dargestellt: ein Transistor schaltet die Photodiode entsprechend der Taktung, der andere Transistor führt eine zusätzliche Schaltung zum Auslesen durch und ermöglicht so eine Verkürzung des Zeitintervalls, in dem von der Photodiode Licht gesammelt wird, somit ist die Belichtungszeitsteuerung nach dem Rolling-Shutter-Prinzip realisiert. - Die Beleuchtung des Objektes 102 bzw 118 erfolgt über die in
Fig. 1 b gezeigte primäre Beleuchtungsschicht 703.Fig. 7a, Fig. 7b und Fig. 7c zeigen bevorzugte Ausführungsbeispiele, bei denen das Objekt mit einer möglichst homogenen Beleuchtung 114 beleuchtet wird. Diese homogene Beleuchtung 114 bildet die inFig. 1b gezeigte primäre Leuchtschicht 700. Das Objekt kann entweder ein Dokument 118 oder auch ein Autopodium 102 sein. Ist das Objekt ein Autopodium 102, so kann die Beleuchtung des Objektes auch ausschließlich durch das Umgebungslicht 101 erfolgen. Vor allem spektrale Anteile 108 des Umgebungslichts 101 mit Wellenlängen größer als 600 nm erzeugen bei üblichen Beleuchtungssituationen, beispielsweise bei direkter Deckenbeleuchtung im Raum oder direktem Sonnenlicht, einen hinreichend großen Anteil 112 des Umgebungslichtes 101, der detektiert wird. -
Fig. 7a zeigt ein bevorzugtes Ausführungsbeispiel, bei dem die primäre Leuchtschicht 700 des prinzipiellen Schichtaufbaus, bekannt ausFig. 1b , Photoluminiszenzfolie 702 enthält. -
Fig. 7b zeigt ein bevorzugtes Ausführungsbeispiel, bei dem die primäre Leuchtschicht 700 des prinzipiellen Schichtaufbaus, bekannt ausFig. 1b , eine Lichtleitschicht 706, bestehend aus LEDs oder OLEDs, und zusätzliche optische Elemente, wie Wellenleiter, optische Gitter, Spiegel und Diffusoren, enthält. Die zusätzlichen optischen Elemente verteilen das Licht der LEDs oder OLEDs möglichst homogen in der primären Leuchtschicht 700 und sorgen dafür, dass das Beleuchtungslicht 114 durch die primäre Leuchtschicht 700 die gesamte Auflagefläche 103 mit möglichst gleicher Intensität passiert. -
Fig. 7c zeigt ein bevorzugtes Ausführungsbeispiel, bei dem die primäre Leuchtschicht 700 des prinzipiellen Schichtaufbaus, bekanntFig. 1b , eine Hintergrundbelechtung ist, wie sie aus Flachbildschirmen bekannt ist, die ihr Licht mittels Kaltkathodenröhren 704 erzeugt. Diffusoren oder lichtleitende oder spiegelnde Elemente sind zur Homogenisierung und gerichteten Abstrahlung typerischerweise vorhanden. - Die Anpassung der Belichtungszeit dient in erste Linie dazu, bei zu großen Intensitäten des Umgebungslichts 101 die lichtempfindlichen Elemente 104 der Sensorschicht 105 weniger empfindlich zu stellen, um ihn so bei der Bildaufnahme nicht zu übersteuern, da bei einer Übersteuerung Bildinformationen verlorengehen.
- Durch die Anpassung der Belichtungszeit in Form von (i) strukturierter Beleuchtung und (ii) adaptiver Anpassung der Beleuchtungsstärke können die Resistenz gegen störende Einflüsse durch Umgebungslicht und Qualität der Bildaufnahme weiter erhhöht werden. Zusätzlich ist durch (iii) Anpassung der Beleuchtungsfarbe (wellenlängenbegrenzte Spektralbereiche) eine mehrfarbige Aufnahme von Objekten, insbesondere Farbbildaufnahmen bei Dokumenten möglich.
-
Fig. 8a bis 8f zeigen besonders bevorzugte Ausführungsbeispiele, bei denen das Objekt mit einer Beleuchtung 114 beleuchtet wird, die lokal an- und ausschaltbar ist. Dadurch ist strukturierte Beleuchtung möglich, die Fälschungserkennung erleichtern und die Bildqualität verbessern kann. Außerdem ermöglicht sie eine direkte Darstellung von Informationen auf der Auflagefläche 103 und somit eine intuitive und interaktive Benutzeroberfläche. - Diese lokal an- und ausschaltbare Leuchtschicht bildet die in
Fig. 1 b gezeigte primäre Leuchtschicht 700. Das Objekt kann entweder ein Dokument 118 oder auch ein Autopodium 102 sein. -
Fig. 8a, Fig. 8b, Fig. 8c und Fig. 8e zeigen jeweils die erfindungsgemäße Vorrichtung, bei der die strukturierte Beleuchtung durch eine in Transmission lokal schaltende Schicht 703, beispielsweise eine schaltbare Flüssigkristallschicht, realisiert wird. In diesem Fall ist eine homogene Hintergrundbeleuchtung notwendig, da die lokal schaltende Schicht 703 selbst kein Licht erzeugt. Diese Hintergrundbeleuchtung ist dabei unterhalb, also auf der der transparenten Trägerschicht 901 abgewandten Seite, der lokal schaltenden Schicht 703 angeordnet. - Die Hintergrundbeleuchtung kann wie in
Fig. 8a Photoluminiszenzfolie 702 oder wie inFig. 8b eine Lichtleitschicht 706, bestehend aus OLEDs oder LEDs und Strahlformungs- und Wellenleitelementen (vgl.Fig. 7b ), oder Kaltkathodenröhren 704 (vgl.Fig. 7c ) oder auch eine zweidimensionale aktive LED- oder OLED-Beleuchtungsanordnung 705 (sieheFig. 8d und 8e ) sein (z.B. eine Matrix). - In den Ausführungsbeispielen gezeigt in
Fig. 8d und Fig. 8f ist jeweils keine lokal schaltende Schicht 703 in Verbindung mit einer Hintergrundbeleuchtung notwendig. Hier besitzt die ein- und ausschaltbare Schicht 703 selbst leuchtende LED oder OLED-Elemente. -
Fig. 8d zeigt die primäre Leuchtschicht 700 umgesetzt als LED oder OLED-Matrix 705. -
Fig. 8f zeigt ein Ausführungsbeispiel, bei dem die primäre Leuchtschicht 700 als aktive LED oder OLED-Matrix 705 innerhalb der Sensorschicht 105 als kombinierte Sender-Empfängerschicht 105a ausgeführt ist. Die singulären Lichtquellen sind dabei in einem zweiten Raster versetzt zum Raster der lichtempfindlichen Elemente 104 angordnet. -
Fig. 9a, Fig. 9b und Fig. 9c zeigen ein besonders bevorzugtes Ausführungsbeispiel. Hierbei wird die primäre Leuchtschicht 700 durch eine lokal schaltende Schicht 703 in Verbindung mit einer Lichtleitschicht 706 realisiert, vgl. dazuFig. 8b . Dadurch ist einerseits eine direkte Darstellung von Informationen und eine interaktive und intuitive Benutzerinteraktion direkt auf der Auflagefläche 103 möglich, andererseits gibt es daneben eine reine Darstellungsfläche 906 zur zusätzlichen Darstellung von Informationen. Die Darstellungsfläche 906 lässt sich außerdem optional mit Touchfunktion beispielsweise zum Einlesen von Unterschriften ausstatten. -
Fig. 9b zeigt den Schichtaufbau der durch die Darstellungsfläche 906 abgeschlossen wird. Er besteht aus der Lichtleitschicht 706, der lokal schaltbaren Schicht 703, der Schutzschicht 117 und der Auflagefläche 103, besitzt also keine Sensorschicht 105.Fig. 9c zeigt den Schichtaufbau der durch die Auflagefläche 103 abgeschlossen wird (vgl.Fig. 8b ). -
Fig. 10 zeigt als bevorzugtes Ausführungsbeispiel ein Verfahren zur Aufnahme eines sicherheitsrelevanten Objektes, wie eines Hautabdruckes eines lebenden Autopodiums 102 oder eines Dokumentes 118, wobei zusätzlich zur Anpassung der Belichtungszeit (durch Steuerung der Shutterpixel ders Sensorschicht 105) das Beleuchtungsmuster (als 2D-Intensitätsverteilung) und die Beleuchtungsstärke (in Form der Gesamthelligkeit) angepasst werden können. Den prinzipiellen Verfahrensverlauf zeigtFig. 5 . Die zwei letztgenannten Anpassungen können optional und in beliebiger Reihenfolge ablaufen, idealerweise arbeiten sie mit der Belichtungszeitsteuerung zusammen und aufeinander abgestimmt, um das beste Ergebnis zu erhalten. Die optimierte Bildaufnahme kann iterativ stattfinden, vgl.Fig. 5 . - Die Anpassung des Beleuchtungsmusters setzt eine Vorrichtung mit lokal an- und ausschaltbarer Beleuchtung, wie in den Beispielen von
Fig. 8a-f gezeigt, voraus. Bei diesem Verfahren wird gezielt eine inhomogene Beleuchtung anwendet, um Inhomogenitäten im Bild, wie beispielsweise störende Effekte von inhomogenem Umgebungslicht 101, lokal zu kompensieren. Dazu wird aus dem gespeicherten Bild der Bildhintergrund berechnet. Unter Bildhintergrund versteht man dabei den Helligkeitsverlauf hinter den Detailstrukturen. Bei Fingerabdrücken bedeutet das, dass die Papillarlinien, beziehungsweise die feinen Abbildungen der Berge und Täler des Fingerabdrucks, aus dem Bild entfernt werden. Dazu kann beispielsweise ein Schließungsfilter, also eine Kombination aus Minimal- und Maximalfilter benutzt werden. Das Beleuchtungsarray hat im Allgemeinen zumindest eine andere Pixelzahl und einen anderen Helligkeitswertebereich als die Sensorschicht 105. Das gespeicherte Bild wird an die technischen Gegebenheiten der Beleuchtungsmatrix angepasst. Die Anpassung enthält beispielsweise Bildbearbeitungsalgorithmen wie Skalierung, Offset und Invertierung. Die spezielle Ausbreitungscharakteristik des Lichts in einem speziellen Objekt wird durch zusätzliche Algorithmen auf das Bild berücksichtigt. Nach Berechnung des Beleuchtungsmusters wird die primäre Beleuchtungschicht 703 mit diesem angesteuert, also das Beleuchtungsmuster angewendet. - Während die Anpassung der Belichtungszeit in erster Line dazu dient, bei zu großen Intensitäten des Umgebungslichtes 101 die lichtempfindlichen Elemente 104 der Sensorschicht 105 weniger empfindlich zu stellen, um sie so bei der Bildaufnahme nicht zu übersteuern, da bei der Übersteuerung Bildinformationen verloren gehen. Dagegen dient die Anpassung des Beleuchtungsmusters dazu, eine bessere Bildqualität zu erhalten, da damit der Bildhintergrund homogenisiert und der Bildinhalt nicht verfälscht wird.
- Die Anpassung der Beleuchtungsstärke ist im Unterschied zu den vorgenannten Qualitätsmerkmalen insbesondere bei niedrigen Intensitäten des Umgebungslichtes 101 vorgesehen. Falls beispielsweise die Belichtungszeit schon maximal eingestellt ist und das Grauwerthistogramm des gespeicherten Bildes dennoch eine Unterbelichtung zeigt, so kann die Beleuchtungsstärke insgesamt erhöht werden durch entsprechende Ansteuerung der primären Leuchtschicht 700.
- Die Anpassung der Beleuchtungsfarbe kann einerseits der Optimierung der Bildqualität dienen. Je nach Farbe des Objektes, also insbesondere anhand dessen spektraler Eigenschaften kann eine zur Bildaufnahme günstige Beleuchtungsfarbe eingestellt werden. Andererseits ist durch mehrere verschiedenfarbige Aufnahmen und deren Überlagerung eine Erzeugung echter Farbbilder möglich.
-
Fig. 10 zeigt den groben Verfahrensablauf, wobei bei der Überprüfung ,Parameter im Intervall' in diesem Falle zusätzlich zu den Bildoptimierungsparametern noch eine Liste mit Beleuchtungsfarben durchgegangen wird, deren erstes Listenelement nach jeder Bildaufnahme gelöscht wird, sodass am Ende mehrere Aufnahmen, die bei unterschiedlichen Spektralintervallen aufgenommen wurden, gespeichert sind. Diese Aufnahmen werden zum Schluss, durch gängige Softwarealgorithmen mit entsprechender Umrechnung auf die gewüschten Farbkanäle überlagert, sodass ein echtes Farbbild entsteht. Insbesondere ist so die Aufnahme von farbigen Dokumentenbildern möglich. - Voraussetzung für die Farbbilderzeugung ist, dass die Vorrichtung eine primäre Leuchtschicht 700 enthält, die einstellbare Beleuchtungsfarben zulässt. Dies kann beispielsweise durch eine lokal schaltende Schicht 703 (bspw. schaltbare Flüpssigkristallschicht) mit verschiedenen Farbfiltern (z.B. Rot-, Grün- und Blaufilter) auf deren schaltbaren Segmenten (Pixeln) und eine entsprechend breitbandige Hintergrundbeleuchtung realisiert werden. Die Kombination dieser Komponenten können beispielsweise als LCD (liquid crystal device) ausgeführt sein.
- Ausführungsbeispiele sind in
Fig. 8a-8c sowieFig. 8e , jeweils mit verschiedenen Hintergrundbeleuchtungen durch Änderung des Emissionsprinzips der Leuchtschicht 700, dargestellt. Eine weitere Möglichkeit der Realisierung ist die Verwendung einer zweidimensionalen LED oder OLED-Anordnung 705 mit verschiedenfarbigen LEDs oder OLEDs, wie inFig. 8d gezeigt, oder die Verwendung verschiedenfarbiger LEDs oder OLEDs in einer kombinierten Sende-Empfänger-Schicht 105a, wie sie stilisiert inFig. 8f dargestellt ist. - Die
Fig. 11a und Fig. 11 b zeigen besonders bevorzugte Ausführungsbeispiele, speziell zur Fälschungserkennung von Objekten, wie lebenden Autopodien 102 und Dokumenten 118. Im Vergleich zur prinzipiellen Anordnung inFig. 1b enthalten diese Schichtkörper 100 mindestens eine zusätzliche sekundäre Leuchteinheit 707. Diese Anordnung ermöglicht neben der Beleuchtung des Objektes mit Anteilen der primären Leuchtschicht 700, die sich im Allgemeinen im sichtbaren Wellenlängenbereich befinden, eine Beleuchtung in anderen Wellenlängenbereichen wie beispielsweise IR oder UV. Diese Beleuchtung kann alternativ zur primären Beleuchtung oder zusätzlich eingeschaltet werden. - Dokumente haben beispielsweise Sicherheitsfeatures, die eine Beleuchtung im UV und im IR benötigen, um sie zu verifizieren. Lebende Autopodien 102 wiederum besitzen grundlegend unterschiedliche Lichtleit- und Streucharakteristika in verschiedenen Wellenlängenbereichen (beispielsweise in UV, blau, rot, IR). In beiden Fällen können mit der Aufnahme von Vergleichbildern bei Beleuchtung mit speziellen Wellenlängenbereichen Fälschungen einfach erkannt werden. Alle Schichten des Schichtkörpers 100, die sich zwischen der zusätzlichen sekundären Leuchteinheit 707 und der Auflagefläche 103 befinden, müssen für das Wellenlängenspektrum dieser sekundären Leuchteinheit 707 im Wesentlichen transparent sein. Befindet sich die primäre Leuchtschicht 700 zwischen der sekundären Leuchteinheit 707 und ist die primäre Leuchtschicht 700 mit einer lokal schaltenden Schicht 703 ausgestattet, dann ist auch eine strukturierte Beleuchtung durch die zusätzliche sekundäre Leuchteinheit 707 möglich. Dadurch werden die Möglichkeiten der Fälschungserkennung weiter verbessert. Beispielsweise kann so bei ein Autopodium 102 gezielt punktuell beleuchtet werden und über den Sensor die Lichtausbreitung im Autopodium 102 aufgenommen werden. Bei Dokumenten 118 können spezielle Sicherheitsmerkmale zur Verifikation einzeln punktell beleuchtet werden.
-
Fig. 11a zeigt einen Schichtkörper 100, der eine zusätzliche sekundäre Leuchteinheit 707 zur Fälschungserkennung enthält, die in Form von Photoluminiszenzfolie 702 ausgebildet ist. -
Fig. 11 b zeigt einen Schichtkörper 100, bei dem eine zusätzliche sekundäre Leuchteinheit 707 in Form einer Lichtleitschicht 706 ausgebildet ist. -
Fig. 12 zeigt als besonders bevorzugtes Ausführungsbesipiel ein Verfahren prinzipiell wie inFig. 5 , aber hier mit zusätzlicher Fäschungserkennung von Objekten, wie lebenden Autopdien 102 oder Dokumenten 118. Zur Fälschungserkennung sind verschiedene Anpassungen möglich, die jeweils optional und zueinander in beliebiger Reigenfolge stattfinden können: Belichtungszeit anpassen, Belichtungsmuster anpassen, Beleuchtungsstärke anpassen, zusätzliche Lichtquelle(n) ein- und ausschalten. Nachdem alle Anpassungen vorgenommen wurden, findet die Bildaufnahme und -speicherung statt. Das gespeicherte Bild ist ein, bezogen auf das prinzipielle Verfahren, beschrieben inFig. 5 , zusätzliches Bild und ersetzt im Speicher das zuerst aufgenommene nicht. Die Aufnahme mehrerer Bilder mit unterschiedlichen Anpassungen ist möglich, beispielsweise ein Bild mit eingeschalteter UV-Beleuchtung und ein weiteres separat zu speicherndes Bild mit eingeschalteter IR-Beleuchtung. -
Fig. 13a-d zeigen ein besonders bevorzugtes Ausführungsbeipiel der erfindungsgemäßen Vorrichtung zu deren Verwendung im mobilen Anwendungsbereich. - Der erfindungsgemäße Schichtkörper 100 ist in diesem Fall leicht modifiziert, indem die primäre Leuchtschicht 700 am Schichtkörper 100 zunächst nicht vorhanden ist, weil die primäre Leuchtschicht 700 durch das zumeist sehr lichtstarke Display 802eines mobilen Gerätes, wie beispielsweise Tabletcomputer oder Smartphone, ersetzt werden kann. Dazu wird der reduzierte Schichtkörper 100 mit dem mobilen Gerät verbunden, indem der Schichtkörper 100 mit seiner unten befindlilchen transparenten Trägerschicht 701 auf das Display 802 des mobilen Gerätes gelegt und das mobile Gerät auch noch dazu verwendet wird, um Informationen direkt auf der Auflagefläche 103 des Schichtkörpers 100 darzustellen. Bei der Fingerabdruckaufnahme beispielsweise können Silhouetten 904 von Autopodien 102 dargestellt werden, um deren korrekte Positionierung intuitiv zu erleichtern, wie das in
Fig. 13a und 13b dargestellt ist. - Das mobile Gerät liefert außerdem die notwendige Beleuchtung des Objektes, in diesen Beispiel eines Autopodiums. Das Display 802 des mobilen Gerätes fungiert somit als besondere Ausführungsform der primären Leuchtschicht 700. Des Weiteren wird die erfindungsgemäße Vorrichtung mit dem mobilen Gerät zum Datenaustausch verbunden. Diese Verbindung kann über eine übliche kabelgebundene Computerschnittstelle, wie beispielsweise USB, oder aber auch drahtlos, wie beispielsweise mittels Wlan oder Bluetooth, erfolgen.
-
Fig. 13a zeigt die erfindungsgemäße Vorrichtung verbunden mit einem Tabletcomputer. Die erfindungsgemäße Vorrichtung befindet sich dabei direkt auf dem Display 802 des Tabletcomputers. -
Fig. 13b zeigt die erfindungsgemäße Vorrichtung verbunden mit einem Smartphone. Die erfindungsgemäße Vorrichtung befindet sich dabei direkt auf dem Display 802 des Smartphones. -
Fig. 13c zeigt den Querschnitt des Gesamtsystems, bestehend aus der erfindungsgemäßen Vorrichtung und dem mobilen Gerät. Die mechanische Verbindung erfolgt hier über eine Befestigungsanordnung 803. -
Fig. 13d zeigt den Querschnitt des Gesamtsystems, bestehend aus der erfindungsgemäßen Vorrichtung und dem mobilen Gerät. Im Vergleich zuFig. 13c befindet sich im Schichtaufbau eine zusätzliche sekundäre Leuchteinheit 707 zur Fälschungserkennung, diese ist transparent für die Beleuchtung des Displays 802 des Mobilgerätes, so dass dieses im Wesentlichen ungehindert Informationen auf der Auflagefläche 103 darstellen kann und das aufzunehmende Objekt beleuchten kann. Die mechanische Verbindung erfolgt hier wie inFig. 13c über eine Befestigungsanordnung 803. -
- 100
- Schichtkörper
- 101
- Umgebungslicht
- 102
- Autopodium
- 103
- Auflagefläche
- 104
- lichtempfindliche Elemente
- 105
- Sensorschicht (mit lichtempfindlichen Elementen)
- 105a
- Sender-Empfänger-Schicht (mit lichtempfindlichen und lichtaussendenden Elementen)
- 106
- Anteile des Umgebungslichtes 101 (mit Wellenlängen kleiner als 600 nm)
- 107
- gestreutes Licht der Beleuchtung
- 107a
- über einen Hautberg eingekoppeltes Streulicht
- 107b
- über ein Hauttal eingekoppeltes Streulicht
- 108
- Anteile des Umgebungslichtes 101 (mit Wellenlängen größer als 600 nm)
- 110
- gestreutes Umgebungslicht 101 (mit Wellenlängen größer als 600 nm)
- 112
- Anteil des Umgebungslichtes 101, der detektiert wird
- 113
- Anteil des Beleuchtungslichts, der detektiert wird
- 113a
- im Hautberg gestreuter detektierter Beleuchtungsanteil
- 113b
- im Hauttal gestreuter und nicht detektierter Beleuchtungsanteil
- 113c
- im Hauttal gestreuter und detektierter Beleuchtungsanteil
- 114
- Beleuchtungslicht der primären Leuchtschicht 700
- 114a
- Lichtanteil, der die Hautberge beleuchtet
- 114b
- Lichtanteil, der die Hauttäler beleuchtet
- 114c
- Beleuchtungslicht der sekundären Leuchteinheit
- 115
- gestreutes Umgebungslicht 101 (mit Wellenlängen kleiner als 600 nm)
- 116
- (vom Objekt kontaktierter) Bereich (der Auflagefläche 103)
- 117
- Schutzschicht
- 118
- Dokument
- 501
- CTF für 20 µm Abstand
- 502
- CTF für 40 µm Abstand
- 503
- CTF für 60 µm Abstand
- 504
- FBI-Anforderungen
- 700
- primäre Leuchtschicht
- 701
- transparente Trägerschicht
- 702
- Photolumineszenzfolie
- 703
- lokal schaltbare Schicht
- 704
- Kaltkathodenröhre
- 705
- LED oder OLED-Anordnung
- 706
- Lichtleitschicht
- 802
- Display eines Mobilgerätes
- 803
- Befestigungsanordnung
- 902
- Rahmen
- 904
- Silhouette der Autopodien 102
- 905
- Verbindungskabel
- 906
- Darstellungsfläche
Claims (18)
- Vorrichtung zur optischen Direktaufnahme von sicherheitsrelevanten Objekten ohne optisch abbildende Elemente, mindestens je eines Objekts aus den Gruppen, Personaldokumente, Reisepässe, Führerscheine und Finger- oder Handabdrücke, enthaltend eine Auflagefläche für die Objekte, unter der eine Sensorschicht (105), die lichtempfindliche Elemente in einem zweidimensionalen regelmäßigen Pixelraster aufweist, angeordnet ist, dadurch gekennzeichnet, dass- die Sensorschicht (105) in einem Schichtkörper (100) mit einer Elektronik auf Basis der Dünnschicht-Transistor-(TFT-)Technologie ausgeführt ist,- die Sensorschicht (105) sich auf einer mindestens im sichtbaren Wellenlängenbereich transparenten Trägerschicht (701) befindet,- die lichtempfindlichen Elemente (104) der Sensorschicht (105) einen Abstand zu dem aufzunehmenden Objekt (102, 118) auf der Auflagefläche (103) von weniger als dem durch das Pixelraster definierten Pixelmittenabstand aufweisen,- die lichtempfindlichen Elemente (104) innerhalb der Sensorschicht (105) über jeweils eine elektronische Steuereinheit zur Steuerung der Belichtungszeit verfügen und- eine Lichtquelle als primäre Leuchtschicht (700) so ausgebildet ist, dass mindestens Lichtanteile (114) von der primären Leuchtschicht (700) aus Richtung der Sensorschicht (105) durch die Auflagefläche (103) hindurch das aufzunehmende Objekt (102, 118) beleuchten können, wobei alle Schichten des Schichtkörpers (100), die sich zwischen primärer Leuchtschicht (700) und Auflagefläche (103) befinden, mindestens Lichtanteile im sichtbaren Wellenlängenbereich transmittieren.
- Vorrichtung nach Anspruch 1, dadurch gekennzeichnet, dass
die Steuereinheit zur Steuerung der Belichtungszeit als Rolling-Shutter ausgebildet ist. - Vorrichtung nach Anspruch 1, dadurch gekennzeichnet, dass
die Steuereinheit zur Steuerung der Belichtungszeit als Global-Shutter ausgebildet ist. - Vorrichtung nach Anspruch 1, dadurch gekennzeichnet, dass
die Steuereinheit zur Steuerung der Belichtungszeit so ausgebildet ist, dass die Belichtungszeit von verschiedenen Pixeln oder Pixelgruppen (beispielsweise Zeilen oder Spalten) für dieselbe Aufnahme unterschiedlich einstellbar ist. - Vorrichtung nach Anspruch 1, dadurch gekennzeichnet, dass
als primäre Leuchtschicht (700) eine Kaltkathodenröhre (704) oder Photolumineszenzfolie (702) unter der Sensorschicht (105) angeordnet ist. - Vorrichtung nach Anspruch 1, dadurch gekennzeichnet, dass
die primäre Leuchtschicht (700) eine Anordnung von zweidimensional regelmäßig angeordneten singulären Leuchtdioden aus der Gruppe LED, OLED, QLED enthält, die unterhalb der Sensorschicht (105) angeordnet ist. - Vorrichtung nach Anspruch 1, dadurch gekennzeichnet, dass
die primäre Leuchtschicht (700) eine Anordnung mit zweidimensional regelmäßig angeordneten singulären Leuchtdioden aus der Gruppe LED, OLED, QLED enthält, die innerhalb der Sensorschicht (105) angeordnet sind. - Vorrichtung nach Anspruch 1, dadurch gekennzeichnet, dass
die primäre Leuchtschicht (700) ein erstes Wellenlängenspektrum aufweist und mindestens eine sekundäre Leuchteinheit (707) mit mindestens einem zweiten, mit dem ersten Wellenlängenspektrum nicht identischen Wellenlängenspektrum alternativ zur primären Leuchtschicht (700) einschaltbar ist, um mindestens ein Vergleichsbild für eine Fälschungserkennung bei Finger- oder Handabdruckaufnahmen oder eine Verifizierung von Sicherheitsmerkmalen bei Dokumentenaufnahmen bei jeweils unterschiedlichen Vergleichswellenlängen aufzunehmen. - Vorrichtung gemäß Anspruch 1, dadurch gekennzeichnet, dass als primäre Lichtquelle die primäre Leuchtschicht (700) durch ein lichtabstrahlendes Display (802) eines mobilen Kommunikationsgerätes aus der Gruppe Smartphone, Tablet-Computer, Laptop ersetzt ist.
- Vorrichtung gemäß Anspruch 8 und 9, dadurch gekennzeichnet, dass zusätzlich zur primären Leuchtschicht (700) in Form des Displays (802) des mobilen Kommunikationsgerätes die sekundäre Leuchteinheit (707) zwischen primärer Leuchtschicht (700) und Auflagefläche (103) vorhanden ist, enthaltend- mindestens eine Lichtquelle aus der Gruppe, LED, OLED,..., und- mindestens eine Lichtleitschicht (706),- wobei die sekundäre Leuchteinheit (707) für das Licht des Displays (802) des mobilen Kommunikationsgerätes weitgehend transparent ist.
- Vorrichtung zur optischen Aufnahme von sicherheitsrelevanten Objekten mindestens eines Objekts aus der Gruppe Einzelfinger-, Mehrfinger- oder Handabdrücke, enthaltend eine Auflagefläche (103) für die Objekte, unter der eine Sensorschicht (105), die lichtempfindliche Elemente (104) in einem zweidimensionalen regelmäßigen Pixelraster aufweist, angeordnet ist, dadurch gekennzeichnet, dass- die Sensorschicht (105) in einem Schichtkörper (100) mit einer Elektronik auf Basis der Dünnschicht-Transistor-(TFT-)Technologie ausgeführt ist,- die lichtempfindlichen Elemente (104) der Sensorschicht (105) einen Abstand zu dem aufzunehmenden Objekt (102, 118) auf der Auflagefläche (103) von weniger als dem durch das Pixelraster der Sensorschicht (105) definierten Pixelmittenabstand aufweisen, und- die lichtempfindlichen Elemente (104) innerhalb des Pixelrasters über jeweils eine elektronische Steuereinheit zur Steuerung der Belichtungszeit verfügen.
- Verfahren zur Erzeugung von optischen Aufnahmen mit verbessertem Kontrast und / oder verbesserter Dynamik von mindestens je einem sicherheitsrelevanten Objekt aus den Gruppen Personaldokumente, Reisepässe oder Führerscheine und Einzelfinger- Mehrfinger- oder Handabdrücke, enthaltend folgende Schritte:- Auflegen des Objektes (102, 118),- Aufnahme eines Bildes mit einer vordefinierten Belichtungszeit und Speicherung des Bildes,- Analyse des Bildes mindestens hinsichtlich Über- oder Unterbelichtung,- Ändern der Belichtungszeit, wenn die Analyse eine Über- oder Unterbelichtung festgestellt hat, durch Änderung der Shuttereinstellung der lichtempfindlichen Elemente (104) in der Sensorschicht (105),- erneute Bildaufnahme, Bildspeicherung und Bildanalyse auf Über- oder Unterbelichtung, ob eine weitere Iteration zu Änderung der Belichtungszeit notwendig ist, und- Speichern der Bildaufnahme als Ergebnisbild, wenn die Bildanalyse keine weitere Änderung der Belichtungszeit erforderlich macht.
- Verfahren nach Anspruch 12, wobei in der Bildanalyse zusätzlich die Beleuchtungsstärke bewertet und beim Feststellen einer Unter- oder Überbelichtung eine Anpassung der Beleuchtungsstärke einer primären Leuchtschicht (700) unterhalb einer Auflagefläche (103) erfolgt.
- Verfahren nach Anspruch 12, wobei in der Bildanalyse zusätzlich die Homogenität der Bildausleuchtung bewertet und bei Feststellung einer lokalen Über- oder Unterbelichtung mindestens in Teilen der Bildaufnahme des Objekts (102, 118) eine weitere Bildaufnahme in Abhängigkeit von festgestellten Inhomogenitäten bei lokal angepasster Beleuchtungsstärke mittels einer primären Leuchtschicht (700) vorgenommen wird, um die Inhomogenitäten zu reduzieren oder zu kompensieren.
- Verfahren nach Anspruch 12, 13 oder 14, wobei das Verfahren mehrfach bei Beleuchtung des Objekts (102, 118) mit unterschiedlichen Beleuchtungswellenlängen durchgeführt wird, wobei mehrere Bilder jeweils mit unterschiedlichem Spektralbereich und opimierter Belichtungszeit einzeln gespeichert und in einem weiteren Schritt mittels Bildbearbeitungsalgorithmen die mehreren einzelnen Bilder zu einem mehrfarbigen Gesamtbild überlagert werden.
- Verfahren nach Anspruch 12, wobei zusätzliche Bildaufnahmen im UV- und IR-Bereich für die Prüfung von Sicherheitsmerkmalen von Dokumenten aufgenommen und separat abgespeichert werden.
- Verfahren nach Anspruch 12, wobei zusätzliche Bildaufnahmen bei Beleuchtung mit schmalbandigen sekundären Leuchteinheiten (707) in unterschiedlichen Spektralbereichen zur Fälschungsprüfung von Finger- oder Handabdrücken aufgenommen, als Vergleichsbilder gespeichert und untereinander oder mit Referenzaufnahmen verglichen werden.
- Verfahren zur Erzeugung von optischen Aufnahmen mit verbessertem Kontrast und / oder verbesserter Dynamik von mindestens je einem sicherheitsrelevanten Objekt aus den Gruppen Personaldokumente, Reisepässe oder Führerscheine und Finger- oder Handabdrücke, enthaltend folgende Schritte:- Auflegen des Objektes (102, 118),- Aufnahme und Speicherung von mindestens zwei Bildern mit unterschiedlicher Belichtungszeit und- Überlagerung der Bilder, um ein kontrastverbessertes oder dynamikbereichverbessertes Ergebnisbild zu errechnen.
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
DE102015116026.9A DE102015116026A1 (de) | 2015-09-22 | 2015-09-22 | Vorrichtung und Verfahren zur direkten optischen Bildaufnahme von Dokumenten und / oder lebenden Hautbereichen ohne abbildende optische Elemente |
Publications (3)
Publication Number | Publication Date |
---|---|
EP3147823A2 true EP3147823A2 (de) | 2017-03-29 |
EP3147823A3 EP3147823A3 (de) | 2017-06-14 |
EP3147823B1 EP3147823B1 (de) | 2024-02-21 |
Family
ID=56990269
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
EP16189928.1A Active EP3147823B1 (de) | 2015-09-22 | 2016-09-21 | Vorrichtung und verfahren zur direkten optischen bildaufnahme von dokumenten und / oder lebenden hautbereichen ohne abbildende optische elemente |
Country Status (3)
Country | Link |
---|---|
US (1) | US10116886B2 (de) |
EP (1) | EP3147823B1 (de) |
DE (1) | DE102015116026A1 (de) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN109426812A (zh) * | 2017-08-31 | 2019-03-05 | 杰内特里克股份有限公司 | 用来基于接触同时采集手足的印痕的装置 |
Families Citing this family (19)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US11531756B1 (en) | 2017-03-20 | 2022-12-20 | Hid Global Corporation | Apparatus for directing presentation attack detection in biometric scanners |
WO2019033346A1 (zh) * | 2017-08-17 | 2019-02-21 | 深圳信炜科技有限公司 | 显示模组及其生物特征信息感测方法、电子设备 |
DE102017008710B3 (de) | 2017-09-12 | 2019-02-28 | JENETRIC GmbH | Anordnung zur optischen Aufnahme von lebenden Hautbereichen menschlicher Autopodien und von Dokumenten |
US10789450B2 (en) * | 2017-10-20 | 2020-09-29 | Synaptics Incorporated | Optical biometric sensor with automatic gain and exposure control |
KR102535177B1 (ko) * | 2017-12-21 | 2023-05-23 | 엘지디스플레이 주식회사 | 지문 인식 장치와 이를 포함한 표시장치와 모바일 단말기 |
CN108881625B (zh) * | 2018-05-31 | 2020-09-29 | 北京小米移动软件有限公司 | 终端设备以及感测方法和装置 |
TWI668637B (zh) * | 2018-06-29 | 2019-08-11 | 金佶科技股份有限公司 | 指紋感測裝置以及指紋感測方法 |
DE102018122896A1 (de) | 2018-09-18 | 2020-03-19 | JENETRIC GmbH | Verfahren und Vorrichtung zur Kontrolle eines mobilen Eingabegeräts |
DE102018122872B4 (de) | 2018-09-18 | 2020-11-05 | JENETRIC GmbH | Display mit integriertem Matrixsensor und Verfahren zur optischen Aufnahme der Papillarstruktur wenigstens eines Fingers mit dem Display |
DE102018122917A1 (de) | 2018-09-19 | 2020-03-19 | JENETRIC GmbH | Vorrichtung zur optischen Direktaufnahme von Hautabdrücken |
DE102018122918B4 (de) | 2018-09-19 | 2020-11-05 | JENETRIC GmbH | Vorrichtung zur optischen Direktaufnahme von Hautabdrücken für mobile Anwendung |
US10755065B2 (en) * | 2018-12-03 | 2020-08-25 | Novatek Microelectronics Corp. | Sensor device and flicker noise mitigating method |
DE102019126408B4 (de) * | 2019-09-30 | 2021-12-16 | JENETRIC GmbH | Vorrichtung und Verfahren zur Darstellung von Informationen und zur kontaktbasierten gleichzeitigen Aufnahme von Hautabdrücken mehrerer durchbluteter Hautbereiche menschlicher Autopodien |
KR20210061593A (ko) | 2019-11-20 | 2021-05-28 | 삼성전자주식회사 | 전자 장치 및 전자 장치의 지문 인식 방법 |
US11293804B2 (en) * | 2019-12-24 | 2022-04-05 | Palo Alto Research Center Incorporated | Optical sensor system to identify objects and their movement |
CN111989690B (zh) | 2020-03-18 | 2024-07-09 | 深圳市汇顶科技股份有限公司 | 指纹识别装置和电子设备 |
KR102667988B1 (ko) * | 2020-04-08 | 2024-05-21 | 선전 구딕스 테크놀로지 컴퍼니, 리미티드 | 지문 인식 방법, 장치 및 전자 장치 |
CN113163087B (zh) * | 2020-07-23 | 2022-11-08 | 神盾股份有限公司 | 影像感测装置及其曝光时间调整方法 |
DE102021206505A1 (de) | 2021-06-23 | 2022-12-29 | JENETRIC GmbH | Handhaltbare Vorrichtung |
Citations (15)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US4394773A (en) | 1980-07-21 | 1983-07-19 | Siemens Corporation | Fingerprint sensor |
US5325442A (en) | 1990-05-18 | 1994-06-28 | U.S. Philips Corporation | Fingerprint sensing device and recognition system having predetermined electrode activation |
US20040252867A1 (en) | 2000-01-05 | 2004-12-16 | Je-Hsiung Lan | Biometric sensor |
US6952022B2 (en) | 2003-08-06 | 2005-10-04 | Silicon Display Technology | Image sensor comprising thin film transistor optical sensor having offset region |
US20050229380A1 (en) | 2000-05-16 | 2005-10-20 | Deconde Keith T | Fingerprint sensors using membrane switch arrays |
US7366331B2 (en) | 2001-06-18 | 2008-04-29 | Nec Corporation | Fingerprint input device |
US7379570B2 (en) | 2005-01-19 | 2008-05-27 | E-Pin International Tech Co., Ltd. | Optical engine for fingerprint reader |
US7442588B2 (en) | 2007-02-23 | 2008-10-28 | Silicon Display Technology Co., Ltd. | Method for fabricating thin film transistor using local oxidation and transparent thin film transistor |
EP2120182B1 (de) | 2008-06-20 | 2010-02-17 | DERMALOG Identification Systems GmbH | Verfahren und Vorrichtung zur automatischen Aufnahme eines Fingerabdruckes mit Echtheitserkennung |
US7769252B2 (en) | 2008-02-08 | 2010-08-03 | Weatherford/Lamb, Inc. | Location marker for distributed temperature sensing systems |
WO2012067409A2 (en) | 2010-11-15 | 2012-05-24 | Silicon Display Co., Ltd. | Thin film transistor substrate having hybrid cmos structure and optical sensor array using the substrate |
US20120321149A1 (en) | 2011-05-17 | 2012-12-20 | Carver John F | Fingerprint sensors |
US20130119237A1 (en) | 2011-11-12 | 2013-05-16 | Daniel H. Raguin | Ambient light illumination for non-imaging contact sensors |
US8569671B2 (en) | 2008-04-07 | 2013-10-29 | Cmosis Nv | Pixel array capable of performing pipelined global shutter operation including a first and second buffer amplifier |
WO2015005959A1 (en) | 2013-04-01 | 2015-01-15 | Patrick Baudisch | A touchscreen capable of fingerprint recognition |
Family Cites Families (27)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5230025A (en) * | 1990-08-31 | 1993-07-20 | Digital Biometrics, Inc. | Method and apparatus for capturing skin print images |
FR2746627B1 (fr) * | 1996-03-28 | 1998-06-12 | Sagem | Dispositif capteur d'empreintes |
DE69804619T2 (de) * | 1998-10-23 | 2003-02-27 | Datalogic S.P.A., Lippo Di Calderara Di Reno | Verfahren zur Regelung der Belichtungszeit eines Lichtsensors |
DE19958378A1 (de) * | 1999-05-16 | 2000-11-23 | Hans Juergen Poehs | Vorrichtung zur Personenidentifikation |
JP3858263B2 (ja) * | 2001-11-09 | 2006-12-13 | 日本電気株式会社 | 指紋画像入力装置及びそれを用いた電子機器 |
JP4086523B2 (ja) | 2001-12-04 | 2008-05-14 | キヤノン株式会社 | 画像読取装置、被写体照合システム、被写体認識システム及び画像読取方法 |
JP4373063B2 (ja) * | 2002-09-02 | 2009-11-25 | 株式会社半導体エネルギー研究所 | 電子回路装置 |
JP2005004718A (ja) * | 2003-05-16 | 2005-01-06 | Canon Inc | 信号処理装置及び制御方法 |
JP3924558B2 (ja) * | 2003-11-17 | 2007-06-06 | 富士通株式会社 | 生体情報採取装置 |
US7623689B2 (en) * | 2003-11-18 | 2009-11-24 | Canon Kabushiki Kaisha | Image pick-up apparatus including luminance control of irradiation devices arranged in a main scan direction |
WO2005067608A2 (en) * | 2004-01-07 | 2005-07-28 | Identification International, Inc. | Low power fingerprint capture system, apparatus, and method |
KR100722570B1 (ko) | 2004-03-26 | 2007-05-28 | 가시오게산키 가부시키가이샤 | 화상판독장치, 화상판독장치를 구비한 화상판독시스템 |
CN102034095B (zh) | 2004-06-01 | 2014-04-16 | 光谱辨识公司 | 对个体进行生物识别测量的方法及多光谱传感器 |
US7859526B2 (en) | 2006-05-01 | 2010-12-28 | Konicek Jeffrey C | Active matrix emissive display and optical scanner system, methods and applications |
JP2007323500A (ja) * | 2006-06-02 | 2007-12-13 | Sharp Corp | 情報処理装置、方法、プログラムおよびプログラムを記録したコンピュータ読取り可能な記録媒体 |
US20090232362A1 (en) * | 2008-03-12 | 2009-09-17 | Hitachi Maxell, Ltd. | Biometric information acquisition apparatus and biometric authentication apparatus |
DE102009001521B4 (de) * | 2009-03-12 | 2012-12-27 | Entropic Communications, Inc. | Verfahren zur Erzeugung einer HDR-Videobildfolge |
US8218068B2 (en) * | 2009-04-01 | 2012-07-10 | Omnivision Technologies, Inc. | Exposing pixel groups in producing digital images |
US8760517B2 (en) * | 2010-09-27 | 2014-06-24 | Apple Inc. | Polarized images for security |
EP2648158B1 (de) * | 2010-12-03 | 2019-11-20 | Fujitsu Limited | Biometrische authentifizierungsvorrichtung und biometrisches authentifizierungsverfahren |
US8928792B1 (en) | 2011-01-31 | 2015-01-06 | Aptina Imaging Corporation | CMOS image sensor with global shutter, rolling shutter, and a variable conversion gain, having pixels employing several BCMD transistors coupled to a single photodiode and dual gate BCMD transistors for charge storage and sensing |
DE102012108838A1 (de) * | 2012-09-19 | 2014-05-28 | Cross Match Technologies Gmbh | Verfahren und Vorrichtung zur Aufnahme von Fingerabdrücken auf Basis von Fingerabdruckscannern in zuverlässig hoher Qualität |
DE102013106105A1 (de) * | 2013-06-12 | 2014-12-31 | Dan Hossu | Verfahren zur optischen Erfassung eines Fingerabdrucks oder eines Gegenstandes und Vorrichtung mit mindestens einem Bildschirm |
JP6232914B2 (ja) * | 2013-10-16 | 2017-11-22 | セイコーエプソン株式会社 | 半導体装置およびその製造方法 |
JP2015115789A (ja) * | 2013-12-12 | 2015-06-22 | ソニー株式会社 | 撮像装置、撮像信号処理回路、及び、撮像信号処理方法、並びに、表示装置、画像信号処理回路、及び、画像信号処理方法 |
US9684815B2 (en) * | 2014-09-18 | 2017-06-20 | Sciometrics Llc | Mobility empowered biometric appliance a tool for real-time verification of identity through fingerprints |
JP6671946B2 (ja) * | 2015-12-11 | 2020-03-25 | キヤノン株式会社 | 情報取得装置、撮像装置及び情報取得方法 |
-
2015
- 2015-09-22 DE DE102015116026.9A patent/DE102015116026A1/de active Pending
-
2016
- 2016-09-21 EP EP16189928.1A patent/EP3147823B1/de active Active
- 2016-09-22 US US15/272,532 patent/US10116886B2/en active Active
Patent Citations (15)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US4394773A (en) | 1980-07-21 | 1983-07-19 | Siemens Corporation | Fingerprint sensor |
US5325442A (en) | 1990-05-18 | 1994-06-28 | U.S. Philips Corporation | Fingerprint sensing device and recognition system having predetermined electrode activation |
US20040252867A1 (en) | 2000-01-05 | 2004-12-16 | Je-Hsiung Lan | Biometric sensor |
US20050229380A1 (en) | 2000-05-16 | 2005-10-20 | Deconde Keith T | Fingerprint sensors using membrane switch arrays |
US7366331B2 (en) | 2001-06-18 | 2008-04-29 | Nec Corporation | Fingerprint input device |
US6952022B2 (en) | 2003-08-06 | 2005-10-04 | Silicon Display Technology | Image sensor comprising thin film transistor optical sensor having offset region |
US7379570B2 (en) | 2005-01-19 | 2008-05-27 | E-Pin International Tech Co., Ltd. | Optical engine for fingerprint reader |
US7442588B2 (en) | 2007-02-23 | 2008-10-28 | Silicon Display Technology Co., Ltd. | Method for fabricating thin film transistor using local oxidation and transparent thin film transistor |
US7769252B2 (en) | 2008-02-08 | 2010-08-03 | Weatherford/Lamb, Inc. | Location marker for distributed temperature sensing systems |
US8569671B2 (en) | 2008-04-07 | 2013-10-29 | Cmosis Nv | Pixel array capable of performing pipelined global shutter operation including a first and second buffer amplifier |
EP2120182B1 (de) | 2008-06-20 | 2010-02-17 | DERMALOG Identification Systems GmbH | Verfahren und Vorrichtung zur automatischen Aufnahme eines Fingerabdruckes mit Echtheitserkennung |
WO2012067409A2 (en) | 2010-11-15 | 2012-05-24 | Silicon Display Co., Ltd. | Thin film transistor substrate having hybrid cmos structure and optical sensor array using the substrate |
US20120321149A1 (en) | 2011-05-17 | 2012-12-20 | Carver John F | Fingerprint sensors |
US20130119237A1 (en) | 2011-11-12 | 2013-05-16 | Daniel H. Raguin | Ambient light illumination for non-imaging contact sensors |
WO2015005959A1 (en) | 2013-04-01 | 2015-01-15 | Patrick Baudisch | A touchscreen capable of fingerprint recognition |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN109426812A (zh) * | 2017-08-31 | 2019-03-05 | 杰内特里克股份有限公司 | 用来基于接触同时采集手足的印痕的装置 |
EP3460455A3 (de) * | 2017-08-31 | 2019-07-03 | JENETRIC GmbH | Vorrichtung zur kontaktbasierten gleichzeitigen aufnahme von abdrücken von autopodien |
US10366273B2 (en) | 2017-08-31 | 2019-07-30 | JENETRIC GmbH | Device for the contact-based simultaneous capture of prints of autopodia |
Also Published As
Publication number | Publication date |
---|---|
EP3147823B1 (de) | 2024-02-21 |
DE102015116026A1 (de) | 2017-03-23 |
US20170085813A1 (en) | 2017-03-23 |
US10116886B2 (en) | 2018-10-30 |
EP3147823A3 (de) | 2017-06-14 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
EP3147823B1 (de) | Vorrichtung und verfahren zur direkten optischen bildaufnahme von dokumenten und / oder lebenden hautbereichen ohne abbildende optische elemente | |
DE102015115484C5 (de) | Vorrichtung und Verfahren zur optischen Direktaufnahme von lebenden Hautbereichen | |
EP3008662B1 (de) | Verfahren zur optischen erfassung eines fingerabdrucks oder eines gegenstandes und vorrichtung mit mindestens einem bildschirm | |
DE102018132910A1 (de) | Fingerabdruckerkennungsvorrichtung und Anzeigevorrichtung und mobiles Terminal verwendend eine Fingerabdruckerkennungsvorrichtung | |
DE212018000136U1 (de) | Optische Bildgebung per Bildgebungslinse und Bildgebungsnadelloch in optischemSensormodul unter dem Bildschirm für Fingerdruckerkennung auf dem Bildschirmin Vorrichtungen mit organischen lichtemittierenden Dioden- (OLED) Bildschirmenoder anderen Bildschirmen | |
EP3142043B1 (de) | Vorrichtung und verfahren zur optischen aufnahme von abdrücken von durchbluteten hautbereichen | |
DE102017128102A1 (de) | Flachpanelanzeige, die optischen bildgebungssensor einbettet | |
DE102018122918B4 (de) | Vorrichtung zur optischen Direktaufnahme von Hautabdrücken für mobile Anwendung | |
WO2019144997A1 (de) | Vorrichtung zur optischen direktaufnahme von hautabdrücken und dokumenten | |
DE202012013713U1 (de) | Vorrichtung zur Dual-Target-Autobelichtung | |
DE102009036844A1 (de) | Belichtungsbestimmungsvorrichtung und Bildverarbeitungsvorrichtung | |
DE102018122872A1 (de) | Display mit integriertem Matrixsensor und Verfahren zur optischen Aufnahme der Papillarstruktur wenigstens eines Fingers mit dem Display | |
DE102014006340A1 (de) | Kraftfahrzeug mit einer Kamera | |
EP3671543A1 (de) | Vorrichtung zur erfassung von biometrischen merkmalen eines gesichts einer person sowie anordnung umfassend eine solche | |
DE102022100672A1 (de) | Materialspektroskopie | |
DE102019126408A1 (de) | Vorrichtung zur Darstellung von Informationen und zur Aufnahme von Abdrücken von Autopodien | |
EP3627390B1 (de) | Vorrichtung zur optischen direktaufnahme von hautabdrücken | |
DE102012106030A1 (de) | Kamerasystem zur Erkennung des Zustands einer Fahrzeugscheibe | |
EP2763397A1 (de) | Fotosensor | |
DE102017103660B4 (de) | Verfahren zum betrieb einer lichtquelle für eine kamera, lichtquelle, kamera | |
EP2619712A2 (de) | Verfahren und vorrichtung zur erkennung und/oder beurteilung dreidimensionaler erhabener strukturen auf einer oberfläche eines dokuments | |
DE102020122312B4 (de) | Vorrichtung zur Aufnahme von Abdrücken von Autopodien und ihre Verwendung | |
DE102019133516B4 (de) | Verfahren und Vorrichtung zur Bestimmung von Wellenlängenabweichungen von Aufnahmen eines Multilinsen-Kamerasystems | |
DE102006052542A1 (de) | Bilderfassungseinrichtung | |
DE102013114308B4 (de) | Hardwaredesign einer Kamera für dynamischen Rückspiegel |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PUAI | Public reference made under article 153(3) epc to a published international application that has entered the european phase |
Free format text: ORIGINAL CODE: 0009012 |
|
STAA | Information on the status of an ep patent application or granted ep patent |
Free format text: STATUS: THE APPLICATION HAS BEEN PUBLISHED |
|
AK | Designated contracting states |
Kind code of ref document: A2 Designated state(s): AL AT BE BG CH CY CZ DE DK EE ES FI FR GB GR HR HU IE IS IT LI LT LU LV MC MK MT NL NO PL PT RO RS SE SI SK SM TR |
|
AX | Request for extension of the european patent |
Extension state: BA ME |
|
PUAL | Search report despatched |
Free format text: ORIGINAL CODE: 0009013 |
|
AK | Designated contracting states |
Kind code of ref document: A3 Designated state(s): AL AT BE BG CH CY CZ DE DK EE ES FI FR GB GR HR HU IE IS IT LI LT LU LV MC MK MT NL NO PL PT RO RS SE SI SK SM TR |
|
AX | Request for extension of the european patent |
Extension state: BA ME |
|
RIC1 | Information provided on ipc code assigned before grant |
Ipc: G06K 9/00 20060101AFI20170511BHEP |
|
STAA | Information on the status of an ep patent application or granted ep patent |
Free format text: STATUS: REQUEST FOR EXAMINATION WAS MADE |
|
17P | Request for examination filed |
Effective date: 20171204 |
|
RBV | Designated contracting states (corrected) |
Designated state(s): AL AT BE BG CH CY CZ DE DK EE ES FI FR GB GR HR HU IE IS IT LI LT LU LV MC MK MT NL NO PL PT RO RS SE SI SK SM TR |
|
STAA | Information on the status of an ep patent application or granted ep patent |
Free format text: STATUS: EXAMINATION IS IN PROGRESS |
|
17Q | First examination report despatched |
Effective date: 20200409 |
|
STAA | Information on the status of an ep patent application or granted ep patent |
Free format text: STATUS: EXAMINATION IS IN PROGRESS |
|
STAA | Information on the status of an ep patent application or granted ep patent |
Free format text: STATUS: EXAMINATION IS IN PROGRESS |
|
RAP3 | Party data changed (applicant data changed or rights of an application transferred) |
Owner name: JENETRIC GMBH |
|
REG | Reference to a national code |
Ref country code: DE Ref legal event code: R079 Ref document number: 502016016381 Country of ref document: DE Free format text: PREVIOUS MAIN CLASS: G06K0009000000 Ipc: H04N0005235000 Ref country code: DE Ref legal event code: R079 Free format text: PREVIOUS MAIN CLASS: G06K0009000000 Ipc: H04N0005235000 |
|
RIC1 | Information provided on ipc code assigned before grant |
Ipc: G06V 40/13 20220101ALI20221208BHEP Ipc: H04N 5/355 20110101ALI20221208BHEP Ipc: H04N 5/353 20110101ALI20221208BHEP Ipc: H04N 5/235 20060101AFI20221208BHEP |
|
REG | Reference to a national code |
Ref country code: DE Ref legal event code: R079 Ref document number: 502016016381 Country of ref document: DE Free format text: PREVIOUS MAIN CLASS: H04N0005235000 Ipc: H04N0023710000 Ref country code: DE Ref legal event code: R079 Free format text: PREVIOUS MAIN CLASS: H04N0005235000 Ipc: H04N0023710000 |
|
GRAP | Despatch of communication of intention to grant a patent |
Free format text: ORIGINAL CODE: EPIDOSNIGR1 |
|
STAA | Information on the status of an ep patent application or granted ep patent |
Free format text: STATUS: GRANT OF PATENT IS INTENDED |
|
RIC1 | Information provided on ipc code assigned before grant |
Ipc: G06V 40/13 20220101ALI20230909BHEP Ipc: H04N 25/583 20230101ALI20230909BHEP Ipc: H04N 25/531 20230101ALI20230909BHEP Ipc: H04N 23/74 20230101ALI20230909BHEP Ipc: H04N 23/71 20230101AFI20230909BHEP |
|
19U | Interruption of proceedings before grant |
Effective date: 20230601 |
|
19W | Proceedings resumed before grant after interruption of proceedings |
Effective date: 20240102 |
|
INTG | Intention to grant announced |
Effective date: 20231002 |
|
RAP3 | Party data changed (applicant data changed or rights of an application transferred) |
Owner name: DERMALOG JENETRIC GMBH |
|
GRAS | Grant fee paid |
Free format text: ORIGINAL CODE: EPIDOSNIGR3 |
|
GRAA | (expected) grant |
Free format text: ORIGINAL CODE: 0009210 |
|
STAA | Information on the status of an ep patent application or granted ep patent |
Free format text: STATUS: THE PATENT HAS BEEN GRANTED |
|
RAP3 | Party data changed (applicant data changed or rights of an application transferred) |
Owner name: DERMALOG JENETRIC GMBH |
|
AK | Designated contracting states |
Kind code of ref document: B1 Designated state(s): AL AT BE BG CH CY CZ DE DK EE ES FI FR GB GR HR HU IE IS IT LI LT LU LV MC MK MT NL NO PL PT RO RS SE SI SK SM TR |
|
REG | Reference to a national code |
Ref country code: GB Ref legal event code: FG4D Free format text: NOT ENGLISH |
|
REG | Reference to a national code |
Ref country code: CH Ref legal event code: EP |
|
REG | Reference to a national code |
Ref country code: IE Ref legal event code: FG4D Free format text: LANGUAGE OF EP DOCUMENT: GERMAN |
|
REG | Reference to a national code |
Ref country code: DE Ref legal event code: R096 Ref document number: 502016016381 Country of ref document: DE |
|
P01 | Opt-out of the competence of the unified patent court (upc) registered |
Effective date: 20240308 |
|
REG | Reference to a national code |
Ref country code: LT Ref legal event code: MG9D |
|
REG | Reference to a national code |
Ref country code: NL Ref legal event code: MP Effective date: 20240221 |
|
PG25 | Lapsed in a contracting state [announced via postgrant information from national office to epo] |
Ref country code: IS Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT Effective date: 20240621 |
|
PG25 | Lapsed in a contracting state [announced via postgrant information from national office to epo] |
Ref country code: LT Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT Effective date: 20240221 |
|
PG25 | Lapsed in a contracting state [announced via postgrant information from national office to epo] |
Ref country code: GR Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT Effective date: 20240522 |
|
PG25 | Lapsed in a contracting state [announced via postgrant information from national office to epo] |
Ref country code: RS Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT Effective date: 20240521 Ref country code: HR Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT Effective date: 20240221 Ref country code: NL Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT Effective date: 20240221 |
|
PG25 | Lapsed in a contracting state [announced via postgrant information from national office to epo] |
Ref country code: ES Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT Effective date: 20240221 |