EP1195045B1 - Automatische authentifikation von mit sicherheitsmerkmalen geschützten dokumenten - Google Patents
Automatische authentifikation von mit sicherheitsmerkmalen geschützten dokumenten Download PDFInfo
- Publication number
- EP1195045B1 EP1195045B1 EP01905705A EP01905705A EP1195045B1 EP 1195045 B1 EP1195045 B1 EP 1195045B1 EP 01905705 A EP01905705 A EP 01905705A EP 01905705 A EP01905705 A EP 01905705A EP 1195045 B1 EP1195045 B1 EP 1195045B1
- Authority
- EP
- European Patent Office
- Prior art keywords
- document
- features
- image
- security features
- security
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Lifetime
Links
- 230000001427 coherent effect Effects 0.000 claims abstract description 12
- 230000004044 response Effects 0.000 claims abstract description 12
- 238000005286 illumination Methods 0.000 claims description 44
- 238000000034 method Methods 0.000 claims description 42
- 230000003287 optical effect Effects 0.000 claims description 10
- 238000003384 imaging method Methods 0.000 claims description 9
- 238000001514 detection method Methods 0.000 claims description 8
- 238000012360 testing method Methods 0.000 claims description 7
- 238000012795 verification Methods 0.000 claims description 6
- 230000008859 change Effects 0.000 claims description 4
- 230000001419 dependent effect Effects 0.000 claims description 4
- 238000011156 evaluation Methods 0.000 claims description 4
- 230000003595 spectral effect Effects 0.000 abstract description 13
- 230000005855 radiation Effects 0.000 description 8
- 238000009826 distribution Methods 0.000 description 6
- 238000012545 processing Methods 0.000 description 6
- 239000011104 metalized film Substances 0.000 description 5
- 230000008901 benefit Effects 0.000 description 4
- 238000004519 manufacturing process Methods 0.000 description 4
- 230000000007 visual effect Effects 0.000 description 4
- 230000006399 behavior Effects 0.000 description 3
- 239000011159 matrix material Substances 0.000 description 3
- 210000001747 pupil Anatomy 0.000 description 3
- 238000003860 storage Methods 0.000 description 3
- 238000013461 design Methods 0.000 description 2
- 230000006870 function Effects 0.000 description 2
- 210000003128 head Anatomy 0.000 description 2
- 238000003909 pattern recognition Methods 0.000 description 2
- 230000010287 polarization Effects 0.000 description 2
- 230000008569 process Effects 0.000 description 2
- 238000003672 processing method Methods 0.000 description 2
- 238000004611 spectroscopical analysis Methods 0.000 description 2
- 238000001228 spectrum Methods 0.000 description 2
- 230000002123 temporal effect Effects 0.000 description 2
- XUIMIQQOPSSXEZ-UHFFFAOYSA-N Silicon Chemical compound [Si] XUIMIQQOPSSXEZ-UHFFFAOYSA-N 0.000 description 1
- 238000005352 clarification Methods 0.000 description 1
- 230000008034 disappearance Effects 0.000 description 1
- 239000000975 dye Substances 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 230000008030 elimination Effects 0.000 description 1
- 238000003379 elimination reaction Methods 0.000 description 1
- 230000002349 favourable effect Effects 0.000 description 1
- 239000010408 film Substances 0.000 description 1
- 239000011888 foil Substances 0.000 description 1
- 239000005337 ground glass Substances 0.000 description 1
- 238000011835 investigation Methods 0.000 description 1
- 239000002184 metal Substances 0.000 description 1
- 239000000049 pigment Substances 0.000 description 1
- 238000012552 review Methods 0.000 description 1
- 230000035945 sensitivity Effects 0.000 description 1
- 229910052710 silicon Inorganic materials 0.000 description 1
- 239000010703 silicon Substances 0.000 description 1
- 238000010183 spectrum analysis Methods 0.000 description 1
- 230000009897 systematic effect Effects 0.000 description 1
- 230000009466 transformation Effects 0.000 description 1
- 238000013519 translation Methods 0.000 description 1
- 238000011179 visual inspection Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G07—CHECKING-DEVICES
- G07D—HANDLING OF COINS OR VALUABLE PAPERS, e.g. TESTING, SORTING BY DENOMINATIONS, COUNTING, DISPENSING, CHANGING OR DEPOSITING
- G07D7/00—Testing specially adapted to determine the identity or genuineness of valuable papers or for segregating those which are unacceptable, e.g. banknotes that are alien to a currency
- G07D7/20—Testing patterns thereon
-
- G—PHYSICS
- G07—CHECKING-DEVICES
- G07D—HANDLING OF COINS OR VALUABLE PAPERS, e.g. TESTING, SORTING BY DENOMINATIONS, COUNTING, DISPENSING, CHANGING OR DEPOSITING
- G07D7/00—Testing specially adapted to determine the identity or genuineness of valuable papers or for segregating those which are unacceptable, e.g. banknotes that are alien to a currency
- G07D7/06—Testing specially adapted to determine the identity or genuineness of valuable papers or for segregating those which are unacceptable, e.g. banknotes that are alien to a currency using wave or particle radiation
- G07D7/12—Visible light, infrared or ultraviolet radiation
- G07D7/1205—Testing spectral properties
-
- G—PHYSICS
- G07—CHECKING-DEVICES
- G07D—HANDLING OF COINS OR VALUABLE PAPERS, e.g. TESTING, SORTING BY DENOMINATIONS, COUNTING, DISPENSING, CHANGING OR DEPOSITING
- G07D7/00—Testing specially adapted to determine the identity or genuineness of valuable papers or for segregating those which are unacceptable, e.g. banknotes that are alien to a currency
- G07D7/06—Testing specially adapted to determine the identity or genuineness of valuable papers or for segregating those which are unacceptable, e.g. banknotes that are alien to a currency using wave or particle radiation
- G07D7/12—Visible light, infrared or ultraviolet radiation
- G07D7/121—Apparatus characterised by sensor details
Definitions
- NIR near infrared
- category D According to the state of the art, only the features of category D are currently evaluated automatically with the aid of readers.
- These devices contain one or more cameras as well as one or more spectrally different illuminations and are able to automatically decode machine-readable documents such as the so-called lCAO line for personal documents, applied 1D or 2D barcodes.
- the positions of these codes relative to a document-oriented coordinate system are usually defined by international standards.
- the documents must be placed in a specific position on the viewing window of these devices in order to work correctly.
- the verification of the document itself is called “authentication”.
- the question of whether the document shown, e.g. An identity card also belongs to the carrier is called “Verification”.
- the object of the invention is a method and an arrangement for the fast and automatic authentication of documents secured with numerous optical features, in which the position of the features relative to the coordinate system of the document is not or only approximately known.
- the document is illuminated in its entirety or in some areas in a first step with lighting means whose spectral and geometric distribution, polarization, coherence and time course of the optical properties of the illumination means are selected so that an imageable by imaging sensors image arises in which the Positions of the security features due to brightness, contrast, color, pattern differences relative to the rest of the document background are automatically recognizable with methods of image processing, that in a second step, the examination of the corresponding features is performed only in the image areas, which found in the first step Corresponding positions and for this purpose the corresponding image areas are illuminated in such a way that the corresponding features generate images and / or spectral signatures, from which with methods of image processing and / or spectrometry that for d ie checking the characteristics required information can be derived.
- the inventive method allows the determination of the position of the security features, both relative to the coordinate system of the scanned document, and of course to the coordinate system of the scanner itself. By detecting the sheet edge against the dark Background of the cover, the scanner "knows" how the document is aligned to its own coordinate system.
- This position information is first found on the first scan relative to the coordinate system of the scanner, regardless of the exact orientation of the document on the scanning window of the scanner. With this information, the corresponding illuminations and / or line sensors of the scanner can be moved to these points of the document with high precision and the actual examination of the authenticity features can be carried out with high precision.
- a transformation between the scanner coordinate system and the coordinate system of the document itself is established by eg
- the top left corner of the sheet is defined as the X0, Y0 origin of the document.
- the invention consists of finding, with suitable illumination methods, the position of the authenticity features relative to the document and / or relative to the scanner, these being Types of illumination may be different from those used in testing the authenticity features.
- Part of the concept of the invention is also the storage and archiving of all captured pictorial information of the secured document in a database simultaneously with the review of the document.
- the text field 6 contains no security features and no machine-readable information. However, it still has to be recognized by machine as a field that is not to be evaluated.
- the layout of the document can be described by the position of these individual features with respect to an x, y coordinate system aligned at the edge of the document. These positions should not or only insecure be known when scanning by the arrangement according to the invention, so that according to the invention in a first step, these positions of these features must be determined with respect to the coordinate system.
- FIG. 2 shows by way of example an arrangement for carrying out the method step "positioning".
- the document 1 is placed on the device 12 with the page to be evaluated. Through the viewing window 13, the page is optically scanned line by line with the motor-driven sensor head 15, which is linearly moved along the storage 14-.
- the positioning step does not require the high image resolution, which requires the actual machine evaluation of the text field, the 2D code, the information hidden in the portrait, and the diffraction patterns, the recording of the individual images associated with the respective illumination types can be recorded with reduced resolution become. This can technically be done by the imaging line sensor working at a coarser pitch during this positioning step.
- Another idea of the invention is to switch the individual illuminations in synchronism with the line clock of the imaging line sensor and thus to obtain a series of interlaced lower resolution images in a scan, from which due to the systematic contrast and pattern differences, the positions of the individual features using methods of pattern recognition and Image processing are determined.
- clocked light emitting diodes are used as radiation sources because only a relatively low resolution is required.
- a line sensor which includes a row of image sensing sensors, which line sensor is now moved along the document.
- Such a silicon sensor would be a z. B. have a spectral sensitivity of visible light to the NIR spectrum.
- the LEDs are then alternately driven per line, which emit visible light and alternately the LEDs, which emit light in the NIR spectral range.
- This process is carried out mainly in the single path method, because this is particularly fast and provides a relatively low resolution.
- the Portrait 5 is very easy to read.
- the portrait image would be easily readable, while in the NIR region the portrait is only badly readable or completely disappears, so that the determination of this difference image clearly establishes that one is in visible light at this location readable portrait image is located.
- the invention is not limited to the determination of a differential image of two different spectral wavelengths, but it is - as previously stated in the invention - even the direction of the incident light and the resulting spectral response is a measure of the location and type of used authenticity features.
- geometric distribution of the illumination is used to find the authenticity features.
- geometric distribution is z. B. understood, the direction of the incident light, but also the geometric distribution, z. B. in the form of a lattice structure or a particularly distributed, geometric structure such. As concentric rings or other geometric arrangements of the illumination sources.
- the degree of polarization of the illumination source can be used to obtain a particular readout of authentication features.
- the invention is not limited to the use of coherent light, but non-coherent or medium-coherent light may be used.
- temporal activity is understood to mean that the authenticity feature is illuminated with a specific pulse and the impulse response and its decay are examined in a specific time window, so that the temporal activity of the impulse response can also be used to read the authenticity feature.
- - in accordance with the above description - first scans the entire document with a lower resolution and determines the location of the authenticity features. This has been explained in detail above.
- the second scan can be limited to specific areas of the document to save time. However, it is important that the second scan can be performed at a relatively high speed, because only at certain points where authenticity features were detected, would have to be scanned with high resolution.
- the location of the authenticity features is determined from the signal response, then at this location, the correspondingly obtained signal can be examined more accurately for authenticity features by software.
- a further embodiment according to the invention is that all the spectrally different illuminations are switched on simultaneously and the corresponding images are simultaneously imaged on different image sensors in the beam path of the imaging optics by one or more wavelength-dependent beam splitters.
- the diffractive features are checked by using a coherent light source, e.g. a laser diode is directed to the position, which were determined in the first step.
- a coherent light source e.g. a laser diode is directed to the position, which were determined in the first step.
- This can be done, for example, by mechanically moving a laser diode so that its light beam is directed onto the diffractive element directly or via optical intermediate elements such as mirrors, prisms, beam splitters, etc.
- the resulting diffraction image is e.g. converted via a ground glass into a real image of punctiform structures and detected by an image sensor.
- the examination of the feature can be done by checking the position and arrangement and the radiometric properties such as brightness ratios of these structures in the image detected by the image sensor 20 with the aid of a computing unit 21.
- the position of a diffractive feature can also be determined by locally illuminating the document in a search grid with a coherent illumination source in the presumed positions of the feature and obtaining an image of this local region with the aid of an image sensor. If the diffractive element is hit, significant, a priori, definitions of the diffractive element appear in known structures so that the positioning has occurred when these expected structures occur
- the definitions of the diffractive element with respect to its position, the type of diffraction structures generated, the information or decoding rule contained therein are stored according to the invention in other machine-readable features of the same document, eg cryptographically encoded in 2-dimensional barcode or in the steganographically hidden information in the portrait image ,
- This procedure has the big one
- the advantage that such standards do not need to have fixed standards for the specific document. It allows you to create individual diffractive elements for each document and to hide the information required for verification in the same document but in one or more other security features.
- This method of the individual security feature whose test specification is encoded in one or more other features of the same document, according to the invention not only applies to the diffractive security features, but also fundamental for all others.
- the shape or type of UV-visible features can be hidden in the portrait image.
- the test specification for the automatic over-checking of the UV feature (s) is ready at the same time, without having to ask for information in a database, a standard or another source of information stored outside the actual document itself.
Landscapes
- General Health & Medical Sciences (AREA)
- Toxicology (AREA)
- Physics & Mathematics (AREA)
- Health & Medical Sciences (AREA)
- General Physics & Mathematics (AREA)
- Spectroscopy & Molecular Physics (AREA)
- Inspection Of Paper Currency And Valuable Securities (AREA)
- Facsimile Transmission Control (AREA)
- Cleaning In Electrography (AREA)
- Collating Specific Patterns (AREA)
- Facsimile Scanning Arrangements (AREA)
- Credit Cards Or The Like (AREA)
- Image Processing (AREA)
- Editing Of Facsimile Originals (AREA)
Description
- Zahlreiche nicht-elektronische Personaldokumente wie Personalausweis, Pass, Visadokumente o.ä, Wertdokumente wie Aktien, Banknoten, Wechsel u.ä. werden zur Absicherung gegen Fälschungen bei der Herstellung mit Sicherheitsmerkmalen versehen. Diese Merkmale können in vier große Kategorien eingeteilt werden:
- Kategorie A:
- für das menschliche Auge unter normaler Beobachtung unsichtbare optische Merkmale, welche unter bestimmten nichtkohärenten Beleuchtungs- und Aufnahmebedingungen visuell oder maschinell erkennbar sind.
- Hierzu zählen aufgedruckte Strukturen, eingebrachte Fäden usw. welche unter ultraviolettem Licht im Sichtbaren durch Fluoreszenz erkennbar werden. Personaldokumente und Banknoten werden häufig mit solchen Merkmalen versehen. Die Kontrolle erfolgt manuell durch visuelle Beobachtung unter einer Schwarzlichtlampe, d.h. einer Beleuchtungsquelle, welche lediglich im unsichtbaren Ultraviolett abstrahlt.
- Zu dieser Kategorie zählen auch eingebrachte oder aufgedruckte Farbstoffe mit einem speziellen Reflexionsverhalten, oft im Wellenlängenbereich des Nahen Infrarots (abgek. NIR). Die spektrale Verteilung des remittierten Infrarotlichtes enthält eine typische Signatur, welche durch spektrometrische Verfahren überprüft werden kann.Dies bezeichnet man als eine maschinelle Erkennung.
- Ebenfalls zu dieser Kategorie gehören die in Bildern versteckten Informationen, die sog. Steganographie, welche durch bestimmte Modulationsverfahrendes Rasters beim gerasterten Bilddruck eingebracht werden und mit Hilfe von Bildverarbeitungsverfahren maschinell extrahiert werden können.
- Kategorie B:
- für das menschliche Auge unter normaler Beobachtung sichtbare optische Merkmale, welche sich unter einer bestimmten, nichtkohärenten Beleuchtung verändern.
- Hierzu zählen z.B. auf vielen Personaldokumenten aufgebrachte Striche, welche im Sichtbaren erkennbar sind, aber bei Beleuchtung mit einer bestimmten Wellenlänge, meistens im NIR gelegen, verschwinden.
- Kategorie C:
- für das menschliche Auge unter normaler Beobachtung sichtbare optische Merkmale, welche unter bestimmten, kohärenten Beleuchtungsanordnungen aufgrund von Lichtbeugung bestimmte Beugungsmuster erzeugen.
- Hierzu zählen auf klaren oder metallisierten Folien aufgebrachte Beugungsgitter, welche bei einer bestimmten Laserbeleuchtung spezielle Beugungsmuster erzeugen, welche mit Hilfe von Photodetektoren oder Kameras überprüft werden können.
- Kategorie D:
- für das menschliche Auge unter normaler Beobachtung sichtbare optische Merkmale, welche einen informationstragenden, maschinell lesbaren Code darstellen.
- Hierzu zählen die maschinenlesbaren Aufdrucke, 1-dimensionale und 2-dimensionale Strichcodes, 2-dimensionale Matrixcodes u.ä. welche mit Hilfe von Scannern oder Kamerasystemen decodiert werden.
- Nach dem Stand der Technik werden derzeit lediglich die Merkmale der Kategorie D automatisch mit Hilfe von Lesegeräten ausgewertet. Diese Geräte enthalten eine oder mehrere Kameras sowie eine oder mehrere spektral unterschiedliche Beleuchtungen und sind in der Lage, maschinenlesbare Audrucke wie der sog. lCAO Zeile bei Personaldokumenten , aufgebrachte 1D- oder 2D Barcodes automatisch zu dekodieren. Die Positionen dieser Codes relativ zu einem auf dem Dokument orientierten Koordinatensystem sind in der Regel durch internationale Normen festgelegt. Die Dokumente müssen in einer bestimmten Lage auf das Sichtfenster dieser Geräte aufgelegt werden, um korrekt zu arbeiten.
- Diese automatischen Geräte führen daher lediglich die Funktione "Decodieren" durch; sie sind nicht einsetzbar bei Dokumenten, bei welchen die Position der Codes nicht definiert ist bzw. die Lage des Dokumentes frei ist. Um dennoch korrekt arbeiten zu können, wird eine automatische Funktion "Positionierung" benötigt, d.h. automatisches Auffinden des oder der Codes auf dem Dokument und automatische Positionierung eines Auswertefensters an diese Stellen.
- Die nach den Kategorien A (außer UV-Merkmale), B und C gesicherten Dokumente können nur maschinell, d.h. mit Hilfe technischer, in der Regel optischer Verfahren geprüft werden. Es existieren einzelne Lösungsvorschläge wie z.B. der Einsatz von Mikrospektrometer zur spektralen Analyse, Bildverarbeitungsverfahren zur Erkennung der in den aufgedruckten Bildern enthaltene Information, welche jede für sich eine bestimmte Aufgabe erfüllen.
- Neuere Dokumente sind oft gleichzeitig mit zahlreichen der unter die Kategorien A,B,C und D fallenden Merkmale gesichert. Hierbei ist sehr oft die geometrische Position dieser Merkmale auf dem Dokument nicht genau definiert:
- a) aufgrund von Produktionstoleranzen kann z.B. die Position eines aufgeprägten Beugungsgmerkmals schwanken
- b) aufgrund von fehlenden Normen gibt es keine einheitliche Vereinbarungen
- c) aufgrund von unsicherer Position des Dokumentes im Bildfeld des automatischen Prüfgerätes sind die Positionen relativ zum Koordinatensystem des Abtasters nicht bekannt
- Diese Dokumente können heute entweder gar nicht automatisch oder höchsten semi-manuell geprüft werden. Der Benutzer muß das Dokument in einer bestimmten Ausrichtung auflegen und positionieren. Dieser Vorgang ist unsicher und benötigt Zeit.
- Da die Vielfalt der gleichzeitig aufgebrachten Merkmale stark zunimmt, besteht außerdem ein großer Bedarf nach Systemen, welche automatisch erkennen, welche Merkmale in dem Dokument vorhanden sind, diese automatisch auffinden und überprüfen. Solche Systeme sind heute noch nicht verfügbar.
- Die Überprüfung des Dokumentes selbst nennt man "Authentifikation". Die Frage, ob das vorgezeigte Dokument, z.B. ein Personalausweis auch zu dem Träger gehört nennt man "Verifikation".
- Durch den Wegfall der innereuropäischen Zollkontrollen, durch die Zunahme des Flugpassagieraufkommens wächst die Anzahl der in den Flughäfen in kürzester Zeit zu authentifizierbare und zu verifizierende hochgesicherten Personaldokumente stark an. Die heute übliche visuelle Kontrolle, evtl. unter Zuhilfenahme einfacher UV-Beleuchtungssysteme oder ICAO Schriftlesegeräte können diese Forderung nicht erfüllen. Ähnliche Verhältnisse gelten auch für die Prüfung von Wertdokumenten wie Banknoten, von gesicherten Versandpapieren u. ä. Dokumenten. Es besteht daher ein hohes Bedürfnis an sicheren, schnell und robust automatisch prüfbaren und lesbaren Dokumenten.
- Aufgabe der Erfindung ist ein Verfahren und eine Anordnung für die schnelle und automatische Authentifikation von mit zahlreichen optischen Merkmalen gesicherten Dokumenten, bei denen die Position der Merkmale relativ zum Koordinatensystem des Dokumentes nicht oder nur ungefähr bekannt ist.
- Diese Aufgabe wird durch die technische Lehre der Ansprüche 1 oder 2 gelöst. Das Dokument wird in seiner Gesamtheit oder in Teilbereichen in einem ersten Arbeitsschritt mit Beleuchtungsmitteln ausgeleuchtet, deren spektrale und geometrische Verteilung, Polarisierung, Kohärenz und zeitlicher Verlauf der optischen Eigenschaften der Beleuchtungsmittel so gewählt sind, daß ein durch bildgebende Sensoren erfaßbares Bild entsteht, in welchem die Positionen der Sicherheitsmerkmale aufgrund von Helligkeits-, Kontrast-, Farb-, Musterunterschiede relativ zum übrigen Dokumentenhintergrund automatisch mit Verfahren der Bildverarbeitung erkennbar sind, daß in einem zweiten Arbeitsschritt die Prüfung der entsprechenden Merkmale nur in den Bildbereichen vorgenommen wird, welche den im ersten Arbeitsschritt gefundenen Positionen entsprechen und hierzu die entsprechenden Bildbereiche derart beleuchtet werden, daß die entsprechenden Merkmale Bilder und/oder spektrale Signaturen erzeugen, aus welchen mit Verfahren der Bildverarbeitung und/oder der Spektrometrie die für die Prüfung der Merkmale benötigten Informationen abgeleitet werden können.
- Hierbei ist es gleichgültig, ob ein Singlepath- oder ein Multipath-Scan-Vorgang stattfindet; in beiden Verfahrensbetriebsweisen kann nach der Erfindung gearbeitet werden.
- Die Einteilung der Sicherheitsmerkmale in die beschriebenen Kategorien A bis D stellt hierbei lediglich eine zur einfacheren Beschreibung des Erfindungsgedanken nützliche Einteilung dar. Andere Merkmale, welche nicht in eine diese expliziten Kategorien passen, sind ebenfalls Bestandteil des Erfindungsgedanken.
- Das erfindungsgemäße Verfahren gestattet die Bestimmung der Position der Sicherheitsmerkmale, sowohl relativ zum Koordinatensystem des abgescannten Dokuments, als auch natürlich zum Koordinatensystem des Scanners selbst. Durch die Erkennung des Blattrandes gegen den dunklen Hintergrund der Abdeckklappe "weiß" der Scanner, wie das Dokument zu seinem eigenen Koordinatensystem ausgerichtet ist.
- Damit kann man die Position der Merkmale relativ zum Dokumenten-Koordinatensystem finden, was wichtig ist, wenn es hierfür auch keine standardisierten Vorschriften gibt oder aber auch, wenn infolge von Produktionstoleranzen die genaue Position nicht bekannt ist.
- Diese Positionsinformationen werden beim ersten Abtasten ohnedies zuerst relativ zum Koordinatensystem des Scanners gefunden, unabhängig von der genauen Ausrichtung des Dokuments auf dem Abtastfenster des Scanners. Mit diesen Informationen können die entsprechenden Beleuchtungen und/oder Zeilensensoren des Scanners an diese Stellen des Dokuments hochgenau verfahren und die eigentliche Untersuchung der Echtheitsmerkmale hochgenau durchgeführt werden.
- Möchte man ebenfalls kontrollieren, ob die Position der Sicherheitsmerkmale mit der durch einen Standard- oder durch in anderen Merkmalen versteckten Soll-Positionen relativ zum Dokumenten-Koordinatensystem übereinstimmt, wird eine Transformation zwischen dem Scanner-Koordinatensystem und dem Koordinatensystem des Dokuments selbst hergestellt, indem man z.B. die linke obere Ecke des Blattes als X0,Y0-Koordinatenursprung des Dokumentes definiert. Durch Erkennung von mindestens zwei Ecken im Abtatstfenster wird die Translation-Rotationsmatrix zwischen Scanner-Koordinatensystem und Dokumenten-Koordinatensystem hergestellt.
- Dieser doppelte Effekt wird im speziellen Beschreibungsteil und in den Patentansprüchen noch näher gekennzeichnet.
- Die Erfindung besteht unter anderem darin, mit geeigneten Beleuchtungsverfahren die Position der Echtheitsmerkmale relativ zum Dokument und/oder relativ zum Scanner zu finden, wobei diese Beleuchtungsarten andere sein können, als die, welche bei der Prüfung der Echtheitsmerkmale eingesetzt werden.
- Bestandteil des Erfindungsgedanken ist ebenfalls die Abspeicherung und Archivierung aller erfaßten, bildhaften Informationen des gesicherten Dokumentes in einer Datenbank gleichzeitig mit der Überprüfung des Dokumentes.
- Zur Verdeutlichung wird der Erfindungsgedanke anhand eines typischen Dokumentes, nämlich eines durch eine Kombination zahlreicher Merkmale gesicherten Personaldokumentes, erklärt.
- Hierzu werden folgende Abbildungen verwendet:
- Fig. 1
- zeigt den schematischen Aufbau eines Personaldokumentes mit den Sicherheits-Merkmalen ICAO Zeile mit NIR-Unterstrich, Barcode, Portraitdruck mit im Bild versteckten Informationen und ein auf einer metallisierten Folie aufgebrachtes Beugungsmerkmal
- Fig. 2
- zeigt beispielhaft die einzelnen Positionen der zu prüfenden Merkmale, welche unabhängig von der Lage des Dokumentes auf dem Gerät und von der genauen Position bezüglich des Dokuments selbst bestimmt werden
- Fig. 3
- zeigt schematisch einen typischen Lösungsvorschlag, bei welchem das gesamte Dokument mit einem hochauflösenden Zeilenkamerascanner unter verschiedenen spektral, geometrisch und zeitlich unterschiedliche Beleuchtungen abgetastet wird
- Der Erfindungsgedanke sei beispielhaft, aber nicht einschränkend anhand eines durch mehrere Merkmale gleichzeitig gesicherten Personaldokumentes erklärt.
- Gemäß Fig. 1 soll dieses Dokument 1 durch die folgenden maschinell zu positionierenden und zu prüfenden Merkmale Merkmale gesichert sein:
- a) durch einen maschinell lesbaren Text 2 mit einer Linie, welche bei einer spektral selektierten Beleuchtung im Nahen Infrarot nicht mehr reflektiert
- b) durch einen 2-dimensionalen Barcode 3, welcher kryptographisch gesicherte Informationen enthält
- c) durch ein diffraktives Element 4, welches im Zentrum einer sternförmigen metallisierten Folie aufgebracht ist und welches bei kohärenter Beleuchtung bei einer spezifischen Wellenlänge bestimmte Beugungsmuster zurückstrahlt
- d) durch steganographisch im Portraitbild 5 versteckte Informationen.
- Das Textfeld 6 enthält keine Sicherheitsmerkmale und keine maschinenlesbaren Informationen.Es muß aber trotzdem maschinell als ein nicht auszuwertendes Feld erkannt werden.
- Das Layout des Dokumentes kann durch die Position dieser einzelnen Merkmale bezügliche eines am Rand des Dokumentes ausgerichteten x,y-Koordinatensystems beschrieben werden. Diese Positionen sollen beim Abtasten durch die erfindungsgemäße Anordnung nicht oder nur unsicher bekannt sein, sodaß erfindungsgemäß in einem ersten Arbeitsschritt dies Positionen dieser Merkmale bezüglich des Koordinatensystems bestimmt werden müssen.
- Fig. 2 zeigt beispielhaft eine Anordnung zur Durchführung des Verfahrensschrittes "Positionierung".
- Das Dokument 1 wird mit der auszuwertenden Seite auf das Gerät 12 aufgelegt. Durch das Sichtfenster 13 wird die Seite optisch mit dem motorisch bewegten Sensorkopf 15 , welcher entlang der Lagerung 14- linear bewegt wird, zeilenweise abgetastet.
- Beispielhaft werden einige Verfahren zur Auffinden der einzelnen Merkmalspositionen und ihrer Identifikation durch eine spezifische Beleuchtung gemäß dem Erfindungsgedanken für den ersten Verfahrensschritt beschrieben.
- Zum Auffinden der Positionen des Textfeldes 2, des 2-dimensionalen Barcodes 3 und des Portaits 5 wird das Dokument 1 während des Abtastens durch die diffuse Beleuchtung 16 abwechselnd mit einer Wellenlänge im nahen Infrarot und mit einer Wellenlänge im sichtbaren Licht beleuchtet. Dies kann durch zeitliches Umschalten von entsprechend spektral gewählten Licht emittierenden Dioden (LED's) geschehen. Wenn die Umschaltung synchron zur Zeilenfrequenz erfolgt, entstehen im Bildspeicher der Recheneinheit 21 zwei ineinander verschachtelte Bilder A und B, wobei A das im NIR-Bereich beleuchtete und B das im sichtbaren beleuchtete Bild darstellen soll.
- a) durch die Beleuchtung im Nahen Infrarot verschwindet die durchgehende Linie 11 im Textfeld 2 während die Linie 11 im sichtbaren Licht deutlich erkennbar bleibt. Die Texte, sowohl im Feld 2 als auch im Feld 6, sind sowohl im NIR-Bereich als auch im sichtbaren Licht deutlich erkennbar, da schwarzer Druck einen breiten Bereich der Beleuchtungswellenlängen absorbiert.Durch Auswertung der bildhaften Informationen, welche sich in den beiden Bildern A und B deutlich unterscheiden, kann das Textfeld 2 von dem Textfeld 6 unterschieden werden.
Fig. 3 zeigt die Bilder A und B mit den entsprechenden Bildinhalten. Durch die Position der zwischen A und B verschwindenen Linie 11 kann die Position des maschinell auszuwertenden Textfeldes bezüglich des xy- Koordinatensystem ermittelt werden. Gleichzeitig wird durch das Verschwinden der Linie 11 im Bild A bereits der zweite Verfahrensschritt, nämlich die Prüfung des Sicherheitsmerkmals mit abgearbeitet. - b) das Feld 3 mit dem 2-dimensionalen Barcode ist in beiden Bildern A und B sichtbar. Es kann mit dem Fachmann bekannten Methoden der Mustererkennung anhand der hochfrequenten Ortsfrequenzen, welche das Codemuster auszeichnen, vom übrigen Bildinhalt erkannt werden
- c) die automatische Positionierung des farbigen Portraitbildes 5 kann z.B. dadurch erkannt werden, daß die Farbpigmente des Portraits 5 ihr Reflexionsverhalten zwischen NIR- Beleuchtung und Beleuchtung im sichtbaren Bereich stark ändern, während das Reflexionsverhalten des Hintergrundpapiers ähnlich bleibt.
In Fig. 3 ist diese Eigenschaft durch einen schwächeren Kontrast zwischen Portait und Hintergrund im Bild A verglichen mit dem Kontrast in Bild B verdeutlicht. Dieser lokale Unterschied erlaubt es dem Fachmann der Bildverarbeitung, die Position des Portraits bezüglich des Dokumentenkoordinatensystems zu bestimmen. - d) durch die Beleuchtung des Dokumentes mit der gerichteten Beleuchtung 17 kann die Position der metallisierten Folie, welche im Zentrum das diffraktive Element trägt, erkannt werden. Während unter der diffusen Beleuchtung 16 der Kontrast zwischen metallisierter Folie und Hintergrundpapier relativ schwach erscheint und dies auch relativ unabhängig von der beleuchtenden Wellenlänge, wird durch die schräg gerichtete Beleuchtung der Kontrastunterschied zwischen der spiegelnd reflektierenden Metallfolie und dem Papier des Hintergrundes sehr groß.
Die schräg einfallende gerichtete Beleuchtung reflektiert an der Eintrittpupille des abbildenden Objektivs 18 vorbei. Dadurch erscheint die Folie dunkler als der Hintergrund. Dies ist in Fig. 3 im Bild C dargestellt.
Es ist dem Fachmann der Optik bekannt, daß dieser Kontrastunterschied auch durch eine sog. Hellfeldbeleuchtung erzielt werden kann, bei welcher die Beleuchtung so angeordnet wird, daß sie durch die spiegelnde Folie direkt in die Pupille des abbildenden Objektivs reflektiert und damit heller als der diffus reflektierende Hintergrund erscheint.
Wird die schräg einfallende gerichtete Beleuchtung gleichzeitig zumindest teilweise kohärent gewählt so wird gleichzeitig erreicht, daß das eigentliche Sicherheitsmerkmal im Zentrum des metallisierten Sterns, nämlich das diffraktive Element mit einer der Beugungsordnungen in die Pupille der abbildenden Optik zurückstrahlt und damit hell erscheint.
Es ist für den Fachmann der Bildverarbeitung ein leichtes, sowohl die Position des metallisierten Sterns als auch die des diffraktiven Elementes in seinem Zentrum aufgrund dieser hohen Kontrastunterschiede zu erkennen. - Da der Arbeitsschritt der Positionierung nicht die hohe Bildauflösung erfordert, welche die eigentliche maschinelle Auswertung des Textfeldes, des 2D Codes, der im Portrait versteckten Informationen, sowie die Beugungsmuster erfordert, kann erfindungsgemäß die Aufnahme der einzelnen, den jeweiligen Beleuchtungsarten zugeordenten Bildern mit verringerter Auflösung aufgenommen werden. Dies kann technisch dadurch geschehen, daß der abbildenden Zeilensensor mit einer gröberen Schrittweite während dieses Verfahrensschrittes der Positionierung arbeitet.
- Ein weiterer Erfindungsgedanke ist es, die einzelnen Beleuchtungen synchron zum Zeilentakt des bildgebenden Zeilensensors zu schalten und damit eine Reihe verschachtelter Bilder niedrigerer Auflösung in einem Abtastvorgang zu erhalten, aus denen infolge der systematischen Kontrast- und Musterunterschiede die Positionen der einzelnen Merkmale mit Methoden der Mustererkennung und Bildverarbeitung ermittelt werden.
- Wichtig ist, daß sowohl in dem Singlepath- als auch in dem Multipath-Verfahren jeweils das gesamte Dokument mit einer multispektralen Strahlung beleuchtet wird, so daß die entsprechend auf dem Dokument verteilten Echtheitsmerkmale mit unterschiedlichen spektralen Antworten reagieren und mit spektral unterschiedlich aufnehmenden Sensoren auch erfasst werden.
- Im einfachsten Fall werden als Strahlungsquellen getaktete Leuchtdioden verwendet, weil nur eine relativ geringe Auflösung erforderlich ist.
- Es liegt ein Zeilensensor vor, der eine Zeile von bildaufnehmenden Sensoren beinhaltet, welcher Zeilensensor nun entlang dem Dokument verfahren wird. Ein derartiger Siliziumsensor würde eine z. B. eine spektrale Empfindlichkeit vom sichtbaren Licht bis ins NIR-Spektrum besitzen. Beim Verfahren dieses Zeilensensors werden nun abwechselnd jeweils pro Zeile die Leuchtdioden angesteuert, welche sichtbares Licht aussenden und abwechselnd die Leuchtdioden, welche im NIR-Spektralbereich Licht aussenden. Damit entsteht im Bildspeicher, der das Signal aufnimmt, ein teilweise verzahntes Gesamtbild, welches z. B. aus 1000 Zeilen besteht. Davon sind 500 Zeilen mit Signalen beaufschlagt, die der Spektralantwort im sichtbaren Licht entsprechen, während 500 Zeilen mit Signalen beaufschlagt sind, welche der spektralen Antwort der Echtheitsmerkmale im NIR-Bereich entsprechend.
- Mit üblichen Methoden der Software werden diese beiden Bildbereiche im Bild-Array getrennt und getrennt weiterverarbeitet.
- Dieser Vorgang wird vor allem im Singlepath-Verfahren durchgeführt, weil dies besonders schnell ist und aber eine relativ geringe Auflösung erbringt.
- Im Bildspeicher wären jetzt z. B. die Orte und Arten der Echtheitsmerkmale nach den Figuren 3a bis 3c virtuell abgespeichert. Im Infrarotbereich ist z. B. dann in dem einen zu untersuchenden Bild das Portrait nach Ziffer 5 nicht mehr sichtbar, während die anderen Echtheitsmerkmale, z. B. das defraktive Element 4, im NIR-Bereich gut auslesbar ist.
- Im Sichtbaren (Weißlicht) ist aber beispielsweise das Portrait 5 sehr gut auslesbar.
- Aus dieser Vorlage, z. B. einem 1000-zeiligen Bild-Array, welches 500 Zeilen des einen Bildes und 500 Zeilen des anderen Bildes enthält, wird nun durch Differenzbestimmung zwischen den beiden ausgelesenen Bildern bestimmt, wo sich die Echtheitsmerkmale befinden.
- Bezogen auf das Portraitbild 5 wäre also im sichtbaren Bereich das Portraitbild gut auslesbar, während im NIR-Bereich das Portrait nur schlecht auslesbar ist oder ganz verschwindet, so daß mit der Bestimmung dieses Differenzbildes eindeutig festgelegt ist, daß sich an diesem Ort ein im sichtbaren Licht auslesbares Portraitbild befindet.
- Damit ist der Ort dieses Portraitbildes eindeutig auf dem Dokument bestimmt.
- Selbstverständlich lassen sich aus dem Weißlichtanteil nicht nur der Ort des Portraits entnehmen, sondern noch z. B. Farbinformationen oder andere Informationen, die aus dem Weißlichtspektrum abgeleitet werden können.
- In analoger Weise gilt dies auch für die Ortsbestimmung der übrigen Elemente, bei denen z. B. in Bezug auf den maschinell lesbaren Text 2 die Linie 11 im NIR-Bereich verschwindet, während sie im sichtbaren Bereich vorhanden ist, so daß auch damit ohne weiteres der Ort dieses maschinell lesbaren Textes 2 bestimmt werden kann.
- Die Erfindung ist selbstverständlich nicht nur auf die Bestimmung eines Differenzbildes aus zwei verschiedenen Spektralwellenlängen beschränkt, sondern es ist - wie vorher in der Erfindung angegeben - auch noch die Richtung des eingestrahlten Lichtes und die daraus resultierende Spektralantwort ein Maß für den Ort und die Art der verwendeten Echtheitsmerkmale.
- Im geltenden Anspruch 3 ist auch angegeben, daß die geometrische Verteilung der Beleuchtung verwendet wird, um die Echtheitsmerkmale zu finden. Unter dem Begriff "geometrische Verteilung" wird z. B. verstanden, die Richtung des eingestrahlten Lichtes, aber auch die geometrische Verteilung, z. B. in Form einer Gitterstruktur oder einer besonders verteilten, geometrischen Struktur, wie z. B. konzentrische Ringe oder andere geometrische Anordnungen der Beleuchtungsquellen.
- Alle im geltenden Anspruch 3 genannten Merkmale können einzeln oder auch in verschiedenen Kobinationen zur Lösung der Erfindungsaufgabe beitragen.
- Ebenso kann der Polarisationsgrad der Beleuchtungsquelle verwendet werden, um eine bestimmte Auslesung von Echtheitsmerkmalen zu erhalten.
- Die Erfindung ist auch nicht auf die Verwendung von kohärentem Licht beschränkt, sondern es kann auch nicht-kohärentes oder mittel-kohärentes Licht verwendet werden.
- Unter dem Begriff "zeitliche Aktivität" wird verstanden, daß das Echtheitsmerkmal mit einem bestimmten Impuls angestrahlt wird und die Impulsantwort und deren Abklingen in einem bestimmten Zeitfenster untersucht wird, so daß also auch die zeitliche Aktivität der Impulsantwort zur Auslesung des Echtheitsmerkmals herangezogen werden kann.
- Alle vorher genannten Maßnahmen dienen also zunächst zur Ortsbestimmung der Echtheitsmerkmale, die auf dem Dokument verteilt sind.
- Es gibt nun mehrere Möglichkeiten für die Durchführung des erfindungsgemäßen Verfahrens:
- Nach einer ersten Ausführungsform ist vorgesehen, daß man - entsprechend der vorstehenden Beschreibung - zunächst mit einer niedrigeren Auflösung das gesamte Dokument scannt und den Ort der Echtheitsmerkmale feststellt. Dies wurde obenstehend eingehend erläutert.
- Wenn nun der Ort der Echtheitsmerkmale durch entsprechende Signaluntersuchungen festgestellt wurde, wird in einem zweiten Scan-Durchlauf mit höherer Auflösung gescannt, und das erhaltene Signalbild wird aber nur an den Stellen genauer untersucht und speziellen Untersuchungsmethoden unterworfen, welche für die spezifisch an diesem Ort gefundenen Echtheitsmerkmale zutreffen (Multi-Path-Abtastung).
- Der zweite Scan-Vorgang kann natürlich auf bestimmte Bereiche des Dokumentes beschränkt werden, um Zeit einzusparen. Hierbei ist aber wichtig, daß der zweite Scan-Vorgang mit relativ hoher Geschwindigkeit durchgeführt werden kann, weil ja nur an bestimmten Stellen, wo Echtheitsmerkmale erkannt wurden, mit hoher Auflösung gescannt werden müßte.
- D. h. also, man kann die Scan-Geschwindigkeit, über der Länge des Dokumentes hinweggesehen, verändern, so daß man nur an den Stellen, wo Echtheitsmerkmale vorliegen, mit höherer Auflösung scannt, während über die "leeren" Bereich des Dokumentes mit höherer Geschwindigkeit gefahren wird. Dies steigert wesentlich die Verarbeitungsgeschwindigkeit.
- In einer anderen Ausführungsform (Nebenanspruch 2) wird das gesamte Dokument mit der höchsten, für die Erkennung der Echtheitsmerkmale erforderlichen Auflösung einmalig gescannt, um dann aus dem gescannten Bild und der daraus erhaltenen Signalantwort sofort den Ort der Echtheitsmerkmale zu bestimmen.
- Liegt der Ort der Echtheitsmerkmale aus der Signalantwort fest, dann kann an diesem Ort das entsprechend erhaltene Signal per Software nun genauer auf Echtheitsmerkmale untersucht werden.
- Es wird also ein digitales Bild in einem Mehrzeilen-Array von dem gesamten Dokument und dem darauf enthaltenen Echtheitsmerkmalen erzeugt. In dem weiteren Schritt erfolgt nun die Echtheitsprüfung jedes einzelnen Merkmales nur genau an dem Ort, wo vorher das Echtheitsmerkmal auch festgestellt wurde. Dies spart vor allem Rechenzeit und erbringt eine wesentlich höhere Produktionsleistung für das erfindungsgemäße Gerät. Im übrigen ist es jetzt in einem zweiten Scan-Durchgang möglich, bestimmte Beleuchtungsmittel lediglich nur für diesen erkannten Ort heranzufahren und diesen erkannten Ort anzustrahlen und die entsprechende Echtheitsprüfung durchzuführen.
- Damit können sämtliche Erkennungsmethoden und -merkmale für die Erkennung und Überprüfung dieses Echtheitsmerkmals einzeln oder in Kombination untereinander verwendet werden, wie sie im allgemeinen Teil (und insbesondere auch im Anspruch 3) beschrieben wurden. Dies gilt insbesondere für die Art und Form der Anstrahlung, für die spektrale Verteilung der Anstrahlungsquelle und dergleichen mehr. Und zwar immer fokussiert auf den erkannten Ort des Echtheitsmerkmales und nur auf diesen Ort. Damit besteht der wesentliche Vorteil, daß nun auf Grund des gefundenen Ortes des Echtheitsmerkmales der Laser, welcher z. B. für die Erkennung eines Echtheitsmerkmales erforderlich ist, nun hochgenau bezüglich dieses Echtheitsmerkmal positioniert werden kann, um dieses zu belichtenund die Strahlungsantwort entsprechend zu messen. Damit besteht ein wesentlich besseres Signal-Rausch-Verhältnis, welches nicht mehr von Ungenauigkeiten der Positionierung des Dokumentes abhängig ist.
- Eine große Bedeutung erlangt diese Art der Auswertung von Echtheitsmerkmalen bei Echtheitsmerkmalen, die auf Grund von Beugungsstrukturen aufgebaut sind. Hier kommt es auf eine sehr genaue Positionierung der Strahlungsquelle in bezug zum Echtheitsmerkmal an, und hier ergeben sich die Vorteile der Erfindung.
- Es können auch andere Echtheitsmerkmale untersucht werden, z. B. die Tatsache, ob an einer bestimmten Stelle eines Dokumentes ein bestimmter fluoreszierender Faden vorhanden ist. Dieser Faden wird dann mit einer entsprechenden Strahlungsquelle angeleuchtet. Auch hier ist die Positionierung der Strahlungsquelle in bezug zum Faden außerordentlich wichtig, um ein günstiges Signal-Rausch-Verhältnis zu erhalten. Dadurch ergibt sich der weitere Vorteil, daß auf Grund der festgestellten Lage und des Ortes von Echtheitsmerkmalen auch andere Bereiche im Dokument angefahren werden können, um dort evt. singulär versteckte (also auch willkürlich angebrachte) Echtheitsmerkmale zu finden. So kommt es beispielsweise bei Banküberfällen mit Erpressung von Bargeld vor, daß bestimmte Dokumente (Banknoten) speziell gekennzeichnet werden, und derartige Kennzeichnungen können sich durchaus an anderen Stellen befinden, als sie mustermäßig oder vorgabemäßig auf dem Dokument vorhanden sind. Auch derartige versteckte und singulär vorhandene Echtheitsmerkmale können mit der Lehre der technischen Erfindung schnell und einfach erkannt und ausgewertet werden.
- Ein weitere erfindungsgemäße Ausgestaltung ist es, daß alle spektral unterschiedlichen Beleuchtungen gleichzeitig eingeschaltet sind und im Strahlengang der abbildenden Optik durch einen oder mehrere wellenlängenabhängige Strahteiler die entsprechenden Bilder gleichzeitig auf verschiedene Bildsensoren abgebildet werden.
- Die beschriebene Anordnung stellt lediglich ein Beispiel für das Verfahren und die Gestaltung der erfindungsgemäßen Anordnung dar. Die Verwendung von Matrixsensoren, punktweise abtastenden optischen Sensoren oder auf einem Chip integrierte, spektral-, kohärenz- und/oder richtungs-abhängige Sensorelemente sind Bestandteil der Erfindung und dem Fachmann der Optik bekannt, so daß sie hier nicht näher erläutert werden müssen.
- Erfindungsgemäß werden die diffraktiven Merkmale dadurch überprüft, daß eine kohärente Lichtquelle wie z.B. eine Laserdiode auf die Position gelenkt wird, welcher im ersten Arbeitsschritt ermittelt wurden. Dies kann beispielhaft dadurch geschehen, daß eine Laserdiode mechanisch so verfahren wird, daß ihr Lichtstrahl direkt oder über optische Zwischenelemente wie Spiegel, Prismen, Strahlteiler usw. auf das diffraktive Element gelenkt wird. Das entstehende Beugungsbild wird z.B. über eine Mattscheibe in ein reales Bild von punktförmigen Strukturen umgewandelt und von einem Bildsensor erfaßt. Die Prüfung des Merkmals kann durch Überprüfung der Position und Anordnung sowie der radiometrischen Eigenschaften wie Helligkeitsverhältnisse dieser Strukturen in dem vom Bildsensor 20 erfaßten Bild mit Hilfe einer Recheneinheit 21 geschehen.
- Erfindungsgemäß kann die Position eines diffraktiven Merkmals auch dadurch bestimmt werden, in dem in einem Suchraster eine kohärente Beleuchtungsquelle in den vermuteten Positionen des Merkmals das Dokument lokal beleuchtet und mit Hilfe eines Bildsensors ein Abbild dieser lokalen Region gewonnen wird. Wird das diffraktive Element getroffen, so treten signifikante, a priori aus der Definition des diffraktiven Elementes in bekannte Strukturen auf so daß die Positionierung dann erfolgt ist, wenn diese erwarteten Strukturen auftreten
- Die Definitionen des diffraktiven Elementes in Bezug auf seine Position, die Art der erzeugten Beugungsstrukturen, die darin enthaltene Information oder Decodiervorschrift werden erfindungsgemäß in anderen maschinenlesbaren Merkmalen des gleichen Dokumentes hinterlegt, z.B. kryptografisch verschlüsselt im 2-dimensionalen Barcode oder in den steganographisch versteckten Information im Portraitbild. Dieses Verfahren hat den großen Vorteil, daß für solche Normen keine feste Normen für das spezielle Dokument getroffen sein müssen. Es erlaubt es , für jedes Dokument individuelle diffraktive Elemente zu erzeugen und die zur Prüfung erforderlichen Informationen im gleichen Dokument, aber in einem oder mehreren anderen Sicherheitsmerkmalen zu verstecken.
- Dieses Verfahren des individuellen Sicherheitsmerkmals, dessen Prüfvorschrift in einem oder mehreren anderen Merkmalen des gleichen Dokumentes codiert ist, gilt erfindungsgemäß nicht nur für die diffraktiven Sicherheitsmerkmale, sondern grundlegend für alle anderen auch. So kann z.B. die Form oder die Art von UV-sichtbaren Merkmalen im Portraitbild versteckt werden. Mit der Decodierung dieser Informationen steht gleichzeitig die Prüfvorschrift für die maschinelle Überfprüfung des oder der UV-Merkmale bereit, ohne daß in einer Datenbank, einer Norm oder einer anderen, außerhalb des eigentlichen Dokumentes selbst abgelegten Informationsquelle nachgefragt werden muß.
-
- 1
- Dokument
- 2
- maschinell lesbarer Text
- 3
- Barcode
- 4
- diffraktives Element
- 5
- Portraitbild
- 6
- Textfeld
- 7
- 8
- 9
- 10
- 11
- Linie
- 12
- Gerät
- 13
- Sichtfenster
- 14
- Lagerung
- 15
- Sensorkopf
- 16
- diffuse Beleuchtung
- 17
- gerichtete Beleuchtung
- 18
- abbildendes Objektiv
- 19
- 20
- Bildsensor
- 21
- Recheneinheit
Claims (11)
- Verfahren für die schnelle automatische Verifikation von mit optischen Merkmalen gesicherten Dokumenten, bei denen die Positionen der Merkmale relativ zum Koordinatensystem des Dokumentes und/oder des Prüfautomaten nicht oder nur ungenau bekannt sind, mit folgenden Schritten:1) Im ersten Verfahrensschritt wird das Dokument auf das Vorhandensein von Sicherheitsmerkmalen mit niedriger Auflösung der Erkennungseinheit untersucht;2) Im Zweiten Verfahrensschritt wird der Ort der einzelnen Sicherheitsmerkmale auf dem Dokument mit ebenfalls niedriger Auflösung der Erkennungseinheit ermittelt;3) Im dritten Verfahrensschritt wird am Ort des gefundenen Sicherheitsmerkmals dieses auf Echtheit mit hoher Auflösung untersucht,wobei
im ersten Verfahrensschritt das Dokument mit einer Wellenlänge im nahen Infrarot und mit einer Wellenlänge im sichtbaren Licht beleuchtet und auf einem Bildsensor abgebildet wird,
und im zweiten Verfahrensschritt die Positionen von Sicherheitsmerkmalen aufgrund von Helligkeits-, Kontrast- oder Farbunterschieden der Bilder erkannt werden. - Verfahren für die schnelle automatische Verifikation von mit optischen Merkmalen gesicherten Dokumenten, bei denen die Positionen der Merkmale relativ zum Koordinatensystem des Dokumentes und/oder des Prüfautomaten nicht oder nur ungenau bekannt sind, mit folgenden Schritten:1) Im ersten Verfahrensschritt wird das Dokument mit der höchsten, für die Erkennung der Echtheitsmerkmale erforderlichen Auflösung gescannt und aus dem gescannten Bild sofort der Ort der Echtheitsmerkmale bestimmt.2) In einem zweiten Verfahrensschritt wird am Ort der ermittelten Sicherheitsmerkmale die dort erhaltene Signalantwort durch Software-Analyse der Signalantwort nur an diesem Ort mit hoher Genauigkeit untersucht,wobei
im ersten Verfahrensschritt das Dokument mit einer Wellenlänge im nahen Infrarot und mit einer Wellenlänge im sichtbaren Licht beleuchtet und auf einem Bildsensor abgebildet wird, und die Positionen von Sicherheitsmerkmalen aufgrund von Helligkeits-, Kontrast- oder Farbunterschieden der Bilder erkannt werden. - Verfahren nach Anspruch 1 oder 2, wobei die Position eines diffraktiven Merkmals (4) dadurch bestimmt wird, dass in einem, Suchraster eine kohärente Beleuchtungsquelle in den vermuteten Positionen des Merkmals das Dokument lokal beleuchtet und mit Hilfe eines Bildsensors ein Abbild dieser lokalen Region gewonnen wird und dass diese Position solange variiert wird bis die erwarteten, a priori aus der Definition des diffraktiven Elements (4) bekannten Bildstrukturen auftreten.
- Verfahren nach einem der Ansprüche 1 bis 3, wobei die Beleuchtungen abwechselnd synchron zum Zeilenwechsel eines aufnehmenden Bildsensors (20) geschaltet werden und somit eine verschachtelte Anordnung von Bildern entsteht, welche zeilenweise jeweils einer der für die Erkennung der Position der Sicherheitsmerkmale erforderlichen Beleuchtung entsprechen.
- Verfahren nach einem der Ansprüche 1 bis 3, wobei mehrere der erforderlichen Beleuchtungsquellen (16, 17) gleichzeitig aktiv sind und das jeder Beleuchtungsquelle entsprechende Bild der Dokumentenoberfläche über Strahlteiler auf einen eigenen Bildsensor abgebildet wird.
- Verfahren nach einem der Ansprüche 1 bis 5, wobei der Typ des vorliegenden Sicherheitsmerkmals bestimmt wird aus den Eigenschaften der ermittelten Position der Sicherheitsmerkmale.
- Verfahren nach einem der Ansprüche 1 bis 6, wobei die zur Positionierung und Prüfung eines Sicherheitsmerkmals benötigten Informationen und Definitionen in einem oder mehreren anderen maschinenlesbaren Merkmalen des gleichen Dokuments hinterlegt sind.
- Verfahren nach Anspruch 7, wobei die Definitionen eines bestimmten Sicherheitsmerkmals für jedes Dokument (1) individuell festgelegt sind und der Teil der Definitionen, welcher zur Positionierung und Prüfung erforderlich ist, in einem oder mehreren anderen maschinenlesbaren Merkmalen des gleichen Dokuments (1) codiert sind.
- Verfahren nach einem der Ansprüche 1 bis 8, wobei die beim automatischen Auswerten des Dokuments anfallenden bildhaften und sonstigen Informationen in einer Dokumentendatenbank gespeichert werden, aus welcher weitere, über die Korrektheit der Sicherheitsmerkmale und der maschinenlesbaren Information hinausgehende Eigenschaften des Dokuments zu beliebigen Zeitpunkten ermittelt werden können.
- Anordnung zur Durchführung des Verfahrens nach einem der Ansprüche 1 bis 9, bei der das zu prüfende Dokument mit einer optischen Anordnung verschiedener Beleuchtungsquellen und einem oder mehreren, das Dokument erfassenden Bildsensoren abgetastet wird und die den einzelnen Beleuchtungsquellen zugeordneten, von dem oder den Bildsensoren erzeugten Bilder in elektrische digitale Signale umgewandelt und in einer Recheneinheit gespeichert und ausgewertet werden, wobei zur Überprüfung diffraktiver Elemente (4) eine als Laserdiode ausgebildete kohärente Lichtquelle auf die im ersten Verfahrenschritt ermittelte Position gelenkt wird und die Laserdiode mechanisch so verfahren wird, dass ihr Lichtstrahl direkt oder über optische Zwischenelemente wie Spiegel, Prismen und Strahlteiler auf das diffraktive Element (4) gelenkt wird und das entstehende Beugungsbild über eine Mattscheibe in eine reales Bild umgewandelt und von einem Bildsensor erfasst wird.
- Anordnung nach Anspruch 10, bei der alle spektral unterschiedlichen Beleuchtungen gleichzeitig eingeschaltet sind und im Strahlengang der abbildenden Optik durch einen oder mehrere wellenlängenabhängige Strahlteiler die entsprechenden Bilder gleichzeitig auf verschiedene Bildsensoren abgebildet werden.
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
DE10005835A DE10005835A1 (de) | 2000-02-10 | 2000-02-10 | Automatische Authentifikation von mit Sicherheitsmerkmalen geschützten Dokumenten |
DE10005835 | 2000-02-10 | ||
PCT/EP2001/000957 WO2001060047A2 (de) | 2000-02-10 | 2001-01-30 | Automatische authentifikation von mit sicherheitsmerkmalen geschützten dokumenten |
Publications (2)
Publication Number | Publication Date |
---|---|
EP1195045A2 EP1195045A2 (de) | 2002-04-10 |
EP1195045B1 true EP1195045B1 (de) | 2007-11-14 |
Family
ID=7630422
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
EP01905705A Expired - Lifetime EP1195045B1 (de) | 2000-02-10 | 2001-01-30 | Automatische authentifikation von mit sicherheitsmerkmalen geschützten dokumenten |
Country Status (9)
Country | Link |
---|---|
EP (1) | EP1195045B1 (de) |
AT (1) | ATE378778T1 (de) |
AU (1) | AU3371901A (de) |
CY (1) | CY1107191T1 (de) |
DE (2) | DE10005835A1 (de) |
DK (1) | DK1195045T3 (de) |
ES (1) | ES2296727T3 (de) |
PT (1) | PT1195045E (de) |
WO (1) | WO2001060047A2 (de) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN110830670A (zh) * | 2018-08-10 | 2020-02-21 | 株式会社理光 | 读取装置、图像形成装置、真伪判定***及读取方法 |
Families Citing this family (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
DE10231634A1 (de) * | 2002-07-12 | 2004-01-22 | Datasound Gmbh | Verfahren und Vorrichtung zum Auslesen codierter Informationen |
FR2843815A1 (fr) * | 2002-08-23 | 2004-02-27 | Jacques Pitoux | Dispositif de tracabilite des billets de banque ou monnaie fiduciaire, permettant instantanement de les identifier et de les rendre inutilisable en cas de vol, quelque soit leur provenances et le lieu geographique d'utilisation |
FR2860325B1 (fr) * | 2003-09-29 | 2006-01-13 | Arjo Wiggins Secutity Sas | Feuille authentifiable par spectroscopie proche infrarouge et methode d'authentification |
DE102004042024A1 (de) * | 2004-08-27 | 2006-03-09 | Smiths Heimann Biometrics Gmbh | Verfahren und Anordnungen zur Bildaufnahme für die Datenerfassung und Hochsicherheitsprüfung von Dokumenten |
DE102005041603A1 (de) | 2005-09-01 | 2007-03-15 | Siemens Ag | Verfahren zur automatischen Erkennung eines Objektes in einem Bild |
US7441704B2 (en) | 2006-03-03 | 2008-10-28 | Ncr Corporation | System and method for identifying a spatial code |
WO2008113962A1 (en) * | 2007-03-20 | 2008-09-25 | Prime Technology Llc | System and method for identifying a spatial code |
DE102009012758A1 (de) * | 2009-03-12 | 2010-09-16 | Hella Kgaa Hueck & Co. | Vorrichtung und Verfahren zur Detektion mindestens eines Objektes |
FR3035253B1 (fr) * | 2015-04-17 | 2020-12-04 | Oberthur Technologies | Procede de verification d'un dispositif de securite comportant une signature |
AT518802A1 (de) * | 2016-07-05 | 2018-01-15 | Ait Austrian Inst Tech Gmbh | Verfahren zur Ermittlung der Relativposition eines UV-lumineszierenden Merkmales auf einem nicht UV-lumineszierenden Träger |
DE102019212369A1 (de) * | 2019-08-19 | 2021-01-21 | Zf Friedrichshafen Ag | Verifikationsverfahren für Sensordaten |
DE102020114980B4 (de) * | 2020-06-05 | 2021-12-30 | Mühlbauer Gmbh & Co. Kg | Vorrichtung und system zur inspektion zumindest eines diffraktiven optischen elements eines dokuments |
Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP0675631A2 (de) * | 1994-03-29 | 1995-10-04 | Sharp Kabushiki Kaisha | Vorrichtung zum Verhindern von Fälschungen zum Gebrauch in Bildverarbeitungsanlagen |
Family Cites Families (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
SE7705157L (sv) * | 1976-05-04 | 1977-11-05 | Green James E | Forfarande och apparat for analys |
DE69033327T2 (de) * | 1989-02-10 | 2000-04-13 | Canon Kk | Gerät zum Lesen oder Verarbeiten eines Bildes |
NO893323D0 (no) * | 1989-08-18 | 1989-08-18 | Inter Marketing Oy | Optisk ekthets-testing av pengesedler og liknende. |
US6449377B1 (en) * | 1995-05-08 | 2002-09-10 | Digimarc Corporation | Methods and systems for watermark processing of line art images |
GB9424971D0 (en) * | 1994-12-10 | 1995-02-08 | At & T Global Inf Solution | Document authentication system |
-
2000
- 2000-02-10 DE DE10005835A patent/DE10005835A1/de not_active Ceased
-
2001
- 2001-01-30 DE DE50113260T patent/DE50113260D1/de not_active Expired - Lifetime
- 2001-01-30 EP EP01905705A patent/EP1195045B1/de not_active Expired - Lifetime
- 2001-01-30 ES ES01905705T patent/ES2296727T3/es not_active Expired - Lifetime
- 2001-01-30 DK DK01905705T patent/DK1195045T3/da active
- 2001-01-30 WO PCT/EP2001/000957 patent/WO2001060047A2/de active IP Right Grant
- 2001-01-30 AT AT01905705T patent/ATE378778T1/de active
- 2001-01-30 AU AU33719/01A patent/AU3371901A/en not_active Abandoned
- 2001-01-30 PT PT01905705T patent/PT1195045E/pt unknown
-
2008
- 2008-02-13 CY CY20081100167T patent/CY1107191T1/el unknown
Patent Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP0675631A2 (de) * | 1994-03-29 | 1995-10-04 | Sharp Kabushiki Kaisha | Vorrichtung zum Verhindern von Fälschungen zum Gebrauch in Bildverarbeitungsanlagen |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN110830670A (zh) * | 2018-08-10 | 2020-02-21 | 株式会社理光 | 读取装置、图像形成装置、真伪判定***及读取方法 |
Also Published As
Publication number | Publication date |
---|---|
EP1195045A2 (de) | 2002-04-10 |
DK1195045T3 (da) | 2008-04-21 |
AU3371901A (en) | 2001-08-20 |
ES2296727T3 (es) | 2008-05-01 |
CY1107191T1 (el) | 2012-01-25 |
DE10005835A1 (de) | 2001-08-16 |
WO2001060047A2 (de) | 2001-08-16 |
DE50113260D1 (de) | 2007-12-27 |
WO2001060047A3 (de) | 2002-01-17 |
ATE378778T1 (de) | 2007-11-15 |
PT1195045E (pt) | 2008-02-07 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
DE60112890T3 (de) | Verfahren zur überwachung von dokumenten | |
DE3880847T2 (de) | Verfahren und Vorrichtung zur Informationsergreifung beim Zeichnen oder Schreiben. | |
DE19924750C2 (de) | Leseanordnung für Informationsstreifen mit optisch kodierter Information | |
EP2571699B1 (de) | Verfahren und vorrichtung zur erzeugung von farbbildern mit einem uv-laser auf pigmentierten substraten und dadurch hergestellte produkte | |
EP1611542B1 (de) | System zur berührungslosen abbildung von hautleisten mit hohem kontrast | |
EP1195045B1 (de) | Automatische authentifikation von mit sicherheitsmerkmalen geschützten dokumenten | |
EP2240914A1 (de) | Verfahren und vorrichtung zur identifizierung und authentifizierung von objekten | |
EP1485862B1 (de) | Verfahren zur identifikation und authentifikation eines gegenstandes | |
WO2012045472A2 (de) | Verfahren zum prüfen eines optischen sicherheitsmerkmals eines wertdokuments | |
DE10309659A1 (de) | Optoelektronischer Dokumentenleser zum Lesen von UV/IR-sichtbaren Markierungen | |
DE102016113102B4 (de) | Verfahren zur Aufnahme und Analyse eines Hyperspektralbildes | |
EP2313872B1 (de) | Verfahren zur prüfung der echtheit eines dokuments, computerprogrammprodukt, prüfgerät und datenverarbeitungssystem | |
DE102012003241B4 (de) | Vorrichtung und Verfahren zur automatischen Prüfung von Wert- und/oder Sicherheitsdokumenten | |
DE102008007731B4 (de) | Verfahren und Vorrichtung zur Identifizierung und Authentifizierung von Objekten | |
EP2619712B1 (de) | Verfahren und vorrichtung zur erkennung und/oder beurteilung dreidimensionaler erhabener strukturen auf einer oberfläche eines dokuments | |
EP2394250B1 (de) | Verfahren und vorrichtung zum verifizieren von dokumenten unter verwendung einer wavelet-transformation | |
EP2724323A1 (de) | Verfahren und vorrichtung zum erstellen eines dokumentenreferenzdatensatzes anhand eines dokumentes | |
DE1264829B (de) | Verfahren zur Guetebestimmung von Druckzeichen und Anordnung zur Durchfuehrung des Verfahrens | |
DE102015102994A1 (de) | Sicherheitsetikett und Verfahren zu seinem Betrieb | |
DE102009025324B4 (de) | Verfahren und Erfassungsvorrichtung mit einem Kontakt-Bildsensor zum Erfassen räumlicher Strukturen | |
EP3220112B1 (de) | Vorrichtung mit wenigstens einem optischen sensormodul und betriebsverfahren hierfür | |
DE102020210935B3 (de) | Auslesevorrichtung zum Auslesen holographisch abgelegter Informationen, Verfahren zum Auslesen holographisch abgelegter Informationen | |
DE60104661T2 (de) | Datenträger, Vorrichtung zum Lesen des Datenträgers und Sicherheitssystem | |
DE102009021412A1 (de) | Verfahren und Vorrichtung zur Rückverfolgung von Dokumenten | |
DE202006004408U1 (de) | Einrichtung zur Bildaufnahme, insbesondere für direkt beschriftete Markierungen |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
REG | Reference to a national code |
Ref country code: SE Ref legal event code: TRGR |
|
PUAI | Public reference made under article 153(3) epc to a published international application that has entered the european phase |
Free format text: ORIGINAL CODE: 0009012 |
|
AK | Designated contracting states |
Kind code of ref document: A2 Designated state(s): AT BE CH CY DE DK ES FI FR GB GR IE IT LI LU MC NL PT SE TR |
|
AX | Request for extension of the european patent |
Free format text: AL;LT;LV;MK;RO;SI |
|
17P | Request for examination filed |
Effective date: 20011019 |
|
RAP1 | Party data changed (applicant data changed or rights of an application transferred) |
Owner name: BUNDESDRUCKEREI GMBH |
|
GRAP | Despatch of communication of intention to grant a patent |
Free format text: ORIGINAL CODE: EPIDOSNIGR1 |
|
17Q | First examination report despatched |
Effective date: 20070302 |
|
GRAS | Grant fee paid |
Free format text: ORIGINAL CODE: EPIDOSNIGR3 |
|
GRAA | (expected) grant |
Free format text: ORIGINAL CODE: 0009210 |
|
AK | Designated contracting states |
Kind code of ref document: B1 Designated state(s): AT BE CH CY DE DK ES FI FR GB GR IE IT LI LU MC NL PT SE TR |
|
REG | Reference to a national code |
Ref country code: GB Ref legal event code: FG4D Free format text: NOT ENGLISH |
|
REG | Reference to a national code |
Ref country code: CH Ref legal event code: EP |
|
REG | Reference to a national code |
Ref country code: IE Ref legal event code: FG4D Free format text: LANGUAGE OF EP DOCUMENT: GERMAN |
|
REF | Corresponds to: |
Ref document number: 50113260 Country of ref document: DE Date of ref document: 20071227 Kind code of ref document: P |
|
REG | Reference to a national code |
Ref country code: CH Ref legal event code: NV Representative=s name: HEPP, WENGER & RYFFEL AG |
|
REG | Reference to a national code |
Ref country code: PT Ref legal event code: SC4A Free format text: AVAILABILITY OF NATIONAL TRANSLATION Effective date: 20080125 |
|
REG | Reference to a national code |
Ref country code: GR Ref legal event code: EP Ref document number: 20080400359 Country of ref document: GR |
|
REG | Reference to a national code |
Ref country code: DK Ref legal event code: T3 |
|
REG | Reference to a national code |
Ref country code: ES Ref legal event code: FG2A Ref document number: 2296727 Country of ref document: ES Kind code of ref document: T3 |
|
ET | Fr: translation filed | ||
BERE | Be: lapsed |
Owner name: BUNDESDRUCKEREI G.M.B.H. Effective date: 20080131 |
|
PG25 | Lapsed in a contracting state [announced via postgrant information from national office to epo] |
Ref country code: MC Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES Effective date: 20080131 |
|
PLBE | No opposition filed within time limit |
Free format text: ORIGINAL CODE: 0009261 |
|
STAA | Information on the status of an ep patent application or granted ep patent |
Free format text: STATUS: NO OPPOSITION FILED WITHIN TIME LIMIT |
|
REG | Reference to a national code |
Ref country code: IE Ref legal event code: FD4D |
|
26N | No opposition filed |
Effective date: 20080815 |
|
PG25 | Lapsed in a contracting state [announced via postgrant information from national office to epo] |
Ref country code: IE Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT Effective date: 20071114 |
|
PG25 | Lapsed in a contracting state [announced via postgrant information from national office to epo] |
Ref country code: BE Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES Effective date: 20080131 |
|
PG25 | Lapsed in a contracting state [announced via postgrant information from national office to epo] |
Ref country code: CY Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES Effective date: 20090130 |
|
PG25 | Lapsed in a contracting state [announced via postgrant information from national office to epo] |
Ref country code: TR Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT Effective date: 20071114 |
|
PG25 | Lapsed in a contracting state [announced via postgrant information from national office to epo] |
Ref country code: IT Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES Effective date: 20080131 |
|
REG | Reference to a national code |
Ref country code: CH Ref legal event code: NV Representative=s name: SCHMAUDER & PARTNER AG PATENT- UND MARKENANWAELTE |
|
REG | Reference to a national code |
Ref country code: FR Ref legal event code: PLFP Year of fee payment: 16 |
|
REG | Reference to a national code |
Ref country code: FR Ref legal event code: PLFP Year of fee payment: 17 |
|
REG | Reference to a national code |
Ref country code: FR Ref legal event code: PLFP Year of fee payment: 18 |
|
PGFP | Annual fee paid to national office [announced via postgrant information from national office to epo] |
Ref country code: GB Payment date: 20200127 Year of fee payment: 20 Ref country code: FI Payment date: 20200121 Year of fee payment: 20 Ref country code: PT Payment date: 20200122 Year of fee payment: 20 Ref country code: DE Payment date: 20200123 Year of fee payment: 20 Ref country code: NL Payment date: 20200122 Year of fee payment: 20 Ref country code: AT Payment date: 20200121 Year of fee payment: 20 Ref country code: GR Payment date: 20200121 Year of fee payment: 20 Ref country code: SE Payment date: 20200127 Year of fee payment: 20 Ref country code: ES Payment date: 20200219 Year of fee payment: 20 Ref country code: DK Payment date: 20200123 Year of fee payment: 20 |
|
PGFP | Annual fee paid to national office [announced via postgrant information from national office to epo] |
Ref country code: LU Payment date: 20200127 Year of fee payment: 20 Ref country code: CY Payment date: 20200116 Year of fee payment: 20 Ref country code: CH Payment date: 20200127 Year of fee payment: 20 |
|
PGFP | Annual fee paid to national office [announced via postgrant information from national office to epo] |
Ref country code: FR Payment date: 20200123 Year of fee payment: 20 |
|
REG | Reference to a national code |
Ref country code: DE Ref legal event code: R071 Ref document number: 50113260 Country of ref document: DE |
|
REG | Reference to a national code |
Ref country code: DK Ref legal event code: EUP Expiry date: 20210130 |
|
REG | Reference to a national code |
Ref country code: NL Ref legal event code: MK Effective date: 20210129 |
|
REG | Reference to a national code |
Ref country code: CH Ref legal event code: PL |
|
REG | Reference to a national code |
Ref country code: GB Ref legal event code: PE20 Expiry date: 20210129 Ref country code: FI Ref legal event code: MAE |
|
REG | Reference to a national code |
Ref country code: SE Ref legal event code: EUG |
|
REG | Reference to a national code |
Ref country code: AT Ref legal event code: MK07 Ref document number: 378778 Country of ref document: AT Kind code of ref document: T Effective date: 20210130 |
|
PG25 | Lapsed in a contracting state [announced via postgrant information from national office to epo] |
Ref country code: GB Free format text: LAPSE BECAUSE OF EXPIRATION OF PROTECTION Effective date: 20210129 Ref country code: PT Free format text: LAPSE BECAUSE OF EXPIRATION OF PROTECTION Effective date: 20210211 |
|
REG | Reference to a national code |
Ref country code: ES Ref legal event code: FD2A Effective date: 20210728 |
|
PG25 | Lapsed in a contracting state [announced via postgrant information from national office to epo] |
Ref country code: ES Free format text: LAPSE BECAUSE OF EXPIRATION OF PROTECTION Effective date: 20210131 |