EP2110187A1 - Method for identifying, classifying and sorting objects and materials and a recognition system for carrying out this method - Google Patents
Method for identifying, classifying and sorting objects and materials and a recognition system for carrying out this method Download PDFInfo
- Publication number
- EP2110187A1 EP2110187A1 EP09008037A EP09008037A EP2110187A1 EP 2110187 A1 EP2110187 A1 EP 2110187A1 EP 09008037 A EP09008037 A EP 09008037A EP 09008037 A EP09008037 A EP 09008037A EP 2110187 A1 EP2110187 A1 EP 2110187A1
- Authority
- EP
- European Patent Office
- Prior art keywords
- objects
- sorting
- data
- sorted
- unit
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Classifications
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B07—SEPARATING SOLIDS FROM SOLIDS; SORTING
- B07C—POSTAL SORTING; SORTING INDIVIDUAL ARTICLES, OR BULK MATERIAL FIT TO BE SORTED PIECE-MEAL, e.g. BY PICKING
- B07C5/00—Sorting according to a characteristic or feature of the articles or material being sorted, e.g. by control effected by devices which detect or measure such characteristic or feature; Sorting by manually actuated devices, e.g. switches
- B07C5/36—Sorting apparatus characterised by the means used for distribution
- B07C5/363—Sorting apparatus characterised by the means used for distribution by means of air
- B07C5/367—Sorting apparatus characterised by the means used for distribution by means of air using a plurality of separation means
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B07—SEPARATING SOLIDS FROM SOLIDS; SORTING
- B07C—POSTAL SORTING; SORTING INDIVIDUAL ARTICLES, OR BULK MATERIAL FIT TO BE SORTED PIECE-MEAL, e.g. BY PICKING
- B07C5/00—Sorting according to a characteristic or feature of the articles or material being sorted, e.g. by control effected by devices which detect or measure such characteristic or feature; Sorting by manually actuated devices, e.g. switches
- B07C5/04—Sorting according to size
- B07C5/10—Sorting according to size measured by light-responsive means
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B07—SEPARATING SOLIDS FROM SOLIDS; SORTING
- B07C—POSTAL SORTING; SORTING INDIVIDUAL ARTICLES, OR BULK MATERIAL FIT TO BE SORTED PIECE-MEAL, e.g. BY PICKING
- B07C5/00—Sorting according to a characteristic or feature of the articles or material being sorted, e.g. by control effected by devices which detect or measure such characteristic or feature; Sorting by manually actuated devices, e.g. switches
- B07C5/34—Sorting according to other particular properties
- B07C5/342—Sorting according to other particular properties according to optical properties, e.g. colour
Definitions
- an automated sorting method in which the identification of the objects to be sorted is performed by means of spectral data analysis.
- the spectral data for a given amount of objects to be sorted are determined and forwarded for subsequent classification to a computer unit.
- This method is complicated in terms of apparatus technology, since such a detection system consists of three subsystems, namely an image analysis system, a scanning device and an NIR (near infrared) spectrometer.
Landscapes
- Sorting Of Articles (AREA)
- Length Measuring Devices By Optical Means (AREA)
- Investigating Or Analysing Materials By Optical Means (AREA)
Abstract
Description
Die Erfindung betrifft ein Verfahren zum Identifizieren, Klassifizieren und Sortieren von Gegenständen, Objekten und Materialien, ein Erkennungssystem sowie eine Anordnung zur Durchführung dieses Verfahrens.The invention relates to a method for identifying, classifying and sorting objects, objects and materials, a recognition system and an arrangement for carrying out this method.
In einer Reihe von industriellen Prozessen sind Verfahren zur Identifikation bzw. Klassifikation von Gegenständen, Objekten und Materialien ein wichtiges Instrument zur Prozessführung bzw. -kontrolle.In a number of industrial processes, methods for identifying or classifying objects, objects, and materials are an important tool for process control.
So wird gemäß der
Eine weitere bekannte Methode zur Klassifizierung von Gegenständen, Objekten und Materialien ist die Messung von spektralen Eigenschaften an einem Messobjekt in einem oder mehreren optischen Wellenlängenbereichen und die Auswertung der so erhaltenen spektralen Absorptions-, Emissions- oder Reflektionsmuster. Diese Verfahren setzen allerdings voraus, dass der Messfleck repräsentativ für das gesamte Messobjekt ist. Wenn dies nicht gewährleistet ist, beispielsweise wenn die Möglichkeit besteht, dass das Objekt durch andere Materialien verunreinigt oder überdeckt wird, inhomogen ist, oder wenn die Messobjekte eine relevante Oberflächenstruktur aufweisen, die erfasst werden soll, so sind diese Methoden unzureichend. Für derartige Fälle ist die Verwendung von Systemen erforderlich, mit welchen die benötigte Spektralinformation ortsaufgelöst erfasst werden kann.Another known method for classifying objects, objects and materials is the measurement of spectral properties on a measurement object in one or more optical wavelength ranges and the evaluation of the spectral absorption, emission or reflection patterns thus obtained. However, these methods assume that the measuring spot is representative of the entire object to be measured. If this is not ensured, for example if there is the possibility that the object is contaminated or covered by other materials, is inhomogeneous, or if the measuring objects have a relevant surface structure to be detected, these methods are insufficient. For such cases, the use of systems is required, with which the required spectral information can be detected spatially resolved.
Es ist bekannt, in diesem Bereich Filtersysteme zu verwenden, wobei wahlweise diskrete Filter bei Beobachtung weniger, ausgewählter Wellenlängen eingesetzt werden oder wobei durch Verwendung von durchstimmbaren optischen Filtern ein multispektrales Bild, in Kombination mit einer Aufnahmeeinheit, üblicherweise einer Kamera, erfasst wird. Ein derartiges System unter Verwendung von akustisch durchstimmbaren optischen Filtern wird in
Aufgabe der vorliegenden Erfindung ist es, die Nachteile der aus dem Stand der Technik vorbekannten Verfahren zum Identifizieren und Klassifizieren von Gegenständen, Objekten und Materialien zu beseitigen, wobei gleichzeitig eine einfache Verfahrensführung gewährleistet sein soll.The object of the present invention is to eliminate the disadvantages of the prior art methods for identifying and classifying objects, objects and materials, while at the same time ensuring simple process control.
Erfindungsgemäß wird ein Verfahren der eingangs genannten Art vorgeschlagen, welches dadurch gekennzeichnet ist, dass in einem Verfahrensschritt die spektralen Daten, wie Farbinformation, chemische Eigenschaften und räumlichen Daten, wie Form, Größe, Lage und/oder Struktur von relativ zur Messeinheit bewegten oder sich bewegenden Gegenständen, Objekten und Materialien in beiden ebenen Dimensionen mit hoher räumlicher und voller spektraler Auflösung in Echtzeit ermittelt und erfasst werden.According to the invention, a method of the type mentioned is proposed, which is characterized in that the spectral data, such as color information, chemical properties and spatial data, such as shape, size, position and / or structure of moving or moving relative to the measuring unit in one step Objects, objects and materials in both planar dimensions with high spatial and full spectral resolution in real time are detected and recorded.
Vorteilhafte Ausgestaltungen dieses Verfahrens sind Gegenstand der Unteransprüche.Advantageous embodiments of this method are the subject of the dependent claims.
So kommen als Spektralbereiche vorzugsweise die folgenden Bereiche und/oder Subbereiche der Bereiche und/oder Kombinationen der Bereiche zur Anwendung: Ultraviolett (UV, 200 - 380 nm), sichtbares Licht (380 - 780 nm), nahes Infrarot (NIR, 780 - 2500 nm) und mittleres Infrarot (> 2,5 µm). Die so erfassten Gegenstände, Objekte und Materialien können anhand dieser Daten in Echtzeit klassifiziert und anschließend beispielsweise automatisiert sortiert werden.Thus, as spectral ranges, preferably the following ranges and / or subregions of the ranges and / or combinations of ranges are used: ultraviolet (UV, 200-380 nm), visible light (380-780 nm), near infrared (NIR, 780-2500 nm) and mid-infrared (> 2.5 μm). The objects, objects and materials thus captured can be classified on the basis of this data in real time and then, for example, automatically sorted.
Ein beispielhafter Anwendungsfall für das erfindungsgemäße Verfahren ist die material- bzw. sortenreine Sortierung von Gegenständen, Objekten und Materialien, wie Abfallstoffen, aber auch die Aufbereitung von Recycling-Materialien. Es ist bekannt, jegliche Art von Gegenständen, wie Abfallstoffe und Recycling-Material, per Hand zu sortieren. Dabei wird nach Kriterien wie Farbe, Form und Zusammensetzung der zu sortierenden Gegenstände vorgegangen. Obzwar eine Vorsortierung per Hand, wie dies beispielsweise bei kleineren Müllmengen in Haushalten durchgeführt wird, eine Erleichterung für die weitere Abfallentsorgung ist, sind dennoch manuelle Sortierverfahren aufwendig durchzuführen. Um die Sortierung zu vereinfachen bzw. die Sortierung von gesundheitsgefährdenden oder gesundheitsschädlichen Stoffen zu ermöglichen, kann hier das erfindungsgemäße Verfahren eingesetzt werden.An exemplary application for the method according to the invention is the sorting of materials or types of objects, objects and materials, such as waste materials, but also the processing of recycled materials. It is known to sort by hand any kind of items, such as waste and recycled material. It is based on criteria such as color, shape and composition of the items to be sorted. Although presorting by hand, as is done, for example, with smaller amounts of waste in households, is a relief for further waste disposal, yet manual sorting are consuming to perform. In order to simplify the sorting or to enable the sorting of health-endangering or harmful substances, the method according to the invention can be used here.
Ein weiteres Anwendungsbeispiel ist die Verwendung des erfindungsgemäßen Verfahrens zur in-line Qualitätskontrolle von Produkten während des Produktionsprozesses, beispielsweise von Oberflächenbeschichtungen. Die Verwendung des erfindungsgemäßen Verfahrens ermöglicht für diese Anwendung die Kontrolle der Verteilung, Homogenität und Qualität eines Beschichtungsprozesses in Echtzeit. Zusätzlich lassen sich durch Anwendung von Bildverarbeitungsalgorithmen auf das Klassifikationsergebnis automatisiert und in Echtzeit Aussagen, beispielsweise über die räumliche und/oder die Größenverteilung von Irregularitäten treffen, was als Regel- und/oder Qualitätssicherungsparameter für die Prozessführung von essentieller Bedeutung für eine effiziente und störungsarme Produktion ist. Gegenüber dem Stand der Technik, namentlich (i) off-line Stichprobenprüfungen, (ii) nicht-ortsaufgelösten on-line Summenprüfverfahren, im Anwendungsbeispiel Flächenwiderstand und/oder -kapazität, oder (iii) der, aus apparatetechnischer und finanzieller Hinsicht aufwendigen Verwendung mehrerer, über die Breite der Förderanlage verteilten Einzelmessköpfe, stellt das erfindungsgemäße Verfahren somit einen signifikanten Fortschritt dar.Another application example is the use of the method according to the invention for in-line quality control of products during the production process, for example of surface coatings. The use of the method according to the invention makes it possible to control the distribution, homogeneity and quality of a coating process in real time for this application. In addition, by applying image processing algorithms to the classification result, it is possible to automatically and in real time make statements, for example about the spatial and / or the size distribution of irregularities, which as a control and / or quality assurance parameter for process control is of essential importance for efficient and low-interference production , Compared to the state of the art, namely (i) off-line sampling tests, (ii) non-spatially resolved on-line sum testing, in the example sheet resistance and / or capacity, or (iii) the costly use of a plurality of apparatus, and equipment, distributed over the width of the conveyor individual measuring heads, the inventive method thus represents a significant advance.
Die Erfindung betrifft weiters ein Erkennungssystem, bestehend aus einer Detektionseinheit zur simultanen Ermittlung der räumlichen aufgelösten Bild- und Spektraldaten in Echtzeit, welche oberhalb der auf einer Transportanlage, vorzugsweise einer Förderbahn, verteilten, zu klassifizierenden und/oder sortierenden Gegenständen positioniert ist, und einer mit dieser Einheit verbundenen Erkennungs- und Auswerteeinheit zum Auswerten der ermittelten multispektralen Bilddaten. Alternativ kann, insbesonders bei der Betrachtung von Oberflächen großer und/oder schwerer Objekte, die Detektionseinheit auf bzw. von einem ein- oder mehrachsigem Bewegungssystem bewegt werden, wobei sich das Messobjekt in Ruhestellung befindet.The invention further relates to a detection system consisting of a detection unit for the simultaneous determination of spatially resolved image and spectral data in real time, which positions above the objects distributed on a transport system, preferably a conveyor track, to be classified and / or sorted and a detection and evaluation unit connected to this unit for evaluating the determined multispectral image data. Alternatively, especially when viewing surfaces of large and / or heavy objects, the detection unit can be moved to or from a single- or multi-axis motion system, with the measurement object in the rest position.
In beiden Anordnungen können Linien quer zur Richtung der relativen Bewegung der zu klassifizierenden Gegenstände durch einen Spalt im Erkennungssystem abgebildet werden. Vorteilhafterweise besteht dieses Erkennungssystem aus einem bildgebendem Spektrographen in Kombination mit einer Aufnahmeeinheit. Dieses System ist dadurch gekennzeichnet, dass Linien, welche quer zur Richtung der Relativbewegung zwischen Messobjekt und Detektionseinheit verlaufen, mit Hilfe einer geeigneten, spektral abgestimmten Optik abgebildet und über einen Eintrittsspalt einem bildgebenden Spektrographen zugeführt werden, welcher mit einem wellenlängendispersiven Element zum spektralen Zerlegen der Linien ausgerüstet ist, so dass an der Austrittsseite des Spektrographen das eintretende Licht in die entsprechenden Spektralbereiche zerlegt und auf eine Aufnahmeeinheit abgebildet wird.In both arrangements, lines transverse to the direction of relative movement of the articles to be classified may be imaged through a gap in the detection system. Advantageously, this recognition system consists of an imaging spectrograph in combination with a recording unit. This system is characterized in that lines which extend transversely to the direction of the relative movement between the object to be detected and the detection unit are imaged with the aid of a suitable, spectrally matched optics and fed via an entrance slit to an imaging spectrograph, which is provided with a wavelength-dispersive element for the spectral decomposition of the lines is equipped so that at the exit side of the spectrograph, the incoming light is decomposed into the corresponding spectral regions and imaged on a recording unit.
Die, wie vorstehend erläutert, ermittelten Daten werden in der Folge an die Auswerteeinheit weitergegeben, die vorteilhafterweise aus einer elektronischen Datenverarbeitungsanlage besteht. Die mit hoher Geschwindigkeit übertragenen Daten von der Detektionseinheit werden zunächst mit Hilfe eines entsprechenden Computer-Softwareprogramms eingelesen. Zur Weiterverarbeitung umfasst die Computer-Software eine Reihe von mathematischen Algorithmen zur Bearbeitung der mit Hilfe des Erkennungssystems / den Erkennungssystemen ermittelten Datenströme in Echtzeit.The data determined as described above are subsequently passed on to the evaluation unit, which advantageously consists of an electronic data processing system. The data transmitted at high speed from the detection unit are first read in by means of a corresponding computer software program. For further processing, the computer software includes a number of mathematical algorithms for processing in real time the data streams determined using the recognition system (s).
Bedingt durch die Relativbewegung werden sequentiell Linien aufgenommen und mittels Computersoftware zu einem multidimensionalen Informationsraum zusammengesetzt. Dieser besteht aus den beiden Ortskoordinaten in Längs- und Querrichtung zur Bewegungsrichtung sowie aus einer spektralen Dimension, welche die Spektralinformation als spektrale Intensität in Abhängigkeit der Wellenlänge beschreibt. Durch die Auswertung dieser Daten ist es möglich, sowohl Form, Größe und Lage der zu klassifizierenden Gegenstände als auch simultan dazu Farb- und/oder sonstige Materialeigenschaften, z.B. die chemische Zusammensetzung, zu bestimmen.Due to the relative movement, lines are sequentially recorded and assembled by means of computer software into a multidimensional information space. This consists of the two spatial coordinates in the longitudinal and transverse direction to the direction of movement and from a spectral dimension, which describes the spectral information as a spectral intensity as a function of the wavelength. By evaluating this data, it is possible to both form, size and location of the objects to be classified as well as simultaneously Color and / or other material properties, such as the chemical composition to determine.
Allgemein dient diese Klassifikation der Zuordnung der erkannten Gegenstände zu Gruppen mit ähnlichen oder vergleichbaren Eigenschaften, wie im erfindungsgemäßen Fall, Form, Größe, Farbe, Struktur und/oder chemische Konstitution, sowie Kombinationen aus diesen und/oder ähnlichen Parametern. Zwar lassen sich Farben auch mit Hilfe von üblichen Farbkameras festhalten, jedoch sind diese auf drei Farbkanäle beschränkt, so dass eine Farbklassifikation nur mit hohem technischem Aufwand oder aber verminderter Präzision erfolgen kann. Durch das erfindungsgemäße Verfahren wird jedoch eine Spektralzerlegung ermöglicht, welche für 100 bis 200 Wellenlängen typisch ist, so dass ein präzises Identifizieren und Klassifizieren der zu sortierenden Gegenstände gewährleistet ist.In general, this classification serves to associate the detected objects with groups having similar or comparable properties, such as in the case according to the invention, shape, size, color, structure and / or chemical constitution, as well as combinations of these and / or similar parameters. Although colors can also be captured with the help of conventional color cameras, these are limited to three color channels, so that a color classification can be made only with great technical effort or reduced precision. The inventive method, however, a spectral resolution is made possible, which is typical for 100 to 200 wavelengths, so that a precise identification and classification of the objects to be sorted is ensured.
Durch die Beschränkung des mit einer Einheit erfassbaren Spektralbereiches kann es für spezifische Anwendungen vorteilhaft sein, das Gesamtsystem mit zwei oder mehr Detektionseinheiten, jeweils bestehend aus spektral abgestimmter Optik, bildgebendem Spektrographen und Kamera, auszustatten. Dadurch ist es möglich, die Informationsbasis der Klassifikation zu verbreitern und somit die Klassifikationszuverlässigkeit zu erhöhen. Die Detektionseinheiten werden dazu bevorzugt so in das Gesamtsystem integriert, dass sie synchron zueinander laufen und das selbe Beobachtungsfeld erfassen. Die Detektionseinheiten können wahlweise an eine gemeinsame oder individuelle Erkennungs- und Evaluationseinheiten angeschlossen sein.By limiting the unit-detectable spectral range, it may be advantageous for specific applications to equip the overall system with two or more detection units, each consisting of spectrally tuned optics, imaging spectrograph, and camera. This makes it possible to broaden the information base of the classification and thus to increase the classification reliability. The detection units are preferably integrated into the overall system in such a way that they run synchronously with each other and detect the same observation field. The detection units can optionally be connected to a common or individual recognition and evaluation units.
Die Erfindung betrifft weiters eine Anordnung zum Ausführen des erfindungsgemäßen Verfahrens als automatisierter Materialsortierprozess, welche im wesentlichen aus einer durchgängigen Förderbahn und einer wirkmäßig mit dem Erkennungssystem verbundenen Einrichtung, vorzugsweise eine Düsenreihe, besteht. Vorteilhafte Ausgestaltungen dieser Anordnung sind gemäß Unteransprüche geoffenbart.The invention further relates to an arrangement for carrying out the method according to the invention as an automated material sorting process, which consists essentially of a continuous conveyor track and a device which is effectively connected to the recognition system, preferably a nozzle row. Advantageous embodiments of this arrangement are disclosed according to the subclaims.
Die Erfindung wird im folgenden beispielhaft anhand der
-
Fig. 1 eine mögliche Vorrichtung zur Durchführung des erfindungsgemäßen Verfahrens; -
Fig. 2 einen in dieser Vorrichtung vorgesehenen bildgebenden Spektrographen mit integrierter Aufnahmeeinheit; -
Fig. 3 ein in dieser Vorrichtung vorgesehenes Förderband; und -
Fig. 4 den Querschnitt dieses Förderbandes darstellen.
-
Fig. 1 a possible device for carrying out the method according to the invention; -
Fig. 2 an imaging spectrograph having an integrated receiving unit provided in this device; -
Fig. 3 a conveyor belt provided in this apparatus; and -
Fig. 4 represent the cross section of this conveyor belt.
Eine vorteilhafte Ausführungsform des erfindungsgemäßen Verfahrens für die Anwendung als Erfassungs-, Klassifikations- und Steuersystem für die sortenreine Materialsortierung wird in der Folge anhand der beispielhaften Darstellungen gemäß
Die zu sortierenden Gegenstände, Objekte und Materialien werden in Richtung des Pfeils 7 auf das Förderband 4 der Vorrichtung 1 gut verteilt aufgebracht. Nach einer kurzen Beschleunigungsstrecke gelangen diese Gegenstände mit einer Geschwindigkeit von typischerweise 1 bis 3 m/s zur Detektionseinheit 2, welche oberhalb des Förderbandes angeordnet ist. Der zu betrachtende Bereich des Förderbandes ist durch wenigstens eine optische Strahlungsquelle beleuchtet, welche sich bevorzugt durch eine über den Beobachtungsbereich räumlich und spektral homogene Intensitätsverteilung auszeichnet. In dieser Anordnung ist es möglich, Linien, welche quer zum Förderband verlaufen, durch eine Optik 8 der Detektionseinheit 2, wie sie in
Die Daten werden an die Auswerteeinheit 3 übermittelt und dort weiterverarbeitet. Mit dem erfindungsgemäßen Erkennungssystem werden gleichzeitig zwei Kategorien von Daten bestimmt, nämlich einerseits die Spektraldaten zum Bestimmen der Farbe und/oder der chemischen Eigenschaften und anderseits die Bilddaten zum Bestimmen von Form, Lage, Größe und/oder Struktur der zu klassifizierenden Gegenstände. Die Form der Gegenstände wird dadurch aufgenommen, dass die Linien quer zum Förderband mit einer typischen Auflösung von zwischen 128 Punkten und 1600 Punkten erfasst und ausgewertet werden. Durch die sequentielle Aufnahme der Linien entsteht aus den vorgenannten Linien ein zweidimensionales Bild. Aus diesem Datensatz lassen sich die geometrischen Eigenschaften der zu klassifizierenden Gegenstände bestimmen.The data is transmitted to the
Die Datenverarbeitung umfasst für typische, rein qualitative Klassifikation eine Dunkelstromkorrektur, eine Referenzierung gegen einen Standard, eine Normalisierung der Spektren, eine Filterstufe zur Reduktion des Rauschens, die Berechnung der 1. oder 2. Ableitung sowie die eigentliche Klassifikation nach einem auf den jeweiligen Anwendungsfall abgestimmten und optimierten Algorithmus. Weitere Funktionen können beispielsweise die zur Bestimmung des Schwerpunktes und/oder der Objekt- bzw. Klassenkanten und/oder anderer Objekteigenschaften mittels Bildverarbeitungsalgorithmen sein. Dadurch ist es möglich, die zu trennenden Gegenstände präzise zu erkennen, in Echtzeit zu klassifizieren und im weiteren beispielsweise eine entsprechende Sortierung vorzunehmen.For typical, purely qualitative classification, the data processing includes a dark current correction, a referencing to a standard, a normalization of the spectra, a filter stage to reduce the noise, the calculation of the 1st or 2nd derivative as well as the actual classification according to a specific application and optimized algorithm. Further functions can be, for example, those for determining the center of gravity and / or the object or class edges and / or other object properties by means of image processing algorithms. This makes it possible to precisely identify the objects to be separated, to classify them in real time and, for example, subsequently to perform a corresponding sorting.
Im Falle von Mülltrennung ist beispielsweise für das Recycling von Kunststoffflaschen, wie Polyethylenterephthalat (PET) - Flaschen, nicht nur die Klassifikation nach Material, Komponenten, sondern auch nach Farbe und/oder nach Art der Schraubkappe der Flasche für die Weiterarbeitung vorteilhaft. Ebenso können Standard-Sortierkriterien, die bei anderen Klassifikationsverfahren Verwendung finden, wie Länge, Breite und Form bzw. Kontur direkt aus den Daten extrahiert und zur Sortierung herangezogen werden. Durch Kombination der benötigten Daten im softwareseitigen Evaluationsmodul, beispielsweise durch Vergleich mit hinterlegten Soll-Vorgaben, kann das Klassifikationsergebnis an die prozessspezifische Anforderung angepasst werden. Die Daten, das sind die sogenannten Output-Daten des Evaluationsmoduls, werden über eine benutzerdefinierte Schnittstelle, ein weiteres Modell der Computer-Software, an die entsprechenden Steuerkomponenten, beispielsweise ein übergeordnetes Prozessleitsystem oder, wie in dieser beispielhaften Anwendung, an eine Einheit zur automatisierten Sortierung, etwa steuerbare Ausblasdüsen, weitergeleitet. Bei dieser Anwendung für die Materialsortierung kann somit nach dem Ermitteln der vorgenannten Daten eine automatisierte Sortierung, zum Beispiel durch Ausblasen oder mittels gesteuerter Klappen, erfolgen.In the case of waste separation, for example, for the recycling of plastic bottles, such as polyethylene terephthalate (PET) - bottles, not only the classification by material, components, but also by color and / or the nature of the screw cap of the bottle for further processing advantageous. Likewise, standard sorting criteria that are used in other classification methods, such as length, width and shape or contour can be extracted directly from the data and used for sorting. By combining the required data in the software evaluation module, for example by comparison with stored target specifications, the classification result can be adapted to the process-specific requirement. The data, the so-called output data of the evaluation module, is transmitted via a user-defined interface, another model of the computer software, to the corresponding control components, for example a higher-level process control system or, as in this exemplary application, to an automated sorting unit . about controllable exhaust nozzles, forwarded. In this application for material sorting, an automated sorting, for example by blowing out or by means of controlled flaps, can thus take place after the determination of the aforementioned data.
Besonders bevorzugt ist die Sortierung mit Hilfe einer steuerbaren Düsenreihe 5, in welcher Luftdüsen 14 derart angeordnet sind, dass die dadurch erzeugten Luftströme die auszusortierenden Gegenstände schräg seitlich in entsprechende Auffangbehälter wirbeln, so dass diese vom Förderband 4 abgezogen werden können. Die Düsenreihe 5 ist, wie aus
Eine weitere bevorzugte Methode ist die Verwendung eines zusätzlichen Querförderbandes 6, das in einem Abstand von beispielsweise 30 cm quer über dem Transportförderband 4 angebracht ist. Die auszutragenden Gegenstände werden bei dieser Ausführungsform durch die Ausblasdüsen auf dieses Förderband gewirbelt und anschließend auf dem Querförderband abtransportiert. Dieser Sortiervorgang wird anhand der Darstellung gemäß
Zusammenfassend kann gesagt werden, dass das erfindungsgemäße Verfahren zum Identifizieren, Klassifizieren und Sortieren von Gegenständen deshalb in einfacher Weise durchführbar ist, da von einer Einheit simultan und mit hoher räumlicher und spektraler Auflösung in Echtzeit geometrische sowie spektrale Daten, beispielsweise betreffend Farbe und/oder chemischer Eigenschaften der betrachteten Messobjekte erfasst werden. Das erfindungsgemäße Verfahren ist besonders relevant bei Messobjekten, welche sich aus prozesstechnischen oder sonstigen Gründen relativ zum Erkennungssystem in Bewegung befinden. Das erfindungsgemäße Verfahren lässt sich insbesondere mit Hilfe des erfindungsgemäßen Erkennungssystems, bestehend aus einer Einheit zum gleichzeitigen Ermitteln von Bild- und Spektraldaten und einer mit dieser verbundenen Einheit zum Auswerten der ermittelten Bild- und Spektraldaten in einfacher Weise durchführen.In summary, it can be said that the method according to the invention for identifying, classifying and sorting objects can therefore be carried out in a simple manner, since geometric and spectral data, for example concerning color and / or chemical data, of a unit simultaneously and with high spatial and spectral resolution in real time Characteristics of the objects to be measured are recorded. The method according to the invention is particularly relevant in the case of measurement objects which are in motion relative to the recognition system for process engineering or other reasons. The inventive method can be carried out in particular with the aid of the detection system according to the invention, consisting of a unit for the simultaneous determination of image and spectral data and a unit connected to this unit for evaluating the determined image and spectral data in a simple manner.
Claims (10)
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
AT17512002 | 2002-11-21 | ||
EP03450254A EP1421999A3 (en) | 2002-11-21 | 2003-11-20 | Process for identification, classification and sorting of objects and materials and according recognition system |
Related Parent Applications (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
EP03450254A Division EP1421999A3 (en) | 2002-11-21 | 2003-11-20 | Process for identification, classification and sorting of objects and materials and according recognition system |
EP03450254.2 Division | 2003-11-20 |
Publications (2)
Publication Number | Publication Date |
---|---|
EP2110187A1 true EP2110187A1 (en) | 2009-10-21 |
EP2110187B1 EP2110187B1 (en) | 2013-02-27 |
Family
ID=32180923
Family Applications (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
EP09008037A Revoked EP2110187B1 (en) | 2002-11-21 | 2003-11-20 | Method for identifying, classifying and sorting objects and materials and a recognition system for carrying out this method |
EP03450254A Withdrawn EP1421999A3 (en) | 2002-11-21 | 2003-11-20 | Process for identification, classification and sorting of objects and materials and according recognition system |
Family Applications After (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
EP03450254A Withdrawn EP1421999A3 (en) | 2002-11-21 | 2003-11-20 | Process for identification, classification and sorting of objects and materials and according recognition system |
Country Status (3)
Country | Link |
---|---|
EP (2) | EP2110187B1 (en) |
AT (1) | AT7250U1 (en) |
ES (1) | ES2407086T3 (en) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN108620337A (en) * | 2018-03-29 | 2018-10-09 | 潍坊路加精工有限公司 | A kind of method and system of movement material detection stepping |
DE102022120823A1 (en) | 2022-08-17 | 2024-02-22 | Krones Aktiengesellschaft | Device and method for inspecting containers |
Families Citing this family (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CH702891B1 (en) * | 2010-03-25 | 2013-07-15 | Qualysense Ag | Apparatus and method for sorting agricultural particles. |
KR102365281B1 (en) * | 2016-06-21 | 2022-02-18 | 소레크 뉴클리어 리서치 센터 | XRF analyzer, classification system, and classification method for identifying multiple solid objects |
CN106824824A (en) * | 2016-10-26 | 2017-06-13 | 湖南理工学院 | A kind of separating plastic system with preposition image procossing and reflective spectrum unit |
EP3530360A1 (en) * | 2018-02-21 | 2019-08-28 | Siemens Aktiengesellschaft | Detection of non-conveyable mail items |
CN109530271A (en) * | 2018-12-11 | 2019-03-29 | 天津市宽达水产食品有限公司 | Frozen fresh green pea defect ware on-line checking and rejecting are equipped |
US11878327B2 (en) | 2019-03-13 | 2024-01-23 | Digimarc Corporation | Methods and arrangements for sorting items, useful in recycling |
CN110202716B (en) * | 2019-05-17 | 2024-04-30 | 佛山市玖州智能装备技术有限公司 | Waste plastic bottle sorting system and sorting method thereof |
DE102021200894B3 (en) | 2021-02-01 | 2022-04-21 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung eingetragener Verein | Optical examination of objects in a material flow such as bulk goods |
CN114589109B (en) * | 2022-02-28 | 2023-12-12 | 太仓金马智能装备有限公司 | High-precision recyclable object intelligent recognition system and recognition method thereof |
CN115026011B (en) * | 2022-05-25 | 2023-02-21 | 北京隆翔环保科技有限公司 | Intelligent solid waste treatment system |
Citations (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
GB1579741A (en) * | 1978-01-09 | 1980-11-26 | Secretary Industry Brit | Sorting of items into different classes |
US5216484A (en) | 1991-12-09 | 1993-06-01 | The United States Of America As Represented By The Administrator Of The National Aeronautics And Space Administration | Real-time imaging spectrometer |
WO1996006689A2 (en) * | 1994-08-19 | 1996-03-07 | Tiedemanns Joh.H. Andresen Ans | Determination of characteristics of material |
DE19751862A1 (en) | 1997-11-22 | 1999-05-27 | Lutz Prof Dr Priese | Method and equipment for identifying and sorting objects transported on belt conveyor |
EP0982083A2 (en) * | 1998-08-25 | 2000-03-01 | Binder & Co. Aktiengesellschaft | Linear sorting apparatus |
WO2000057160A2 (en) * | 1999-03-19 | 2000-09-28 | Tiedemanns-Joh. H. Andresen Ans, Trading As Tite Ch Autosort | Inspection of matter |
WO2001067073A1 (en) | 2000-03-07 | 2001-09-13 | Colour Vision Systems Pty Ltd | Spectral assessment of fruit |
WO2002007066A1 (en) * | 2000-07-14 | 2002-01-24 | Spectral Dimensions, Inc. | High-volume on-line spectroscopic composition testing of pharmaceutical dosage units |
EP1243350A1 (en) * | 2001-03-19 | 2002-09-25 | PELLENC (Société Anonyme) | Device and method for the automatic inspection of goods passing by in a mainly single-layered flux |
-
2003
- 2003-11-20 ES ES09008037T patent/ES2407086T3/en not_active Expired - Lifetime
- 2003-11-20 EP EP09008037A patent/EP2110187B1/en not_active Revoked
- 2003-11-20 EP EP03450254A patent/EP1421999A3/en not_active Withdrawn
-
2004
- 2004-06-01 AT AT0803504U patent/AT7250U1/en not_active IP Right Cessation
Patent Citations (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
GB1579741A (en) * | 1978-01-09 | 1980-11-26 | Secretary Industry Brit | Sorting of items into different classes |
US5216484A (en) | 1991-12-09 | 1993-06-01 | The United States Of America As Represented By The Administrator Of The National Aeronautics And Space Administration | Real-time imaging spectrometer |
WO1996006689A2 (en) * | 1994-08-19 | 1996-03-07 | Tiedemanns Joh.H. Andresen Ans | Determination of characteristics of material |
DE19751862A1 (en) | 1997-11-22 | 1999-05-27 | Lutz Prof Dr Priese | Method and equipment for identifying and sorting objects transported on belt conveyor |
EP0982083A2 (en) * | 1998-08-25 | 2000-03-01 | Binder & Co. Aktiengesellschaft | Linear sorting apparatus |
WO2000057160A2 (en) * | 1999-03-19 | 2000-09-28 | Tiedemanns-Joh. H. Andresen Ans, Trading As Tite Ch Autosort | Inspection of matter |
WO2001067073A1 (en) | 2000-03-07 | 2001-09-13 | Colour Vision Systems Pty Ltd | Spectral assessment of fruit |
WO2002007066A1 (en) * | 2000-07-14 | 2002-01-24 | Spectral Dimensions, Inc. | High-volume on-line spectroscopic composition testing of pharmaceutical dosage units |
EP1243350A1 (en) * | 2001-03-19 | 2002-09-25 | PELLENC (Société Anonyme) | Device and method for the automatic inspection of goods passing by in a mainly single-layered flux |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN108620337A (en) * | 2018-03-29 | 2018-10-09 | 潍坊路加精工有限公司 | A kind of method and system of movement material detection stepping |
CN108620337B (en) * | 2018-03-29 | 2020-02-21 | 潍坊路加精工有限公司 | Method and system for detecting and grading moving materials |
DE102022120823A1 (en) | 2022-08-17 | 2024-02-22 | Krones Aktiengesellschaft | Device and method for inspecting containers |
Also Published As
Publication number | Publication date |
---|---|
EP1421999A3 (en) | 2005-11-30 |
AT7250U1 (en) | 2004-12-27 |
ES2407086T3 (en) | 2013-06-11 |
EP1421999A2 (en) | 2004-05-26 |
EP2110187B1 (en) | 2013-02-27 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
EP1105715B1 (en) | Method and device for detecting and differentiating between contaminations and accepts as well as between different colors in solid particles | |
DE19751862C2 (en) | Method and device for identifying and sorting belt-conveyed objects | |
EP2598860B1 (en) | Method, sensor unit and machine for detecting "sugar top" defects in potatoes | |
DE4129754C2 (en) | Process for the recovery of pure plastic fractions | |
EP2643103B1 (en) | Process and device for sorting separate grains of bulk material | |
DE4102767A1 (en) | METHOD FOR QUALITATIVE ANALYSIS OF PLASTIC PARTICLES | |
EP2110187B1 (en) | Method for identifying, classifying and sorting objects and materials and a recognition system for carrying out this method | |
EP0562506A2 (en) | Method and device for sorting bulk material | |
EP1048363A2 (en) | Method and apparatus for sorting waste paper | |
DE02360092T1 (en) | Apparatus and method for the automatic inspection of objects that mainly flatten in a single-ply flow | |
DE69921021T2 (en) | A method of distinguishing product units and apparatus therefor | |
EP3494385B1 (en) | Device and method for analysing the alloy composition of metal scrap fragments | |
DE19949656A1 (en) | Separating scrap plastics from vehicles, electronics and other areas according to type, has two stages of separation which use sensors to determine material sort and position on a belt or carousel | |
WO2017207610A1 (en) | Method and apparatus for analyzing inhomogeneous bulk cargo | |
DE10149505A1 (en) | Method and device for selecting plastics and other materials with regard to color and composition | |
EP1533045B1 (en) | Process and device for improved sorting of waste paper and cardboard | |
DE19816881B4 (en) | Method and device for detecting and distinguishing between contaminations and acceptances as well as between different colors in solid particles | |
EP3493924B1 (en) | Device and method for analysing the alloy composition of metal scrap fragments | |
DE102004051311B4 (en) | Apparatus and method for performing fluorescence and emission spectrometry | |
DE102016220523B4 (en) | Apparatus and method for analyzing optically detectable inhomogeneities on the surface of wafers | |
DE4222984A1 (en) | Automatic coin sorting appts. for coin mfr. - has coin distribution and alignment device, illumination unit, image analyser and rejection device | |
DE102005032493A1 (en) | Equipment separating natural- and artificial corks, illuminates them with electromagnetic beam and compares reflected and emitted spectra with results from natural cork | |
WO2008034432A2 (en) | Method and device for identifying properties of objects | |
DE202019100945U1 (en) | Apparatus for determining the quality of substitute fuels | |
DE4236467A1 (en) | Separating plastics from mixtures of waste materials - by irradiating with UV radiation then analysing reflected radiation to identify plastics present |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PUAI | Public reference made under article 153(3) epc to a published international application that has entered the european phase |
Free format text: ORIGINAL CODE: 0009012 |
|
AC | Divisional application: reference to earlier application |
Ref document number: 1421999 Country of ref document: EP Kind code of ref document: P |
|
AK | Designated contracting states |
Kind code of ref document: A1 Designated state(s): AT BE BG CH CY CZ DE DK EE ES FI FR GB GR HU IE IT LI LU MC NL PT RO SE SI SK TR |
|
RIN1 | Information on inventor provided before grant (corrected) |
Inventor name: KULCKE, AXEL, DR. Inventor name: GURSCHLER, CHRISTIAN Inventor name: SCHERF, WERNER, DR. Inventor name: LEITNER, RAIMUND |
|
17P | Request for examination filed |
Effective date: 20100324 |
|
17Q | First examination report despatched |
Effective date: 20110519 |
|
GRAP | Despatch of communication of intention to grant a patent |
Free format text: ORIGINAL CODE: EPIDOSNIGR1 |
|
GRAS | Grant fee paid |
Free format text: ORIGINAL CODE: EPIDOSNIGR3 |
|
GRAA | (expected) grant |
Free format text: ORIGINAL CODE: 0009210 |
|
AC | Divisional application: reference to earlier application |
Ref document number: 1421999 Country of ref document: EP Kind code of ref document: P |
|
AK | Designated contracting states |
Kind code of ref document: B1 Designated state(s): AT BE BG CH CY CZ DE DK EE ES FI FR GB GR HU IE IT LI LU MC NL PT RO SE SI SK TR |
|
REG | Reference to a national code |
Ref country code: GB Ref legal event code: FG4D Free format text: NOT ENGLISH |
|
REG | Reference to a national code |
Ref country code: CH Ref legal event code: EP |
|
REG | Reference to a national code |
Ref country code: AT Ref legal event code: REF Ref document number: 598214 Country of ref document: AT Kind code of ref document: T Effective date: 20130315 |
|
REG | Reference to a national code |
Ref country code: IE Ref legal event code: FG4D Free format text: LANGUAGE OF EP DOCUMENT: GERMAN |
|
REG | Reference to a national code |
Ref country code: DE Ref legal event code: R096 Ref document number: 50314709 Country of ref document: DE Effective date: 20130425 |
|
RAP2 | Party data changed (patent owner data changed or rights of a patent transferred) |
Owner name: TOMRA SORTING AS |
|
REG | Reference to a national code |
Ref country code: ES Ref legal event code: FG2A Ref document number: 2407086 Country of ref document: ES Kind code of ref document: T3 Effective date: 20130611 |
|
REG | Reference to a national code |
Ref country code: AT Ref legal event code: HC Ref document number: 598214 Country of ref document: AT Kind code of ref document: T Owner name: TOMRA SORTING AS, NO Effective date: 20130418 |
|
REG | Reference to a national code |
Ref country code: DE Ref legal event code: R081 Ref document number: 50314709 Country of ref document: DE Owner name: TOMRA SORTING AS, NO Free format text: FORMER OWNER: TITECH VISIONSORT AS, OSLO/OSLO, NO Effective date: 20130528 |
|
PG25 | Lapsed in a contracting state [announced via postgrant information from national office to epo] |
Ref country code: BG Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT Effective date: 20130527 Ref country code: SE Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT Effective date: 20130227 |
|
REG | Reference to a national code |
Ref country code: NL Ref legal event code: VDEP Effective date: 20130227 |
|
REG | Reference to a national code |
Ref country code: SK Ref legal event code: T3 Ref document number: E 14220 Country of ref document: SK |
|
REG | Reference to a national code |
Ref country code: FR Ref legal event code: CD Owner name: TOMRA SORTING AS, NO Effective date: 20130723 Ref country code: FR Ref legal event code: CA Effective date: 20130723 |
|
PG25 | Lapsed in a contracting state [announced via postgrant information from national office to epo] |
Ref country code: FI Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT Effective date: 20130227 Ref country code: SI Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT Effective date: 20130227 Ref country code: PT Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT Effective date: 20130627 Ref country code: GR Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT Effective date: 20130528 |
|
PG25 | Lapsed in a contracting state [announced via postgrant information from national office to epo] |
Ref country code: CZ Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT Effective date: 20130227 Ref country code: EE Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT Effective date: 20130227 Ref country code: NL Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT Effective date: 20130227 Ref country code: RO Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT Effective date: 20130227 Ref country code: DK Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT Effective date: 20130227 |
|
PGFP | Annual fee paid to national office [announced via postgrant information from national office to epo] |
Ref country code: ES Payment date: 20130903 Year of fee payment: 11 Ref country code: SK Payment date: 20130902 Year of fee payment: 11 |
|
PG25 | Lapsed in a contracting state [announced via postgrant information from national office to epo] |
Ref country code: CY Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT Effective date: 20130227 |
|
PGFP | Annual fee paid to national office [announced via postgrant information from national office to epo] |
Ref country code: FR Payment date: 20130913 Year of fee payment: 11 |
|
PLBI | Opposition filed |
Free format text: ORIGINAL CODE: 0009260 |
|
26 | Opposition filed |
Opponent name: SCHOEN, GEORG Effective date: 20131121 Opponent name: STEINERT ELEKTROMAGNETBAU GMBH Effective date: 20131125 Opponent name: LLA INSTRUMENTS GMBH Effective date: 20131126 |
|
PLAX | Notice of opposition and request to file observation + time limit sent |
Free format text: ORIGINAL CODE: EPIDOSNOBS2 |
|
PGFP | Annual fee paid to national office [announced via postgrant information from national office to epo] |
Ref country code: AT Payment date: 20131126 Year of fee payment: 11 Ref country code: DE Payment date: 20131127 Year of fee payment: 11 Ref country code: GB Payment date: 20131120 Year of fee payment: 11 |
|
REG | Reference to a national code |
Ref country code: DE Ref legal event code: R026 Ref document number: 50314709 Country of ref document: DE Effective date: 20131121 |
|
PGFP | Annual fee paid to national office [announced via postgrant information from national office to epo] |
Ref country code: IT Payment date: 20131118 Year of fee payment: 11 |
|
PLAF | Information modified related to communication of a notice of opposition and request to file observations + time limit |
Free format text: ORIGINAL CODE: EPIDOSCOBS2 |
|
BERE | Be: lapsed |
Owner name: TITECH VISIONSORT AS Effective date: 20131130 |
|
REG | Reference to a national code |
Ref country code: CH Ref legal event code: PL |
|
PG25 | Lapsed in a contracting state [announced via postgrant information from national office to epo] |
Ref country code: MC Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT Effective date: 20130227 Ref country code: LI Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES Effective date: 20131130 Ref country code: CH Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES Effective date: 20131130 |
|
REG | Reference to a national code |
Ref country code: IE Ref legal event code: MM4A |
|
PG25 | Lapsed in a contracting state [announced via postgrant information from national office to epo] |
Ref country code: BE Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES Effective date: 20131130 |
|
PLAF | Information modified related to communication of a notice of opposition and request to file observations + time limit |
Free format text: ORIGINAL CODE: EPIDOSCOBS2 |
|
PG25 | Lapsed in a contracting state [announced via postgrant information from national office to epo] |
Ref country code: IE Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES Effective date: 20131120 |
|
PLBB | Reply of patent proprietor to notice(s) of opposition received |
Free format text: ORIGINAL CODE: EPIDOSNOBS3 |
|
REG | Reference to a national code |
Ref country code: DE Ref legal event code: R119 Ref document number: 50314709 Country of ref document: DE |
|
PG25 | Lapsed in a contracting state [announced via postgrant information from national office to epo] |
Ref country code: TR Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT Effective date: 20130227 |
|
REG | Reference to a national code |
Ref country code: AT Ref legal event code: MM01 Ref document number: 598214 Country of ref document: AT Kind code of ref document: T Effective date: 20141120 |
|
GBPC | Gb: european patent ceased through non-payment of renewal fee |
Effective date: 20141120 |
|
PG25 | Lapsed in a contracting state [announced via postgrant information from national office to epo] |
Ref country code: LU Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES Effective date: 20131120 Ref country code: SK Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES Effective date: 20141120 Ref country code: HU Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT; INVALID AB INITIO Effective date: 20031120 |
|
REG | Reference to a national code |
Ref country code: SK Ref legal event code: MM4A Ref document number: E 14220 Country of ref document: SK Effective date: 20141120 |
|
REG | Reference to a national code |
Ref country code: FR Ref legal event code: ST Effective date: 20150731 |
|
PG25 | Lapsed in a contracting state [announced via postgrant information from national office to epo] |
Ref country code: AT Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES Effective date: 20141120 |
|
PG25 | Lapsed in a contracting state [announced via postgrant information from national office to epo] |
Ref country code: GB Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES Effective date: 20141120 Ref country code: DE Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES Effective date: 20150602 |
|
PG25 | Lapsed in a contracting state [announced via postgrant information from national office to epo] |
Ref country code: FR Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES Effective date: 20141201 |
|
REG | Reference to a national code |
Ref country code: ES Ref legal event code: FD2A Effective date: 20151229 |
|
PG25 | Lapsed in a contracting state [announced via postgrant information from national office to epo] |
Ref country code: IT Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES Effective date: 20141120 |
|
PG25 | Lapsed in a contracting state [announced via postgrant information from national office to epo] |
Ref country code: ES Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES Effective date: 20141121 |
|
PLAY | Examination report in opposition despatched + time limit |
Free format text: ORIGINAL CODE: EPIDOSNORE2 |
|
PLBC | Reply to examination report in opposition received |
Free format text: ORIGINAL CODE: EPIDOSNORE3 |
|
RDAF | Communication despatched that patent is revoked |
Free format text: ORIGINAL CODE: EPIDOSNREV1 |
|
REG | Reference to a national code |
Ref country code: DE Ref legal event code: R064 Ref document number: 50314709 Country of ref document: DE Ref country code: DE Ref legal event code: R103 Ref document number: 50314709 Country of ref document: DE |
|
RDAG | Patent revoked |
Free format text: ORIGINAL CODE: 0009271 |
|
STAA | Information on the status of an ep patent application or granted ep patent |
Free format text: STATUS: PATENT REVOKED |
|
27W | Patent revoked |
Effective date: 20160630 |
|
REG | Reference to a national code |
Ref country code: AT Ref legal event code: MA03 Ref document number: 598214 Country of ref document: AT Kind code of ref document: T Effective date: 20160630 |
|
REG | Reference to a national code |
Ref country code: SK Ref legal event code: MC4A Ref document number: E 14220 Country of ref document: SK Effective date: 20160630 |