EP3424000A1 - Verfahren zur erstellung einer beschreibung eines gepäckstücks und gepäckbeschreibungssystem - Google Patents

Verfahren zur erstellung einer beschreibung eines gepäckstücks und gepäckbeschreibungssystem

Info

Publication number
EP3424000A1
EP3424000A1 EP16797921.0A EP16797921A EP3424000A1 EP 3424000 A1 EP3424000 A1 EP 3424000A1 EP 16797921 A EP16797921 A EP 16797921A EP 3424000 A1 EP3424000 A1 EP 3424000A1
Authority
EP
European Patent Office
Prior art keywords
luggage
piece
description
item
baggage
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Withdrawn
Application number
EP16797921.0A
Other languages
English (en)
French (fr)
Inventor
Gerhard HAGER
Jürgen HOHLWEGLER
Bengt Mueck
Ilian Pashov
Jörg ROTTLAND
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Siemens AG
Original Assignee
Siemens AG
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Siemens AG filed Critical Siemens AG
Publication of EP3424000A1 publication Critical patent/EP3424000A1/de
Withdrawn legal-status Critical Current

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q10/00—Administration; Management
    • G06Q10/08—Logistics, e.g. warehousing, loading or distribution; Inventory or stock management
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00—Pattern recognition
    • G06F18/20—Analysing
    • G06F18/22—Matching criteria, e.g. proximity measures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q10/00—Administration; Management
    • G06Q10/08—Logistics, e.g. warehousing, loading or distribution; Inventory or stock management
    • G06Q10/083—Shipping
    • G06Q10/0838—Historical data
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N20/00—Machine learning
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/30—Subject of image; Context of image processing
    • G06T2207/30108—Industrial image inspection
    • G06T2207/30112—Baggage; Luggage; Suitcase
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/50—Depth or shape recovery
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/60—Analysis of geometric attributes
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V2201/00—Indexing scheme relating to image or video recognition or understanding
    • G06V2201/09—Recognition of logos

Definitions

  • the invention relates to a method for producing a description of a piece of luggage.
  • a checked baggage item In the case of air travel, a checked baggage item is usually provided with a baggage tag in order to be able to sort the baggage item during the transport or to be able to allocate it (eg to a transport and / or owner information).
  • the barcode is read ⁇ to perform the sorting / assignment in the course of transportation.
  • the barcode codes the luggage number, for which in turn the flight number and further transport information are stored.
  • a baggage tag is damaged during transport of the baggage item (for example during transport via conveyor belts or conveyor belts, during loading of the aircraft and / or during unloading of the aircraft). It may even happen that a luggage tag of a piece of luggage is lost. In these cases, an assignment of the luggage is very expensive, takes time and there is an increased expenditure on staff ⁇ wall. In particular, if the baggage tag is lost, must be tried by hand, z. For example, by name tags on the luggage, to obtain information on the owner of the luggage.
  • This object is achieved by a method for creating a description of a piece of luggage at in which the item of luggage is detected by means of at least one visual detection device, if appropriate also by means of several detection devices, by means of which at least one piece of luggage image or in the case of several detection devices multiple piece of luggage images is or will be generated from the at least one piece of luggage image or the plurality of baggage images visual features of the item of luggage are extracted and a piece of baggage description is created from the extracted visual features of the item of luggage.
  • the invention is based on the consideration that the detection of the item of luggage and the creation of luggage description ⁇ an efficient way, in particular a quick and labor-saving way, is to describe the bag. Furthermore, the possibility of the bag, this results in particularly efficient and fast staff spa ⁇ rend assign and / or to sort. At least ei ⁇ NEN - - In particular, the item of luggage by means of the visual is detecting means detects visually.
  • the item of luggage can be, for example, a suitcase, a travel bag, a bulky item of luggage, a sports equipment or any other piece of luggage.
  • the - at least one - piece of luggage image comprises at least a partial section of the item of luggage.
  • the luggage piece ⁇ imaging can be produced in the form of a pixel image of a latching Erbil ⁇ of and / or the like. Further, the overall can padosabsent a 2D image, 3D image and / or trans ⁇ of finished image to be.
  • visual features of the item of luggage may be determined by an evaluation and / or an analysis of the at least one item of luggage.
  • NEN luggage image or more Gepiere publishedabbil ⁇ countries are obtained.
  • a dimension (or size) of the luggage piece suitably determined by a combination of several Gepiere Anlagenabricn of several visual detection devices, such as multiple cameras, the ⁇ .
  • a dimension (or size) of the luggage piece suitably determined by a combination of several Gepiere Anlagenabricn of several visual detection devices, such as multiple cameras, the ⁇ .
  • a transport speed of the item of luggage and image recording frequencies of the plurality of visual recording devices or cameras are further useful information that can be used to determine visual characteristics or the dimensions.
  • the determination of the size of the item of luggage can be estimated on the basis of dimensions of known objects in the at least one piece of luggage, eg a luggage label is about 50mm wide - and made ⁇ so bright light on the dimension or the size of the luggage ⁇ tee.
  • the baggage description may be created by summarizing the extracted visual features of the bag.
  • the baggage description may be of any shape, e.g. Example, the Gepiere Anlagenbeschrei ⁇ environment to be created in the form of a vector or in the form of descriptive text.
  • the piece of luggage image is automatically detected by means of the visual detection device.
  • the visual detection can be carried out at least partially automatically.
  • the visual detection device focusses the item of luggage on its own and / or triggers the detection on its own initiative.
  • a sub-step of the detection can be performed otherwise than by the detection device itself, for example by a person acting.
  • the visual detection device is a hand-held device, in particular a hand-held camera and / or a hand-held scanner. Further, the visual detection device may be a hand-held laser camera and / or a hand-held laser scanner.
  • the visual detection means is a means Hander ventes-, is usefully a substep of He ⁇ abstract, z. As the positioning of the hand-held device executed by a person acting.
  • the piece of luggage image can be detected fully automatically by means of the visual detection device, in particular without manual intervention of a person.
  • the visual detection device can be a fully automatic camera and / or a fully automatic scanner.
  • the piece of luggage image can be generated automatically, in particular by means of the visual detection device.
  • the visual characteristics of the baggage can be extracted automatic ⁇ table from the piece of luggage image, par- by means of a data processing unit.
  • the piece of baggage description can be automatically created from the extracted visual features of the luggage, and in particular ⁇ sondere means of the data processing unit.
  • the data processing unit is directed to a ⁇ , for example by a corresponding lauffähi ⁇ ges computer program running on the data processing unit to extract visual features of the item of luggage from the luggage piece of image and / or to create the Gepiere publishedbe ⁇ scription from the extracted visual features of the luggage ,
  • the invention and / or the further developments described can be realized-at least partially-both in software and in hardware, for example using a special electrical circuit.
  • the invention and / or the described developments - at least partially - be realized by a computer program product, which has a storage medium on ⁇ on which the computer program is stored, wel ⁇ Ches the invention and / or the developments - at least partially - executes.
  • the visual features of the item of luggage can luggage ⁇ Suiteabfair, a piece of luggage shape, a piece of luggage color, a piece of baggage screening, a piece of luggage logo and / or an overall piere Swissmarkennamen include.
  • the baggage allowance may include a length of the bag, a width of the bag, and / or a height of the bag.
  • the baggage description is expediently created in the form of a description vector.
  • Next loading ⁇ write-vector can be one-dimensional or multidimensional.
  • the vector comprises a plurality of description Vek ⁇ torfelder.
  • each vector field may comprise a visual feature, in particular in the form of text and / or numbers.
  • the baggage description can be created in the form of a descriptive text.
  • An additional element can be arranged on the item of luggage.
  • the additional element can, for. B. be an identification element.
  • the additional element z.
  • a luggage label also called baggage label or banderole
  • a sticker As a luggage label, also called baggage label or banderole, a sticker
  • the trailer may be, for example, an airline trailer, an airport trailer and / or a personal trailer.
  • the additional element is releasably connected to the luggage.
  • the additional element may be removable from the luggage.
  • the additional element arranged on the item of luggage is detected by means of thebut ⁇ len detection device.
  • an additional image is generated by means of the detection device.
  • visual features of the additional element can be extracted.
  • a 1925beschrei ⁇ environment can be created from the extracted visual features of the additional element.
  • the Rajbe ⁇ description together with the luggage description an expanded baggage description.
  • an expanded piece of luggage description is created from the extracted visual features of the additional element and from the extracted features of the item of luggage.
  • the piece of luggage image and the additional image can each be a subarea of a common image.
  • the piece of baggage image and the additional image may be a partial area in images different in each case at least ⁇ .
  • the visual features of the additional element may include a shape of the additional element, a color of the additional element, a pattern of the additional element, a dimension of the additional element and / or a logo of the additional element.
  • the dimension of the additional element may comprise a length of the additional element to a width of the set ⁇ elements and / or a level of the additional element.
  • the logo of the additional element z.
  • the piece of luggage may include a Informati ⁇ onssatz in the form of plain text an additional element.
  • the additional element may be the aforementioned additional element.
  • at least part of the information record can be recognized by means of an optical text recognition, in particular by means of OCR ("optical character recognition").
  • the recognized part of the information record can be stored, for example, as an information record description. Furthermore, the recognized part of the information record (eg as an information record description) can be stored in the extended baggage item description and / or in addition to the extended baggage item description.
  • the information set comprises additional infor mation ⁇ such.
  • B. Transport and / or Eigentinformatio ⁇ NEN For example, the information set, a baggage number, an owner name, also called passenger name, flight number, an intermediate airport code and / or a target ⁇ airport code, in particular as a transport and / or self- ⁇ -owner information, include.
  • the information set may include processing information.
  • you can Processing information processing instructions such as. B. "short connection time” ( “Short connection time”), "before ⁇ -ranking Treatment” ( “handle with priority”) and / or "Caution risk of fracture” ( “handle with care FRAGILE”).
  • processing information may include security information.
  • the piece of luggage is automatically sorted using the recognized portion of the information set.
  • the recognized part of the information set is automatically taken into account in the sorting.
  • Sorting luggage can be understood as “Assign luggage”.
  • a transport, owner and / or processing information can be assigned.
  • sorting luggage may, for example, include one or more transport steps of the item of luggage corresponding to the assignment Preferably, the sorting takes place in an airport
  • the item of luggage may be a destination be assigned, to be transported to wel ⁇ chem the bag.
  • the destination may, for example, a particular gate, a certain te loading zone, a particular aircraft, a particular luggage ⁇ means of transport (in particular, a certain baggage carousel), a destination airport, a baggage band a destination airport or the like.
  • the extraction of visual Merk ⁇ paint, in particular of visual characteristics of the luggage takes place and / or visual features of the additional element, using prior knowledge and / or using trainable systems.
  • the data processing unit typical layouts, that get stored as knowledge typical visual features of Rajelemen ⁇ th, in particular luggage labels, learn and / or.
  • conclusions can be drawn from recognized and / or extracted visual features of the additional element for further information, such as transport and / or processing information.
  • transport and / or processing information due to certain visual features of the
  • the comparative description can be at a delivery of luggage and / or check-in vomit ⁇ chert.
  • the comparison description is stored in a database.
  • the United ⁇ same description can be stored in a data set.
  • the data record can contain additional information, such as transport, owner and / or processing information, in addition to the comparative description.
  • the data record-in addition to the comparative description- may include a baggage number, an owner name, a flight number, an inter-airport code or name, a destination airport code or name, and / or a destination as further information.
  • the comparison description anonymous or anonymizing, which then expediently does not include owner information, in particular no owner name.
  • the storage of thethesesbe ⁇ scription or the data set automatically.
  • the comparison description or the data record can be stored for a limited time.
  • the luggage description may (or extended baggage description), in particular assaysbe ⁇ scription, made available, in particular at any location ( "Where"), and at any time ( “when"), (for any person “for whom” ) and for any purpose ("where ⁇ for”).
  • the piece of luggage may be a piece of luggage.
  • the comparative description is preferably made available to other airports or also to all airports involved in the transport of the luggage. Involved in the transport of luggage participate Flight ⁇ ports such can. B. a departure airport, an intermediate airport and / or a destination airport of the baggage be.
  • the data set in which the comparative description is stored is made available to all the transport of luggage participating interests ⁇ gen airports. In this way, all airports involved in the transport of the baggage can access the comparative description or the data record.
  • the comparison description can be transmitted to all participating in the transport of the baggage airports.
  • the comparison description or the data record can be stored locally in a respective database of the respective airport.
  • theetcsbe ⁇ scription or the data in a distributed database can be stored, have to which the airports involved reached to ⁇ .
  • the baggage item description is conveniently specific to the baggage item.
  • the method is used in a test.
  • it is checked during the check whether the item of baggage description (or the extended piece of baggage description) agrees with a description of the description.
  • the comparative description may be the aforementioned comparison description.
  • the comparison description may be another comparison description stored in the database.
  • the test is carried out at a later time point than ⁇ storinguploadssbe ⁇ scription.
  • the comparison description can be stored in a first detection of the luggage by means of the visual detection ⁇ device.
  • a first Gepiere publishedab ⁇ image can be generated.
  • a first piece of luggage description can be generated from the first piece of luggage image.
  • the first piece of luggage description can be stored as a comparison description.
  • the test is expediently carried out at or after a second detection of the item of luggage, wherein the second detection takes place after the first detection.
  • one or more transport and / or sorting step (s) may lie between the first detection and the second detection.
  • a second piece of baggage image can be generated in the second Erfas ⁇ solution of the luggage.
  • a second piece of luggage description can be generated from the second piece of luggage piece image.
  • the luggage item description checked during the check may be a second item of luggage description, which has in particular the same properties and features as the first or first item of luggage description.
  • the database may include multiple comparison descriptions.
  • the plurality of comparison descriptions include the above-mentioned comparison description.
  • the multiple comparison descriptions can each be stored in a data record.
  • the plurality Ver ⁇ same descriptions will be (at least partially) in succession with the baggage item description (or the extended piece of luggage description) compared.
  • the method can be used in another test. Upon further examination is preferably examined comprising wel ⁇ surface comparative descriptions of the database, the best match for the piece of baggage description (or expanded screened baggage description). Next to be tested during the further review / certified Gepiere Anlagenbe ⁇ scription may be the second piece of luggage description or the second extended baggage description. Appropriately, the further check is carried out automatically, in particular by means of the data processing unit.
  • the baggage item description to be checked can be, for. B. are successively compared with each of the comparison descriptions stored in the database. For each individual comparison, for example, a degree of agreement can be determined. The comparison description in which the highest degree of agreement is reached can be selected. Next, the information of the data set, in which the selectedcommandsbeschrei ⁇ environment is stored, to be used, in particular the Ge ⁇ checked luggage to assign Sort /.
  • the method is used to identify a piece of luggage.
  • An identification of the baggage ⁇ piece can be done for example by an unambiguous assignment of the baggage to a record. Especially At least one of the aforementioned tests may lead to the identification of the item of luggage.
  • the identification may be followed by ER during the transport process, particularly to a destination of the baggage to it ⁇ forward. Furthermore, the identification of detected items of luggage can be done, in particular the owner of a ge ⁇ fundenen baggage to be determined.
  • An advantage of identifying the baggage item is that the baggage claim can be used directly to obtain information about the baggage item. The processing of the luggage is possible without a barcode, a Ge ⁇ piere devis and / or a baggage tag.
  • the method is used for an assignment.
  • the description of the item of luggage can be used to associate information, in particular transport, owner and / or processing information, with the item of luggage.
  • the assignment of information can be done directly from the baggage description. If, for example, a certain piece of luggage allowance is found in the description of the baggage, which indicates that the baggage is bulky, the item of baggage may e.g. B. be treated separately, in particular be passed over a specific sorting line.
  • the assignment of information about the identification of the item of luggage can take place.
  • a piece of luggage can be uniquely assigned to the item of luggage, from which the information (s) can be read.
  • the luggage z.
  • a baggage number, a flight number, a destination and / or an owner name can be assigned.
  • the method can be used to identify an owner of a found piece of luggage.
  • the method can be used to image the piece of luggage.
  • an image of the item of luggage can be created from the item description.
  • the image of the item of luggage is an image of the item of luggage, a schematic representation of the item of luggage, a 2D model of the item of luggage and / or a 3D model of the item of luggage.
  • the imaging can be done by means of the data processing unit. Furthermore, the method for finding a missing piece of luggage can be used. Specifically, the method can be used to locate a missing piece of luggage ⁇ to by an image of the item of luggage is created from the Gepiere publishedbe ⁇ scription.
  • a missing piece of luggage a Eigentü ⁇ mers can be found. For this is sought, for example, in data banks ⁇ for the owner name and / or after the luggage number, and the record for the missing piece of luggage found overall. From the record of the missing piece of luggage, in particular from the comparison description to the missing piece of luggage, which is preferably stored in the record of the missing piece of luggage, an image of the missing piece of luggage can be created. Furthermore, it can be stored in the data set for the missing piece of luggage at which collection point the missing piece of luggage is located. Using the image created of the missing luggage may be searched at the collection point for the missing piece of luggage, in particular by all located at the meeting point of luggage with the image of the missing luggage are ver ⁇ equalized. In this way, the missing luggage ⁇ pieces can be found.
  • the method for finding a missing piece of luggage can be used by comparing the data record for the missing piece of luggage and / or the comparison description for the missing piece of luggage with other data sets.
  • the other records can be in the same database be stored and / or in another database z. B. another airport.
  • the image of the overall piere Irishs created from the luggage description can be compared with a comparison image ⁇ to.
  • the comparison can be made automatically, in particular by means of the data processing unit, and / or manually.
  • the comparison image can be created from a comparison description, in particular by means of the data processing unit.
  • the comparative description can be the comparative description given above.
  • the method can be used in a baggage check.
  • it is checked in the luggage piece check whether an appearance of the bag has changed, in particular whether the bag was damaged (eg., During transport and / or sorting). If the baggage check reveals that the bag has changed, in particular that the bag has been damaged, the baggage inspection may further examine the extent to which the appearance of the bag has changed.
  • the luggage item check can be carried out automatically, in particular by means of the data processing unit, and / or manually.
  • the baggage check may be done using the created image. In particular, it can be checked during the luggage item check whether the image of the item of luggage created from the item of luggage description differs from the comparison image. It can further be tested in the Ge ⁇ piere Anlagenschreibieri to what extent the image of the item of luggage created from the luggage description differs from the comparative image, ie which sub ⁇ ences best between the Malawill- from the luggage description th image of the luggage and the comparison image ⁇ hen. Further, the baggage check may be done using the baggage description. In particular, it can be checked in the luggage piece check, whether the baggage description differs from the comparative description.
  • WEI ter can be checked in the baggage check to what extent the luggage description differs from the comparative description, ie what are the differences Zvi ⁇ rule of luggage description and comparison description.
  • the baggage item description checked in the baggage check may be the second baggage item description.
  • the item of luggage is expediently recorded several times in the course of its transport at different baggage description systems in the manner described above.
  • a piece of luggage description is created in each of the surveys.
  • Each of the created baggage item descriptions of the item of luggage is preferably used in common, for. B. stored with an identification number of the baggage description system, in particular in the database.
  • a record for the item of luggage may include a plurality of item descriptions of this item of luggage and possibly the associated identification numbers of the respective item description system.
  • the method is used in a variety of luggage, preferably for each of the luggage a luggage ⁇ piece description is created.
  • the method can be used for the statistical evaluation of visual features of luggage, in particular if the method is used in a large number of items of luggage.
  • the statistical evaluation of visual characteristics at least a part of the recorded visual features of the luggage statistically evaluated.
  • the statistical evaluation of the luggage ⁇ piece dimensions for a variety of luggage
  • the statistical evaluation of the luggage piece shape, color and / or mark can be used for a product design and / or for advertising purposes.
  • the statistical evaluation can, for example, according to bestimm ⁇ th criteria, such. B. after the departure airport, for a country of departure, after one season, for a family of the owner of the luggage and / or the like SUC ⁇ gen.
  • bestimm ⁇ th criteria such. B. after the departure airport, for a country of departure, after one season, for a family of the owner of the luggage and / or the like SUC ⁇ gen.
  • the statistical analysis for meh ⁇ eral seasons, z. B. for summer and winter be carried out separately. In this way it can be examined whether at least part of the recorded visual features, eg. B. a color of the luggage, different for different years .
  • the invention relates to a luggage description system, which according to the invention comprises a visual detection device and a data processing unit for carrying out the aforementioned method.
  • the He ⁇ invention relates to a luggage Description system with a visual detection means for visual detection of the item of luggage as baggage image, and a data processing unit for Ex ⁇ traction visual features of the baggage from the baggage item image and to create a piece of luggage description from the extracted visual features of the luggage.
  • the baggage handling system may be used to carry out the method described above. Consequently, the elements of the luggage system description can be in the above-mentioned to ⁇ connexion with the process elements.
  • 1 shows a luggage description system with a visual detection device and a data processing unit; 2 shows a baggage logo and a baggage tag name;
  • FIG. 5 shows a third additional element of the item of luggage; and FIG. 6 shows a database which is stored in a cloud
  • FIG. 1 schematically shows a baggage description system 2 with a visual detection device 4 and a data processing unit 6.
  • the visual detection device 4 is designed as a camera.
  • Next 6 comprises the verarbei ⁇ processing unit, a database 8 and a computer program 10.
  • the computer program 10 runs on the data processing unit 6 from ⁇ .
  • the visual detection means 4 and the verarbei ⁇ processing unit 6 are connected by a data transfer connection 12th
  • the data transfer connection 12 may, for. B. be a cable.
  • the data transfer connection 12 z. B. be a wireless connection.
  • a luggage belt 14 is shown in FIG 1, which runs over rollers 16. The directions of movement of the rollers 16 and the luggage belt 14 are shown by arrows.
  • On the luggage belt 14 is a piece of luggage 18, in particular a piece of luggage.
  • the baggage item 18 could also be z. B. on luggage trays and / or other luggage transport means to be transported.
  • the piece of luggage 18 has a plurality of visual features 20 of the Ge ⁇ piere Anlagens 18th
  • a Sakele ⁇ ment 22 is attached, wherein the additional element 22 releasably connected to the Baggage 18 is connected.
  • the additional element 22 has a plurality of visual features 24 of the additional element 22.
  • the item of luggage 18 is detected by means of the visual detection device 4. Furthermore, a piece of luggage piece image is generated by means of the visual detection device 4.
  • the luggage ⁇ piece image comprises an upper side of the baggage item 18 and is in the form of a pixel image.
  • 18 visual features 20 of the luggage 18 be extracted from the piece of luggage image, in particular by means of yersein ⁇ integrated. 6
  • the extracted visual features of the item of luggage 18 are a baggage allowance, particularly a length and width of the item of luggage, a bag shape, a baggage color, a baggage item design, a baggage logo 26, and a baggage tag name 28.
  • a piece of luggage description is created from the extracted visual features 20 of the piece of luggage 18, in particular ⁇ sondere in the form of a description vector.
  • the descrip ⁇ bung vector comprises a plurality of vector fields, each field vector comprises a visual feature 20 of the luggage 18th All steps (visual detection, creation of the piece of luggage image, extraction of the visual features 18 and creation of the baggage description) are done fully automatically in this embodiment, ie without manual intervention of a person.
  • the visual Erfas ⁇ sungs is a hand-held camera, so that the visual He ⁇ -making would take place semi-automatically.
  • the shape of the baggage description may be as follows: [Length of the piece of baggage, the width of the item of luggage, luggage ⁇ piece shape, color luggage, baggage screening, luggage logo 26, piece of luggage brand name 28].
  • the baggage description may be as follows:
  • the luggage description includes numbers and letters.
  • the visual features 20 of the luggage 18 can be oriented shouted ⁇ ben be shortened and / or coded. Furthermore, the lack of a visual feature can be understood even as a visual shopping ⁇ .
  • the baggage item 18 is missing a baggage sample - that is, the item of baggage 18 is not milled (visual characteristic 20: "no baggage pattern") - and a zero is entered in the corresponding vector field "baggage sample".
  • the additional element 22 arranged on the item of luggage 18 is likewise detected by means of the visual detection device 4, by means of which an additional image is produced. From the additional image visual features 24 of the additional element 22 are extracted and from the extracted visual features 24 of the additional element 22 an additional description is created, in particular by means of the data processing unit 6.
  • the additional description is in the form of a vector. Furthermore, the additional description made an extended Gepiere Anlagenbeschrei ⁇ environment together with the luggage description.
  • the additional element 22 may, for. B. be shown in FIG 3, in FIG 4 or in FIG 5 additional element 22.
  • the additional element 22 comprises a set of information 30 in the form of plain text 30 (see FIGS. 3-5).
  • the visual detection of the information set 30 is at least partially detected visually and at least a portion of the information set 30 by means of an optical text recognition, in particular mit- means of OCR ( "optical character recognition") detected.
  • the detected part of the information set 30 may be in the Rajbe ⁇ letters and / or in an information record description be at least partially stored (see FIGS. 3-5).
  • the information record description is in the form of a vector in front.
  • the knowledge is vomit ⁇ chert.
  • various luggage ⁇ piece logo templates and baggage brand name templates are stored.
  • the stored baggage logo templates z. B. assigned identification numbers.
  • the extracted piece of luggage logo is encoded in the description item of luggage with the corresponding identification number of the corresponding item of luggage logo template. (See also FIG. 2)
  • the data processing unit 6, in particular a computer program 10 of the data processing unit 6, is a trainable system.
  • a baggage logo will be associated with a baggage logo template even if the baggage logo is changed to a predetermined extent, e.g. Example, if the piece of baggage logo has a scratch when the piece of baggage logo is contaminated when a color of the Ge ⁇ piere Swisslogos is changed in a predetermined extent and / or the like.
  • visual knowledge 24 of additional elements 22 can be stored as prior knowledge. Further details are described in FIGS. 4 and 5.
  • the piece of luggage or description generated in the visual detection of the luggage piece 18 extended Gepiere Swissbeschrei ⁇ exercise is stored as a comparative description, insbesonde- in the database 8.
  • the database 8 comprises a data record, which in turn comprises the comparative description.
  • the data record contains further information and / or the information record description.
  • the record comprises a baggage number, an owner name, a flight number, a destination airport and so on.
  • the comparison description is provided at arbitrary locations ("Where"), at arbitrary times ("When"), for any persons ("For whom") and for any purposes ("For what").
  • the matching description is wide ⁇ ren or made available to all the transport of luggage 18 participating interests ⁇ gen airports.
  • the data record in which the comparison description is stored is made available to the further or the airports participating in the transport of the item of luggage 18.
  • the data set or the comparative description is transmitted to all airports involved in the transport of the item of luggage 18 and the data record or the comparison description is stored locally in the database 8 of the airport.
  • the visual detection (by means of the visual detection means 4) for storing the comparison description is in this case a first visual detection. Furthermore, a first piece of luggage description is stored as comparison description.
  • the Ge ⁇ checked luggage 18 comes to an identical second Gepffenbeschrei- collection system 2, where the piece of luggage 18 is detected a second time, providing a second bag description (or a second extended luggage description).
  • the two ⁇ te baggage description or the second extended baggage description are hereinafter referred to only as a second baggage item description.
  • the comparison description may be the aforementioned comparison description or another comparison description stored in the database 8.
  • the test is automatically performed by the data processing unit 6, in particular by means of the computer program ⁇ sondere 10th ⁇ purpose advantageously comprises the database 8, a pluralityletsbe ⁇ descriptions, including the first-mentionedpacksbe ⁇ sensitive.
  • the second baggage description may be compared with each of the multiple comparison descriptions in turn.
  • the second baggage description does not match any of the multiple comparison descriptions, e.g. B. because the bag was damaged on the transport.
  • the comparison description that best matches the second item of baggage description is assigned to the item of luggage 18.
  • That record is associated with the item of luggage 18 which includes the comparison description that best matches the second item of luggage description. In this way, the method for identifying the item of luggage 18 is used.
  • the information is the second piece of luggage description and thus the bag 18 assigned.
  • the identification during the process can be carried out Trans ⁇ port, in particular, a destination of the Ge ⁇ piere Anlagens 18 to be determined.
  • the item of luggage 18 may be a found item of luggage 18 - ie the Identifizie ⁇ tion can be made for a found piece of luggage 18, in particular to determine the owner of a found baggage item 18.
  • the method is used for an assignment ⁇ set, the second piece of luggage description is used to the luggage piece of information - in particular from the record, which summarizes the matching comparative description - assign.
  • the item of luggage 18 is assigned a transport, owner and / or processing information, in particular a luggage number, a flight number, a destination and / or an owner name.
  • the method may be used to identify an owner of a found item of luggage 18.
  • the baggage item 18 can be assigned information directly from the second baggage item description. Is the second bag description the extended second bag description so can be found in the second luggage description and visual features 24 of the additional element 22. In ⁇ play as can be noted on the additional element 22 Vietnamesesin ⁇ formations such. B. on the additional element 22 of FIG 4. Due to the detected and extracted visual features 24 of the additional element 22 and / or the recognized part of the information set 30, the baggage item 18 ge ⁇ special treated, in particular, the baggage item 18 is passed over a certain sorting distance.
  • the method is used to create an image of the item of luggage 18, wherein an image of the item of luggage is created 18 from the second piece of luggage ⁇ description 6. particular by means of the data processing unit
  • the Ab ⁇ image of the baggage 18 is z.
  • the image of the item of luggage 18 will be compared with a comparison image, which comparison image is created from the comparative description.
  • Next luggage check is performed in which the image of the luggage 18 with the comparison image is compared to see if and an appearance of the luggage has changed 18 to what extent, in particular whether and to what extent the luggage ⁇ piece (eg. B. during transport and / or sorting) was damaged.
  • an image of the item of luggage 18 can also be created from the first piece of luggage description in the method for creating an image.
  • a missing piece of luggage 18 can be found in this way.
  • the missing piece of luggage 18 of an owner can be found.
  • the database 8 searches for the owner name and / or the luggage number, for example, and finds the data record for the missing piece of luggage 18. From the data set to be the missing piece of luggage 18, in particular from the comparative description of the missing piece of luggage 18, which is preferably stored in the record to the missing piece of luggage 18, an image of the miss ⁇ th item of luggage 18 can be created. Further, in the be stored on the missing piece of luggage 18 Since ⁇ cost rate at which the collection point is the missing piece of luggage 18 is located.
  • a missing piece of luggage 18 may be found by comparing the record of the missing piece of luggage 18 and / or the comparative description of the missing piece of luggage 18 with other records.
  • the other records may be stored in another database, e.g. B. another airport.
  • the image created from the piece of luggage description of Ge ⁇ piere Anlagens 18 can be compared with a comparison image.
  • the comparison image can be created from a comparative description.
  • the comparison ⁇ description may be the aforementioned comparative description.
  • each item of luggage 18 may have one or more additional elements (s) 22.
  • a part of the detected visual features 20 of the pieces of luggage 18 be evaluated sta ⁇ tistisch.
  • the luggage allowance can be statistically evaluated in order to optimize the loading of transport wagons and / or aircraft.
  • the bag color in the summer season can be statistically evaluated ⁇ , z.
  • part of the detected visual features 24 of the additional elements 22 can be statistically evaluated.
  • the frequency of certain processing ⁇ information can be evaluated, z. B. to determine a utilization of a particular sorting distance.
  • the luggage logo 26 is oval, gray colored and contains the symbol of a suitcase as well as Ge ⁇ piere Swissmarkenname 28 "trunk maker".
  • the extracted luggage ⁇ logo piece 26 substantially corresponds to a Gepiere GmbHlo ⁇ go template which is associated with "221 L" by the identification number, and is coded in the item of luggage with the description corresponding to the identification number.
  • FIG. 3 shows by way of example a first possible additional element 22 of the item of luggage 18 from FIG. 1.
  • the additional element 22 is designed as a sticker on the item of luggage 18.
  • the additional element 22 comprises an information record 30 in the form of plain text 30.
  • the visual detection device 4 from FIG. 1 detects the additional element 22 with the item of luggage 18 in a common pixel image.
  • the auxiliary image is a portion of the Pi ⁇ xelsentes and the piece of baggage is another image sectionbe ⁇ region of the pixel image.
  • FIG. 4 shows by way of example a second possible additional element 22 of the item of luggage 18 from FIG. 1.
  • the additional element 22 can be designed as a sticker or as a trailer.
  • the visual detection device 4 from FIG. 1 detects the additional element 22 with the item of luggage 18 in a common pixel image.
  • the additional element 22 has as pattern 32 a red border with a line width of 0.5 cm. Furthermore, the additional element 22 comprises an information record 30 in the form of plain text 30.
  • the information sentence 30 in the form of plaintext 30 includes processing information.
  • the plaintext 30 is written in red.
  • the form of the additional description may be as follows:
  • the information set 30 can be recognized in the form of plain text 30 by means of text recognition.
  • part of the information ⁇ set is recorded in an information record description 30, which is as follows: [ “HANDLE WITH PRIORITY”]
  • vomit ⁇ chert as knowledge that the text "HANDLE WITH PRIORITY” irrespective of case / Lower case means that the item of luggage 18 should be routed over a certain sorting distance.
  • the detected information set 30 consequently also leads to a corresponding sorting, so that the item of luggage 18 is passed over the specific sorting path.
  • FIG. 5 shows by way of example a third possible additional element 22 of the item of luggage 18 from FIG. 1.
  • the additional element 22 is designed as a luggage label.
  • the visual detection device 4 from FIG. 1 detects the additional element 22 and the item of luggage 18.
  • the information record 30 is recognized in the form of plain text 30 by means of text recognition.
  • the additional element 22 comprises a bar code 34, which if detected.
  • the recognized part of the information set 30 is detected (together with the detected bar code 34) at least partially in an information record description which has, for example, the following form:
  • each element which has a bar code 34 is a baggage tag. It can further be stored in the data processing unit 6 ⁇ as prior knowledge which form of information set 30 has a baggage label and the position at which the baggage tag to find the information of the information set.
  • the item of luggage 18 is automatically sorted using the recognized visual features 20 and using the recognized portion of the information set 30. Accordingly, the luggage 18 z. B. transported on a corresponding baggage belt, transported with a corresponding baggage belt, transported to a corresponding loading zone, transported to a ent ⁇ speaking gate and / or transported to a corresponding baggage output belt.
  • 6 shows a database 52, which represents an alternative to the database 8 shown in FIG.
  • the database 52 shown in FIG 6 is ge ⁇ stores (and thus not in the data processing unit of Figure 1) in a cloud 54th
  • the database 52 includes the record of the Ge ⁇ piere researchings 18 comprising the comparative description.
  • Each airport 56 involved in the transportation of baggage 18 may access database 52.
  • the database 52 comprises a plurality of data sets, including the above-mentioned data record, wherein each of the data records comprises a comparison description. While the invention has been further illustrated and described in detail by the preferred embodiments, the invention is not limited by the disclosed examples, and other variations can be derived therefrom by those skilled in the art without departing from the scope of the invention.

Landscapes

  • Business, Economics & Management (AREA)
  • Engineering & Computer Science (AREA)
  • Economics (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • General Business, Economics & Management (AREA)
  • Operations Research (AREA)
  • Quality & Reliability (AREA)
  • Strategic Management (AREA)
  • Tourism & Hospitality (AREA)
  • Marketing (AREA)
  • Human Resources & Organizations (AREA)
  • Entrepreneurship & Innovation (AREA)
  • Development Economics (AREA)
  • Data Mining & Analysis (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Artificial Intelligence (AREA)
  • Bioinformatics & Cheminformatics (AREA)
  • Bioinformatics & Computational Biology (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Evolutionary Biology (AREA)
  • Evolutionary Computation (AREA)
  • General Engineering & Computer Science (AREA)
  • Character Discrimination (AREA)

Abstract

Die Erfindung betrifft ein Verfahren zur Erstellung einer Beschreibung eines Gepäckstücks (18). Um mehrere Merkmale des Gepäckstücks (18) zu erfassen, wird vorgeschlagen, dass das Gepäckstück (18) mittels einer visuellen Erfassungseinrichtung (4) erfasst wird, mittels welcher ein Gepäckstückabbild erzeugt wird, wobei aus dem Gepäckstückabbild visuelle Merkmale (20) des Gepäckstücks (18) extrahiert werden und aus den extrahierten visuellen Merkmalen (20) des Gepäckstücks (18) eine Gepäckstückbeschreibung erstellt wird.

Description

Verfahren zur Erstellung einer Beschreibung eines Gepäckstücks und Gepäckbeschreibungssystem
Die Erfindung betrifft ein Verfahren zur Erstellung einer Beschreibung eines Gepäckstücks.
Bei Flugreisen wird ein aufgegebenes Gepäckstück üblicher- weise mit einem Gepäcketikett versehen, um das Gepäckstück im Laufe des Transports sortieren bzw. (z. B. einer Transport- und/oder einer Eigentümerinformation) zuordnen zu können. Üblicherweise wird im Verlauf des Transports der Barcode ausge¬ lesen, um die Sortierung/Zuordnung vornehmen zu können. Mit dem Barcode ist die Gepäcknummer codiert, für welche wiederum die Flugnummer und weitere Transportinformationen hinterlegt sind .
Oftmals wird ein Gepäcketikett beim Transport des Gepäck- Stücks (beispielsweise beim Transport über Gepäckbänder bzw. Förderbänder, beim Beladen des Flugzeugs und/oder beim Entladen des Flugzeugs) beschädigt. Es kann sogar dazu kommen, dass ein Gepäcketikett eines Gepäckstücks verloren geht. In diesen Fällen ist eine Zuordnung des Gepäckstücks sehr auf- wändig, kostet Zeit und es entsteht ein erhöhter Personalauf¬ wand. Insbesondere wenn das Gepäcketikett verloren geht, muss von Hand versucht werden, z. B. durch Namensschildchen am Gepäckstück, Hinweise auf den Eigentümer des Gepäckstücks zu erhalten .
Es ist eine Aufgabe der vorliegenden Erfindung, ein Verfahren anzugeben, mit dem mehrere Merkmale des Gepäckstücks erfasst werden können, sodass eine Zuordnung des Gepäckstücks effizienter gestaltet werden kann.
Diese Aufgabe wird erfindungsgemäß durch ein Verfahren zur Erstellung einer Beschreibung eines Gepäckstücks gelöst, bei dem das Gepäckstück mittels zumindest einer visuellen Erfassungseinrichtung, gegebenenfalls auch mittels mehrerer Erfassungseinrichtungen, erfasst wird, mittels welcher zumindest ein Gepäckstückabbild bzw. im Falle mehrere Erfassungsein- richtungen mehrere Gepäckstückabbilder erzeugt wird bzw. werden, wobei aus dem zumindest einen Gepäckstückabbild bzw. den mehreren Gepäckstückabbildern visuelle Merkmale des Gepäckstücks extrahiert werden und aus den extrahierten visuellen Merkmalen des Gepäckstücks eine Gepäckstückbeschreibung er- stellt wird.
Die Erfindung geht von der Überlegung aus, dass die Erfassung des Gepäckstücks und die Erstellung der Gepäckstückbeschrei¬ bung eine effiziente Möglichkeit, insbesondere eine schnelle und Personal sparende Möglichkeit, darstellt, das Gepäckstück zu beschreiben. Weiter ergibt sich damit die Möglichkeit, das Gepäckstück effizient, insbesondere schnell und Personal spa¬ rend, zuordnen und/oder sortieren zu können. Insbesondere wird das Gepäckstück mittels der - zumindest ei¬ nen - visuellen Erfassungseinrichtung visuell erfasst. Das Gepäckstück kann beispielsweise ein Koffer, eine Reisetasche, ein Sperrgepäckstück, ein Sportgerät oder ein sonstiges Gepäckstück sein.
Vorzugsweise umfasst das - zumindest eine - Gepäckstückabbild zumindest einen Teilausschnitt des Gepäckstücks. Das Gepäck¬ stückabbild kann in Form eines Pixelbildes, eines Rasterbil¬ des und/oder ähnlichem erzeugt werden. Weiter kann das Ge- päckstückabbild ein 2D-Abbild, 3D-Abbild und/oder ein trans¬ formiertes Abbild sein.
Als „extrahieren" von visuellen Merkmalen des Gepäckstücks aus dem Gepäckstückabbild kann verstanden werden, dass die visuellen Merkmale aus dem Gepäckstückabbild gewonnen werden.
Beispielsweise können visuelle Merkmale des Gepäckstücks durch eine Auswertung und/oder eine Analyse des zumindest ei- nen Gepäckstückabbildes oder der mehreren Gepäckstückabbil¬ dern gewonnen werden.
So kann beispielsweise ein Abmaß (bzw. Größe) des Gepäck- Stücks zweckmäßiger Weise durch eine Kombination von mehreren Gepäckstückabbildern von mehreren visuellen Erfassungseinrichtungen, beispielsweise mehreren Kameras, ermittelt wer¬ den . Hierbei ist es insbesondere zweckmäßig, wenn eine exakte Po¬ sition jeder der mehreren visuellen Erfassungseinrichtungen bzw. jeder Kamera bekannt ist. D.h., es handelt sich um „ortsfeste" visuelle Erfassungseinrichtungen, beispielsweise ortsfeste Kameras.
Zusätzliche Informationen, wie solche über eine Brennweite eines Objektivs der visuellen Erfassungseinrichtung und Pixelabstände von Sensoren sind weiter hier, d.h. zur Extraktion von visuellen Merkmalen bzw. des Abmasses, auch zweckmä- ßig, lässt sich daraus - ähnlich wie bei einer Stereo-Kamera - ein Obj ekt-/Gepäckstückabmaß bzw. -große „schätzen".
Sofern die mehreren Gepäckstückabbilder nur Teilausschnitte des Gepäckstücks zeigen, sind eine Transportgeschwindigkeit des Gepäckstückes und Bildaufnahmefrequenzen der mehreren visuellen Erfassungseinrichtungen bzw. Kameras weitere zweckmäßige Informationen, die zur Bestimmung zur Extraktion von visuellen Merkmalen bzw. des Abmasses herangezogen werden können .
Bei zumindest einem Gepäckstückabbild von der zumindest einen visuellen Erfassungseinrichtung, beispielsweise einer einzelnen Handkamera, kann die Bestimmung des Abmasses bzw. der Größe des Gepäckstücks anhand von Abmassen bzw. Größen von bekannten Objekten im zumindest einen Gepäckstück geschätzt werden, z.B. ein Gepäcklabel ist ca. 50mm breit - und ermög¬ licht so Aufschluss über das Abmaß bzw. die Größe des Gepäck¬ stücks . Weiter kann die Gepäckstückbeschreibung erstellt werden, indem die extrahierten visuellen Merkmale des Gepäckstücks zu- sammengefasst werden. Die Gepäckstückbeschreibung kann eine beliebige Form aufweisen, z. B. kann die Gepäckstückbeschrei¬ bung in Form eines Vektors oder in Form eines beschreibenden Textes erstellt werden.
Zweckmäßigerweise wird das Gepäckstückabbild mittels der vi- suellen Erfassungseinrichtung automatisch erfasst. Insbesondere kann die visuelle Erfassung zumindest teilautomatisch erfolgen. In diesem Fall fokussiert die visuelle Erfassungs¬ einrichtung von sich aus das Gepäckstück und/oder löst die Erfassung von sich aus aus. Bei einer teilautomatischen Er- fassung kann ein Teilschritt der Erfassung anderweitig als von der Erfassungseinrichtung selbst ausgeführt werden, beispielsweise von einer handelnden Person.
In einer vorteilhaften Ausgestaltung der Erfindung ist die visuelle Erfassungseinrichtung eine Handerfassungseinrichtung, insbesondere eine Handkamera und/oder ein Handscanner. Weiter kann die visuelle Erfassungseinrichtung eine Handlaserkamera und/oder ein Handlaserscanner sein. In dem Fall, dass die visuelle Erfassungseinrichtung eine Handerfassungs- einrichtung ist, wird sinnvollerweise ein Teilschritt der Er¬ fassung, z. B. das Positionieren der Handerfassungseinrichtung, von einer handelnden Person ausgeführt.
Ferner kann das Gepäckstückabbild mittels der visuellen Er- fassungseinrichtung vollautomatisch erfasst werden, insbesondere ohne manuelles Einwirken einer Person. Beispielsweise kann die visuelle Erfassungseinrichtung eine vollautomatische Kamera und/oder ein vollautomatischer Scanner sein. Weiter kann das Gepäckstückabbild automatisch erzeugt werden, insbesondere mittels der visuellen Erfassungseinrichtung. Ferner können die visuellen Merkmale des Gepäckstücks automa¬ tisch aus dem Gepäckstückabbild extrahiert werden, insbeson- dere mittels einer Datenverarbeitungseinheit. Außerdem kann die Gepäckstückbeschreibung automatisch aus den extrahierten visuellen Merkmalen des Gepäckstücks erstellt werden, insbe¬ sondere mittels der Datenverarbeitungseinheit.
Zweckmäßigerweise ist die Datenverarbeitungseinheit dazu ein¬ gerichtet, beispielsweise durch ein entsprechendes lauffähi¬ ges Computerprogramm, welches auf der Datenverarbeitungseinheit abläuft, die visuellen Merkmale des Gepäckstücks aus dem Gepäckstückabbild zu extrahieren und/oder die Gepäckstückbe¬ schreibung aus den extrahierten visuellen Merkmalen des Gepäckstücks zu erstellen.
Die Erfindung und/oder die beschriebenen Weiterbildungen kön- nen - zumindest teilweise - sowohl in Software als auch in Hardware, beispielsweise unter Verwendung einer speziellen elektrischen Schaltung, realisiert werden.
Ferner ist eine Realisierung der Erfindung und/oder einer be- schriebenen Weiterbildung - zumindest teilweise - möglich durch ein computerlesbares Speichermedium, auf welchem das Computerprogramm gespeichert ist, welches die Erfindung oder die Weiterbildung - zumindest teilweise - ausführt. Auch können die Erfindung und/oder die beschriebenen Weiterbildungen - zumindest teilweise - durch ein Computerprogrammerzeugnis realisiert sein, welches ein Speichermedium auf¬ weist, auf welchem das Computerprogramm gespeichert ist, wel¬ ches die Erfindung und/oder die Weiterbildungen - zumindest teilweise - ausführt.
Die visuellen Merkmale des Gepäckstücks können ein Gepäck¬ stückabmaß, eine Gepäckstückform, eine Gepäckstückfarbe, eine Gepäckstückmusterung, ein Gepäckstücklogo und/oder einen Ge- päckstückmarkennamen umfassen. Das Gepäckstückabmaß kann eine Länge des Gepäckstücks, eine Breite des Gepäckstücks und/oder eine Höhe des Gepäckstücks umfassen. Weiter kann das Gepäck¬ stücklogo z. B. ein Emblem eines Gepäckstückherstellers, eine Bildmarke des Gepäckstückherstellers und/oder ein Designele¬ ment des Gepäckstückherstellers umfassen.
Zweckmäßigerweise wird die Gepäckstückbeschreibung in Form eines Beschreibungsvektors erstellt. Weiter kann der Be¬ schreibungsvektor eindimensional oder mehrdimensional sein. Vorzugsweise umfasst der Beschreibungsvektor mehrere Vek¬ torfelder. Außerdem kann jedes Vektorfeld ein visuelles Merkmal umfassen, insbesondere in Form von Text und/oder Ziffern.
Ferner kann die Gepäckstückbeschreibung in Form eines beschreibenden Textes erstellt werden.
An dem Gepäckstück kann ein Zusatzelement angeordnet sein. Das Zusatzelement kann z. B. ein Identifikationselement sein. Weiter kann das Zusatzelement z. B. ein Gepäcketikett, auch Baggage Label oder Banderole genannt, einen Aufkleber
und/oder einen Anhänger umfassen. Der Anhänger kann beispielsweise ein Anhänger einer Fluggesellschaft, ein Anhänger eines Flughafens und/oder ein persönlicher Anhänger sein.
Vorzugsweise ist das Zusatzelement lösbar mit dem Gepäckstück verbunden. Außerdem kann das Zusatzelement vom Gepäckstück entfernbar sein. In einer bevorzugten Ausgestaltung der Erfindung wird das an dem Gepäckstück angeordnete Zusatzelement mittels der visuel¬ len Erfassungseinrichtung erfasst. Zweckmäßigerweise wird mittels der Erfassungseinrichtung ein Zusatzabbild erzeugt. Aus dem Zusatzabbild können visuelle Merkmale des Zusatzele- mentes extrahiert werden. Weiter kann aus den extrahierten visuellen Merkmalen des Zusatzelementes eine Zusatzbeschrei¬ bung erstellt werden. Zweckmäßigerweise bildet die Zusatzbe¬ schreibung gemeinsam mit der Gepäckstückbeschreibung eine erweiterte Gepäckstückbeschreibung. Auf diese Weise wird aus den extrahierten visuellen Merkmalen des Zusatzelementes sowie aus den extrahierten Merkmalen des Gepäckstücks eine erweitere Gepäckstückbeschreibung erstellt. Das Gepäckstückabbild und das Zusatzabbild können je ein Teilbereich eines gemeinsamen Abbildes sein. Alternativ können das Gepäckstückabbild und das Zusatzabbild jeweils zumin¬ dest ein Teilbereich in unterschiedlichen Abbildern sein.
Die visuelle Merkmale des Zusatzelements können eine Form des Zusatzelements, eine Farbe des Zusatzelements, eine Musterung des Zusatzelements, ein Abmaß des Zusatzelements und/oder ein Logo des Zusatzelements umfassen. Das Abmaß des Zusatzele- ments kann eine Länge des Zusatzelements, eine Breite des Zu¬ satzelements und/oder eine Höhe des Zusatzelements umfassen. Weiter kann das Logo des Zusatzelements z. B. ein Emblem, ei¬ ne Bildmarke und/oder ein Designelement umfassen. Das Gepäckstück kann ein Zusatzelement mit einem Informati¬ onssatz in Form von Klartext aufweisen. Das Zusatzelement kann das zuvor genannte Zusatzelement sein. Vorzugsweise wird bei der visuellen Erfassung der Informationssatz zumindest teilweise visuell erfasst. Weiter kann zumindest ein Teil des Informationssatzes mittels einer optischen Texterkennung, insbesondere mittels OCR („optical character recognition") , erkannt werden.
Der erkannte Teil des Informationssatzes kann beispielsweise als Informationssatzbeschreibung gespeichert werden. Weiter kann der erkannte Teil des Informationssatzes (z. B. als In¬ formationssatzbeschreibung) in der erweiterten Gepäckstückbeschreibung und/oder zusätzlich zu der erweiterten Gepäckstückbeschreibung gespeichert werden.
Vorzugsweise umfasst der Informationssatz zusätzliche Infor¬ mationen, wie z. B. Transport- und/oder Eigentümerinformatio¬ nen. Beispielsweise kann der Informationssatz eine Gepäcknummer, einen Eigentümernamen, auch Passagiernamen genannt, eine Flugnummer, ein Zwischenflughafenkürzel und/oder ein Ziel¬ flughafenkürzel, insbesondere als Transport- und/oder Eigen¬ tümerinformationen, umfassen. Weiter kann der Informationssatz Verarbeitungsinformationen umfassen. Insbesondere können Verarbeitungsinformationen Verarbeitungsanweisungen sein, wie z. B. „kurze Anschlusszeit" („Short connection time") , „vor¬ rangige Behandlung" („handle with priority") und/oder „Vorsicht Bruchgefahr" („handle with care FRAGILE") . Weiter kön- nen Verarbeitungsinformationen Sicherheitsinformationen umfassen .
Zweckmäßigerweise wird das Gepäckstück unter Verwendung des erkannten Teils des Informationssatzes automatisch sortiert. Auf diese Weise wird der erkannte Teil des Informationssatzes automatisch bei der Sortierung berücksichtigt.
Als „Gepäck sortieren" kann „Gepäck zuordnen" aufgefasst werden. Insbesondere kann bei der Sortierung einem Gepäckstück eine Transport-, Eigentümer- und/oder Verarbeitungsinformati¬ on zugeordnet werden. Weiter kann „Gepäck sortieren" z. B. einen oder mehrere Transportschritt (e) des Gepäckstücks ent¬ sprechend der Zuordnung beinhalten. Vorzugsweise erfolgt die Sortierung in einem Flughafen. Indem ein Teil des Informationssatz erkannt wird, kann beispiels¬ weise dem Gepäckstück ein Zielort zugeordnet werden, zu wel¬ chem das Gepäckstück transportiert werden soll. Dabei kann der Zielort beispielsweise ein bestimmtes Gate, eine bestimm- te Ladezone, ein bestimmtes Flugzeug, ein bestimmtes Gepäck¬ transportmittel (insbesondere ein bestimmtes Gepäckband) , ein Zielflughafen, ein Gepäckausgabeband an einem Zielflughafen oder ähnliches sein. Indem ein Teil des Informationssatzes erkannt wird, kann bei¬ spielsweise das Gepäckstück eine spezielle Sortierstrecke nehmen. Beispielsweise kann das Gepäckstück eine Sortierstre¬ cke nehmen, bei der das Gepäckstück schneller an den Zielort transportiert wird und/oder bei der das Gepäckstück im We- sentlichen keinen Erschütterungen ausgesetzt ist.
Vorteilhafterweise erfolgt die Extraktion von visuellen Merk¬ malen, insbesondere von visuellen Merkmalen des Gepäckstücks und/oder von visuellen Merkmalen des Zusatzelementes, unter Verwendung von Vorwissen und/oder unter Verwendung von trainierbaren Systemen. Beispielsweise kann die Datenverarbeitungseinheit typische Layouts, d. h. typische visuelle Merkmale, von Zusatzelemen¬ ten, insbesondere von Gepäcketiketten, erlernen und/oder als Vorwissen eingespeichert bekommen. Auf diese Weise kann von erkannten und/oder extrahierten visuellen Merkmalen des Zu- satzelements auf weitere Informationen, wie Transport- und/oder Verarbeitungsinformationen, geschlossen werden. Beispielsweise kann durch bestimmte visuelle Merkmale des
Zusatzelements auf eine bestimmte Fluggesellschaft geschlos¬ sen werden. Auf diese Weise wird eine Sortierung/Zuordnung ermöglicht und/oder verbessert.
Zweckmäßigerweise wird die bei einer visuellen Erfassung des Gepäckstücks erstellte Gepäckstückbeschreibung (bzw. erweiterte Gepäckstückbeschreibung) als Vergleichsbeschreibung ge- speichert. Beispielsweise kann die Vergleichsbeschreibung bei einer Abgabe des Gepäckstücks und/oder einem Check-In gespei¬ chert werden. Vorzugsweise wird die Vergleichsbeschreibung in einer Datenbank gespeichert. Insbesondere kann die Ver¬ gleichsbeschreibung in einem Datensatz gespeichert werden. Der Datensatz kann - neben der Vergleichsbeschreibung - weitere Informationen aufweisen, wie Transport-, Eigentümer- und/oder Verarbeitungsinformationen. Insbesondere kann der Datensatz - neben der Vergleichsbeschreibung - eine Gepäcknummer, einen Eigentümernamen, eine Flugnummer, ein Zwischen- flughafenkürzel bzw. -namen, einen Zielflughafenkürzel bzw. - namen und/oder einen Zielort als weitere Informationen umfassen .
Weiter gibt es die Möglichkeit, die Vergleichsbeschreibung anonym zu halten bzw. zu anonymisieren, welche dann zweckmäßigerweise keine Eigentümerinformationen, insbesondere keinen Eigentümernamen, umfasst. Vorteilhafterweise erfolgt die Speicherung der Vergleichsbe¬ schreibung bzw. des Datensatzes automatisch. Weiter kann die Vergleichsbeschreibung bzw. der Datensatz zeitlich begrenzt gespeichert werden.
Weiter kann die Gepäckstückbeschreibung (bzw. die erweiterte Gepäckstückbeschreibung) , insbesondere als Vergleichsbe¬ schreibung, zur Verfügung gestellt werden, insbesondere an beliebigen Orten („Wo"), zu beliebigen Zeiten („Wann"), für beliebige Personen („Für wen") und für beliebige Zwecke („Wo¬ für") .
Das Gepäckstück kann ein Fluggepäckstück sein. Vorzugsweise wird die Vergleichsbeschreibung weiteren oder auch allen am Transport des Gepäckstücks beteiligen Flughäfen zur Verfügung gestellt. Die am Transport des Gepäckstücks beteiligen Flug¬ häfen können z. B. ein Startflughafen, ein Zwischenflughafen und/oder ein Zielflughafen des Gepäckstücks sein. Insbesondere wird der Datensatz, in welcher die Vergleichsbeschreibung gespeichert ist, allen am Transport des Gepäckstücks beteili¬ gen Flughäfen zur Verfügung gestellt. Auf diese Weise können alle am Transport des Gepäckstücks beteiligten Flughäfen auf die Vergleichsbeschreibung bzw. auf den Datensatz zugreifen. Beispielsweise kann die Vergleichsbeschreibung an alle am Transport des Gepäckstücks beteiligen Flughäfen übermittelt werden. Z. B. kann die Vergleichsbeschreibung bzw. der Datensatz lokal in einer jeweiligen Datenbank des jeweiligen Flughafens gespeichert werden. Weiter kann die Vergleichsbe¬ schreibung bzw. der Datensatz in einer verteilten Datenbank gespeichert sein, auf welche die beteiligten Flughäfen Zu¬ griff haben.
Da die Gepäckbeschreibung aus den extrahierten visuellen Merkmalen des Gepäckstücks erstellt wird, ist die Gepäck- Stückbeschreibung zweckmäßigerweise spezifisch für das Gepäckstück . In einer bevorzugten Ausgestaltung der Erfindung wird das Verfahren bei einer Prüfung eingesetzt. Vorteilhafterweise wird bei der Prüfung geprüft, ob die Gepäckstückbeschreibung (bzw. die erweitere Gepäckstückbeschreibung) mit einer Ver- gleichsbeschreibung übereinstimmt. Die Vergleichsbeschreibung kann die zuvor genannte Vergleichsbeschreibung sein. Weiter kann die Vergleichsbeschreibung eine andere in der Datenbank gespeicherte Vergleichsbeschreibung sein. Zweckmäßigerweise wird die Prüfung zu einem späteren Zeit¬ punkt durchgeführt als die Speicherung der Vergleichsbe¬ schreibung. Die Vergleichsbeschreibung kann bei einer ersten Erfassung des Gepäckstücks mittels der visuellen Erfassungs¬ einrichtung gespeichert werden. Insbesondere kann bei der ersten Erfassung des Gepäckstücks ein erstes Gepäckstückab¬ bild erzeugt werden. Ferner kann aus dem ersten Gepäckstückabbild eine erste Gepäckstückbeschreibung erzeugt werden. Die erste Gepäckstückbeschreibung kann als Vergleichsbeschreibung gespeichert werden.
Zweckmäßigerweise erfolgt die Prüfung bei oder zeitlich nach einer zweiten Erfassung des Gepäckstücks, wobei die zweite Erfassung zeitlich nach der ersten Erfassung stattfindet. Weiter können zwischen der ersten Erfassung und der zweiten Erfassung ein oder mehrere Transport- und/oder Sortierschritt (e) liegen. Insbesondere kann bei der zweiten Erfas¬ sung des Gepäckstücks ein zweites Gepäckstückabbild erzeugt werden. Weiter kann aus dem zweiten Gepäckstückabbild eine zweite Gepäckstückbeschreibung erzeugt werden. Bei der Prü- fung kann insbesondere geprüft werden, ob die zweite Gepäck¬ stückbeschreibung mit der Vergleichsbeschreibung übereinstimmt. Das heißt, die bei der Prüfung geprüfte Gepäckstück¬ beschreibung kann eine zweite Gepäckstückbeschreibung sein, welche insbesondere dieselben Eigenschaften und Merkmale wie die erstgenannte bzw. erste Gepäckstückbeschreibung aufweist.
Zweckmäßigerweise erfolgt die Prüfung automatisch, insbesondere mittels der Datenverarbeitungseinheit. Die Datenbank kann mehrere Vergleichsbeschreibungen umfassen. Vorzugsweise umfassen die mehreren Vergleichsbeschreibungen die oben genannte Vergleichsbeschreibung. Die mehreren Ver- gleichsbeschreibungen können jeweils in einem Datensatz gespeichert sein. Zweckmäßigerweise werden die mehreren Ver¬ gleichsbeschreibungen (zumindest teilweise) nacheinander mit der Gepäckstückbeschreibung (bzw. der erweiterten Gepäckstückbeschreibung) verglichen.
Das Verfahren kann bei einer weiteren Prüfung eingesetzt werden. Bei der weiteren Prüfung wird vorzugsweise geprüft, wel¬ che der Vergleichsbeschreibungen der Datenbank die größte Übereinstimmung mit der Gepäckstückbeschreibung (bzw. erwei- terten Gepäckstückbeschreibung) aufweist. Weiter kann die bei der weiteren Prüfung zu prüfende/geprüfte Gepäckstückbe¬ schreibung die zweite Gepäckstückbeschreibung bzw. die zweite erweiterte Gepäckstückbeschreibung sein. Zweckmäßigerweise erfolgt die weitere Prüfung automatisch, insbesondere mittels der Datenverarbeitungseinheit.
Zur Prüfung der größten Übereinstimmung (bei der weiteren Prüfung) kann die zu prüfende Gepäckstückbeschreibung z. B. nacheinander mit jeder der in der Datenbank gespeicherten Vergleichsbeschreibungen verglichen werden. Bei jedem einzelnen Vergleich kann beispielsweise ein Grad der Übereinstimmung bestimmt werden. Diejenige Vergleichsbeschreibung, bei welcher der höchste Grad der Übereinstimmung erreicht wird, kann ausgewählt werden. Weiter können die Informationen des Datensatzes, in welchem die ausgewählte Vergleichsbeschrei¬ bung gespeichert ist, genutzt werden, insbesondere um das Ge¬ päckstück sortieren/zuordnen zu können.
Vorzugsweise wird das Verfahren eingesetzt zur Identifizie- rung eines Gepäckstücks. Eine Identifizierung des Gepäck¬ stücks kann beispielsweise durch eine eindeutige Zuordnung des Gepäckstücks zu einem Datensatz erfolgen. Insbesondere kann zumindest eine der zuvor genannten Prüfungen zu einer Identifizierung des Gepäckstücks führen.
Die Identifizierung kann während des Transportprozesses er- folgen, insbesondere um einen Zielort des Gepäckstücks zu er¬ mitteln. Weiter kann die Identifizierung für gefundene Gepäckstücke erfolgen, insbesondere um den Eigentümer eines ge¬ fundenen Gepäckstücks zu ermitteln. Ein Vorteil der Identifizierung des Gepäckstücks ist, dass direkt die Gepäckbeschreibung genutzt werden kann, um Informationen über das Gepäckstück zu erhalten. Die Verarbeitung des Gepäckstückes ist so dann ohne einen Barcode, eine Ge¬ päcknummer und/oder ein Gepäcketikett möglich.
Zweckmäßigerweise wird das Verfahren zu einer Zuordnung eingesetzt. Die Gepäckstückbeschreibung kann dazu genutzt werden, dem Gepäckstück eine Information, insbesondere eine Transport-, Eigentümer- und/oder Verarbeitungsinformation, zuzuordnen.
Die Zuordnung einer Information kann dabei direkt aus der Gepäckbeschreibung erfolgen. Findet sich in der Gepäckbeschreibung beispielsweise ein bestimmtes Gepäckstückabmaß, welches auf Sperrgepäck schließen lässt, kann das Gepäckstück z. B. gesondert behandelt werden, insbesondere über eine bestimmte Sortierstrecke geleitet werden.
Weiter kann die Zuordnung einer Information über die Identi- fizierung des Gepäckstücks erfolgen. Dabei kann dem Gepäckstück eindeutig ein Datensatz zugeordnet werden, aus welchem die Information (en) abgelesen werden kann/können. Auf diese Weise kann dem Gepäckstück z. B. eine Gepäcknummer, eine Flugnummer, ein Zielort und/oder ein Eigentümernamen zugeord- net werden. Beispielsweise kann das Verfahren genutzt werden, um ein Eigentümer eines gefundenen Gepäckstücks zu ermitteln. Weiter kann das Verfahren zu einer Abbilderstellung des Gepäckstücks eingesetzt werden. Bei der Abbilderstellung kann aus der Gepäckstückbeschreibung ein Abbild des Gepäckstücks erstellt werden. Insbesondere ist das Abbild des Gepäckstücks ein Bild des Gepäckstücks, eine schematische Darstellung des Gepäckstücks, ein 2D-Modell des Gepäckstücks und/oder ein 3D- Modell des Gepäckstücks. Die Abbilderstellung kann mittels der Datenverarbeitungseinheit erfolgen. Weiter kann das Verfahren zum Auffinden eines vermissten Gepäckstücks eingesetzt werden. Insbesondere kann das Verfahren zum Auffinden eines vermissten Gepäckstücks eingesetzt wer¬ den, indem ein Abbild des Gepäckstücks aus der Gepäckstückbe¬ schreibung erstellt wird.
Beispielsweise kann ein vermisstes Gepäckstück eines Eigentü¬ mers gefunden werden. Dazu wird beispielsweise in der Daten¬ bank nach dem Eigentümernamen und/oder nach der Gepäcknummer gesucht und der Datensatz zu dem vermissten Gepäckstück ge- funden. Aus dem Datensatz zu dem vermissten Gepäckstück, insbesondere aus der Vergleichsbeschreibung zu dem vermissten Gepäckstück, welche vorzugsweise in dem Datensatz zu dem vermissten Gepäckstück gespeichert ist, kann ein Abbild des vermissten Gepäckstücks erstellt werden. Weiter kann in dem Da- tensatz zu dem vermissten Gepäckstück gespeichert sein, an welchem Sammelpunkt sich das vermisste Gepäckstück befindet. Mithilfe des erstellten Abbildes des vermissten Gepäckstücks kann am Sammelpunkt nach dem vermissten Gepäckstück gesucht werden, insbesondere indem alle am Sammelpunkt befindlichen Gepäckstücke mit dem Abbild des vermissten Gepäckstücks ver¬ glichen werden. Auf diese Weise kann das vermisste Gepäck¬ stück gefunden werden.
Weiter kann das Verfahren zum Auffinden eines vermissten Ge- päckstücks eingesetzt werden, indem der Datensatz zu dem vermissen Gepäckstück und/oder die Vergleichsbeschreibung zu dem vermissten Gepäckstück mit anderen Datensätzen abgeglichen wird. Die anderen Datensätze können in derselben Datenbank gespeichert sein und/oder in einer anderen Datenbank z. B. eines anderen Flughafens gespeichert sein.
Das aus der Gepäckstückbeschreibung erstellte Abbild des Ge- päckstücks kann mit einem Vergleichs-Abbild verglichen wer¬ den. Der Vergleich kann automatisch, insbesondere mittels der Datenverarbeitungseinheit, und/oder manuell erfolgen. Das Vergleichs-Abbild kann aus einer Vergleichsbeschreibung erstellt werden, insbesondere mittels der Datenverarbeitungs- einheit. Insbesondere kann die Vergleichsbeschreibung die zu¬ vor genannte Vergleichsbeschreibung sein.
Außerdem kann das Verfahren bei einer Gepäckstücküberprüfung eingesetzt werden. Zweckmäßigerweise wird bei der Gepäck- Stücküberprüfung geprüft, ob sich ein Aussehen des Gepäckstück verändert hat, insbesondere ob das Gepäckstück (z. B. beim Transport und/oder beim Sortieren) beschädigt wurde. Falls die Gepäckstücküberprüfung ergibt, dass sich das Gepäckstück verändert hat, insbesondere dass das Gepäckstück beschädigt wurde, kann bei der Gepäckstücküberprüfung weiter geprüft werden, in wieweit sich das Aussehen des Gepäckstücks verändert hat. Die Gepäckstücküberprüfung kann automatisch, insbesondere mittels der Datenverarbeitungseinheit, und/oder manuell erfolgen.
Beispielsweise kann die Gepäckstücküberprüfung unter Verwendung des erstellten Abbildes erfolgen. Insbesondere kann bei der Gepäckstückprüfung geprüft werden, ob sich das aus der Gepäckstückbeschreibung erstellte Abbild des Gepäckstücks von dem Vergleichs-Abbild unterscheidet. Weiter kann bei der Ge¬ päckstücküberprüfung geprüft werden, in wieweit sich das aus der Gepäckstückbeschreibung erstellte Abbild des Gepäckstücks von dem Vergleichs-Abbild unterscheidet, d. h. welche Unter¬ schiede zwischen dem aus der Gepäckstückbeschreibung erstell- ten Abbild des Gepäckstücks und dem Vergleichs-Abbild beste¬ hen . Ferner kann die Gepäckstücküberprüfung unter Verwendung der Gepäckstückbeschreibung erfolgen. Insbesondere kann bei der Gepäckstückprüfung geprüft werden, ob sich die Gepäckstückbeschreibung von der Vergleichsbeschreibung unterscheidet. Wei- ter kann bei der Gepäckstücküberprüfung geprüft werden, in wieweit sich die Gepäckstückbeschreibung von der Vergleichsbeschreibung unterscheidet, d. h. welche Unterschiede zwi¬ schen der Gepäckstückbeschreibung und der Vergleichsbeschreibung bestehen. Insbesondere kann die bei der Gepäckstücküber- prüfung geprüfte Gepäckstückbeschreibung die zweite Gepäckstückbeschreibung sein.
Falls die Gepäckstücküberprüfung ergibt, dass sich das Gepäckstück verändert hat, insbesondere dass das Gepäckstück beschädigt wurde, kann bei der Gepäckstücküberprüfung weiter geprüft werden, in welchen Transportschritten die Veränderung/Beschädigung passiert ist. Zweckmäßigerweise wird dazu das Gepäckstück mehrmals im Laufe seines Transports an ver¬ schiedenen Gepäckbeschreibungssystemen auf die zuvor be- schriebene Weise erfasst. Zweckmäßigerweise wird bei jeder der Erfassungen eine Gepäckstückbeschreibung erstellt. Jede der erstellten Gepäckstückbeschreibungen des Gepäckstücks wird vorzugsweise gemeinsam z. B. mit einer Kennnummer des Gepäckbeschreibungssystems gespeichert, insbesondere in der Datenbank. Beispielsweise kann ein Datensatz zu dem Gepäckstück mehrere Gepäckstückbeschreibungen dieses Gepäckstücks und ggf. die dazugehörigen Kennnummern des jeweiligen Gepäckbeschreibungssystems umfassen. In einer vorteilhaften Ausgestaltung der Erfindung wird das Verfahren bei einer Vielzahl von Gepäckstücken eingesetzt, wobei vorzugsweise für jedes der Gepäckstücke eine Gepäck¬ stückbeschreibung erstellt wird. Weiter kann das Verfahren zur statistischen Auswertung von visuellen Merkmalen von Gepäckstücken eingesetzt werden, insbesondere wenn das Verfahren bei einer Vielzahl von Gepäckstücken eingesetzt wird. Zweckmäßigerweise werden bei der statistischen Auswertung von visuellen Merkmalen zumindest ein Teil der erfassten visuellen Merkmale der Gepäckstücke statistisch ausgewertet. Beispielsweise kann die statistische Auswertung der Gepäck¬ stückabmaße (bei einer Vielzahl von Gepäckstücken) zur Transportoptimierung, insbesondere für eine Optimierung der Beladung eines Transportwagens und/oder eines Flugzeugs, genutzt werden. Weiter kann beispielsweise die statistische Auswer- tung der Gepäckstückform, -färbe und/oder -marke für ein Produktdesign und/oder für Werbezwecke genutzt werden.
Die statistische Auswertung kann beispielsweise nach bestimm¬ ten Kriterien, wie z. B. nach dem Startflughafen, nach einem Abflugsland, nach einer Jahreszeit, nach einem Geschlecht des Eigentümers des Gepäckstücks und/oder nach Ähnlichem, erfol¬ gen. Beispielsweise kann die statistische Auswertung für meh¬ rere Jahreszeiten, z. B. für Sommer und Winter, getrennt durchgeführt werden. Auf diese Weise kann untersucht werden, ob sich zumindest ein Teil der erfassten visuellen Merkmale, z. B. eine Farbe des Gepäckstücks, für verschiedene Jahres¬ zeiten unterscheidet.
Ferner betrifft die Erfindung ein Gepäckbeschreibungssystem, welche erfindungsgemäß eine visuelle Erfassungseinrichtung und eine Datenverarbeitungseinheit zur Ausführung des zuvor genannten Verfahrens umfasst. Insbesondere betrifft die Er¬ findung ein Gepäckbeschreibungssystem mit einer visuellen Erfassungseinrichtung zur visuellen Erfassung des Gepäckstücks als Gepäckstückbild und ein Datenverarbeitungseinheit zur Ex¬ traktion visueller Merkmale des Gepäckstücks aus dem Gepäckstückbild sowie zur Erstellung einer Gepäckstückbeschreibung aus den extrahierten visuellen Merkmalen des Gepäckstücks. Das Gepäckbeschreibungssystem kann zur Durchführung des oben beschriebenen Verfahrens eingesetzt werden. Folglich können die Elemente des Gepäckbeschreibungssystems die zuvor im Zu¬ sammenhang mit dem Verfahren erwähnten Elemente sein. Die bisher gegebene Beschreibung vorteilhafter Ausgestaltungen der Erfindung enthält zahlreiche Merkmale, die in den einzelnen Unteransprüchen teilweise zu mehreren zusammenge- fasst wiedergegeben sind. Diese Merkmale können jedoch zweckmäßigerweise auch einzeln betrachtet und zu sinnvollen weite¬ ren Kombinationen zusammengefasst werden. Insbesondere sind diese Merkmale jeweils einzeln und in beliebiger geeigneter Kombination mit dem erfindungsgemäßen Verfahren und dem er- findungsgemäßen Gepäckbeschreibungssystem kombinierbar. So sind Verfahrensmerkmale auch als Eigenschaft des entsprechen¬ den Gepäcksortiersystems gegenständlich formuliert zu sehen und umgekehrt.
Auch wenn in der Beschreibung bzw. in den Patentansprüchen einige Begriffe jeweils im Singular oder in Verbindung mit einem Zahlwort verwendet werden, soll der Umfang der Erfindung für diese Begriffe nicht auf den Singular oder das je¬ weilige Zahlwort eingeschränkt sein.
Die oben beschriebenen Eigenschaften, Merkmale und Vorteile dieser Erfindung sowie die Art und Weise, wie diese erreicht werden, werden klarer und deutlicher verständlich im Zusammenhang mit der folgenden Beschreibung des Ausführungsbeispiels, das im Zusammenhang mit den Zeichnungen näher erläutert wird. Das Ausführungsbeispiel dient der Erläuterung der Erfindung und beschränkt die Erfindung nicht auf die darin angegebene Kombination von Merkmalen, auch nicht in Bezug auf funktionale Merkmale. Außerdem können dazu geeignete Merkmale des Ausführungsbeispiels auch explizit isoliert betrachtet, aus dem Ausführungsbeispiel entfernt und/oder mit einem be¬ liebigen der Ansprüche kombiniert werden.
Es zeigen:
FIG 1 ein Gepäckbeschreibungssystem mit einer visuellen Erfassungseinrichtung und einer Datenverarbeitungseinheit; FIG 2 ein Gepäckstücklogo und ein Gepäckstückmarkenname;
FIG 3 ein erstes Zusatzelement des Gepäckstücks;
FIG 4 ein zweites Zusatzelement des Gepäckstücks;
FIG 5 ein drittes Zusatzelement des Gepäckstücks; und FIG 6 eine Datenbank, welche in einer Cloud gespeichert
ist .
FIG 1 zeigt schematisch ein Gepäckbeschreibungssystem 2 mit einer visuellen Erfassungseinrichtung 4 und einer Datenverar- beitungseinheit 6. Die visuelle Erfassungseinrichtung 4 ist als Kamera ausgebildet. Weiter umfasst die Datenverarbei¬ tungseinheit 6 eine Datenbank 8 sowie ein Computerprogramm 10. Das Computerprogramm 10 läuft auf der Datenverarbeitungs¬ einheit 6 ab.
Die visuelle Erfassungseinrichtung 4 und die Datenverarbei¬ tungseinheit 6 sind durch eine Datentransferverbindung 12 miteinander verbunden. Die Datentransferverbindung 12 kann z. B. ein Kabel sein. Weiter kann die Datentransferverbindung 12 z. B. eine drahtlose Verbindung sein.
Weiter ist in FIG 1 ein Gepäckband 14 dargestellt, welches über Rollen 16 läuft. Die Bewegungsrichtungen der Rollen 16 sowie des Gepäckbandes 14 sind durch Pfeile dargestellt. Auf dem Gepäckband 14 befindet sich ein Gepäckstück 18, insbesondere ein Fluggepäckstück. Prinzipiell könnte das Gepäckstück 18 auch z. B. über Gepäckschalen und/oder ein anderes Gepäcktransportmittel transportiert werden. Das Gepäckstück 18 weist mehrere visuelle Merkmale 20 des Ge¬ päckstücks 18 auf. An dem Gepäckstück 18 ist ein Zusatzele¬ ment 22 befestigt, wobei das Zusatzelement 22 lösbar mit dem Gepäckstück 18 verbunden ist. Auch das Zusatzelement 22 weist mehrere visuelle Merkmale 24 des Zusatzelements 22 auf.
Das Gepäckstück 18 wird mittels der visuellen Erfassungsein- richtung 4 erfasst. Weiter wird mittels der visuellen Erfassungseinrichtung 4 ein Gepäckstückabbild erzeugt. Das Gepäck¬ stückabbild umfasst eine Oberseite des Gepäckstücks 18 und liegt in Form eines Pixelbildes vor. Außerdem werden aus dem Gepäckstückabbild 18 visuelle Merkmale 20 des Gepäckstücks 18 extrahiert, insbesondere mittels der Datenverarbeitungsein¬ heit 6.
In diesem Beispiel sind die extrahierten visuellen Merkmale des Gepäckstücks 18 ein Gepäckstückabmaß, insbesondere eine Länge und eine Breite des Gepäckstücks, eine Gepäckstückform, eine Gepäckstückfarbe, eine Gepäckstückmusterung, ein Gepäckstücklogo 26 und ein Gepäckstückmarkenname 28.
Ferner wird aus den extrahierten visuellen Merkmalen 20 des Gepäckstücks 18 eine Gepäckstückbeschreibung erstellt, insbe¬ sondere in Form eines Beschreibungsvektors. Der Beschrei¬ bungsvektor umfasst mehrere Vektorfelder, wobei jedes Vektorfeld ein visuelles Merkmal 20 des Gepäckstücks 18 umfasst. Alle Schritte (visuelle Erfassung, Erzeugung des Gepäckstückabbildes, Extraktion der visuellen Merkmale 18 und Erstellung der Gepäckstückbeschreibung) erfolgen in diesem Ausführungsbeispiel vollautomatisch, d. h. ohne manuelles Eingreifen einer Person.
Prinzipiell wäre es auch möglich, dass die visuelle Erfas¬ sungseinrichtung eine Handkamera ist, sodass die visuelle Er¬ fassung teilautomatisch erfolgen würde. Beispielsweise kann die Form der Gepäckstückbeschreibung wie folgt sein: [Länge des Gepäckstücks, Breite des Gepäckstücks, Gepäck¬ stückform, Gepäckstückfarbe, Gepäckstückmusterung, Gepäckstücklogo 26, Gepäckstückmarkenname 28].
Insbesondere kann die Gepäckstückbeschreibung wie folgt lau- ten :
[60 cm, 40 cm, rechteckig, RGB 139/69/19, 0, L 221, Kofferma¬ cher] .
Die Gepäckbeschreibung umfasst Ziffern und Buchstaben. Die visuellen Merkmale 20 des Gepäckstücks 18 können ausgeschrie¬ ben sein, abgekürzt sein und/oder codiert sein. Weiter kann das Fehlen eines visuellen Merkmals auch als visuelles Merk¬ mal verstanden werden. Z. B. fehlt dem Gepäckstück 18 eine Gepäckmusterung - d. h. das Gepäckstück 18 ist nicht gemus- tert (visuelles Merkmal 20: „keine Gepäckmusterung") - und im entsprechenden Vektorfeld „Gepäckmusterung" ist eine Null eingetragen .
Das an dem Gepäckstück 18 angeordnete Zusatzelement 22 wird ebenfalls mittels der visuellen Erfassungseinrichtung 4 er- fasst, mittels welcher ein Zusatzabbild erzeugt wird. Aus dem Zusatzabbild werden visuelle Merkmale 24 des Zusatzelementes 22 extrahiert und aus den extrahierten visuellen Merkmalen 24 des Zusatzelementes 22 wird eine Zusatzbeschreibung erstellt, insbesondere jeweils mittels der Datenverarbeitungseinheit 6. Auch die Zusatzbeschreibung liegt in Form eines Vektors vor. Weiter bildete die Zusatzbeschreibung gemeinsam mit der Gepäckstückbeschreibung eine erweiterte Gepäckstückbeschrei¬ bung .
Das Zusatzelement 22 kann z. B. das in FIG 3, in FIG 4 oder in FIG 5 gezeigte Zusatzelement 22 sein.
Das Zusatzelement 22 umfasst einen Informationssatz 30 in Form von Klartext 30 (siehe Figuren 3-5) . Bei der visuellen Erfassung wird der Informationssatz 30 zumindest teilweise visuell erfasst und zumindest ein Teil des Informationssatzes 30 mittels einer optischen Texterkennung, insbesondere mit- tels OCR („optical character recognition") , erkannt. Der erkannte Teil des Informationssatzes 30 kann in der Zusatzbe¬ schreibung und/oder in einer Informationssatzbeschreibung zumindest teilweise gespeichert werden (vgl. Figuren 3-5) . Die Informationssatzbeschreibung liegt in Form eines Vektors vor.
Die Extraktion von visuellen Merkmalen 20, 24 erfolgt unter Verwendung von Vorwissen und unter Verwendung von trainierbaren Systemen.
In der Datenverarbeitungseinheit 6 ist das Vorwissen gespei¬ chert. Beispielsweise sind als Vorwissen verschiedene Gepäck¬ stücklogo-Vorlagen und Gepäckstückmarkennamen-Vorlagen gespeichert. Weiter sind den gespeicherten Gepäckstücklogo- Vorlagen z. B. Kennnummern zugeordnet. Entspricht ein extra¬ hiertes Gepäckstücklogo im Wesentlichen einer Gepäckstücklo¬ go-Vorlage, so wird das extrahierte Gepäckstücklogo in der Gepäckstückbeschreibung mit der entsprechenden Kennnummer der entsprechenden Gepäckstücklogo-Vorlage codiert. (Siehe auch FIG 2)
Weiter ist die Datenverarbeitungseinheit 6, insbesondere ein Computerprogramm 10 der Datenverarbeitungseinheit 6, ein trainierbares System. Beispielsweise wird ein Gepäckstücklogo auch dann einer Gepäckstücklogo-Vorlage zugeordnet, wenn das Gepäckstücklogo in einem vorgegebenen Maße verändert ist, z. B. wenn das Gepäckstücklogo einen Kratzer aufweist, wenn das Gepäckstücklogo verschmutzt ist, wenn eine Farbe des Ge¬ päckstücklogos in einem vorgegebenen Maße verändert ist und/oder ähnliches.
Weiter können als Vorwissen bestimmte visuelle Merkmale 24 von Zusatzelementen 22 gespeichert sein. Näheres hierzu ist in den Figuren 4 und 5 beschrieben.
Die bei der visuellen Erfassung des Gepäckstücks 18 erstellte Gepäckstückbeschreibung bzw. erweiterte Gepäckstückbeschrei¬ bung wird als Vergleichsbeschreibung gespeichert, insbesonde- re in der Datenbank 8. Die Datenbank 8 umfasst einen Datensatz, welcher wiederum die Vergleichsbeschreibung umfasst. Außerdem umfasst der Datensatz weitere Informationen und/oder die Informationssatzbeschreibung. Insbesondere umfasst der Datensatz eine Gepäcknummer, einen Eigentümernamen, eine Flugnummer, einen Zielflughafen und so weiter.
Weiter wird die Vergleichsbeschreibung an beliebigen Orten („Wo"), zu beliebigen Zeiten („Wann"), für beliebige Personen („Für wen") und für beliebige Zwecke („Wofür") zur Verfügung gestellt. Insbesondere wird die Vergleichsbeschreibung weite¬ ren oder auch allen am Transport des Gepäckstücks 18 beteili¬ gen Flughäfen zur Verfügung gestellt. Dabei wird der Datensatz, in welchem die Vergleichsbeschreibung gespeichert ist, den weiteren oder den allen am Transport des Gepäckstücks 18 beteiligen Flughäfen zur Verfügung gestellt. In diesem Beispiel wird der Datensatz bzw. die Vergleichsbeschreibung an alle am Transport des Gepäckstücks 18 beteiligen Flughäfen übermittelt und der Datensatz bzw. die Vergleichsbeschreibung wird lokal in der Datenbank 8 des Flughafens gespeichert.
Die visuelle Erfassung (mittels der visuellen Erfassungseinrichtung 4) zur Speicherung der Vergleichsbeschreibung ist in diesem Fall eine erste visuelle Erfassung. Weiter wird eine erste Gepäckstückbeschreibung als Vergleichsbeschreibung gespeichert .
Im Verlauf des Transports des Gepäckstücks 18 kommt das Ge¬ päckstück 18 zu einem identischen zweiten Gepäckbeschrei- bungssystem 2. Dort wird das Gepäckstück 18 ein zweites Mal erfasst, was eine zweite Gepäckstückbeschreibung (bzw. eine zweite erweiterte Gepäckstückbeschreibung) liefert. Die zwei¬ te Gepäckstückbeschreibung bzw. die zweite erweiterte Gepäckstückbeschreibung werden im Folgenden nur als zweite Gepäck- Stückbeschreibung bezeichnet.
Weiter wird bei einer Prüfung geprüft, ob die zweite Gepäck¬ stückbeschreibung mit einer Vergleichsbeschreibung, welche insbesondere in der Datenbank 8 gespeichert ist, überein¬ stimmt. Die Vergleichsbeschreibung kann die zuvor genannte Vergleichsbeschreibung oder eine andere in der Datenbank 8 gespeicherte Vergleichsbeschreibung sein. Die Prüfung wird automatisch mittels der Datenverarbeitungseinheit 6, insbe¬ sondere mittels dem Computerprogramm 10, durchgeführt. Zweck¬ mäßigerweise umfasst die Datenbank 8 mehrere Vergleichsbe¬ schreibungen, unter anderem die erstgenannte Vergleichsbe¬ schreibung. Z. B. kann die zweite Gepäckbeschreibung nachei- nander mit jeder der mehreren Vergleichsbeschreibungen verglichen werden.
In diesem Beispiel stimmt die zweite Gepäckstückbeschreibung mit keiner der mehreren Vergleichsbeschreibungen überein, z. B. weil das Gepäckstück auf dem Transport beschädigt wurde.
Außerdem wird bei einer weiteren Prüfung geprüft, welche der Vergleichsbeschreibungen der Datenbank 8 die größte Übereinstimmung mit der zweiten Gepäckstückbeschreibung aufweist. Diejenige Vergleichsbeschreibung, welche am besten mit der zweiten Gepäckstückbeschreibung übereinstimmt, wird dem Gepäckstück 18 zugeordnet. Durch einen Vergleich der zweiten Gepäckstückbeschreibung mit derjenigen Vergleichsbeschreibung, welche am besten mit der zweiten Gepäckstückbeschrei- bung übereinstimmt, kann geprüft werden, ob und in wieweit sich ein Aussehen des Gepäckstücks 18 verändert hat, insbe¬ sondere ob und in wieweit das Gepäckstück 18 beschädigt wur¬ de . Außerdem wird derjenige Datensatz dem Gepäckstück 18 zugeordnet, welcher diejenige Vergleichsbeschreibung umfasst, die am besten mit der zweiten Gepäckstückbeschreibung übereinstimmt. Auf diese Weise wird das Verfahren zur Identifizierung des Gepäckstücks 18 eingesetzt. Aus dem Datensatz, welche der zweiten Gepäckstückbeschreibung zugeordnet wurde, werden dann weitere Informationen abgelesen - d. h. die Informationen werden der zweiten Gepäckstückbeschreibung und damit dem Gepäckstück 18 zugeordnet. Beispielsweise kann die Identifizierung während des Trans¬ portprozesses erfolgen, insbesondere um einen Zielort des Ge¬ päckstücks 18 zu ermitteln. Weiter kann das Gepäckstück 18 ein gefundenes Gepäckstück 18 sein - d. h. die Identifizie¬ rung kann für ein gefundenes Gepäckstück 18 erfolgen, insbesondere um den Eigentümer eines gefundenen Gepäckstücks 18 zu ermitteln . Auf diese Weise wird das Verfahren zu einer Zuordnung einge¬ setzt, wobei die zweite Gepäckstückbeschreibung dazu genutzt wird, dem Gepäckstück eine Information - insbesondere aus dem Datensatz, welcher die passende Vergleichsbeschreibung um- fasst - zuzuordnen.
Beispielsweise wird dem Gepäckstück 18 eine Transport-, eine Eigentümer- und/oder eine Verarbeitungsinformation, insbesondere eine Gepäcknummer, eine Flugnummer, ein Zielort und/oder ein Eigentümernamen, zugeordnet. Z. B. kann das Verfahren ge- nutzt werden, um einen Eigentümer eines gefundenen Gepäckstücks 18 zu ermitteln.
Weiter kann dem Gepäckstück 18 direkt aus der zweiten Gepäckstückbeschreibung eine Information zugeordnet werden. Ist die zweite Gepäckbeschreibung die erweiterte zweite Gepäckstückbeschreibung, so finden sich in der zweiten Gepäckbeschreibung auch visuelle Merkmale 24 des Zusatzelements 22. Bei¬ spielsweise können auf dem Zusatzelement 22 Verarbeitungsin¬ formationen vermerkt sein, wie z. B. auf dem Zusatzelement 22 aus FIG 4. Aufgrund der erfassten und extrahierten visuellen Merkmale 24 des Zusatzelementes 22 und/oder des erkannten Teils des Informationssatzes 30 wird das Gepäckstück 18 ge¬ sondert behandelt, insbesondere wird das Gepäckstück 18 über eine bestimmte Sortierstrecke geleitet.
Prinzipiell ist es möglich, dass das Gepäckstück 18 mehrere Zusatzelemente 22, z. B. zwei der in den Figuren 3-5 gezeig- ten oder alle der in den Figuren 3-5 gezeigten Zusatzelemente 22, aufweist.
Weiter wird das Verfahren zu einer Abbilderstellung des Ge- päckstücks 18 eingesetzt, wobei aus der zweiten Gepäckstück¬ beschreibung ein Abbild des Gepäckstücks 18 erstellt wird, insbesondere mittels der Datenverarbeitungseinheit 6. Das Ab¬ bild des Gepäckstücks 18 ist z. B. ein 2D-Modell des Gepäck¬ stücks 18.
Das Abbild des Gepäckstücks 18 wird mit einem Vergleichs- Abbild verglichen werden, welches Vergleichs-Abbild aus der Vergleichsbeschreibung erstellt wird. Weiter wird eine Gepäcküberprüfung durchgeführt, bei welcher das Abbild des Ge- päckstücks 18 mit dem Vergleichsabbild verglichen wird, um zu prüfen, ob und in wieweit sich ein Aussehen des Gepäckstücks 18 verändert hat, insbesondere ob und in wieweit das Gepäck¬ stück (z. B. beim Transport und/oder beim Sortieren) beschädigt wurde.
Prinzipiell kann bei dem Verfahren zur Abbilderstellung auch aus der ersten Gepäckstückbeschreibung ein Abbild des Gepäckstücks 18 erstellt werden. Insbesondere kann auf diese Weise ein vermisstes Gepäckstück 18 gefunden werden. Beispielsweise kann das vermisste Gepäckstück 18 eines Eigentümers gefunden werden. Dazu wird beispielsweise in der Datenbank 8 nach dem Eigentümernamen und/oder nach der Gepäcknummer gesucht und der Datensatz zu dem vermissten Gepäckstück 18 gefunden. Aus dem Datensatz zu dem vermissten Gepäckstück 18, insbesondere aus der Vergleichsbeschreibung zu dem vermissten Gepäckstück 18, welche vorzugsweise in dem Datensatz zu dem vermissten Gepäckstück 18 gespeichert ist, kann ein Abbild des vermiss¬ ten Gepäckstücks 18 erstellt werden. Weiter kann in dem Da¬ tensatz zu dem vermissten Gepäckstück 18 gespeichert sein, an welchem Sammelpunkt sich das vermisste Gepäckstück 18 befindet. Mithilfe des erstellten Abbildes des vermissten Gepäckstücks 18 kann am Sammelpunkt nach dem vermissten Gepäckstück 18 gesucht werden, insbesondere indem manuell alle am Sammel- punkt befindlichen Gepäckstücke mit dem Abbild des vermissten Gepäckstücks 18 verglichen werden. Auf diese Weise kann das vermisste Gepäckstück 18 gefunden werden. Weiter kann ein vermisste Gepäckstück 18 gefunden werden, indem der Datensatz zu dem vermissen Gepäckstück 18 und/oder die Vergleichsbeschreibung zu dem vermissten Gepäckstück 18 mit anderen Datensätzen abgeglichen wird. Die anderen Datensätze können beispielsweise in einer anderen Datenbank z. B. eines anderen Flughafens gespeichert sein.
Das aus der Gepäckstückbeschreibung erstellte Abbild des Ge¬ päckstücks 18 kann mit einem Vergleichs-Abbild verglichen werden. Das Vergleichs-Abbild kann aus einer Vergleichsbe- Schreibung erstellt werden. Insbesondere kann die Vergleichs¬ beschreibung die zuvor genannte Vergleichsbeschreibung sein.
Das gezeigte Verfahren wird bei einer Vielzahl von Gepäckstü¬ cken 18 eingesetzt, wobei jedes Gepäckstück 18 visuelle Merk- male 20 aufweist. Außerdem kann jedes Gepäckstück 18 ein oder mehrere Zusatzelement (e) 22 aufweisen. Weiter werden ein Teil der erfassten visuellen Merkmale 20 der Gepäckstücke 18 sta¬ tistisch ausgewertet. Beispielsweise kann das Gepäckabmaß statistisch ausgewertet werden, um die Beladung von Trans- portwagen und/oder Flugzeugen zu optimieren. Weiter kann die Gepäckstückfarbe in der Jahreszeit Sommer statistisch ausge¬ wertet werden, z. B. um die im Sommer meistgenutzte Gepäckfarbe für ein Produktdesign zu nutzen. Ferner können ein Teil der erfassten visuellen Merkmale 24 der Zusatzelemente 22 statistisch ausgewertet werden. Bei¬ spielsweise kann die Häufigkeit von bestimmten Verarbeitungs¬ informationen ausgewertet werden, z. B. um eine Auslastung einer bestimmten Sortierstrecke zu bestimmen.
FIG 2 zeigt exemplarische das Gepäckstücklogo 26 des Gepäck¬ stücks 18 aus FIG 1. Das Gepäckstücklogo 26 ist oval, grau gefärbt und enthält das Symbol eines Koffers sowie den Ge¬ päckstückmarkenname 28 „Koffermacher".
In der Datenverarbeitungseinheit 6 aus FIG 1 sind verschiede- ne Gepäckstücklogo-Vorlagen und Gepäckstückmarkennamen- Vorlagen als Vorwissen gespeichert. Das extrahierte Gepäck¬ stücklogo 26 entspricht im Wesentlichen einer Gepäckstücklo¬ go-Vorlage, welcher die Kennnummer „L 221" zugeordnet ist, und wird in der Gepäckstückbeschreibung mit der entsprechen- den Kennnummer codiert.
FIG 3 zeigt exemplarisch ein erstes mögliches Zusatzelement 22 des Gepäckstücks 18 aus FIG 1. Das Zusatzelement 22 ist als Aufkleber auf dem Gepäckstück 18 ausgeführt. Weiter um- fasst das Zusatzelement 22 einen Informationssatz 30 in Form von Klartext 30.
Die visuelle Erfassungseinrichtung 4 aus FIG 1 erfasst das Zusatzelement 22 mit dem Gepäckstück 18 in einem gemeinsamen Pixelbild. D. h. das Zusatzabbild ist ein Teilbereich des Pi¬ xelbildes und das Gepäckstückabbild ist ein anderer Teilbe¬ reich des Pixelbildes.
Aus dem erfassten Zusatzabbild wird - wie bereits in FIG 1 erläutert - eine Zusatzbeschreibung erstellt.
Beispielsweise kann die Form der Zusatzbeschreibung wie folgt sein :
[Länge des Zusatzelements 22, Breite des Zusatzelements 22, Form des Zusatzelements 22, Farbe des Zusatzelements 22, Mus¬ terung 32 des Zusatzelements 22, Klartext 30, Farbe des Klar¬ textes 30, Position des Klartextes 30].
Insbesondere kann die Zusatzbeschreibung wie folgt lauten:
[8 cm, 8 cm, sternförmig, RGB 255/255/255, dünne Streifen RGB 0/0/0 mit Streifenabstand 0,8 cm, „007", RGB 0/0/0, mittig]. Das heißt, hier wird beispielsweise der Informationssatz 30 in Form von Klartext 30 mit in der Zusatzbeschreibung er- fasst . FIG 4 zeigt exemplarisch ein zweites mögliches Zusatzelement 22 des Gepäckstücks 18 aus FIG 1. Das Zusatzelement 22 kann als Aufkleber oder als Anhänger ausgeführt sein.
Die visuelle Erfassungseinrichtung 4 aus FIG 1 erfasst das Zusatzelement 22 mit dem Gepäckstück 18 in einem gemeinsamen Pixelbild .
Das Zusatzelement 22 weist als Musterung 32 einen roten Rand mit einer Linienbreite von 0,5 cm auf. Weiter umfasst das Zu- satzelement 22 einen Informationssatz 30 in Form von Klartext 30 auf. Der Informationssatz 30 in Form von Klartext 30 beinhaltet eine Verarbeitungsinformation. Der Klartext 30 ist rot geschrieben . Beispielsweise kann die Form der Zusatzbeschreibung wie folgt sein :
[Länge des Zusatzelements 22, Breite des Zusatzelements 22, Form des Zusatzelements 22, Farbe des Zusatzelements 22, Mus¬ terung des Zusatzelements 22, Klartext 30, Farbe des Klartex- tes 30, Position des Klartextes 30] .
Insbesondere kann die Zusatzbeschreibung wie folgt lauten:
[25 cm, 4 cm, rechteckig, weiß, roten Rand mit einer Linienbreite von 0,5 cm, ja, rot, mittig] . In der Datenverarbeitungseinheit aus FIG 1 sind verschiedene Zusatzelement-Vorlagen als Vorwissen gespeichert. Den visuellen Merkmalen „roten Rand mit einer Linienbreite von 0,6 cm" und „roter Klartext" ist „als Vorwissen" die Verarbeitungsinformation „gesondert behandeln" zugeordnet. Weiter hat die Datenverarbeitungseinheit 6 bereits gelernt, dass die Linien¬ breite des Randes im Bereich ±0,2cm variieren kann. Demnach ordnet das Datenverarbeitungssystem dem Gepäckstück 18 die Verarbeitungsinformation „gesondert behandeln" zu und das Ge- päckstück 18 wird über eine bestimmte Sortierstrecke gelei¬ tet .
Weiter kann zumindest ein Teil des Informationssatzes 30 in Form von Klartext 30 mittels der Texterkennung erkannt werden. Beispielsweise wird der erkennte Teil des Informations¬ satzes 30 in einer Informationssatzbeschreibung erfasst, welche wie folgt lautet: [„HANDLE WITH PRIORITY"] In der Datenverarbeitungseinheit 6 ist als Vorwissen gespei¬ chert, dass der Text „HANDLE WITH PRIORITY" unabhängig von Groß-/Kleinschreibung bedeutet, dass das Gepäckstück 18 über eine bestimmte Sortierstrecke geleitet werden soll. Der erkannte Informationssatz 30 führt folglich ebenfalls zu einer entsprechenden Sortierung, sodass das Gepäckstück 18 über die bestimmte Sortierstrecke geleitet wird.
FIG 5 zeigt exemplarisch ein drittes mögliches Zusatzelement 22 des Gepäckstücks 18 aus FIG 1. Das Zusatzelement 22 ist als Gepäcketikett ausgeführt.
Die visuelle Erfassungseinrichtung 4 aus FIG 1 erfasst das Zusatzelement 22 und das Gepäckstück 18.
Beispielsweise kann die Form der Zusatzbeschreibung wie folgt sein :
[Länge des Zusatzelements 22, Breite des Zusatzelements 22, Form des Zusatzelements 22, Farbe des Zusatzelements 22, Mus- terung 32 des Zusatzelements 22, Klartext 30, Farbe des Klar¬ textes 30, Position des Klartextes 30].
Insbesondere kann die Zusatzbeschreibung wie folgt lauten:
[5 cm, 20 cm, rechteckig, weiß, grüne Streifen mit einer Strichdicke von 0,5 cm, ja, schwarz, mehrere] .
Weiter wird zumindest ein Teil des Informationssatzes 30 in Form von Klartext 30 mittels der Texterkennung erkannt. Zudem umfasst das Zusatzelement 22 einen Barcode 34, welcher eben- falls erkannt wird. Der erkannte Teil des Informationssatzes 30 wird (gemeinsam mit dem erkannten Barcode 34) zumindest teilweise in einer Informationssatzbeschreibung erfasst, welche beispielsweise folgende Form aufweist:
[decodierter Barcode 34, Gepäcknummer 36, Eigentümername 38, Zielflughafenkürzel 40, Flugnummer 42, Zwischenflughafenkür- zel 44, Flugnummer 46, Flugdatum 48, Ausstellungsdatum 50] Der erkannte Informationssatz lautet wie folgt:
[0220 123456, 0220 123456, Mr A Mustermann, DXB, LH 550, Flugnummer FRA, LH 610, 31, 31DEC08]
In der Datenverarbeitungseinheit 6 aus FIG 1 sind verschiede¬ ne Zusatzelement-Vorlagen als Vorwissen gespeichert. Dem visuellen Merkmal, „grüne Streifen" „mit einer Strichdicke von 0,5 cm", ist als Vorwissen, „Gepäckstück wurde im Schengen- Raum aufgegeben" und die Fluggesellschaft ist Lufthansa", zu¬ geordnet. Weiter hat die Datenverarbeitungseinheit 6 bereits gelernt, dass der Grünton in seiner Helligkeit und seinem Gelbanteil variieren kann. Demnach ordnet das Datenverarbei- tungssystem dem Gepäckstück 18 die Information, „Gepäckstück wurde im Schengen-Raum aufgegeben", zu.
Weiter kann als Vorwissen in der Datenverarbeitungseinheit 6 gespeichert sein, dass jedes Element, welches einen Barcode 34 aufweist, ein Gepäcketikett ist. Weiter kann in der Daten¬ verarbeitungseinheit 6 als Vorwissen gespeichert sein, welche Form der Informationssatz 30 eines Gepäcketiketts hat und an welcher Position des Gepäcketiketts welche Informationen des Informationssatzes zu finden sind.
Das Gepäckstück 18 wird unter Verwendung der erkannten visuellen Merkmale 20 sowie unter Verwendung des erkannten Teils des Informationssatzes 30 automatisch sortiert. Demnach wird das Gepäckstück 18 z. B. auf ein entsprechendes Gepäckband befördert, mit einem entsprechenden Gepäckband transportiert, zu einer entsprechenden Ladezone transportiert, zu einem ent¬ sprechenden Gate transportiert und/oder auf ein entsprechendes Gepäckausgabeband befördert. FIG 6 zeigt eine Datenbank 52, welche eine Alternative zu der in FIG 1 gezeigten Datenbank 8 darstellt. Die in FIG 6 gezeigte Datenbank 52 ist in einer Cloud 54 ge¬ speichert (und demnach nicht in der Datenverarbeitungseinheit aus FIG 1) . Die Datenbank 52 umfasst den Datensatz des Ge¬ päckstücks 18, welcher die Vergleichsbeschreibung umfasst. Jeder am Transport des Gepäckstücks 18 beteiligte Flughafen 56 kann auf die Datenbank 52 zugreifen. Insbesondere umfasst die Datenbank 52 mehrere Datensätze, unter anderem den oben genannten Datensatz, wobei jeder der Datensätze eine Vergleichsbeschreibung umfasst. Obwohl die Erfindung im Detail durch die bevorzugten Ausführungsbeispiele näher illustriert und beschrieben wurde, so ist die Erfindung nicht durch die offenbarten Beispiele eingeschränkt und andere Variationen können vom Fachmann hieraus abgeleitet werden, ohne den Schutzumfang der Erfindung zu verlassen.
Bezugs zeichenliste
2 GepäckbeschreibungsSystem
4 Erfassungseinrichtung
6 Datenverarbeitungseinheit
8 Datenbank
10 Computerprogramm
12 DatentransferVerbindung
14 Gepäckband
16 Rolle
18 Gepäckstück
20 Merkmal
22 Zusatzelement
24 Merkmal
26 Gepäckstücklogo
28 Gepäckstückmarkenname
30 Informationssatz, Klartext
32 Musterung
34 Barcode
36 Gepäcknummer
38 Eigentümername
40 Zielflughafenkürzel
42 Flugnummer
44 Zwischenflughafenkürzel
46 Flugnummer
48 Flugdatum
50 Ausstellungsdatum
52 Datenbank
54 Cloud
56 Flughafen

Claims

Patentansprüche
1. Verfahren zur Erstellung einer Beschreibung eines Gepäckstücks (18), bei dem
- das Gepäckstück (18) mittels einer visuellen Erfassungseinrichtung (4) erfasst wird, mittels welcher ein Gepäckstückabbild erzeugt wird,
- aus dem Gepäckstückabbild visuelle Merkmale (20) des Ge¬ päckstücks (18) extrahiert werden und
- aus den extrahierten visuellen Merkmalen (20) des Gepäckstücks (18) eine Gepäckstückbeschreibung erstellt wird.
2. Verfahren nach Anspruch 1,
dadurch gekennzeichnet, dass
die visuellen Merkmale (20) des Gepäckstücks (18) ein Gepäck¬ stückabmaß und/oder eine Gepäckstückform und/oder eine Gepäckstückfarbe und/oder eine Gepäckstückmusterung und/oder ein Gepäckstücklogo (26) und/oder einen Gepäckstückmarkenna¬ men (28) umfassen.
3. Verfahren nach Anspruch 1 oder 2,
dadurch gekennzeichnet, dass
die Gepäckstückbeschreibung in Form eines Beschreibungsvektors und/oder in Form eines beschreibenden Textes erstellt wird.
4. Verfahren nach einem der vorherigen Ansprüche,
dadurch gekennzeichnet, dass
die visuelle Erfassungseinrichtung (4) eine Handerfassungs- einrichtung, insbesondere eine Handkamera und/oder ein Hand¬ scanner, ist.
5. Verfahren nach einem der vorherigen Ansprüche,
dadurch gekennzeichnet, dass
ein an dem Gepäckstück (18) angeordnetes Zusatzelement (22) mittels der visuellen Erfassungseinrichtung (4) erfasst wird, mittels welcher ein Zusatzabbild erzeugt wird, wobei aus dem Zusatzabbild visuelle Merkmale (24) des Zusatzelementes (22) extrahiert werden und aus den extrahierten visuellen Merkmalen (24) des Zusatzelementes (22) eine Zusatzbeschreibung erstellt wird, die gemeinsam mit der Gepäckstückbeschreibung eine erweiterte Gepäckstückbeschreibung bildet.
6. Verfahren nach einem der vorherigen Ansprüche,
dadurch gekennzeichnet, dass
das Gepäckstück (18) ein Zusatzelement (22) mit einem Informationssatz (30) in Form von Klartext (30) aufweist und bei der visuellen Erfassung der Informationssatz (30) zumindest teilweise visuell erfasst wird und zumindest ein Teil des In¬ formationssatzes (30) mittels einer optischen Texterkennung erkannt wird.
7. Verfahren nach Anspruch 6,
dadurch gekennzeichnet, dass
das Gepäckstück (18) unter Verwendung des erkannten Teils des Informationssatzes (30) automatisch weiterverarbeitet, insbe¬ sondere sortiert, wird.
8. Verfahren nach einem der vorherigen Ansprüche,
dadurch gekennzeichnet, dass
die Extraktion von visuellen Merkmalen (20, 24) unter Verwendung von Vorwissen und/oder unter Verwendung von trainierba- ren Systemen erfolgt.
9. Verfahren nach einem der vorherigen Ansprüche,
dadurch gekennzeichnet, dass
die bei der visuellen Erfassung des Gepäckstücks (18) er- stellte Gepäckstückbeschreibung als Vergleichsbeschreibung gespeichert wird, insbesondere in einer Datenbank (8, 52) .
10. Verfahren nach Anspruch 9,
dadurch gekennzeichnet, dass
das Gepäckstück (18) ein Fluggepäckstück ist und die Vergleichsbeschreibung weiteren am Transport des Gepäckstück (18) beteiligen Flughäfen (56) zur Verfügung gestellt wird.
11. Verfahren nach einem der vorherigen Ansprüche, eingesetzt bei einer Prüfung, wobei geprüft wird, ob die Gepäckstückbe¬ schreibung mit einer Vergleichsbeschreibung, welche insbesondere in einer Datenbank (8, 52) gespeichert ist, überein- stimmt.
12. Verfahren nach einem der vorherigen Ansprüche, eingesetzt bei einer Prüfung,
dadurch gekennzeichnet, dass
eine Datenbank (8, 52) mehrere Vergleichsbeschreibungen um- fasst und bei der Prüfung geprüft wird, welche der Ver¬ gleichsbeschreibungen der Datenbank (8, 52) die größte Übereinstimmung mit der Gepäckstückbeschreibung aufweist.
13. Verfahren nach einem der vorherigen Ansprüche, eingesetzt zur Identifizierung eines Gepäckstücks (18).
14. Verfahren nach einem der vorherigen Ansprüche, eingesetzt zu einer Zuordnung,
wobei die Gepäckstückbeschreibung dazu genutzt wird, dem Ge¬ päckstück (18) eine Information zuzuordnen.
15. Verfahren nach einem der vorherigen Ansprüche, eingesetzt zu einer Abbilderstellung des Gepäckstücks (18),
wobei aus der Gepäckstückbeschreibung ein Abbild des Gepäckstücks (18) erstellt wird, wobei das Abbild des Gepäckstücks (18) ein Bild des Gepäckstücks (18), eine schematische Dar¬ stellung des Gepäckstücks (18), ein 2D-Modell des Gepäck¬ stücks (18) und/oder ein 3D-Modell des Gepäckstücks (18) ist.
16. Verfahren nach Anspruch 15, eingesetzt zum Auffinden eines vermissten Gepäckstücks (18).
17. Verfahren nach Anspruch 15 oder 16,
dadurch gekennzeichnet, dass
das aus der Gepäckstückbeschreibung erstellte Abbild des Ge¬ päckstücks (18) mit einem Vergleichs-Abbild verglichen wird, welches aus einer Vergleichsbeschreibung erstellt wird.
18. Verfahren nach einem der vorherigen Ansprüche, eingesetzt bei einer Gepäckstücküberprüfung,
wobei geprüft wird, ob sich ein Aussehen des Gepäckstück (18) verändert hat, insbesondere ob das Gepäckstück (18) beschä¬ digt wurde.
19. Verfahren nach einem der vorherigen Ansprüche, eingesetzt bei einer Vielzahl von Gepäckstücken (18), wobei für jedes der Gepäckstücke (18) eine Gepäckstückbeschreibung erstellt wird .
20. Verfahren nach Anspruch 19, eingesetzt zur statistischen Auswertung von visuellen Merkmalen (20) von Gepäckstücken (18) , bei dem
zumindest ein Teil der erfassten visuellen Merkmale (20) der Gepäckstücke (18) statistisch ausgewertet werden.
21. Gepäckbeschreibungssystem (2) mit einer visuellen Erfas- sungseinrichtung (4) und einer Datenverarbeitungseinheit (6) zur Ausführung eines Verfahrens nach einem der vorhergehenden Ansprüche .
EP16797921.0A 2016-03-02 2016-11-17 Verfahren zur erstellung einer beschreibung eines gepäckstücks und gepäckbeschreibungssystem Withdrawn EP3424000A1 (de)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
EP16158164.0A EP3214590A1 (de) 2016-03-02 2016-03-02 Verfahren zur erstellung einer beschreibung eines gepäckstücks und gepäckbeschreibungssystem
PCT/EP2016/078044 WO2017148550A1 (de) 2016-03-02 2016-11-17 Verfahren zur erstellung einer beschreibung eines gepäckstücks und gepäckbeschreibungssystem

Publications (1)

Publication Number Publication Date
EP3424000A1 true EP3424000A1 (de) 2019-01-09

Family

ID=55521497

Family Applications (2)

Application Number Title Priority Date Filing Date
EP16158164.0A Withdrawn EP3214590A1 (de) 2016-03-02 2016-03-02 Verfahren zur erstellung einer beschreibung eines gepäckstücks und gepäckbeschreibungssystem
EP16797921.0A Withdrawn EP3424000A1 (de) 2016-03-02 2016-11-17 Verfahren zur erstellung einer beschreibung eines gepäckstücks und gepäckbeschreibungssystem

Family Applications Before (1)

Application Number Title Priority Date Filing Date
EP16158164.0A Withdrawn EP3214590A1 (de) 2016-03-02 2016-03-02 Verfahren zur erstellung einer beschreibung eines gepäckstücks und gepäckbeschreibungssystem

Country Status (6)

Country Link
US (1) US20190095744A1 (de)
EP (2) EP3214590A1 (de)
CN (1) CN108701287A (de)
CA (1) CA3016217C (de)
HK (1) HK1256134A1 (de)
WO (1) WO2017148550A1 (de)

Families Citing this family (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10902540B2 (en) * 2016-08-12 2021-01-26 Alitheon, Inc. Event-driven authentication of physical objects
FR3081354B1 (fr) 2018-05-24 2021-06-11 Solystic Procede de tri de bagages dans un aeroport
FR3081355B1 (fr) 2018-05-24 2020-06-12 Solystic Procede de tri de bagages en aeroport avec videocodage optimise
FR3094114B1 (fr) * 2019-03-22 2021-09-10 Idemia Identity & Security France Kit identification bagage
CN110147749B (zh) * 2019-05-10 2023-05-05 中国民航大学 一种民航丢失行李辅助找回方法
US11146733B1 (en) * 2019-08-16 2021-10-12 American Airlines, Inc. Cargo management system and methods
CN110826666A (zh) * 2019-11-01 2020-02-21 支付宝(杭州)信息技术有限公司 行李转盘控制方法和装置及行李转盘控制***
EP3893144A1 (de) * 2020-04-06 2021-10-13 Deutsche Post AG Eindeutige objektoberflächen-id
CN111461614A (zh) * 2020-04-07 2020-07-28 中国民航信息网络股份有限公司 一种不正常行李的处理方法及***
CN113420851B (zh) * 2021-05-14 2023-02-17 盛视科技股份有限公司 行李监管***及方法
CN115019300B (zh) * 2022-08-09 2022-10-11 成都运荔枝科技有限公司 用于自动化仓库货物识别的方法

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102009060057A1 (de) * 2009-12-22 2011-06-30 Siemens Aktiengesellschaft, 80333 Verfahren zum Identifizieren verloren gegangener oder nicht zuordenbarer Gepäckstücke
CN101846503B (zh) * 2010-04-21 2011-09-28 中国科学院自动化研究所 一种基于立体视觉的行李信息在线获取***及其方法
US8686853B2 (en) * 2011-12-21 2014-04-01 Richard Edward Pfuhl System and method for group search-based lost bag search and recovery
CN103901489B (zh) * 2012-12-27 2017-07-21 清华大学 检查物体的方法、显示方法和设备
CN103279871B (zh) * 2013-06-06 2016-01-13 北京京东尚科信息技术有限公司 一种售后服务申请方法及其***
US20170004444A1 (en) * 2015-07-01 2017-01-05 Amadeus S.A.S. Baggage tracking system

Also Published As

Publication number Publication date
US20190095744A1 (en) 2019-03-28
WO2017148550A1 (de) 2017-09-08
HK1256134A1 (zh) 2019-09-13
CN108701287A (zh) 2018-10-23
EP3214590A1 (de) 2017-09-06
CA3016217A1 (en) 2017-09-08
CA3016217C (en) 2021-11-16

Similar Documents

Publication Publication Date Title
WO2017148550A1 (de) Verfahren zur erstellung einer beschreibung eines gepäckstücks und gepäckbeschreibungssystem
DE102018006765B4 (de) Verfahren und system(e) für das management von frachtfahrzeugen
EP2174274B1 (de) Verfahren zum identifizieren von transportgütern, insbesondere gepäckstücken
EP3205411B1 (de) Verfahren zur sortierung von gepäckstücken und gepäcksortiersystem
DE112017001311T5 (de) System und Verfahren zum Trainieren eines Objektklassifikators durch maschinelles Lernen
DE112009000485T5 (de) Objektvergleich für Verfolgung, Indizierung und Suche
DE102009028604A1 (de) Vorrichtung zur Erkennung einer Objektschlange, Verfahren sowie Computerprogramm
DE102018006764B4 (de) Verfahren und system(e) für das management von frachtfahrzeugen
EP2146308A2 (de) Verfahren und Vorrichtung zum Überwachen des Transports eines Gepäckstücks
DE102019127282A1 (de) System und Verfahren zum Analysieren einer dreidimensionalen Umgebung durch tiefes Lernen
EP3071340B1 (de) Verfahren und vorrichtung zum sortieren von objekten
CN108764330A (zh) 基于超像素分割和卷积反卷积网络的sar图像分类方法
CN108288279A (zh) 一种基于x光图像前景目标提取的物品甄别方法
DE102020124613A1 (de) Verbesserte auswahl eines objekts von interesse für neuronale netzwerksysteme an verkaufspunken
CN109409377A (zh) 图像中文字的检测方法及装置
WO2013139754A1 (de) Maschinelles bilderkennungsverfahren basierend auf einem ki-system
DE102015207903A1 (de) Vorrichtung und Verfahren zum Erfassen eines Verkehrszeichens vom Balkentyp in einem Verkehrszeichen-Erkennungssystem
EP3111391A1 (de) Vorrichtung für eine gepäckbeförderungseinrichtung und verfahren zum betreiben einer gepäckbeförderungseinrichtung
DE112019006132T5 (de) Verfahren, system und vorrichtung zur hilfsetikett-erkennung und -zuordnung
DE102010003669A1 (de) Verfahren und Vorrichtung zur Lokalisierung von Personen in einem vorgegebenen Bereich
DE4330815A1 (de) Sortierfreundliche Markierung von Verpackungen
DE102018212671A1 (de) Verfahren zur Erstellung einer Versandinformation und mobile Vorrichtungen und Auswerterechner zur Durchführung des Verfahrens zur Erstellung einer Versandinformation
DE112022002520T5 (de) Verfahren zur automatischen Kalibrierung von Kameras und Erstellung von Karten
CN102915464B (zh) 利用图像分析的数量判断装置及其方法
DE19824323A1 (de) Verfahren zur Überwachung des Durchgangs einer Gruppe unabhängiger Objekte durch einen Durchgangsbereich, Überwachungssystem zu dessen Durchführung sowie Verwendung derselben

Legal Events

Date Code Title Description
STAA Information on the status of an ep patent application or granted ep patent

Free format text: STATUS: UNKNOWN

STAA Information on the status of an ep patent application or granted ep patent

Free format text: STATUS: THE INTERNATIONAL PUBLICATION HAS BEEN MADE

PUAI Public reference made under article 153(3) epc to a published international application that has entered the european phase

Free format text: ORIGINAL CODE: 0009012

STAA Information on the status of an ep patent application or granted ep patent

Free format text: STATUS: REQUEST FOR EXAMINATION WAS MADE

17P Request for examination filed

Effective date: 20180831

AK Designated contracting states

Kind code of ref document: A1

Designated state(s): AL AT BE BG CH CY CZ DE DK EE ES FI FR GB GR HR HU IE IS IT LI LT LU LV MC MK MT NL NO PL PT RO RS SE SI SK SM TR

AX Request for extension of the european patent

Extension state: BA ME

DAV Request for validation of the european patent (deleted)
DAX Request for extension of the european patent (deleted)
STAA Information on the status of an ep patent application or granted ep patent

Free format text: STATUS: EXAMINATION IS IN PROGRESS

STAA Information on the status of an ep patent application or granted ep patent

Free format text: STATUS: EXAMINATION IS IN PROGRESS

17Q First examination report despatched

Effective date: 20201026

STAA Information on the status of an ep patent application or granted ep patent

Free format text: STATUS: EXAMINATION IS IN PROGRESS

STAA Information on the status of an ep patent application or granted ep patent

Free format text: STATUS: THE APPLICATION HAS BEEN WITHDRAWN

18W Application withdrawn

Effective date: 20221129