WO2020126737A1 - Verfahren zur validierung von umfeldbilddaten, vorrichtung, computerprogramm und computerlesbares speichermedium - Google Patents

Verfahren zur validierung von umfeldbilddaten, vorrichtung, computerprogramm und computerlesbares speichermedium Download PDF

Info

Publication number
WO2020126737A1
WO2020126737A1 PCT/EP2019/084621 EP2019084621W WO2020126737A1 WO 2020126737 A1 WO2020126737 A1 WO 2020126737A1 EP 2019084621 W EP2019084621 W EP 2019084621W WO 2020126737 A1 WO2020126737 A1 WO 2020126737A1
Authority
WO
WIPO (PCT)
Prior art keywords
image data
comparison
probability value
display unit
cross correlation
Prior art date
Application number
PCT/EP2019/084621
Other languages
English (en)
French (fr)
Inventor
Torsten Lahr
Original Assignee
Continental Automotive Gmbh
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Continental Automotive Gmbh filed Critical Continental Automotive Gmbh
Priority to EP19824260.4A priority Critical patent/EP3899915A1/de
Priority to US17/416,124 priority patent/US20220076600A1/en
Publication of WO2020126737A1 publication Critical patent/WO2020126737A1/de

Links

Classifications

    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G3/00Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes
    • G09G3/006Electronic inspection or testing of displays and display drivers, e.g. of LED or LCD displays
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/70Arrangements for image or video recognition or understanding using pattern recognition or machine learning
    • G06V10/74Image or video pattern matching; Proximity measures in feature spaces
    • G06V10/75Organisation of the matching processes, e.g. simultaneous or sequential comparisons of image or video features; Coarse-fine approaches, e.g. multi-scale approaches; using context analysis; Selection of dictionaries
    • G06V10/751Comparing pixel values or logical combinations thereof, or feature values having positional relevance, e.g. template matching
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/80Camera processing pipelines; Components thereof
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/18Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/183Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a single remote source
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2330/00Aspects of power supply; Aspects of display protection and defect management
    • G09G2330/12Test circuits or failure detection circuits included in a display system, as permanent part thereof
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2340/00Aspects of display data processing
    • G09G2340/12Overlay of images, i.e. displayed pixel being the result of switching between the corresponding input pixels
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2360/00Aspects of the architecture of display systems
    • G09G2360/14Detecting light within display terminals, e.g. using a single or a plurality of photosensors
    • G09G2360/145Detecting light within display terminals, e.g. using a single or a plurality of photosensors the light originating from the display screen
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2360/00Aspects of the architecture of display systems
    • G09G2360/16Calculation or use of calculated indices related to luminance levels in display data
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2380/00Specific applications
    • G09G2380/10Automotive applications

Definitions

  • the invention relates to a method for validating transmitted image data, in particular in a motor vehicle, and a display unit.
  • the invention relates to the reliable display of safety-relevant information on a display unit.
  • the invention further relates to a computer program and a computer-readable storage medium.
  • a CRC (cyclic redundancy check) actual checksum is calculated over a defined image area to detect warning symbols. This checksum is then compared with a calculated target checksum. If there is an exact match, the symbol is recognized.
  • EP 2273369 B1 discloses a method for the safe display of security-relevant information, comprising: inputting at least one input variable into a computer unit, computer processing of the input variable in the computer unit to an image data sequence representing the input variable, forwarding the image data sequence to a display unit and displaying the image data sequence on the display unit, supplying the image data sequence to a test unit and performing a security check by computationally creating a test code for the image data sequence, comparing the test code with several comparison codes present in the test unit, Assigning the comparison code determined in this way to a corresponding possible value of the input variable and comparing it with the value of the input variable to form either a positive or negative test result in the test unit to initiate a safety-related reaction.
  • a precalculated CRC checksum is used as the comparison code.
  • DE 102007048608 A1 discloses a method for checking the validity of display signals, the display signals being generated from image data of a predetermined image, a defined range of image data being determined from the display signals, a test value being formed from the image data ascertained, wherein the determined test value is compared with a stored test value for the corresponding image and the validity of the display signals is only determined if the determined and the stored test value match.
  • This object is achieved by specifying a method for validating image data with the features of claim 1. Furthermore, the object is achieved by specifying a display unit with the features of claim 9. In addition, the object is achieved by specifying a vehicle with the characteristics of claim 11, by specifying a computer program with the characteristics of claim 12 and the Specification of a computer-readable storage medium with the features of claim 13.
  • the task is solved by specifying a method for validating transmitted image data with the steps:
  • the display unit can in particular be understood as the display unit of a vehicle. This can be the display of an entertainment system, for example.
  • the generation of the image data and transmission can be provided, for example, in a processor of the vehicle and / or in a control unit.
  • the comparison unit can be an electronic unit which is designed to receive image data and to compare it with reference image data.
  • image data can be understood to mean pixels which can be represented on the display unit.
  • the pixels can be divided into subpixels / light pixels, each of which has, for example, one of the three additive primary colors red, green and blue (RGB system).
  • RGB system red, green and blue
  • the image data thus preferably comprise regulations on how the individual pixel is to be represented.
  • image data includes information for the display device, which enables it to visually display the image data.
  • the image data can be information for the display of a warning symbol / symbol or a signature or a note (for example a tank symbol) or it can represent weather information (be careful snowfall).
  • the limit probability value can be set by the manufacturer, for example.
  • the expression “above a provided, predetermined limit probability value” can also include “equal to a provided, specified limit probability value”.
  • the transmission of data can be wired or wireless.
  • the method mentioned here tolerates minor transmission errors and changes in the image data through signal processing. Even with lossy compression to reduce the transmission bandwidth, reliable detection of the image data is still guaranteed. By checking a larger monitoring area, a slight shift of the symbols / sig natures can be tolerated.
  • the method can ignore minor errors in the image data as long as the image data is still recognizable.
  • the method is independent of a position change, e.g. by calibrating the image data to form a mechanical frame.
  • the image data is recognized regardless of the background as long as it is clearly different from it.
  • the image data is reliably discovered by the process. A premature replacement reaction, for example switching off the display unit, is avoided.
  • the method is preferably suitable for use in a motor vehicle.
  • the cross correlation is preferably designed as a normalized cross correlation or a non-normal cross correlation or a feature-based cross correlation or a pixel-based cross correlation.
  • a characteristic feature is added to the image data. This makes it easier to check the transmitted image data.
  • the image data are preferably formed as an identifier.
  • the identifier camera data (image), which are recorded by a sensor, is preferably added.
  • the identifier can be a clear, invisible pattern, for example a digital fingerprint (digital footprint) in the form of a checksum or other clear marking, which is added, for example, camera data / video data recorded by a sensor.
  • the image data are then checked for the presence of the identifier, for example the checksum, by means of cross correlation.
  • the camera data / video data shown on the display unit can be monitored for freezing by introducing the identifier, in particular in front of preferably alternating or changing identifiers at the same position.
  • the limit probability value is preferably weighted in relation to various image data. For example, a higher limit probability value can be provided for image data which represent warning notices for driving safety than for less safety-relevant warning notices.
  • the substitute reaction preferably comprises completely or partially switching off the display unit.
  • the replacement reaction comprises displaying an error message on the display unit and / or outputting a signal and / or text information.
  • the shutdown can be a shutdown of the lighting of the display unit and / or an end of the display of the image data on the display unit.
  • the display unit can also be reset. This can also be an audible error message at the same time or alternatively, for example a warning tone.
  • the object is further achieved by specifying a display unit comprising a comparison unit which is designed to compare transmitted image data with reference image data as to whether the reference image data is present in the transmitted image data, the comparison unit being designed to carry out the comparison by means of cross-correlation and using the To create a comparison probability value, the display unit being designed to display the transmitted image data when the comparison probability value lies above a provided, predetermined limit probability value and to output a replacement reaction when the comparison probability value is below the provided, predetermined limit probability value.
  • the display unit is designed to carry out the method described above.
  • the invention relates to a vehicle with a display unit as described above.
  • the vehicle is advantageously formed as a passenger car.
  • the object is further achieved by specifying a computer program comprising commands which cause the display unit as described above to carry out the method as described above. Furthermore, the object is achieved by specifying a computer-readable storage medium on which the computer program as described above is stored. The method can thus also be installed subsequently, for example in a vehicle.
  • the invention thus provides a method, a display unit, a vehicle, a computer program and a computer-readable storage medium for validating transmitted image data, in which the transmitted image data can be represented reliably and robustly, and an early replacement reaction can be avoided.
  • the displayed content can be symbols, barcodes, finger pints, characters etc.
  • FIG. 1 shows a flowchart of a method according to the invention in a first embodiment
  • FIG. 4 shows a vehicle according to the invention.
  • Image data are selected in a first step S1 by a control unit 4 (FIG. 4) in a driver assistance system 3 (FIG. 4).
  • the image data are assigned to pixels of a display unit 2 (FIG. 4).
  • the pixels can be divided into subpixels / light pixels, each of which has one of the three additive primary colors red, green and blue (RGB system).
  • RGB system the three additive primary colors red, green and blue
  • the color components red, green and blue are saved separately for each pixel.
  • the proportion of red, green and blue determines the final color.
  • Other representations are also possible.
  • image data thus include regulations on how the individual pixel is to be represented.
  • image data include information for the display device, which enables it to visually display the image data.
  • the image data can be information for the display of a warning symbol / symbol or a signature or a note (for example a tank symbol) or it can represent weather information (be careful snowfall).
  • a comparison unit 5 (FIG. 4), which comprises, for example, a graphics chip.
  • This transmission can be accomplished wirelessly or by means of a cable connection.
  • a wireless transmission can include, for example, WiFi, Bluetooth or infrared transmission.
  • camera image data can also be provided for display (for example a street map) or a surrounding image, these camera image data also being converted into pixels for display on the display unit 2 (FIG. 4).
  • the transmitted image data are then to be displayed with this camera image data on the display unit 2 (FIG. 4).
  • the transmitted image data can also be displayed alone.
  • a third step S3 the image data transmitted to the display unit 2 (FIG. 4) are compared with stored reference image data.
  • a comparison unit 5 (FIG. 4), which can be integrated in particular in the display unit 2 (FIG. 4).
  • the image segment area in which the transmitted image data lie is extracted from the received data stream.
  • the transmitted image data that are in the image segment to be examined are range are compared with the reference image data by means of a cross correlation (method).
  • the stored reference image data can be stored in the display unit 2 (FIG. 4).
  • the stored reference image data can include a small selection of the actual image data, which preferably represent fixed points on the display unit 2 (FIG. 4).
  • the cross correlation evaluates the difference between the reference image data and the transmitted image data.
  • the advantage of cross-correlation over other methods is the easy-to-implement algorithm.
  • Cross correlations are robust to light disturbances such as B. Noise.
  • the cross correlation can be calculated, for example, using the Fourier transformation.
  • Cross-correlation is also to be understood as a cross-correlation method, such as binary pixel-based cross-correlation, or a cross-correlation based on feature lists. The latter is characterized by its speed; low noise provided. A non-normalized cross correlation can also be used. This is characterized by reduced computing effort and less storage effort.
  • the standardized cross-correlation is also suitable for the real-time method.
  • a comparison probability value can now be determined on the basis of the cross-correlation carried out as a result of the comparison, with which probability the reference image data are present in the transmitted image data.
  • a fifth step S5 the comparison probability value determined in this way is compared with a predetermined limit probability value.
  • a sixth step S6 if the comparison probability value is higher than the limit probability value, the transmitted image data are displayed on the display unit 2 (FIG. 4). Higher can also mean that the comparison probability value is equal to the limit probability value. Alternatively, this is not included.
  • the limit probability value can also be set weighted. For example, a higher limit probability value can be provided for image data that represent warning notices for driving safety, for example “Caution smoothness”, than for less safety-relevant warning notices.
  • a substitute reaction is initiated. Such can be, for example, switching off the display unit 2 (FIG. 4), which is usually a display of an entertainment system, or displaying a central error warning or overlaying the checked, transmitted image data with the reference image data.
  • the process can tolerate minor changes, such as a different coloring or a different font size, and does not lead to an error alarm.
  • An image memory can thus be dispensed with, for example.
  • the process tolerates minor transmission errors and changes in the image data due to signal processing. Even with lossy compression to reduce the transmission bandwidth, reliable detection of symbols / signatures is still guaranteed. By checking a larger monitoring area, a slight shift of the symbols / signatures can be tolerated.
  • image data are selected in a first step A1 by the control unit 4 (FIG. 4) in the driver assistance system 3 (FIG. 4).
  • a comparison unit 5 (FIG. 4), which for example comprises a graphics chip.
  • a characteristic feature is supplied to the transmitted image data.
  • the reference image data is formed based on this characteristic. Several or different characteristic features can also be inserted.
  • a fourth step A4 the cross-correlation is used to compare the image data transmitted to the display unit 2 (FIG. 4) with the stored reference image data, and to check for the presence of the characteristic feature.
  • the cross correlation can be more efficient and effective with regard to the cha- characteristic feature can be performed. This can also reduce the computing power required.
  • the cross-correlation can be used to determine the comparison probability value as the result of the comparison, with which probability the reference image data with the characteristic feature are present in the transmitted image data with the characteristic feature.
  • a sixth step A6 the comparison probability value determined in this way is compared with a predetermined limit probability value.
  • a seventh step A7 if the comparison probability value is higher than the limit probability value, the transmitted image data with the characteristic feature are displayed on the display unit 2 (FIG. 4).
  • step A8 if the comparison probability value is lower than the limit probability value, a substitute reaction is initiated.
  • the image data are shown as identifier 6.
  • the identifier 6 is preferably formed as identifier data.
  • Camera data which can also be video data and is therefore referred to below as camera data / ideo data, has been recorded here by a camera, for example a sensor. These can represent a camera image / video image, for example of a vehicle environment. Before preferably camera data streams / video data streams are recorded, which represent a sequence of camera / video images. Camera data / ideo data means any data recorded by, for example, a sensor.
  • the identifier 6 is added to the camera data / ideo data.
  • 3 shows the camera data shown on the display unit 2 with the identifier 6.
  • the identifier 6 can be a clear, invisible pattern, for example a digital fingerprint, which is added to the camera data / ideo data.
  • the identifier 6 can be inserted by computer-assisted steganography, so that preferably a user does not notice the identifier 6.
  • the identifier 6 can, however also be an easily identifiable barcode, character, symbol or lettering. Other configurations are also possible.
  • the camera data A / ideo data to be displayed which are transmitted to the display unit 2, are checked with the identifier 6 by means of cross correlation for the presence of the identifier 6.
  • the comparison probability value is created on the basis of the comparison as to whether the identifier 6 is present in the transmitted camera data / video data.
  • the transmitted camera data / video data are displayed on a display unit 2.
  • the camera data / video data shown on the display unit 2 can be monitored for freezing.
  • the camera data / video data shown on the display unit 2 are evaluated as frozen and a replacement reaction, for example a warning symbol on the display unit 2 or a switching off of the display unit 2, is initiated.
  • a replacement reaction for example a warning symbol on the display unit 2 or a switching off of the display unit 2
  • the source from which the camera data / video data originate can be determined.
  • the identifier 6 can be supplied to the camera data / ideo data by means of an identification device.
  • the 4 shows a vehicle 1 with the display unit 2 according to the invention.
  • the vehicle 1 is in particular designed as a passenger vehicle.
  • the display unit 2 can be integrated in a driver assistance system 3.
  • the display unit 2 can be designed as a display.
  • the display unit 2 also includes a comparison unit 5.
  • the vehicle 1 further comprises a control unit 4, which transmits the corresponding warning symbol in image data to the comparison unit 5, for example in the event of a malfunction of the vehicle operation, for example due to a failed component.
  • the control unit 4 can also be integrated in the driver assistance system 3.

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Multimedia (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Signal Processing (AREA)
  • Computer Hardware Design (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Health & Medical Sciences (AREA)
  • Artificial Intelligence (AREA)
  • Computing Systems (AREA)
  • Databases & Information Systems (AREA)
  • Evolutionary Computation (AREA)
  • General Health & Medical Sciences (AREA)
  • Medical Informatics (AREA)
  • Software Systems (AREA)
  • Traffic Control Systems (AREA)

Abstract

Die Erfindung betrifft ein Verfahren zur Validierung von übermittelten Bilddaten umfassend der Schritte: - Bereitstellen von Bilddaten, und übermitteln der Bilddaten an eine Anzeigeeinheit (2), - Bereitstellen von Referenzbilddaten, - Vergleichen der übermittelten Bilddaten mit den Referenzbilddaten mittels einer Kreuzkorrelation in einer Vergleichseinheit (5), ob die Referenzbilddaten in den übermittelten Bilddaten vorliegen, - Erstellen eines Vergleichswahrscheinlichkeitswertes anhand des Vergleiches, - Anzeigen der übermittelten Bilddaten auf der Anzeigeeinheit(2), wenn der Vergleichswahrscheinlichkeitswert über einem bereitgestellten, vorgegebenen Grenzwahrscheinlichkeitswert liegt, - Ausgeben einer Ersatzreaktion, wenn der Vergleichswahrscheinlichkeitswert unter dem bereitgestellten, vorgegebenen Grenzwahrscheinlichkeitswert liegt. Ferner betrifft die Erfindung eine Vorrichtung, ein Computerprogramm und ein computerlesbares Speichermedium

Description

Beschreibung
Verfahren zur Validierung von Umfeldbilddaten, Vorrichtung, Computerprogramm und computerlesbares Speichermedium
Die Erfindung betrifft ein Verfahren zur Validierung von übermittelten Bilddaten, insbesondere in einem Kraftfahrzeug, sowie eine Anzeigeeinheit. Insbesondere betrifft die Erfindung die zuverlässige Darstellung von sicherheitstechnisch rele vanten Informationen auf einer Anzeigeeinheit. Ferner betrifft die Erfindung ein Computerprogramm und ein computerlesbares Speichermedium.
In einem Fahrzeug ist es insbesondere bei sicherheitsrelevanten Informationen, wie beispielsweise Warnsymbolen wichtig, dass die richtigen Informationen auf einem Display dargestellt werden. Hierfür sind bestimmte Normen, wie beispielsweise ISO 26262 für elektronische oder elektrische Systeme in Kraftfahrzeugen eingeführt worden.
Zur Erkennung von Warnsymbolen wird eine CRC (zyklische Redundanzprüfung, cyclic redundancy check) -Istprüfsumme über einen definierten Bildbereich be rechnet. Diese Checksumme wird danach mit einer berechneten Sollprüfsumme verglichen. Bei genauer Übereinstimmung gilt das Symbol als erkannt.
Bei diesem Verfahren muss bei minimaler Änderung bei einem zu überprüfenden Bildbereich, beispielsweise eine andere Farbdarstellung oder ein anderer Hinter grund im Bereich des Warnsymbols, eine erneute CRC-Sollprüfsumme berechnet werden, um zu vermeiden, dass die CRC-Sollprüfsumme von der CRC- Ist prüfsumme verschieden ist, und ein Fehler gemeldet wird, obwohl ein solcher gar nicht vorliegt.
Die EP 2273369 B1 offenbart ein Verfahren zur sicheren Darstellung einer si cherheitsrelevanten Information, umfassend: Eingeben mindestens einer Ein gangsgröße in eine Rechnereinheit, rechentechnisches Verarbeiten der Ein gangsgröße in der Rechnereinheit zu einer die Eingangsgröße abbildenden Bild datensequenz, Weiterleiten der Bilddatensequenz an eine Anzeigeeinheit und Darstellen der Bilddatensequenz auf der Anzeigeeinheit, Zuführung der Bildda tensequenz zu einer Prüfeinheit und Durchführen einer Sicherheitsprüfung durch rechentechnisches Erstellen eines Prüfcodes für die Bilddatensequenz, Verglei chen des Prüfcodes mit mehreren in der Prüfeinheit vorhandenen Vergleichscodes, Zuordnen des so ermittelten Vergleichscodes zu einem korrespondierenden mög lichen Wert der Eingangsgröße und dessen Vergleich mit dem Wert der Ein gangsgröße zur Bildung entweder eines positiven oder negativen Prüfergebnisses in der Prüfeinheit zur Veranlassung einer sicherheitsgerichteten Reaktion. Dabei wird als Vergleichscode eine vorberechnete CRC-Prüfsumme verwendet.
Die DE 102007048608 A1 offenbart ein Verfahren zum Überprüfen einer Gültigkeit von Anzeigesignalen, wobei die Anzeigesignale aus Bilddaten eines vorgegebenen Bildes erzeugt werden, wobei ein definierter Bereich von Bilddaten aus den An zeigesignalen ermittelt wird, wobei aus den ermittelten Bilddaten ein Prüfwert ge bildet wird, wobei der ermittelte Prüfwert mit einem gespeicherten Prüfwert für das entsprechende Bild verglichen wird und wobei eine Gültigkeit der Anzeigesignale nur dann festgestellt wird, wenn der ermittelte und der gespeicherte Prüfwert übereinstimmen.
Es ist eine Aufgabe der Erfindung, die Nachteile des Standes der Technik zu überwinden und bei, auf einer Anzeigeeinheit dargestellten, als Eingangsgröße übermittelten Bilddaten, eine Validierung zu ermöglichen.
Diese Aufgabe wird durch die Angabe eines Verfahrens zur Validierung von Bild daten mit den Merkmalen des Anspruchs 1 gelöst. Ferner wird die Aufgabe gelöst durch die Angabe einer Anzeigeeinheit mit den Merkmalen des Anspruchs 9. Zu dem wird die Aufgabe gelöst durch die Angabe eines Fahrzeugs mit den Merkmalen des Anspruchs 1 1 , durch die Angabe eines Computerprogramms mit den Merk malen des Anspruchs 12 und die Angabe eines computerlesbaren Speicherme diums mit den Merkmalen des Anspruchs 13.
In den Unteransprüchen sind weitere vorteilhafte Maßnahmen aufgelistet, die be liebig miteinander kombiniert werden können, um weitere Vorteile zu erzielen.
Die Aufgabe wird gelöst durch die Angabe eines Verfahrens zur Validierung von übermittelten Bilddaten mit den Schritten:
Bereitstellen von Bilddaten, und übermitteln der Bilddaten an eine Anzeige einheit,
Bereitstellen von Referenzbilddaten,
- Vergleichen der übermittelten Bilddaten mit den Referenzbilddaten mittels einer Kreuzkorrelation in einer Vergleichseinheit, ob die Referenzbilddaten in den übermittelten Bilddaten vorliegen, Erstellen eines Vergleichswahrscheinlichkeitswertes anhand des Verglei ches,
- Anzeigen der übermittelten Bilddaten auf der Anzeigeeinheit, wenn der Vergleichswahrscheinlichkeitswert über einem bereitgestellten, vorgege benen Grenzwahrscheinlichkeitswert liegt,
- Ausgeben einer Ersatzreaktion, wenn der Vergleichswahrscheinlichkeitswert unter dem bereitgestellten, vorgegebenen Grenzwahrscheinlichkeitswert liegt.
Unter Anzeigeeinheit kann insbesondere die Anzeigeeinheit eines Fahrzeuges verstanden werden. Dies kann beispielsweise das Display eines Entertainment systems sein. Die Erzeugung der Bilddaten und Übermittlung kann beispielsweise in einem Prozessor des Fahrzeuges und/oder in einer Steuereinheit, vorgesehen sein. Die Vergleichseinheit kann eine elektronische Einheit sein, welche dazu ausgelegt ist, Bilddaten zu empfangen und mit Referenzbilddaten zu vergleichen.
Unter Bilddaten können dabei Pixel verstanden werden, welche auf der Anzeige einheit darstellbar sind. Die Pixel können in Subpixel/Leuchtpixel aufgeteilt sein, von denen jedes beispielsweise eine der drei additiven Grundfarben Rot, Grün und Blau (RGB-System) aufweist. Die Bilddaten umfassen somit vorzugsweise Vor schriften darüber, wie das einzelne Pixel darzustellen ist. Generell umfassen Bild daten Informationen für die Anzeigeeinrichtung, welche diese in die Lage versetzen, die Bilddaten visuell darzustellen.
Die Bilddaten können Informationen für die Anzeige eines Warnsymbols/Symbols oder eine Signatur oder eines Hinweises (beispielsweise Tanksymbol) sein oder eine Wetterinformation (Vorsicht Schneefall) darstellen.
Der Grenzwahrscheinlichkeitswert kann beispielsweise vom Hersteller festgelegt werden.
Der Ausdruck„über einem bereitgestellten, vorgegebenen Grenzwahrscheinlich keitswert“ kann auch„gleich einem bereitgestellten, vorgegebenen Grenzwahr scheinlichkeitswert“ umfassen.
Die Übermittlung von Daten kann kabelgebunden oder kabellos sein. Das hier erwähnte Verfahren toleriert geringfügige Übertragungsfehler und Ver änderungen der Bilddaten durch Signalprocessing. Auch bei verlustbehafteter Komprimierung zur Reduzierung der Übertragungsbandbreite ist eine sichere Er kennung der Bilddaten noch gewährleistet. Durch das Prüfen eines größeren Überwachungsbereichs kann eine geringfügige Verschiebung der Symbole/ Sig naturen toleriert werden.
Das Verfahren kann kleinere Fehler in den Bilddaten ignorieren, solange die Bild daten noch erkennbar sind. Das Verfahren ist unabhängig von einer Positionsän derungen, die z.B. durch Kalibrierung der Bilddaten zu einem mechanischen Rahmen entstehen. Die Bilddaten werden unabhängig vom Hintergrund erkannt, solange sie sich klar von ihm unterscheiden. Die Bilddaten werden durch das Ver fahren zuverlässig entdeckt. Es wird eine vorzeitige Ersatzreaktion, beispielsweise ein Abschalten der Anzeigeeinheit vermieden.
Vorzugsweise eignet sich das Verfahren zur Verwendung in einem Kraftfahrzeug.
Vorzugsweise wird die Kreuzkorrelation als eine normierte Kreuzkorrelation oder eine nichtnormale Kreuzkorrelation oder eine merkmalsbasierte Kreuzkorrelation oder eine pixelbasierte Kreuzkorrelation ausgebildet.
In bevorzugter Ausgestaltung wird den Bilddaten ein charakteristisches Merkmal hinzugefügt. Somit lassen sich die übermittelten Bilddaten einfacher überprüfen.
Vorzugsweise werden die Bilddaten als Kennung ausgebildet. Vorzugsweise wird die Kennung Kameradaten (Bild), welche von einem Sensor aufgenommen werden, hinzugefügt.
Die Kennung kann ein eindeutiges, nicht sichtbares Muster, beispielsweise ein digitaler Fingerabdruck (Digital Footprint) in Form einer Prüfsumme oder einer anderen eindeutigen Markierung sein, welches, beispielsweise durch einen Sensor aufgenommenen Kameradaten/Videodaten hinzugefügt wird. Mittels Kreuzkorrela tion werden die Bilddaten dann auf die Präsenz der Kennung, beispielsweise der Prüfsumme überprüft. Durch das Einbringen von der Kennung, insbesondere vor zugsweise sich abwechselnden oder sich ändernden Kennungen an derselben Position, können die auf der Anzeigeeinheit dargestellten Kameradaten/Videodaten auf Einfrieren überwacht werden. Vorzugsweise wird der Grenzwahrscheinlichkeitswert in Bezug auf verschiedene Bilddaten gewichtet. So kann beispielsweise bei Bilddaten, welche Warnhinweise für die Fahrsicherheit darstellen, ein höherer Grenzwahrscheinlichkeitswert vor gesehen sein, als bei weniger sicherheitsrelevanten Warnhinweisen.
Bevorzugt umfasst die Ersatzreaktion das ganz- oder teilweise Abschalteten der Anzeigeeinheit. In besonderer Ausführungsform umfasst die Ersatzreaktion das Anzeigen einer Fehlermeldung auf der Anzeigeeinheit und/oder die Ausgabe eines Signals und/oder einer Textinformation.
Dadurch kann sichergestellt werden, dass der Nutzer beispielsweise der Fahrer des Fahrzeugs, nicht durch falsch angezeigte Bilddaten gestört oder fehlinformiert wird.
Die Abschaltung kann ein Abschalten der Beleuchtung der Anzeigeeinheit und/oder ein Beenden der Darstellung der Bilddaten auf der Anzeigeeinheit sein. Es kann auch ein Reset der Anzeigeeinheit ausgeführt werden. Auch kann dies gleichzeitig oder alternativ eine hörbare Fehlermeldung sein, beispielsweise ein Warnton.
Die Aufgabe wird ferner gelöst durch die Angabe einer Anzeigeeinheit umfassend eine Vergleichseinheit, welche dazu ausgebildet ist, übermittelte Bilddaten mit Referenzbilddaten zu vergleichen, ob die Referenzbilddaten in den übermittelten Bilddaten vorliegen, wobei die Vergleichseinheit dazu ausgebildet ist, den Vergleich mittels Kreuzkorrelation durchzuführen und anhand des Vergleiches einen Ver gleichswahrscheinlichkeitswert zu erstellen, wobei die Anzeigeeinheit dazu aus gebildet ist, die übermittelten Bilddaten anzuzeigen, wenn der Vergleichswahr scheinlichkeitswert über einem bereitgestellten, vorgegebenen Grenzwahrschein lichkeitswert liegt und eine Ersatzreaktion auszugeben, wenn der Vergleichswahr scheinlichkeitswert unter dem bereitgestellten, vorgegebenen Grenzwahrschein lichkeitswert liegt.
Insbesondere ist die Anzeigeeinheit dazu ausgebildet, dass wie oben beschriebene Verfahren durchzuführen.
Die Vorteile des Verfahrens können auch auf die Anzeigeeinheit angewendet werden. Ferner betrifft die Erfindung ein Fahrzeug mit einer wie oben beschriebenen An zeigeeinheit. Das Fahrzeug ist vorteilhafterweise als Personenkraftfahrzeug aus gebildet.
Die Aufgabe wird ferner gelöst durch die Angabe eines Computerprogramms um fassend Befehle, die bewirken, dass die wie oben beschriebene Anzeigeeinheit das wie oben beschriebene Verfahren ausführt. Ferner wird die Aufgabe gelöst durch die Angabe eines computerlesbaren Speichermediums, auf dem das wie oben beschriebene Computerprogramm gespeichert ist. Somit kann das Verfahren auch nachträglich in, beispielsweise einem Fahrzeug, installiert werden.
Die Erfindung stellt damit ein Verfahren, eine Anzeigeeinheit, ein Fahrzeug, ein Computerprogramm und ein computerlesbares Speichermedium zur Validierung von übermittelten Bilddaten bereit, bei dem die übermittelten Bilddaten zuverlässig und robust dargestellt werden können, und eine vorzeitige Ersatzreaktion vermie den werden kann. Die dargestellten Inhalte können Symbole, Barcodes, Finger pints, Zeichen etc. sein.
Weitere Merkmale, Eigenschaften und Vorteile der vorliegenden Erfindung ergeben sich aus der nachfolgenden Beschreibung unter Bezugnahme auf die beiliegenden Figuren. Darin zeigen schematisch:
FIG 1 : ein Flussdiagramm eines erfindungsgemäßen Verfahrens in einer ersten Ausgestaltung,
FIG 2: ein Flussdiagramm eines erfindungsgemäßen Verfahrens in einer zweiten Ausgestaltung,
FIG 3: übermittelte Bilddaten als Kennung auf einer erfindungsgemäßen
Anzeigeeinheit,
FIG 4: ein erfindungsgemäßes Fahrzeug.
Obwohl die Erfindung im Detail durch die bevorzugten Ausführungsbeispiele näher illustriert und beschrieben wurde, ist die Erfindung nicht durch die offenbarten Beispiele eingeschränkt. Variationen hiervon können vom Fachmann abgeleitet werden, ohne den Schutzumfang der Erfindung, wie er durch die nachfolgenden Patentansprüche definiert wird, zu verlassen. FIG 1 zeigt ein erfindungsgemäßes Verfahren in einer ersten Ausgestaltung.
Hierbei werden Bilddaten in einem ersten Schritt S1 durch vorzugsweise eine Steuereinheit 4 (FIG 4) in einem Fahrerassistenzsystem 3 (FIG 4) ausgewählt. Die Bilddaten sind dabei Pixeln einer Anzeigeeinheit 2 (FIG 4) zugeordnet. Die Pixel können in Subpixel/Leuchtpixel aufgeteilt sein, von denen jedes eine der drei addi tiven Grundfarben Rot, Grün und Blau (RGB-System) aufweist. Im RGB-System werden für jeden Pixel die Farbanteile Rot, Grün und Blau getrennt abgespeichert. Der Mengenanteil von Rot, Grün und Blau bestimmt die endgültige Farbe. Auch andere Darstellungen sind möglich.
Die Bilddaten umfassen somit Vorschriften darüber, wie das einzelne Pixel darzu stellen ist. Generell umfassen Bilddaten Informationen für die Anzeigeeinrichtung, welche diese in die Lage versetzen, die Bilddaten visuell darzustellen.
Die Bilddaten können Informationen für die Anzeige eines Warnsymbols/Symbols oder eine Signatur oder eines Hinweises (beispielsweise Tanksymbol) sein oder eine Wetterinformation (Vorsicht Schneefall) darstellen.
Die Bilddaten werden in einem zweiten Schritt S2 an eine Vergleichseinheit 5 (FIG 4), welche beispielsweise einen Grafikchip umfasst, übermittelt. Diese Übermittlung kann kabellos oder mittels eine Kabelverbindung bewerkstelligt werden. Eine ka bellose Übertragung kann beispielsweise eine W-Lan, Bluetooth oder eine Infra rotübertragung umfassen.
Ferner können noch andere Kamerabilddaten zur Anzeige vorgesehen sein (bei spielsweise eine Straßenkarte) oder ein Umgebungsbild, wobei diese Kamerabi lddaten ebenfalls in Pixel zur Darstellung auf der Anzeigeeinheit 2 (FIG 4) umge wandelt werden. Die übermittelten Bilddaten sind dann mit diesen Kamerabilddaten auf der Anzeigeeinheit 2 (FIG 4) darzustellen. Es können aber auch die übermit telten Bilddaten alleine dargestellt werden.
In einem dritten Schritt S3 werden die an die Anzeigeeinheit 2 (FIG 4) übermittelten Bilddaten mit gespeicherten Referenzbilddaten verglichen. Dies wird mithilfe einer Vergleichseinheit 5 (FIG 4) vorgenommen, welche insbesondere in der Anzeige einheit 2 (FIG 4) integriert sein kann. Hierzu wird der Bildsegmentbereich in dem die übermittelten Bilddaten liegen aus dem empfangenen Datenstrom extrahiert. Es werden die übermittelten Bilddaten, die in dem zu untersuchenden Bildsegment- bereich liegen, mittels einer Kreuzkorrelation(sverfahren) mit dem Referenzbild daten verglichen. Die gespeicherten Referenzbilddaten können dabei in der An zeigeeinheit 2 (FIG 4) gespeichert sein. Die gespeicherten Referenzbilddaten können dabei eine kleine Auswahl der eigentlichen Bilddaten umfassen, welche vorzugsweise Fixpunkte auf der Anzeigeeinheit 2 (FIG 4) darstellen.
Die Kreuzkorrelation wertet die Differenz zwischen den Referenzbilddaten und den übermittelten Bilddaten aus. Der Vorteil der Kreuzkorrelation gegenüber anderen Verfahren ist der einfach zu implementierende Algorithmus. Kreuzkorrelationen sind robust gegenüber leichten Störungen, wie z. B. Rauschen. Die Kreuzkorrela tion kann beispielsweise über die Fouriertransformation berechnet werden.
Dabei ist unter Kreuzkorrelation auch ein Kreuzkorrelationsverfahren, wie die binäre pixelbasierte Kreuzkorrelation, oder eine merkmalslistenbasierte Kreuzkorrelation zu verstehen. Gerade letzteres zeichnet sich durch seine Schnelligkeit aus; gerin ges Rauschen vorausgesetzt. Auch kann eine nichtnormalisierte Kreuzkorrelation verwendet werden. Diese zeichnet sich durch verringerten Rechenaufwand und einen geringeren Speicheraufwand aus. Für das Echtzeitverfahren bietet sich auch die normierte Kreuzkorrelation an.
In einem vierten Schritt S4 kann anhand der durchgeführten Kreuzkorrelation nun ein Vergleichswahrscheinlichkeitswert als Ergebnis des Vergleiches, mit welcher Wahrscheinlichkeit die Referenzbilddaten in den übermittelten Bilddaten vorliegen, bestimmt werden.
In einem fünften Schritt S5 wird der so ermittelte Vergleichswahrscheinlichkeitswert mit einem vorgegebenen Grenzwahrscheinlichkeitswert verglichen.
In einem sechsten Schritt S6 werden, falls der Vergleichswahrscheinlichkeitswert höher als der Grenzwahrscheinlichkeitswert ist, die übermittelten Bilddaten auf der Anzeigeeinheit 2 (FIG 4) dargestellt. Dabei kann höher auch beinhalten, dass der Vergleichswahrscheinlichkeitswert gleich dem Grenzwahrscheinlichkeitswert ist. Alternativ ist dieser nicht umfasst.
Dabei kann der Grenzwahrscheinlichkeitswert auch gewichtet festgelegt werden. So kann beispielsweise bei Bilddaten, welche Warnhinweise für die Fahrsicherheit darstellen, beispielsweise„Achtung Glätte“, ein höherer Grenzwahrscheinlich keitswert vorgesehen sein, als bei weniger sicherheitsrelevanten Warnhinweisen. In einem siebten Schritt S7 wird, falls der Vergleichswahrscheinlichkeitswert nied riger als der Grenzwahrscheinlichkeitswert ist, eine Ersatzreaktion eingeleitet. Eine solche kann beispielsweise ein Ausschalten der Anzeigeeinheit 2 (FIG 4), welche für gewöhnlich ein Display eines Entertainmentsystems ist, oder Anzeigen einer zentralen Fehlerwarnung oder eine Überlagerung der überprüften, übermittelten Bilddaten mit dem Referenzbilddaten sein.
Durch das Verfahren können geringfügige Änderungen, beispielsweise eine un terschiedliche Farbgebung oder eine unterschiedliche Schriftgröße toleriert werden und führen nicht zu einem Fehleralarm. Somit kann beispielsweise auf einen Bild speicher verzichtet werden.
Das Verfahren toleriert geringfügige Übertragungsfehler und Veränderungen der Bilddaten durch Signalprocessing. Auch bei verlustbehafteter Komprimierung zur Reduzierung der Übertragungsbandbreite ist eine sichere Erkennung von Symbo len / Signaturen noch gewährleistet. Durch das Prüfen eines größeren Überwa chungsbereichs kann eine geringfügige Verschiebung der Symbole/ Signaturen toleriert werden.
FIG 2 zeigt eine weitere Ausführung des erfindungsgemäßen Verfahrens.
Hierbei werden, wie bei FIG 1 , Bilddaten in einem ersten Schritt A1 durch vor zugsweise die Steuereinheit 4 (FIG 4) in dem Fahrerassistenzsystem 3 (FIG 4) ausgewählt.
Die Bilddaten werden in einem zweiten Schritt A2 an eine Vergleichseinheit 5 (FIG 4), welche beispielsweise einen Grafikchip umfasst, übermittelt.
In einem dritten Schritt A3 wird den übermittelten Bilddaten ein charakteristisches Merkmal zugeführt. Die Referenzbilddaten werden basierend auf diesem charak teristischen Merkmal gebildet. Es können auch mehrere oder unterschiedliche charakteristische Merkmale eingefügt werden.
In einem vierten Schritt A4 werden mittels der Kreuzkorrelation die an die Anzei geeinheit 2 (FIG 4) übermittelten Bilddaten mit den gespeicherten Referenzbild daten verglichen, und auf die Präsenz des charakteristischen Merkmals geprüft. Somit kann die Kreuzkorrelation effizienter und effektiver in Bezug auf das cha- rakteristische Merkmal durchgeführt werden. Dadurch kann auch die benötigte Rechenleistung gesenkt werden.
In einem fünften Schritt A5 kann anhand der durchgeführten Kreuzkorrelation der Vergleichswahrscheinlichkeitswert als Ergebnis des Vergleiches, mit welcher Wahrscheinlichkeit die Referenzbilddaten mit dem charakteristischen Merkmal in den übermittelten Bilddaten mit dem charakteristischen Merkmal vorliegen, be stimmt werden.
In einem sechsten Schritt A6 wird der so ermittelte Vergleichswahrscheinlich keitswert mit einem vorgegebenen Grenzwahrscheinlichkeitswert verglichen.
In einem siebten Schritt A7 werden, falls der Vergleichswahrscheinlichkeitswert höher als Grenzwahrscheinlichkeitswert ist, die übermittelten Bilddaten mit dem charakteristischen Merkmal auf der Anzeigeeinheit 2 (FIG 4) dargestellt.
In einem achten Schritt A8 wird, falls der Vergleichswahrscheinlichkeitswert nied riger als der Grenzwahrscheinlichkeitswert ist, eine Ersatzreaktion eingeleitet.
FIG 3 zeigt eine weitere Ausgestaltung der Erfindung. Hierbei sind die Bilddaten als Kennung 6 dargestellt. Die Kennung 6 ist vorzugsweise als Kennungsdaten aus gebildet.
Hier sind von einer Kamera, beispielsweise einem Sensor, Kameradaten, welche auch Videodaten sein können und deshalbnachfolgend als Kamerada- tenA/ideodaten bezeichnet werden, aufgenommen worden. Diese können ein Kamerabild/Videobild, beispielsweise eines Fahrzeugumfeldes, darstellen. Vor zugsweise werden Kameradatenströme/Videodatenströme aufgenommen, welche eine Abfolge von Kamera-/Videobildern darstellen. Dabei sind unter Kamerada- tenA/ideodaten jede von beispielsweise einem Sensor aufgenommenen Daten zu verstehen.
Die Kennung 6 wird den KameradatenA/ideodaten beigefügt. Fig 3 zeigt die auf der Anzeigeeinheit 2 dargestellten Kameradaten mit der Kennung 6. Die Kennung 6 kann ein eindeutiges, nicht sichtbares Muster, beispielsweise ein digitaler Finger print sein, welcher den KameradatenA/ideodaten hinzugefügt wird. Die Kennung 6 kann dabei durch computergestützte Steganographie eingefügt werden, so dass vorzugsweise ein Nutzer die Kennung 6 nicht bemerkt. Die Kennung 6 kann jedoch auch ein leicht zu identifizierender Barcode, ein Zeichen, Symbol oder Schriftzug sein. Auch andere Ausgestaltungen sind möglich.
Mittels Kreuzkorrelation werden die an die Anzeigeeinheit 2 übermittelten darzu stellenden KameradatenA/ideodaten mit der Kennung 6 mittels Kreuzkorrelation auf eine Präsenz der Kennung 6 überprüft.
Es wird der Vergleichswahrscheinlichkeitswert, anhand des Vergleiches, ob die Kennung 6 in dem übermittelten Kameradaten/Videodaten vorliegen, erstellt.
Hierfür wurde vorher von der Kennung 6 eine Referenzkennung erstellt.
Wenn der Vergleichswahrscheinlichkeitswert über einem bereitgestellten, vorge gebenen Grenzwahrscheinlichkeitswert liegt, werden die übermittelten Kamerada ten/Videodaten auf einer Anzeigeeinheit 2 dargestellt.
Wenn der Vergleichswahrscheinlichkeitswert unter dem bereitgestellten, vorge gebenen Grenzwahrscheinlichkeitswert liegt, wird die Ersatzreaktion ausgegeben.
Durch das Einbringen von sich abwechselnden oder sich ändernden Kennungen 6 an derselben Position können die auf der Anzeigeeinheit 2 dargestellten Kamera daten/Videodaten auf Einfrieren überwacht werden.
Ändert sich die Kennung 6 über eine gewisse Zeit nicht, werden die auf der An zeigeeinheit 2 dargestellten Kameradaten/Videodaten als eingefroren bewertet und eine Ersatzreaktion, beispielsweise ein Warnsymbol auf der Anzeigeeinheit 2 oder ein Ausschalten der Anzeigeeinheit 2, eingeleitet. Zudem kann die Quelle ermittelt werden, aus der die Kameradaten/Videodaten stammen.
Damit kann vereinfacht überprüft werden, ob das Bild eingefroren ist und es kann eine Ersatzreaktion eingeleitet werden.
Dabei kann die Kennung 6 mittels einer Kennungseinrichtung den Kamerada tenA/ideodaten zugeführt werden.
FIG 4 zeigt ein Fahrzeug 1 mit der erfindungsgemäßen Anzeigeeinheit 2. Dabei ist das Fahrzeug 1 insbesondere als ein Personenkraftfahrzeug ausgebildet. Die An zeigeeinheit 2 kann dabei in ein Fahrerassistenzsystem 3 integriert sein. Insbe- sondere kann die Anzeigeeinheit 2 als ein Display ausgebildet sein. Die Anzeige einheit 2 umfasst zudem noch eine Vergleichseinheit 5.
Weiter umfasst das Fahrzeug 1 eine Steuereinheit 4, welche beispielsweise bei Störung des Fahrzeugbetriebs, beispielsweise durch ein ausfallendes Bauelement, das dementsprechende Warnsymbol in Bilddaten an die Vergleichseinheit 5 übermittelt. Die Steuereinheit 4 kann auch in dem Fahrerassistenzsystem 3 inte griert sein.
Bezugszeichenliste:
1 Fahrzeug
2 Anzeigeeinheit
3 Fahrerassistenzsystem
4 Steuereinheit
5 Vergleichseinheit
6 Kennung
S,A Verfahrensschritte

Claims

Patentansprüche
1. Verfahren zur Validierung von übermittelten Bilddaten umfassend der
Schritte:
Bereitstellen von Bilddaten, und übermitteln der Bilddaten an eine Anzeigeeinheit (2),
Bereitstellen von Referenzbilddaten,
Vergleichen der übermittelten Bilddaten mit den Referenzbilddaten mittels einer Kreuzkorrelation in einer Vergleichseinheit (5), ob die Referenzbilddaten in den übermittelten Bilddaten vorliegen,
Erstellen eines Vergleichswahrscheinlichkeitswertes anhand des Vergleiches,
Anzeigen der übermittelten Bilddaten auf der Anzeigeeinheit (2), wenn der Vergleichswahrscheinlichkeitswert über einem bereitge stellten, vorgegebenen Grenzwahrscheinlichkeitswert liegt,
Ausgeben einer Ersatzreaktion, wenn der Vergleichswahrschein lichkeitswert unter dem bereitgestellten, vorgegebenen Grenzwahr scheinlichkeitswert liegt.
2. Verfahren nach Anspruch 1 , dadurch gekennzeichnet, dass die Kreuzkor relation als eine normierte Kreuzkorrelation oder eine nichtnormale Kreuz korrelation oder eine merkmalsbasierte Kreuzkorrelation oder eine pixelba sierte Kreuzkorrelation ausgebildet wird.
3. Verfahren nach einem der vorhergehenden Ansprüche, dadurch gekenn zeichnet, dass den Bilddaten ein charakteristisches Merkmal hinzugefügt wird.
4. Verfahren nach einem der vorhergehenden Ansprüche, dadurch gekenn zeichnet, dass die Bilddaten als Kennung (6) ausgebildet werden.
5. Verfahren nach Anspruch 4, dadurch gekennzeichnet, dass die Kennung (6) Kameradaten, welche von einem Sensor aufgenommen werden, hinzugefügt wird.
6. Verfahren nach einem der vorhergehenden Ansprüche, dadurch gekenn zeichnet, dass der Grenzwahrscheinlichkeitswert in Bezug auf verschiedene Bilddaten gewichtet ausgebildet wird.
7. Verfahren nach einem der vorhergehenden Ansprüche, dadurch gekenn zeichnet, dass die Ersatzreaktion das ganz- oder teilweise Abschalteten der Anzeigeeinheit (2) umfasst.
8. Verfahren nach einem der vorhergehenden Ansprüche, dadurch gekenn zeichnet, dass die Ersatzreaktion die Anzeige einer Fehlermeldung auf der Anzeigeeinheit (2) und/oder die Ausgabe eines Signals und/oder einer Tex tinformation umfasst.
9. Anzeigeeinheit (2) umfassend eine Vergleichseinheit (5), welche dazu
ausgebildet ist, übermittelte Bilddaten mit Referenzbilddaten zu vergleichen, ob die Referenzbilddaten in den übermittelten Bilddaten vorliegen, wobei die Vergleichseinheit (5) dazu ausgebildet ist, den Vergleich mittels Kreuzkor relation durchzuführen und anhand des Vergleiches einen Vergleichswahr scheinlichkeitswert zu erstellen, wobei die Anzeigeeinheit (2) dazu ausge bildet ist, die übermittelten Bilddaten anzuzeigen, wenn der Vergleichs wahrscheinlichkeitswert über einem bereitgestellten, vorgegebenen
Grenzwahrscheinlichkeitswert liegt und eine Ersatzreaktion auszugeben, wenn der Vergleichswahrscheinlichkeitswert unter dem bereitgestellten, vorgegebenen Grenzwahrscheinlichkeitswert liegt.
10. Anzeigeeinheit (2) nach Anspruch 9, welche dazu ausgebildet ist, das Ver fahren nach einem der Ansprüche 1 bis 8 durchzuführen.
11. Fahrzeug (1 ) mit einer Anzeigeeinheit (2) nach einem der Ansprüche 9 oder 10.
12. Computerprogramm umfassend Befehle, die bewirken, dass die Anzeige einheit (2) nach einem der Ansprüche 9 oder 10 das Verfahren nach einem der Ansprüche 1 bis 8 ausführt.
13. Computerlesbares Speichermedium, auf dem das Computerprogramm nach Anspruch 12 gespeichert ist.
PCT/EP2019/084621 2018-12-20 2019-12-11 Verfahren zur validierung von umfeldbilddaten, vorrichtung, computerprogramm und computerlesbares speichermedium WO2020126737A1 (de)

Priority Applications (2)

Application Number Priority Date Filing Date Title
EP19824260.4A EP3899915A1 (de) 2018-12-20 2019-12-11 Verfahren zur validierung von umfeldbilddaten, vorrichtung, computerprogramm und computerlesbares speichermedium
US17/416,124 US20220076600A1 (en) 2018-12-20 2019-12-11 Method for validating environmental image data, apparatus, computer program, and computer-readable storage medium

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
DE102018222493.5 2018-12-20
DE102018222493.5A DE102018222493A1 (de) 2018-12-20 2018-12-20 Verfahren zur Validierung von Umfeldbilddaten, Vorrichtung, Computerprogramm und computerlesbares Speichermedium

Publications (1)

Publication Number Publication Date
WO2020126737A1 true WO2020126737A1 (de) 2020-06-25

Family

ID=68987674

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/EP2019/084621 WO2020126737A1 (de) 2018-12-20 2019-12-11 Verfahren zur validierung von umfeldbilddaten, vorrichtung, computerprogramm und computerlesbares speichermedium

Country Status (4)

Country Link
US (1) US20220076600A1 (de)
EP (1) EP3899915A1 (de)
DE (1) DE102018222493A1 (de)
WO (1) WO2020126737A1 (de)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102021128895A1 (de) 2021-11-05 2023-05-11 Bayerische Motoren Werke Aktiengesellschaft Vorrichtung und Verfahren zur Anzeige von fahrzeugrelevanter Information auf einem Bildschirm
GB2625129A (en) * 2022-12-08 2024-06-12 Continental Automotive Tech Gmbh Displaying warning message and method thereof

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20050276514A1 (en) * 2004-06-14 2005-12-15 Fisher Paul A Image monitoring method and system
DE102007048608A1 (de) 2007-10-10 2009-04-16 Robert Bosch Gmbh Testeinrichtung, Anzeigevorrichtung und Verfahren zum Überprüfen einer Gültigkeit von Anzeigesignalen
EP2273369B1 (de) 2009-07-06 2011-11-30 Deuta-Werke GmbH Verfahren zur Darstellung einer sicherheitsrelevanten Information auf einer Anzeigevorrichtung und Vorrichtung zur Durchführung des Verfahrens
US20130076899A1 (en) * 2010-06-11 2013-03-28 Siemens Aktiengesellschaft Method and device for detecting an incorrect representation of image data on a display unit
EP2728480A1 (de) * 2012-11-02 2014-05-07 Continental Automotive GmbH Überprüfung einer Bedienersteuerungsvorrichtung

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102016203266A1 (de) * 2016-02-29 2017-08-31 Zf Friedrichshafen Ag Verfahren zum Betreiben einer Anzeigevorrichtung und Anzeigevorrichtung

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20050276514A1 (en) * 2004-06-14 2005-12-15 Fisher Paul A Image monitoring method and system
DE102007048608A1 (de) 2007-10-10 2009-04-16 Robert Bosch Gmbh Testeinrichtung, Anzeigevorrichtung und Verfahren zum Überprüfen einer Gültigkeit von Anzeigesignalen
EP2273369B1 (de) 2009-07-06 2011-11-30 Deuta-Werke GmbH Verfahren zur Darstellung einer sicherheitsrelevanten Information auf einer Anzeigevorrichtung und Vorrichtung zur Durchführung des Verfahrens
US20130076899A1 (en) * 2010-06-11 2013-03-28 Siemens Aktiengesellschaft Method and device for detecting an incorrect representation of image data on a display unit
EP2728480A1 (de) * 2012-11-02 2014-05-07 Continental Automotive GmbH Überprüfung einer Bedienersteuerungsvorrichtung

Also Published As

Publication number Publication date
EP3899915A1 (de) 2021-10-27
US20220076600A1 (en) 2022-03-10
DE102018222493A1 (de) 2020-06-25

Similar Documents

Publication Publication Date Title
EP2833349B1 (de) Verfahren und Vorrichtung zur Darstellung eines sicherheitsrelevanten Zustands
DE102007048608A1 (de) Testeinrichtung, Anzeigevorrichtung und Verfahren zum Überprüfen einer Gültigkeit von Anzeigesignalen
WO2020126737A1 (de) Verfahren zur validierung von umfeldbilddaten, vorrichtung, computerprogramm und computerlesbares speichermedium
DE102018118190A1 (de) Verfahren und Vorrichtung zur Kontrolle eines Fahrverhaltens eines hochautomatisiert fahrenden Fahrzeugs sowie Infrastrukturanlage, Fahrzeug oder Überwachungsfahrzeug mit der Vorrichtung
WO2018108395A1 (de) Verfahren zum überprüfen einer gültigkeit von bilddaten
EP2439722B1 (de) Verfahren zur Überprüfung von pixelformatierten Displaydaten zur Darstellung auf einem Bildschirm eines Anzeigegerätes in einem Fahrzeug
WO2007033902A2 (de) Verfahren und einrichtung zur überprüfung der bildausgabe eines anzeigegerätes
EP3571085B1 (de) Verfahren und vorrichtung zum anzeigen eines hinweises für einen anwender und arbeitsvorrichtung
DE102015014190A1 (de) Verfahren zur Absicherung einer Übertragung von sicherheitsrelevanten Kamerabildern
DE102010026392B4 (de) Verfahren zur sicheren Parametrierung eines Sicherheitsgeräts
EP3405942A1 (de) Vorrichtung und verfahren zum überprüfen einer gültigkeit von bilddaten in einer anzeigeeinrichtung
DE102012208481B4 (de) Verfahren und Vorrichtung zum Betreiben eines Computersystems
DE102019209554A1 (de) Verfahren zum Testen der Robustheit eines simulierbaren technischen Systems, Computerprogramm, maschinenlesbares Speichermedium und Vorrichtung sowie ein technisches System
DE102015012889B4 (de) Anzeigevorrichtung und Verfahren zur Überprüfung von Anzeigeinhalten
DE102013202814A1 (de) Verfahren zur Fehleroffenbarung bei einem Stellwerksrechnersystem und Stellwerksrechnersystem
DE102009009904A1 (de) Verfahren zur Identifizierung von Objekten
DE102019113206A1 (de) Verfahren und Steuergerät zur Diagnose einer Komponente eines Fahrzeugs
WO2019179712A1 (de) Verfahren und einrichtung zur abgesicherten anzeige eines bedienungsrelevanten bildinhalts für die darstellung auf einem display in einem kraftfahrzeug
EP2439644B1 (de) Verfahren zur Kennzeichnung sicherheitsrelevanter und nichtsicherheitsrelevanter Bildschirmseiten auf einem Anzeigegerät mittels eines optischen Markers
EP4114679B1 (de) Verfahren und vorrichtung zur sicheren anzeige von asil-relevanten daten auf einer anzeigevorrichtung eines kraftfahrzeuges
EP3317856A1 (de) Verfahren zum überprüfen der richtigkeit von einer darstellung von bilddaten auf einem anzeigemittel und anzeigeeinrichtung
WO2024100080A1 (de) Verfahren zum testen der robustheit eines algorithmus des maschinellen lernens zum klassifizieren von objekten in einer umgebung eines kraftfahrzeuges
DE102020214694A1 (de) Verfahren und Vorrichtung zum Überprüfen einer Vollständigkeit eines Anzeigeinhalts beim Übertragen zumindest einer Anzeigeinformation für ein Fahrzeug
EP3347858A1 (de) Vorrichtung und verfahren zum verarbeiten einer wenigstens eine information darstellenden bilddarstellung
DE102021211515A1 (de) Verfahren und Vorrichtung zum Betreiben eines automatisierten Fahrzeugs

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 19824260

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

ENP Entry into the national phase

Ref document number: 2019824260

Country of ref document: EP

Effective date: 20210720