DE102014002134B4 - Vorrichtung zur Erkennung einer Beleuchtungsumgebung eines Fahrzeugs und Steuerungsverfahren davon - Google Patents

Vorrichtung zur Erkennung einer Beleuchtungsumgebung eines Fahrzeugs und Steuerungsverfahren davon Download PDF

Info

Publication number
DE102014002134B4
DE102014002134B4 DE102014002134.3A DE102014002134A DE102014002134B4 DE 102014002134 B4 DE102014002134 B4 DE 102014002134B4 DE 102014002134 A DE102014002134 A DE 102014002134A DE 102014002134 B4 DE102014002134 B4 DE 102014002134B4
Authority
DE
Germany
Prior art keywords
illumination
value
general
environment
change
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
DE102014002134.3A
Other languages
English (en)
Other versions
DE102014002134A1 (de
Inventor
Myung Hun Kim
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
HL Klemove Corp
Original Assignee
HL Klemove Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by HL Klemove Corp filed Critical HL Klemove Corp
Publication of DE102014002134A1 publication Critical patent/DE102014002134A1/de
Application granted granted Critical
Publication of DE102014002134B4 publication Critical patent/DE102014002134B4/de
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60QARRANGEMENT OF SIGNALLING OR LIGHTING DEVICES, THE MOUNTING OR SUPPORTING THEREOF OR CIRCUITS THEREFOR, FOR VEHICLES IN GENERAL
    • B60Q11/00Arrangement of monitoring devices for devices provided for in groups B60Q1/00 - B60Q9/00
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/18Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/183Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a single remote source
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60QARRANGEMENT OF SIGNALLING OR LIGHTING DEVICES, THE MOUNTING OR SUPPORTING THEREOF OR CIRCUITS THEREFOR, FOR VEHICLES IN GENERAL
    • B60Q1/00Arrangement of optical signalling or lighting devices, the mounting or supporting thereof or circuits therefor
    • B60Q1/02Arrangement of optical signalling or lighting devices, the mounting or supporting thereof or circuits therefor the devices being primarily intended to illuminate the way ahead or to illuminate other areas of way or environments
    • B60Q1/04Arrangement of optical signalling or lighting devices, the mounting or supporting thereof or circuits therefor the devices being primarily intended to illuminate the way ahead or to illuminate other areas of way or environments the devices being headlights
    • B60Q1/14Arrangement of optical signalling or lighting devices, the mounting or supporting thereof or circuits therefor the devices being primarily intended to illuminate the way ahead or to illuminate other areas of way or environments the devices being headlights having dimming means
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01JMEASUREMENT OF INTENSITY, VELOCITY, SPECTRAL CONTENT, POLARISATION, PHASE OR PULSE CHARACTERISTICS OF INFRARED, VISIBLE OR ULTRAVIOLET LIGHT; COLORIMETRY; RADIATION PYROMETRY
    • G01J1/00Photometry, e.g. photographic exposure meter
    • G01J1/10Photometry, e.g. photographic exposure meter by comparison with reference light or electric value provisionally void
    • G01J1/20Photometry, e.g. photographic exposure meter by comparison with reference light or electric value provisionally void intensity of the measured or reference value being varied to equalise their effects at the detectors, e.g. by varying incidence angle
    • G01J1/28Photometry, e.g. photographic exposure meter by comparison with reference light or electric value provisionally void intensity of the measured or reference value being varied to equalise their effects at the detectors, e.g. by varying incidence angle using variation of intensity or distance of source
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00Pattern recognition
    • G06F18/20Analysing
    • G06F18/23Clustering techniques
    • G06F18/232Non-hierarchical techniques
    • G06F18/2321Non-hierarchical techniques using statistics or function optimisation, e.g. modelling of probability density functions
    • G06F18/23213Non-hierarchical techniques using statistics or function optimisation, e.g. modelling of probability density functions with fixed number of clusters, e.g. K-means clustering
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/40Extraction of image or video features
    • G06V10/60Extraction of image or video features relating to illumination properties, e.g. using a reflectance or lighting model
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/70Arrangements for image or video recognition or understanding using pattern recognition or machine learning
    • G06V10/762Arrangements for image or video recognition or understanding using pattern recognition or machine learning using clustering, e.g. of similar faces in social networks
    • G06V10/763Non-hierarchical techniques, e.g. based on statistics of modelling distributions
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/50Context or environment of the image
    • G06V20/56Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60QARRANGEMENT OF SIGNALLING OR LIGHTING DEVICES, THE MOUNTING OR SUPPORTING THEREOF OR CIRCUITS THEREFOR, FOR VEHICLES IN GENERAL
    • B60Q2300/00Indexing codes for automatically adjustable headlamps or automatically dimmable headlamps
    • B60Q2300/30Indexing codes relating to the vehicle environment
    • B60Q2300/31Atmospheric conditions
    • B60Q2300/314Ambient light

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Software Systems (AREA)
  • Data Mining & Analysis (AREA)
  • Probability & Statistics with Applications (AREA)
  • Artificial Intelligence (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Evolutionary Computation (AREA)
  • Signal Processing (AREA)
  • Computing Systems (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Databases & Information Systems (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Bioinformatics & Cheminformatics (AREA)
  • Bioinformatics & Computational Biology (AREA)
  • Evolutionary Biology (AREA)
  • General Engineering & Computer Science (AREA)
  • Medical Informatics (AREA)
  • Mechanical Engineering (AREA)
  • Spectroscopy & Molecular Physics (AREA)
  • Studio Devices (AREA)
  • Fittings On The Vehicle Exterior For Carrying Loads, And Devices For Holding Or Mounting Articles (AREA)
  • Closed-Circuit Television Systems (AREA)
  • Traffic Control Systems (AREA)
  • Lighting Device Outwards From Vehicle And Optical Signal (AREA)

Abstract

Vorrichtung (10) zur Erkennung einer Beleuchtungsumgebung eines Fahrzeugs, mit:einem Infrarotbeleuchtungssensor (12) zum Ermitteln eines Infrarotbeleuchtungsbetrags, der von der Sonne ausgestrahlt wird;einer Kamera (11) zum Aufnehmen einer Straße, auf der ein Fahrzeug fährt; undeiner Beleuchtungsumgebungs-Erkennungseinheit (13), die den Infrarotbeleuchtungsbetrag durch den Infrarotbeleuchtungssensor (12) ermittelt, eine Kamerabelichtungszeit von der Kamera (11) empfängt, Doppelbelichtungsbilder empfängt, die so aufgenommen worden sind, dass sie unterschiedliche Belichtungswerte haben, indem die Belichtungswerte der Kamera (11) angepasst wurden, einen allgemeinen Beleuchtungswert auf der Basis des ermittelten Infrarotbeleuchtungsbetrags, der empfangenen Kamerabelichtungszeit und eines Beleuchtungswerts, der durch eine Bild-Clustering-Analyse der Doppelbelichtungsbilder erhalten wurde, berechnet, eine Änderungsrate in dem berechneten allgemeinen Beleuchtungswert berechnet und eine aktuelle Beleuchtungsumgebung als eine Beleuchtungsumgebung für jeden Zeitabschnitt auf der Basis des berechneten allgemeinen Beleuchtungswerts und der Änderungsrate in dem allgemeinen Beleuchtungswert erkennt.

Description

  • HINTERGRUND DER ERFINDUNG
  • 1. Gebiet der Erfindung
  • Ausführungsformen der vorliegenden Erfindung beziehen sich auf eine Vorrichtung zur Erkennung einer Beleuchtungsumgebung eines Fahrzeugs und auf ein Steuerungsverfahren davon, die es erlauben können, dass eine aktuelle Beleuchtungsumgebung eines Fahrzeugs exakt erkannt werden kann.
  • 2. Beschreibung des Standes der Technik
  • Herkömmlicherweise wird ein Verfahren zur Erkennung einer Beleuchtungsumgebung durch einen Beleuchtungssensor verwendet, um entsprechend der erkannten Beleuchtungsumgebung einen Scheinwerfer ein- und auszuschalten oder um eine Intensität des Scheinwerfers anzupassen.
  • Aber wenn eine Beleuchtungsumgebung in einer schattigen Berggegend bei Tage oder an einem bewöikten Tag nur durch einen Beleuchtungssensor erkannt wird, kann es passieren, dass die Beleuchtungsumgebung fälschlicherweise als eine Nacht erkannt wird, obwohl es Tag ist. Als Folge davon kann es sein, dass unnötigerweise eine Scheinwerfersteuerung durchgeführt wird.
  • Außerdem gibt es ein Verfahren zur Erkennung einer Beleuchtungsumgebung durch das Aufnehmen eines Bildes einer Vorderseite unter Verwendung einer Kamera und dann durch das Analysieren des aufgenommenen Bildes. In diesem Fall kann es aber sein, dass eine Beleuchtungsumgebung eines Fahrzeugs falsch erkannt wird, weil sich das Verfahren auf die Bildanalyse verlässt und durch ein Objekt oder eine Hintergrundfarbe beeinträchtigt werden kann.
  • Dementsprechend ist der Stand der Technik problematisch darin, dass es schwierig ist, unterschiedliche Beleuchtungsumgebungen des Fahrzeugs lediglich durch den Beleuchtungssensor oder durch die Kamera zu erfassen.
  • ZUSAMMENFASSUNG DER ERFINDUNG
  • Deshalb ist es ein Aspekt der vorliegenden Erfindung, eine Vorrichtung zur Erkennung einer Beleuchtungsumgebung eines Fahrzeugs und ein Steuerungsverfahren davon bereitzustellen, die es erlauben können, dass unterschiedliche Beleuchtungsumgebungen eines Fahrzeugs unter Verwendung eines Infrarotbeleuchtungsbetrags und einer Kamerabelichtungszeit erkannt werden können.
  • Es ist ein weiterer Aspekt der vorliegenden Erfindung, eine Vorrichtung zur Erkennung einer Beleuchtungsumgebung eines Fahrzeugs und ein Steuerungsverfahren davon bereitzustellen, die es erlauben können, dass unterschiedliche Beleuchtungsumgebungen eines Fahrzeugs unter Verwendung eines Beleuchtungswerts, der durch eine Bild-Clustering-Analyse einer Vielzahl von Bildern, die unterschiedliche Belichtungswerte aufweisen, erhalten wird, zusammen mit einem Infrarotbeleuchtungsbetrag und einer Kamerabelichtungszeit erkannt werden können.
  • Weitere Aspekte der Erfindung werden zum Teil in der Beschreibung, die folgt, dargelegt werden und werden zum Teil aus der Beschreibung offensichtlich werden oder können durch das Praktizieren der Erfindung erfahren werden.
  • In Übereinstimmung mit einem Aspekt der vorliegenden Erfindung weist eine Vorrichtung zur Erkennung einer Beleuchtungsumgebung eines Fahrzeugs einen Infrarotbeleuchtungssensor zum Ermitteln eines Infrarotbeleuchtungsbetrags, der von der Sonne ausgestrahlt wird, eine Kamera zum Aufnehmen einer Straße, auf der ein Fahrzeug fährt, und eine Beleuchtungsumgebungs-Erkennungseinheit auf, die den Infrarotbeleuchtungsbetrag durch den Infrarotbeleuchtungssensor ermittelt, eine Kamerabelichtungszeit von der Kamera empfängt, Doppelbelichtungsbilder empfängt, die so aufgenommen worden sind, dass sie unterschiedliche Belichtungswerte haben, indem die Belichtungswerte der Kamera angepasst bzw. eingestellt wurden, einen allgemeinen Beleuchtungswert auf der Basis des ermittelten Infrarotbeleuchtungsbetrags, der empfangenen Kamerabelichtungszeit und eines Beleuchtungswerts, der durch eine Bild-Clustering-Analyse der Doppelbelichtungsbilder erhalten wurde, berechnet, eine Änderungsrate in dem berechneten allgemeinen Beleuchtungswert berechnet und eine aktuelle Beleuchtungsumgebung als eine Beleuchtungsumgebung für jeden Zeitabschnitt auf der Basis des berechneten allgemeinen Beleuchtungswerts und der Änderungsrate in dem allgemeinen Beleuchtungswert erkennt.
  • Wenn in der Beleuchtungsumgebungs-Erkennungseinheit „A“ einen Infrarotbeleuchtungswert repräsentiert, „B“ einen Beleuchtungswert repräsentiert, der der Kamerabelichtungszeit entspricht, und „C“ einen Beleuchtungswert repräsentiert, der dem Ergebniswert entspricht, der durch die Clustering-Analyse der Doppelbelichtungsbilder erhalten wurde, dann kann der allgemeine Beleuchtungswert durch die folgende Gleichung erhalten werden: allgemeiner Beleuchtungswert = W 1 × A + W 2 × B + W 3 × C ,
    Figure DE102014002134B4_0001
    wobei sich W1, W2 und W3 auf Gewichtungen beziehen und die Gewichtungen W1 bis W3 eine Beziehung von W1 > W2 > W3 haben.
  • Die Beleuchtungsumgebungs-Erkennungseinheit kann feststellen, dass es sich bei der aktuellen Beleuchtungsumgebung um eine der Folgenden handelt: Tag, Nacht, Abenddämmerung und Morgendämmerung.
  • Wenn der allgemeine Beleuchtungswert gleich oder größer als ein vorbestimmter Beleuchtungswert ist und die Änderungsrate in dem allgemeinen Beleuchtungswert kleiner als eine vorbestimmte Änderungsrate ist, dann kann die Beleuchtungsumgebungs-Erkennungseinheit feststellen, dass es sich bei der aktuellen Beleuchtungsumgebung um den Tag handelt; wenn der allgemeine Beleuchtungswert kleiner als ein vorbestimmter Beleuchtungswert ist und die Änderungsrate in dem allgemeinen Beleuchtungswert kleiner als eine vorbestimmte Änderungsrate ist, dann kann die Beleuchtungsumgebungs-Erkennungseinheit feststellen, dass es sich bei der aktuellen Beleuchtungsumgebung um die Nacht handelt; wenn der allgemeine Beleuchtungswert allmählich abnimmt und die Änderungsrate in dem allgemeinen Beleuchtungswert gleich oder größer als eine vorbestimmte Änderungsrate ist, dann kann die Beleuchtungsumgebungs-Erkennungseinheit feststellen, dass es sich bei der Beleuchtungsumgebung um die Abenddämmerung handelt; und wenn der allgemeine Beleuchtungswert allmählich zunimmt und die Änderungsrate in dem allgemeinen Beleuchtungswert gleich oder größer als eine vorbestimmte Änderungsrate ist, dann kann die Beleuchtungsumgebungs-Erkennungseinheit feststellen, dass es sich bei der Beleuchtungsumgebung um die Morgendämmerung handelt.
  • Wenn der allgemeine Beleuchtungswert für einen kurzen Zeitraum rapide absinkt, dann kann die Beleuchtungsumgebungs-Erkennungseinheit feststellen, dass es sich bei der aktuellen Beleuchtungsumgebung um einen Eintritt in einen Tunnel handelt.
  • In Übereinstimmung mit einem anderen Aspekt der vorliegenden Erfindung weist eine Vorrichtung zur Erkennung einer Beleuchtungsumgebung eines Fahrzeugs einen Infrarotbeleuchtungssensor zum Ermitteln eines Infrarotbeleuchtungsbetrags, der von der Sonne ausgestrahlt wird, eine Kamera zum Aufnehmen einer Straße, auf der ein Fahrzeug fährt, und eine Beleuchtungsumgebungs-Erkennungseinheit auf, die den Infrarotbeleuchtungsbetrag durch den Infrarotbeleuchtungssensor ermittelt, eine Kamerabelichtungszeit von der Kamera empfängt, einen allgemeinen Beleuchtungswert auf der Basis des ermittelten Infrarotbeleuchtungsbetrags und der empfangenen Kamerabelichtungszeit berechnet, eine Änderungsrate in dem berechneten allgemeinen Beleuchtungswert berechnet und eine aktuelle Beleuchtungsumgebung als wenigstens eine von einem Tag, einer Nacht, einer Abenddämmerung und einer Morgendämmerung auf der Basis der Änderungsrate in dem berechneten allgemeinen Beleuchtungswert erkennt, wobei dann, wenn der allgemeine Beleuchtungswert gleich oder größer als ein vorbestimmter Beleuchtungswert ist und die Änderungsrate in dem allgemeinen Beleuchtungswert kleiner als eine vorbestimmte Änderungsrate ist, die Beleuchtungsumgebungs-Erkennungseinheit feststellt, dass es sich bei der aktuellen Beleuchtungsumgebung um den Tag handelt; wenn der allgemeine Beleuchtungswert kleiner als ein vorbestimmter Beleuchtungswert ist und die Änderungsrate in dem allgemeinen Beleuchtungswert kleiner als eine vorbestimmte Änderungsrate ist, die Beleuchtungsumgebungs-Erkennungseinheit feststellt, dass es sich bei der aktuellen Beleuchtungsumgebung um die Nacht handelt; wenn der allgemeine Beleuchtungswert allmählich abnimmt und die Änderungsrate in dem allgemeinen Beleuchtungswert gleich oder größer als eine vorbestimmte Änderungsrate ist, die Beleuchtungsumgebungs-Erkennungseinheit feststellt, dass es sich bei der Beleuchtungsumgebung um die Abenddämmerung handelt; und wenn der allgemeine Beleuchtungswert allmählich zunimmt und die Änderungsrate in dem allgemeinen Beleuchtungswert gleich oder größer als eine vorbestimmte Änderungsrate ist, die Beleuchtungsumgebungs-Erkennungseinheit feststellt, dass es sich bei der Beleuchtungsumgebung um die Morgendämmerung handelt.
  • In Übereinstimmung mit einem weiteren Aspekt der vorliegenden Erfindung umfasst ein Verfahren zur Erkennung einer Beleuchtungsumgebung eines Fahrzeugs das Ermitteln eines Infrarotbeleuchtungsbetrags durch einen Infrarotbeleuchtungssensor, um einen Infrarotbeleuchtungsbetrag zu ermitteln, der von der Sonne ausgestrahlt wird, das Empfangen einer Kamerabelichtungszeit von einer Kamera zum Aufnehmen einer Straße, auf der ein Fahrzeug fährt, das Empfangen von Doppelbelichtungsbildern, die so aufgenommen worden sind, dass sie unterschiedliche Belichtungswerte aufweisen, indem die Belichtungswerte der Kamera angepasst wurden, das Berechnen eines allgemeinen Beleuchtungswerts auf der Basis des ermittelten Infrarotbeleuchtungsbetrags, der empfangenen Kamerabelichtungszeit und eines Beleuchtungswerts, der durch eine Bild-Clustering-Analyse der Doppelbelichtungsbilder erhalten wurde, das Berechnen einer Änderungsrate in dem berechneten allgemeinen Beleuchtungswert und das Erkennen einer aktuellen Beleuchtungsumgebung als eine Beleuchtungsumgebung für jeden Zeitabschnitt auf der Basis des berechneten allgemeinen Beleuchtungswerts und der Änderungsrate in dem allgemeinen Beleuchtungswert.
  • Wenn bei der Berechnung eines allgemeinen Beleuchtungswerts „A“ einen Infrarotbeleuchtungswert repräsentiert, „B“ einen Beleuchtungswert repräsentiert, der der Kamerabelichtungszeit entspricht, und „C“ einen Beleuchtungswert repräsentiert, der dem Ergebniswert entspricht, der durch die Clustering-Analyse der Doppelbelichtungsbilder erhalten wurde, dann kann der allgemeine Beleuchtungswert durch die folgende Gleichung erhalten werden: allgemeiner Beleuchtungswert = W 1 × A + W 2 × B + W 3 × C ,
    Figure DE102014002134B4_0002
    wobei sich W1, W2 und W3 auf Gewichtungen beziehen und die Gewichtungen W1 bis W3 eine Beziehung von W1 > W2 > W3 haben.
  • Das Erkennen einer Beleuchtungsumgebung kann feststellen, dass es sich bei der aktuellen Beleuchtungsumgebung um eine der Folgenden handelt: Tag, Nacht, Abenddämmerung und Morgendämmerung.
  • Wenn der allgemeine Beleuchtungswert gleich oder größer als ein vorbestimmter Beleuchtungswert ist und die Änderungsrate in dem allgemeinen Beleuchtungswert kleiner als eine vorbestimmte Änderungsrate ist, dann kann festgestellt werden, dass es sich bei der aktuellen Beleuchtungsumgebung um den Tag handelt; wenn der allgemeine Beleuchtungswert kleiner als ein vorbestimmter Beleuchtungswert ist und die Änderungsrate in dem allgemeinen Beleuchtungswert kleiner als eine vorbestimmte Änderungsrate ist, dann kann festgestellt werden, dass es sich bei der aktuellen Beleuchtungsumgebung um die Nacht handelt; wenn der allgemeine Beleuchtungswert allmählich abnimmt und die Änderungsrate in dem allgemeinen Beleuchtungswert gleich oder größer als eine vorbestimmte Änderungsrate ist, dann kann festgestellt werden, dass es sich bei der Beleuchtungsumgebung um die Abenddämmerung handelt; und wenn der allgemeine Beleuchtungswert allmählich zunimmt und die Änderungsrate in dem allgemeinen Beleuchtungswert gleich oder größer als eine vorbestimmte Änderungsrate ist, dann kann festgestellt werden, dass es sich bei der Beleuchtungsumgebung um die Morgendämmerung handelt.
  • KURZE BESCHREIBUNG DER ZEICHNUNGEN
  • Diese und/oder andere Aspekte der Erfindung werden aus der nachfolgenden Beschreibung der Ausführungsformen, die in Verbindung mit den beigefügten Zeichnungen vorgenommen wird, ersichtlicher und besser verständlich, in denen:
    • 1 eine Ansicht ist, die eine Konfiguration eines Fahrzeugs veranschaulicht, bei dem eine Vorrichtung zur Erkennung einer Beleuchtungsumgebung eines Fahrzeugs in Übereinstimmung mit einer Ausführungsform der vorliegenden Erfindung verwendet wird;
    • 2 eine Ansicht ist, die eine Konfiguration einer Kamera und eines Infrarotbeleuchtungssensors von 1 veranschaulicht;
    • 3 ein Steuerblockdiagramm der Vorrichtung zur Erkennung einer Beleuchtungsumgebung eines Fahrzeugs in Übereinstimmung mit der Ausführungsform der vorliegenden Erfindung ist;
    • 4 ein Diagramm zur Erläuterung von Informationen ist, die ausgehend von der Kamera durch eine Beleuchtungsumgebungs-Erkennungseinheit der Vorrichtung zur Erkennung einer Beleuchtungsumgebung eines Fahrzeugs in Übereinstimmung mit der Ausführungsform der vorliegenden Erfindung empfangen werden;
    • 5 ein Diagramm zur Erläuterung ist, dass die Beleuchtungsumgebungs-Erkennungseinheit der Vorrichtung zur Erkennung einer Beleuchtungsumgebung eines Fahrzeugs in Übereinstimmung mit der Ausführungsform der vorliegenden Erfindung einen Beleuchtungswert erhält, indem sie ein Bild-Clustering-Modell an Doppelbelichtungsbilder anlegt; und
    • 6 ein Steuerungsablaufplan ist, der ein Verfahren zur Erkennung einer Beleuchtungsumgebung eines Fahrzeugs in Übereinstimmung mit einer Ausführungsform der vorliegenden Erfindung veranschaulicht.
  • AUSFÜHRLICHE BESCHREIBUNG
  • Im Folgenden wird nun im Einzelnen Bezug auf die Ausführungsformen der vorliegenden Erfindung unter Bezugnahme auf die beigefügten Zeichnungen genommen. Diese Ausführungsformen sind als Beispiele bereitgestellt, damit die vorliegende Erfindung umfassend und vollständig sein wird, und sie werden den Schutzumfang der Erfindung den Fachleuten auf dem Gebiet vollständig vermitteln. Die vorliegende Erfindung kann in vielen verschiedenen Formen implementiert werden und soll nicht als auf die hier dargelegten Ausführungsformen beschränkt ausgelegt werden. In gewissen Ausführungsformen können Abschnitte, die nicht in Beziehung zu der Beschreibung stehen, in den Zeichnungen weggelassen sein, um zu verhindern, dass das Verständnis der Erfindung durch einen Durchschnittsfachmann auf dem Gebiet mehrdeutig bzw. unklar wird. In den Zeichnungen können die Breite, die Länge, die Dicke oder dergleichen von jeder Komponente aus Gründen der einfacheren Beschreibung und der Klarheit übertrieben dargestellt, weggelassen oder schematisch veranschaulicht sein. Wo immer dies möglich ist, werden gleiche Bezugszeichen durch die ganzen Zeichnungen hindurch verwendet, um die gleichen oder ähnliche Teile zu bezeichnen.
  • In der Patentspezifikation soll der Begriff „und/oder“ wenigstens eine von den vorhergehenden und nachfolgenden Komponenten einschließen. Außerdem bedeutet der Begriff „verbunden/gekoppelt“, dass eine Komponente direkt mit einer anderen Komponente verbunden ist oder dass sie indirekt durch eine andere Komponente verbunden ist. In der Patentspezifikation sollen die Singularformen auch die Pluralformen einschließen, es sei denn, der Kontext gibt dies eindeutig anders an. Es wird weiter klar sein, dass die Begriffe „aufweist“ und/oder „mit“, wenn sie in der Patentspezifikation verwendet werden, das Vorhandensein von angegebenen Merkmalen, ganzen Zahlen, Schritten, Operationen bzw. Vorgängen, Elementen und/oder Komponenten bzw. Bauteilen spezifizieren, aber nicht das Vorhandensein oder das Hinzufügen von einer bzw. einem oder mehreren anderen Merkmalen, ganzen Zahlen, Schritten, Operationen bzw. Vorgängen, Elementen, Komponenten bzw. Bauteilen und/oder Gruppen davon ausschließen.
  • 1 ist eine Ansicht, die eine Konfiguration eines Fahrzeugs veranschaulicht, bei dem eine Vorrichtung zur Erkennung einer Beleuchtungsumgebung eines Fahrzeugs in Übereinstimmung mit einer Ausführungsform der vorliegenden Erfindung angewendet wird. 2 ist eine Ansicht, die eine Konfiguration einer Kamera und eines Infrarotbeleuchtungssensors von 1 veranschaulicht.
  • Unter Bezugnahme auf 1 und 2 kann eine Vorrichtung 10 zur Erkennung einer Beleuchtungsumgebung eines Fahrzeugs durch ein ECU (elektronisches Steuergerät) konfiguriert sein, das in einem Fahrzeug 1 montiert ist.
  • Die Vorrichtung 10 zur Erkennung einer Beleuchtungsumgebung eines Fahrzeugs schließt eine Kamera 11, wie etwa eine CCD-Kamera oder einen CMOS-Farbbildsensor, und einen Infrarotbeleuchtungssensor 12 ein.
  • Die Kamera 11 hat einen Erfassungsbereich, der als die Vorderseite in der Vorwärtsbewegungsrichtung des Fahrzeugs 1 beschränkt ist, und nimmt ein Bild auf, das eine Straße vor dem Fahrzeug 1 umfasst.
  • Die Kamera 11 ist auf einer Mittellinie einer Windschutzscheibe WS des Fahrzeugs 1 positioniert.
  • Der Infrarotbeleuchtungssensor 12 ist an der Windschutzscheibe WS des Fahrzeugs 1 so angeordnet, dass er nach oben Richtung Himmel gerichtet ist. Der Infrarotbeleuchtungssensor 12 kann zum Beispiel an der Windschutzscheibe parallel zu der vertikalen Richtung des Fahrzeugs angeordnet sein.
  • Der Infrarotbeleuchtungssensor 12 erfasst einen Infrarotbeleuchtungsbetrag, der von der Sonne ausgestrahlt wird.
  • Etwa eine Hälfte des Lichts, das von der Sonne ausgestrahlt wird, ist infrarotes Licht, und der Rest ist hauptsächlich sichtbares Licht. Der Infrarotbeleuchtungssensor 12 erfasst einen Infrarotbeleuchtungsbetrag, der von der Sonne ausgestrahlt wird.
  • Wie in 3 gezeigt ist, weist das Fahrzeug 1 einen Fahrzeuggeschwindigkeitssensor 20, einen Beschleunigungssensor 21, einen Gierratensensor 22, eine Lenkeinheit 23, eine Bremseinheit 24, eine Scheinwerfersteuerungseinheit 25, eine Kamerasteuerungseinheit 26, etc. auf.
  • Der Fahrzeuggeschwindigkeitssensor 20, der Beschleunigungssensor 21 und der Gierratensensor 22 geben Signale aus, die jeweils einer Geschwindigkeit, einer Beschleunigung und einer Gierrate des Fahrzeugs 1 entsprechen.
  • Die Lenkeinheit 23 ist so konfiguriert, dass Vorderrad-/Hinterrad-Lenkgetriebe, die durch die Betätigung einer Handhabe angetrieben werden, durch einen Aktuator angetrieben werden.
  • Die Bremseinheit 24 erlaubt es, dass das Fahrzeug bremsen kann.
  • Die Scheinwerfersteuerungseinheit 25 führt eine Funktion wie etwa das Ein- und Ausschalten eines Schweinwerfers oder eine Einstellung der Richtung/der Helligkeit davon durch.
  • Die Kamerasteuerungseinheit oder Kameraregelungseinheit 26 stellt gesetzte Werte bzw. Sollwerte wie etwa einen Objektiv- bzw. Linsen-ISO-Wert, einen Blendenwert, einen Weißabgleichwert und einen Verschlusszeitwert der Kamera 11 automatisch ein.
  • Eine Beleuchtungsumgebungs-Erkennungseinheit 13 der Vorrichtung 10 zur Erkennung einer Beleuchtungsumgebung eines Fahrzeugs erkennt eine Beleuchtungsumgebung des Fahrzeugs auf der Basis von Signalen, die von der Kamera 11 und dem Infrarotbeleuchtungssensor 12 ausgegeben werden, und steuert bzw. regelt wenigstens eine von der Lenkeinheit 23, der Bremseinheit 24, der Scheinwerfersteuerungseinheit 24 und der Kamerasteuerungseinheit 26 auf der Basis der erkannten Beleuchtungsumgebung, wodurch eine Steuerung bzw. Regelung des Fahrzeugs in Abhängigkeit von der Beleuchtungsumgebung durchgeführt wird.
  • Die Beleuchtungsumgebungs-Erkennungseinheit 13 unterteilt eine Beleuchtungsumgebung entsprechend Zeitabschnitten wie etwa Tag oder Nacht, einem Zeitabschnitt vom Tag zur Nacht (Abenddämmerung) und einem Zeitabschnitt von der Nacht zum Tag (Morgendämmerung), um die unterteilte Beleuchtungsumgebung zu erkennen.
  • Außerdem unterteilt die Beleuchtungsumgebungs-Erkennungseinheit 13 eine Beleuchtungsumgebung entsprechend geographischen Merkmalen, um die unterteilte Beleuchtungsumgebung zu erkennen.
  • Im Folgenden wird eine Beschreibung dessen gegeben, dass die Beleuchtungsumgebungs-Erkennungseinheit 13 eine Beleuchtungsumgebung entsprechend Zeitabschnitten wie etwa Tag, Nacht, Abenddämmerung und Morgendämmerung unterteilt, um die unterteilte Beleuchtungsumgebung zu erkennen.
  • Die Beleuchtungsumgebungs-Erkennungseinheit 13 kann einen allgemeinen Beleuchtungswert auf der Basis eines Infrarotbeleuchtungsbetrags, der von dem Infrarotbeleuchtungssensor 12 gemessen wird, und einer Kamerabelichtungszeit, die ausgehend von der Kamera 11 empfangen wird, berechnen, kann eine Änderungsrate in dem allgemeinen Beleuchtungswert für einen vorbestimmten Zeitraum berechnen und kann auf der Basis des berechneten allgemeinen Beleuchtungswerts und der Änderungsrate in dem allgemeinen Beleuchtungswert feststellen, ob es sich bei einer aktuellen Beleuchtungsumgebung um einen Tag, eine Nacht, eine Abenddämmerung oder eine Morgendämmerung handelt.
  • Außerdem kann die Beleuchtungsumgebungs-Erkennungseinheit 13, wie in 4 gezeigt ist, einen allgemeinen Beleuchtungswert auf der Basis eines Beleuchtungswerts, der durch eine Bild-Clustering-Analyse von zwei Bildern erhalten wird, die mit unterschiedlichen Belichtungszeiten durch die Kamera 11 aufgenommen wurden, zusammen mit einem Infrarotbeleuchtungsbetrag, der von dem Infrarotbeleuchtungssensor 12 gemessen wird, und einer Kamerabelichtungszeit, die ausgehend von der Kamera 11 empfangen wird, berechnen und kann auf der Basis des berechneten allgemeinen Beleuchtungswerts und einer Änderungsrate in dem allgemeinen Beleuchtungswert feststellen, ob es sich bei einer aktuellen Beleuchtungsumgebung um einen Tag, eine Nacht, eine Abenddämmerung oder eine Morgendämmerung handelt.
  • In diesem Fall kann, wenn „A“ einen Infrarotbeleuchtungswert repräsentiert, „B“ einen Beleuchtungswert repräsentiert, der der Kamerabelichtungszeit entspricht, und „C“ einen Beleuchtungswert repräsentiert, der dem Ergebniswert entspricht, der durch eine Bild-Clustering-Analyse von zwei Bildern erhalten wurde, die mit unterschiedlichen Belichtungswerten aufgenommen wurden, ein allgemeiner Beleuchtungswert durch die folgende Gleichung erhalten werden. Allgemeiner Beleuchtungswert = W 1 × A + W 2 × B + W 3 × C ,
    Figure DE102014002134B4_0003
    wobei sich W1, W2 und W3 auf Gewichtungen beziehen.
  • Die Gewichtungen W1 bis W3 haben eine Beziehung von W1 > W2 > W3. In diesem Fall kann die Gewichtung W1 des Infrarotbeleuchtungswerts als ein relativ größerer Wert im Vergleich zu einem Wert festgesetzt werden, der die anderen Gewichtungen W2 und W3 summiert. Dadurch kann der Infrarotbeleuchtungswert A als ein Hauptwert für die Erkennung einer Beleuchtungsumgebung verwendet werden und können die restlichen Beleuchtungswerte B und C zusätzlich verwendet werden.
  • Der Kamerabelichtungswert ist ein Wert, der durch eine korrekte Kombination einer Öffnungsblende und eines Verschlusses der Kamera 11 gebildet wird und sich auf eine Zeit, für die ein CCD-Element oder ein CMOS-Element dem Licht ausgesetzt wird, in der dieses also belichtet wird, und auf einen Betrag an Licht bezieht, der empfangen wird.
  • Die Zeit, in der belichtet wird, entspricht einem Verschlusszeitwert, und der Betrag an Licht entspricht einem Blendenwert. Der Belichtungswert wird durch das Summieren der zwei Werte bestimmt.
  • Im Falle einer plötzlichen Bewegung von der Dunkelheit ins Licht oder umgekehrt können Menschen ein Objekt in einem Augenblick optisch nicht wahrnehmen, sondern können ein Objekt optisch erst wahrnehmen, nachdem eine gewisse Zeit verstrichen ist.
  • Dies wird durch eine Bewegung der Iris (Regenbogenhaut) im menschlichen Auge ermöglicht. Wenn ein Betrag an Licht groß ist, verringert sich der Betrag an Licht, während die Pupille durch eine Bewegung der Iris geschlossen wird, wodurch erlaubt wird, dass ein Betrag an Licht, der auf den Augapfel auftrifft, verringert wird. Wenn ein Betrag an Licht klein ist, erhöht sich der Betrag an Licht, während die Pupille durch eine Bewegung der Iris geöffnet wird, wodurch erlaubt wird, dass ein Betrag an Licht, der auf den Augapfel auftrifft, vergrößert wird. Die Iris passt einen Öffnungsgrad der Pupille durch das Erfühlen eines Grads an Licht an, wodurch ermöglicht wird, dass ein Betrag an Licht flexibel angepasst werden kann.
  • Die Kamera passt eine Belichtung durch das Öffnen der Öffnungsblende, um einen einfallenden Betrag an Licht zu vergrößern, wenn eine Annäherung an einen Zustand einer niedrigen Beleuchtung stattfindet, und durch das Schließen der Öffnungsblende an, um einen einfallenden Betrag an Licht zu verringern, wenn eine Annäherung an einen Zustand einer hohen Beleuchtung stattfindet, und der Beleuchtungswert wird durch einen Blendenwert und einen Verschlusszeitwert bestimmt.
  • In der Kamera kann ein geeigneter Belichtungswert automatisch bestimmt und von der Kamera empfangen werden.
  • Ein helleres Bild kann erhalten werden, wenn der Belichtungswert höher ist, wohingegen ein dunkleres Bild erhalten werden kann, wenn der Belichtungswert niedriger ist. Infolgedessen kann es dann, wenn der Belichtungswert geändert wird, möglich sein, Bilder mit einer Helligkeit zu erhalten, die sich voneinander unterscheiden.
  • Wie in 5 gezeigt ist, bekommt die Beleuchtungsumgebungs-Erkennungseinheit 13 zwei Bilder, die mit unterschiedlichen Belichtungswerten von der Kamera 11 aufgenommen wurden, und erlangt dann einen Beleuchtungswert, der durch eine Bild-Clustering-Analyse der bekommenen zwei Doppelbelichtungsbilder gewonnen wurde.
  • In diesem Fall sind die zwei Doppelbelichtungsbilder zwei Bilder, die unter Verwendung eines ersten Belichtungswerts für das Aufnehmen eines optimalen Straßenbildes und eines zweiten Belichtungswerts für das Aufnehmen eines dunkleren Straßenbildes als das optimale Straßenbild erhalten wurden.
  • Zu diesem Zweck werden in einem Zustand, in dem die ersten und zweiten Belichtungswerte jeweils vorbestimmt und in einem Speicherabschnitt gespeichert sind, ein erstes Bild, wenn der Kamerabelichtungswert, der von der Kamera erhalten wird, der erste Belichtungswert ist, und ein zweites Bild, wenn der Kamerabelichtungswert, der von der Kamera erhalten wird, der zweite Belichtungswert ist, erlangt bzw. erfasst.
  • In der Bild-Clustering-Analyse der Doppelbelichtungsbilder wird jedes der zwei Bilder zuerst als ein maximaler Wert, ein minimaler Wert und ein mittlerer Wert entsprechend der Helligkeit davon erhalten, wobei die erhaltenen jeweiligen Werte eingegeben werden, und ein Beleuchtungswert, der einer Änderung in der Beleuchtung entspricht, wird unter Verwendung eines Clustering-Modells erhalten, das einen vorbestimmten Beleuchtungsraum hat.
  • Das Bild-Clustering-Verfahren, das in der Ausführungsform der vorliegenden Erfindung verwendet wird, ist ein wohl bekanntes Verfahren, das in einem Dokument von David Acunzo et al: „Context-Adaptive Approach for Vehicle Detection Under Varying Lighting Conditions" (Kontextadaptiver Lösungsansatz für eine Fahrzeugerfassung unter variierenden Lichtverhältnissen), veröffentlicht am 30. September 2007 und verkündet in der IEEE Intelligent Transportation Systems Conference, offenbart worden ist.
  • Wenn ein allgemeiner Beleuchtungswert berechnet wird, stellt die Beleuchtungsumgebungs-Erkennungseinheit 13 auf der Basis einer Änderungsrate in dem berechneten allgemeinen Beleuchtungswert fest, ob es sich bei einer aktuellen Beleuchtungsumgebung um einen Tag, eine Nacht, eine Abenddämmerung oder eine Morgendämmerung handelt.
  • Wenn der allgemeine Beleuchtungswert gleich oder größer als ein vorbestimmter Beleuchtungswert ist und die Änderungsrate in dem allgemeinen Beleuchtungswert kleiner als eine vorbestimmte Änderungsrate ist, dann stellt die Beleuchtungsumgebungs-Erkennungseinheit 13 fest, dass es sich bei der Beleuchtungsumgebung um den Tag handelt.
  • Wenn außerdem der allgemeine Beleuchtungswert kleiner als ein vorbestimmter Beleuchtungswert ist und die Änderungsrate in dem allgemeinen Beleuchtungswert kleiner als eine vorbestimmte Änderungsrate ist, dann stellt die Beleuchtungsumgebungs-Erkennungseinheit 13 fest, dass es sich bei der Beleuchtungsumgebung um die Nacht handelt.
  • Wenn außerdem der allgemeine Beleuchtungswert allmählich abnimmt und die Änderungsrate in dem allgemeinen Beleuchtungswert gleich oder größer als eine vorbestimmte Änderungsrate ist, dann stellt die Beleuchtungsumgebungs-Erkennungseinheit 13 fest, dass es sich bei der Beleuchtungsumgebung um die Abenddämmerung handelt.
  • Wenn außerdem der allgemeine Beleuchtungswert allmählich zunimmt und die Änderungsrate in dem allgemeinen Beleuchtungswert gleich oder größer als eine vorbestimmte Änderungsrate ist, dann stellt die Beleuchtungsumgebungs-Erkennungseinheit 13 fest, dass es sich bei der Beleuchtungsumgebung um die Morgendämmerung handelt.
  • Wenn außerdem der allgemeine Beleuchtungswert für einen kurzen Zeitraum rapide abnimmt, dann stellt die Beleuchtungsumgebungs-Erkennungseinheit 13 fest, dass es sich bei der Beleuchtungsumgebung um einen Eintritt in einen Tunnel handelt.
  • 6 ist ein Steuerungsablaufplan, der ein Verfahren zur Erkennung einer Beleuchtungsumgebung eines Fahrzeugs in Übereinstimmung mit einer Ausführungsform der vorliegenden Erfindung veranschaulicht.
  • Unter Bezugnahme auf 6 ermittelt die Beleuchtungsumgebungs-Erkennungseinheit 13 einen Infrarotbeleuchtungsbetrag, der von der Sonne ausgestrahlt wird, durch den Infrarotbeleuchtungssensor 12 (Betriebsmodus 100) und empfängt eine Kamerabelichtungszeit von der Kamera 11 (Betriebsmodus 110).
  • Außerdem empfängt die Beleuchtungsumgebungs-Erkennungseinheit 13 Doppelbelichtungsbilder, welche zwei Bilder sind, die mit unterschiedlichen Belichtungswerten durch die Kamera 11 aufgenommen wurden (Betriebsmodus 120). Dann führt die Beleuchtungsumgebungs-Erkennungseinheit 13 eine Bild-Clustering-Analyse bei den empfangenen Doppelbelichtungsbildern durch, um so einen Beleuchtungswert zu erhalten (Betriebsmodus 130). Im vorliegenden Fall wird der Beleuchtungswert in Abhängigkeit davon ermittelt, zu welcher der Beleuchtungsgruppen eine Gruppe gehört, in der Faktoren wie ein maximaler Wert, ein minimaler Wert und ein mittlerer Wert unter Helligkeitswerten des Belichtungsbildes in einen vordefinierten Beleuchtungsraum in einem Bild-Clustering-Modell gestreut werden und die gestreuten Faktoren gesammelt werden.
  • Dann berechnet die Beleuchtungsumgebungs-Erkennungseinheit 13 einen allgemeinen Beleuchtungswert auf der Basis des Infrarotbeleuchtungsbetrags, der Kamerabelichtungszeit und des Beleuchtungswerts, der durch die Bild-Clustering-Analyse der Doppelbelichtungsbilder erhalten worden ist, die bei den Betriebsmodi 100 bis 130 erhalten worden sind (Betriebsmodus 140).
  • Nachdem der allgemeine Beleuchtungswert berechnet ist, berechnet die Beleuchtungsumgebungs-Erkennungseinheit 13 eine Änderungsrate in dem allgemeinen Beleuchtungswert für einen vorbestimmten Zeitraum (Betriebsmodus 150).
  • Dann stellt die Beleuchtungsumgebungs-Erkennungseinheit 13 auf der Basis des allgemeinen Beleuchtungswerts und der Änderungsrate in dem allgemeinen Beleuchtungswert fest, ob es sich bei einer aktuellen Beleuchtungsumgebung um einen Tag, eine Nacht, eine Abenddämmerung oder eine Morgendämmerung handelt.
  • Die Beleuchtungsumgebungs-Erkennungseinheit 13 stellt fest, ob es sich bei der aktuellen Beleuchtungsumgebung um einen Tag handelt oder nicht (Betriebsmodus 160). Wenn der allgemeine Beleuchtungswert gleich oder größer als ein vorbestimmter Beleuchtungswert ist und die Änderungsrate in dem allgemeinen Beleuchtungswert kleiner als eine vorbestimmte Änderungsrate ist, dann stellt die Beleuchtungsumgebungs-Erkennungseinheit 13 fest, dass es sich bei der Beleuchtungsumgebung um einen Tag handelt.
  • Wenn als ein Ergebnis der Feststellung des Betriebsmodus 160 festgestellt wird, dass es sich bei der aktuellen Beleuchtungsumgebung um einen Tag handelt, dann führt die Beleuchtungsumgebungs-Erkennungseinheit 13 eine Steuerung bzw. Regelung entsprechend einer Tages-Beleuchtungsumgebung durch. Zum Beispiel erlaubt es die Beleuchtungsumgebungs-Erkennungseinheit 13, dass die Bremseinheit und die Kamerasteuerungseinheit entsprechend der Tages-Beleuchtungsumgebung gesteuert bzw. geregelt werden (Betriebsmodus 200).
  • Wenn in der Zwischenzeit als ein Ergebnis der Feststellung des Betriebsmodus 160 festgestellt wird, dass es sich bei der Beleuchtungsumgebung nicht um einen Tag handelt, dann stellt die Beleuchtungsumgebungs-Erkennungseinheit 13 fest, ob es sich bei der aktuellen Beleuchtungsumgebung um eine Nacht handelt oder nicht (Betriebsmodus 170). Wenn der allgemeine Beleuchtungswert kleiner als ein vorbestimmter Beleuchtungswert ist und die Änderungsrate in dem allgemeinen Beleuchtungswert kleiner als eine vorbestimmte Änderungsrate ist, dann stellt die Beleuchtungsumgebungs-Erkennungseinheit 13 fest, dass es sich bei der Beleuchtungsumgebung um eine Nacht handelt.
  • Wenn als ein Ergebnis der Feststellung des Betriebsmodus 170 festgestellt wird, dass es sich bei der aktuellen Beleuchtungsumgebung um eine Nacht handelt, dann führt die Beleuchtungsumgebungs-Erkennungseinheit 13 eine Steuerung bzw. Regelung entsprechend einer Nacht-Beleuchtungsumgebung durch (Betriebsmodus 200).
  • Wenn in der Zwischenzeit als ein Ergebnis der Feststellung des Betriebsmodus 170 festgestellt wird, dass es sich bei der Beleuchtungsumgebung nicht um eine Nacht handelt, dann stellt die Beleuchtungsumgebungs-Erkennungseinheit 13 fest, ob es sich bei der aktuellen Beleuchtungsumgebung um eine Abenddämmerung handelt oder nicht (Betriebsmodus 180). Wenn der allgemeine Beleuchtungswert allmählich abnimmt und die Änderungsrate in dem allgemeinen Beleuchtungswert gleich oder größer als eine vorbestimmte Änderungsrate ist, dann stellt die Beleuchtungsumgebungs-Erkennungseinheit 13 fest, dass es sich bei der Beleuchtungsumgebung um eine Abenddämmerung handelt.
  • Wenn als ein Ergebnis der Feststellung des Betriebsmodus 180 festgestellt wird, dass es sich bei der aktuellen Beleuchtungsumgebung um eine Abenddämmerung handelt, dann führt die Beleuchtungsumgebungs-Erkennungseinheit 13 eine Steuerung bzw. Regelung entsprechend einer Abenddämmerungs-Beleuchtungsumgebung durch (Betriebsmodus 200).
  • Wenn in der Zwischenzeit als ein Ergebnis der Feststellung des Betriebsmodus 180 festgestellt wird, dass es sich bei der Beleuchtungsumgebung nicht um eine Abenddämmerung handelt, dann stellt die Beleuchtungsumgebungs-Erkennungseinheit 13 fest, ob es sich bei der aktuellen Beleuchtungsumgebung um eine Morgendämmerung handelt oder nicht (Betriebsmodus 190). Wenn der allgemeine Beleuchtungswert allmählich zunimmt und die Änderungsrat in dem allgemeinen Beleuchtungswert gleich oder größer als eine vorbestimmte Änderungsrate ist, dann stellt die Beleuchtungsumgebungs-Erkennungseinheit 13 fest, dass es sich bei der Beleuchtungsumgebung um eine Morgendämmerung handelt.
  • Wenn als ein Ergebnis der Feststellung des Betriebsmodus 190 festgestellt wird, dass es sich bei der aktuellen Beleuchtungsumgebung um eine Morgendämmerung handelt, dann führt die Beleuchtungsumgebungs-Erkennungseinheit 13 eine Steuerung bzw. Regelung entsprechend einer Morgendämmerungs-Beleuchtungsumgebung durch (Betriebsmodus 200).
  • Wie aus der obigen Beschreibung ersichtlich wird, können es eine Vorrichtung zur Erkennung einer Beleuchtungsumgebung eines Fahrzeugs und ein Steuerungsverfahren davon in Übereinstimmung mit Ausführungsformen der vorliegenden Erfindung erlauben, dass unterschiedliche Beleuchtungsumgebungen eines Fahrzeugs unter Verwendung eines Infrarotbeleuchtungsbetrags, einer Kamerabelichtungszeit und einer Vielzahl von Bildern mit unterschiedlichen Belichtungswerten erkannt werden können, wodurch ermöglicht wird, dass ein Tag und eine Nacht genau und zuverlässig erkannt werden können. Außerdem kann es möglich sein, eine Änderung in der Beleuchtungsumgebung von der Nacht zu einer Morgendämmerung, eine Änderung in der Beleuchtungsumgebung von einem Tag zu einer Abenddämmerung und eine Änderung in dem Beleuchtungszustand, wie etwa einen Eintritt in einen Tunnel, exakt und zuverlässig erkennen zu können. Deshalb kann ein Fahrerunterstützungssystem für die Steuerung bzw. Regelung eines Scheinwerfers oder einer Kamera effektiv entsprechend den Umgebungsverhältnissen des Fahrzeugs gesteuert bzw. geregelt werden.
  • Obwohl einige Ausführungsformen der vorliegenden Erfindung gezeigt und beschrieben worden sind, wird es den Fachleuten auf dem Gebiet klar sein, dass Änderungen an diesen Ausführungsformen vorgenommen werden können, ohne dass von den Prinzipien und dem Erfindungsgedanken der Erfindung abgewichen wird, deren Schutzumfang in den Ansprüchen und ihren Äquivalenten definiert ist.

Claims (9)

  1. Vorrichtung (10) zur Erkennung einer Beleuchtungsumgebung eines Fahrzeugs, mit: einem Infrarotbeleuchtungssensor (12) zum Ermitteln eines Infrarotbeleuchtungsbetrags, der von der Sonne ausgestrahlt wird; einer Kamera (11) zum Aufnehmen einer Straße, auf der ein Fahrzeug fährt; und einer Beleuchtungsumgebungs-Erkennungseinheit (13), die den Infrarotbeleuchtungsbetrag durch den Infrarotbeleuchtungssensor (12) ermittelt, eine Kamerabelichtungszeit von der Kamera (11) empfängt, Doppelbelichtungsbilder empfängt, die so aufgenommen worden sind, dass sie unterschiedliche Belichtungswerte haben, indem die Belichtungswerte der Kamera (11) angepasst wurden, einen allgemeinen Beleuchtungswert auf der Basis des ermittelten Infrarotbeleuchtungsbetrags, der empfangenen Kamerabelichtungszeit und eines Beleuchtungswerts, der durch eine Bild-Clustering-Analyse der Doppelbelichtungsbilder erhalten wurde, berechnet, eine Änderungsrate in dem berechneten allgemeinen Beleuchtungswert berechnet und eine aktuelle Beleuchtungsumgebung als eine Beleuchtungsumgebung für jeden Zeitabschnitt auf der Basis des berechneten allgemeinen Beleuchtungswerts und der Änderungsrate in dem allgemeinen Beleuchtungswert erkennt.
  2. Vorrichtung (10) nach Anspruch 1, wobei dann, wenn in der Beleuchtungsumgebungs-Erkennungseinheit (13) „A“ einen Infrarotbeleuchtungswert repräsentiert, „B“ einen Beleuchtungswert repräsentiert, der der Kamerabelichtungszeit entspricht, und „C“ einen Beleuchtungswert repräsentiert, der dem Ergebniswert entspricht, der durch die Clustering-Analyse der Doppelbelichtungsbilder erhalten wurde, der allgemeine Beleuchtungswert durch die folgende Gleichung erhalten wird: allgemeiner Beleuchtungswert = W 1 × A + W 2 × B + W 3 × C ,
    Figure DE102014002134B4_0004
    wobei sich W1, W2 und W3 auf Gewichtungen beziehen und die Gewichtungen W1 bis W3 eine Beziehung von W1 > W2 > W3 haben.
  3. Vorrichtung (10) nach Anspruch 1 oder 2, wobei die Beleuchtungsumgebungs-Erkennungseinheit (13) feststellt, dass es sich bei der aktuellen Beleuchtungsumgebung um eine der Folgenden handelt: Tag, Nacht, Abenddämmerung und Morgendämmerung.
  4. Vorrichtung (10) nach Anspruch 3, wobei dann: wenn der allgemeine Beleuchtungswert gleich oder größer als ein vorbestimmter Beleuchtungswert ist und die Änderungsrate in dem allgemeinen Beleuchtungswert kleiner als ein vorbestimmter Änderungswert ist, die Beleuchtungsumgebungs-Erkennungseinheit (13) feststellt, dass es sich bei der aktuellen Beleuchtungsumgebung um den Tag handelt; wenn der allgemeine Beleuchtungswert kleiner als ein vorbestimmter Beleuchtungswert ist und die Änderungsrate in dem allgemeinen Beleuchtungswert kleiner als eine vorbestimmte Änderungsrate ist, die Beleuchtungsumgebungs-Erkennungseinheit (13) feststellt, dass es sich bei der aktuellen Beleuchtungsumgebung um die Nacht handelt; wenn der allgemeine Beleuchtungswert allmählich abnimmt und die Änderungsrate in dem allgemeinen Beleuchtungswert gleich oder größer als eine vorbestimmte Änderungsrate ist, die Beleuchtungsumgebungs-Erkennungseinheit (13) feststellt, dass es sich bei der Beleuchtungsumgebung um die Abenddämmerung handelt; und wenn der allgemeine Beleuchtungswert allmählich zunimmt und die Änderungsrate in dem allgemeinen Beleuchtungswert gleich oder größer als eine vorbestimmte Änderungsrate ist, die Beleuchtungsumgebungs-Erkennungseinheit (13) feststellt, dass es sich bei der Beleuchtungsumgebung um die Morgendämmerung handelt.
  5. Vorrichtung (10) nach Anspruch 1, wobei dann, wenn der allgemeine Beleuchtungswert für einen kurzen Zeitraum rapide abnimmt, die Beleuchtungsumgebungs-Erkennungseinheit (13) feststellt, dass es sich bei der aktuellen Beleuchtungsumgebung um einen Eintritt in einen Tunnel handelt.
  6. Verfahren zur Erkennung einer Beleuchtungsumgebung eines Fahrzeugs, das die folgenden Schritte umfasst: Ermitteln (100) eines Infrarotbeleuchtungsbetrags durch einen Infrarotbeleuchtungssensor (12), um einen Infrarotbeleuchtungsbetrag zu ermitteln, der von der Sonne ausgestrahlt wird; Empfangen (110) einer Kamerabelichtungszeit von einer Kamera (11), um eine Straße aufzunehmen, auf der ein Fahrzeug fährt; Empfangen (120) von Doppelbelichtungsbildern, die so aufgenommen worden sind, dass sie unterschiedliche Belichtungswerte haben, indem die Belichtungswerte der Kamera (11) angepasst wurden; Berechnen (140) eines allgemeinen Beleuchtungswerts auf der Basis des ermittelten Infrarotbeleuchtungsbetrags, der empfangenen Kamerabelichtungszeit und eines Beleuchtungswerts, der durch eine Bild-Clustering-Analyse (130) der Doppelbelichtungsbilder erhalten worden ist; Berechnen (150) einer Änderungsrate in dem berechneten allgemeinen Beleuchtungswert; und Erkennen einer aktuellen Beleuchtungsumgebung als eine Beleuchtungsumgebung für jeden Zeitabschnitt auf der Basis des berechneten allgemeinen Beleuchtungswerts und der Änderungsrate in dem allgemeinen Beleuchtungswert.
  7. Verfahren nach Anspruch 6, wobei dann, wenn bei dem Berechnen (140) eines allgemeinen Beleuchtungswerts „A“ einen Infrarotbeleuchtungswert repräsentiert, „B“ einen Beleuchtungswert repräsentiert, der der Kamerabelichtungszeit entspricht, und „C“ einen Beleuchtungswert repräsentiert, der dem Ergebniswert entspricht, der durch die Clustering-Analyse (130) der Doppelbelichtungsbilder erhalten wurde, der allgemeine Beleuchtungswert durch die folgende Gleichung erhalten wird: allgemeiner Beleuchtungswert = W 1 × A + W 2 × B + W 3 × C ,
    Figure DE102014002134B4_0005
    wobei sich W1, W2 und W3 auf Gewichtungen beziehen und die Gewichtungen W1 bis W3 eine Beziehung von W1 > W2 > W3 haben.
  8. Verfahren nach Anspruch 6, wobei das Erkennen einer Beleuchtungsumgebung feststellt, dass es sich bei der aktuellen Beleuchtungsumgebung um eine der Folgenden handelt: Tag, Nacht, Abenddämmerung und Morgendämmerung.
  9. Verfahren nach Anspruch 7, wobei dann: wenn der allgemeine Beleuchtungswert gleich oder größer als ein vorbestimmter Beleuchtungswert ist und die Änderungsrate in dem allgemeinen Beleuchtungswert kleiner als eine vorbestimmte Änderungsrate ist, festgestellt wird, dass es sich bei der aktuellen Beleuchtungsumgebung um den Tag handelt; wenn der allgemeine Beleuchtungswert kleiner als ein vorbestimmter Beleuchtungswert ist und die Änderungsrate in dem allgemeinen Beleuchtungswert kleiner als eine vorbestimmte Änderungsrate ist, festgestellt wird, dass es sich bei der aktuellen Beleuchtungsumgebung um die Nacht handelt; wenn der allgemeine Beleuchtungswert allmählich abnimmt und die Änderungsrate in dem allgemeinen Beleuchtungswert gleich oder größer als eine vorbestimmte Änderungsrate ist, festgestellt wird, dass es sich bei der Beleuchtungsumgebung um die Abenddämmerung handelt; und wenn der allgemeine Beleuchtungswert allmählich zunimmt und die Änderungsrate in dem allgemeinen Beleuchtungswert gleich oder größer als eine vorbestimmte Änderungsrate ist, festgestellt wird, dass es sich bei der Beleuchtungsumgebung um die Morgendämmerung handelt.
DE102014002134.3A 2013-02-18 2014-02-17 Vorrichtung zur Erkennung einer Beleuchtungsumgebung eines Fahrzeugs und Steuerungsverfahren davon Active DE102014002134B4 (de)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR1020130016746A KR101355076B1 (ko) 2013-02-18 2013-02-18 차량 조도 환경 인식 장치 및 그 방법
KRKR10-2013-0016746 2013-02-18

Publications (2)

Publication Number Publication Date
DE102014002134A1 DE102014002134A1 (de) 2014-09-04
DE102014002134B4 true DE102014002134B4 (de) 2024-06-20

Family

ID=50146332

Family Applications (1)

Application Number Title Priority Date Filing Date
DE102014002134.3A Active DE102014002134B4 (de) 2013-02-18 2014-02-17 Vorrichtung zur Erkennung einer Beleuchtungsumgebung eines Fahrzeugs und Steuerungsverfahren davon

Country Status (4)

Country Link
US (1) US9787949B2 (de)
JP (1) JP5843898B2 (de)
KR (1) KR101355076B1 (de)
DE (1) DE102014002134B4 (de)

Families Citing this family (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6149826B2 (ja) * 2014-09-01 2017-06-21 株式会社Jvcケンウッド 撮像装置及びシーン判定方法
DE102015200583B4 (de) * 2015-01-15 2016-09-15 Continental Automotive Gmbh Verfahren zur kamerabasierten Umgebungslichterkennung eines Fahrzeugs und Sensoreinheit zur Durchführung des Verfahrens
DE102015216993A1 (de) 2015-09-04 2017-03-09 Bayerische Motoren Werke Aktiengesellschaft Verbessertes Verfahren zum Aufnehmen einer Szene, insbesondere bei einer kritischen Belichtungssituation
CN105187731B (zh) * 2015-09-18 2018-03-16 中电海康集团有限公司 一种基于前碰撞预警的昼夜切换方法及装置
DE102015219496A1 (de) 2015-10-08 2017-04-13 Robert Bosch Gmbh Verfahren zum Bestimmen der Funktionsfähigkeit eines Fahrerassistenzsystems eines Fahrzeugs, Vorrichtung, Fahrerassistenzsystem, Kraftfahrzeug
KR20180025591A (ko) 2016-09-01 2018-03-09 삼성전자주식회사 자율 주행 차량을 위한 비전 센서의 제어 방법 및 장치
KR101828015B1 (ko) * 2016-09-30 2018-02-13 부산대학교 산학협력단 목표물 탐지를 위한 온보드 카메라 기반의 자동 노출 제어 장치 및 방법
KR101840754B1 (ko) * 2017-08-07 2018-03-26 주식회사 세네텍 밝기 구간별 화질 보상 시스템 및 방법
CN108881866A (zh) * 2018-09-05 2018-11-23 广州小楠科技有限公司 楼宇环境智能管理***
US11769412B2 (en) * 2020-06-10 2023-09-26 Hyundai Mobis Co., Ltd. Rear side warning system and method for vehicle
KR102529736B1 (ko) * 2021-04-29 2023-05-09 주식회사 경신 차량의 오토라이트 제어 장치 및 방법
US20230226882A1 (en) * 2022-01-18 2023-07-20 Hyundai Motor Company Solar load feedback for climate control

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH1044860A (ja) 1996-08-02 1998-02-17 Toyota Motor Corp 車両用ライト自動点消灯装置
DE10000913A1 (de) 2000-01-12 2001-07-19 Bosch Gmbh Robert Einrichtung zur automatischen Schaltung von Beleuchtungseinrichtungen bei Fahrzeugen
DE10323560A1 (de) 2003-05-26 2004-12-23 Robert Bosch Gmbh Kamera und Vorrichtung zur Ermittlung der Helligkeit der Umgebung eines Kraftfahrzeuges
DE602004001203T2 (de) 2004-01-19 2007-05-31 Denso Corp., Kariya Vorrichtung zur Steuerung des Lichts eines Fahrzeugs
US20100172542A1 (en) 2007-12-06 2010-07-08 Gideon Stein Bundling of driver assistance systems

Family Cites Families (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20000043708A (ko) * 1998-12-29 2000-07-15 김영환 헤드라이트 조사각 조절 및 점멸 장치
KR100367594B1 (ko) 2000-07-06 2003-01-10 엘지전자 주식회사 씨씨디 카메라의 제어 방법
JP2005167842A (ja) 2003-12-04 2005-06-23 Denso Corp 車載監視カメラの露出制御装置
EP1837803A3 (de) * 2006-03-24 2008-05-14 MobilEye Technologies, Ltd. Vorderlicht-, Schlusslicht- und Straßenbeleuchtungsdetektion
JP2008042695A (ja) * 2006-08-09 2008-02-21 Gm2:Kk 監視カメラ装置、監視カメラシステム、監視カメラ画像記録方法
EP2211534A4 (de) * 2007-11-19 2014-11-12 Fujitsu Ltd Abbildungseinrichtung, abbildungsverfahren und abbildungsprogramm
JP2010098358A (ja) * 2008-10-14 2010-04-30 Panasonic Corp 撮像素子および撮像装置
JP5108840B2 (ja) * 2009-07-29 2012-12-26 クラリオン株式会社 車両用周辺監視装置および車両用周辺画像表示方法
KR101087741B1 (ko) * 2009-10-07 2011-11-30 에스엘 주식회사 전조등 제어 장치 및 방법
KR200468693Y1 (ko) 2010-04-22 2013-08-28 일우엠앤디 (주) 조도에 따른 카메라 제어 기능을 갖는 차량용 블랙박스
JP5523954B2 (ja) * 2010-06-30 2014-06-18 富士通テン株式会社 画像表示システム
KR20120018613A (ko) * 2010-08-23 2012-03-05 현대모비스 주식회사 차량용 라이트의 자동제어장치 및 그 제어방법
KR101275785B1 (ko) 2011-08-08 2013-06-18 로베르트 보쉬 게엠베하 이차 전지
JP5937832B2 (ja) * 2012-01-30 2016-06-22 クラリオン株式会社 車載カメラ用露出制御装置

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH1044860A (ja) 1996-08-02 1998-02-17 Toyota Motor Corp 車両用ライト自動点消灯装置
DE10000913A1 (de) 2000-01-12 2001-07-19 Bosch Gmbh Robert Einrichtung zur automatischen Schaltung von Beleuchtungseinrichtungen bei Fahrzeugen
DE10323560A1 (de) 2003-05-26 2004-12-23 Robert Bosch Gmbh Kamera und Vorrichtung zur Ermittlung der Helligkeit der Umgebung eines Kraftfahrzeuges
DE602004001203T2 (de) 2004-01-19 2007-05-31 Denso Corp., Kariya Vorrichtung zur Steuerung des Lichts eines Fahrzeugs
US20100172542A1 (en) 2007-12-06 2010-07-08 Gideon Stein Bundling of driver assistance systems

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
David Acunzo et al: „Context-Adaptive Approach for Vehicle Detection Under Varying Lighting Conditions" (Kontextadaptiver Lösungsansatz für eine Fahrzeugerfassung unter variierenden Lichtverhältnissen), veröffentlicht am 30. September 2007

Also Published As

Publication number Publication date
KR101355076B1 (ko) 2014-01-27
US20140232854A1 (en) 2014-08-21
DE102014002134A1 (de) 2014-09-04
US9787949B2 (en) 2017-10-10
JP5843898B2 (ja) 2016-01-13
JP2014158262A (ja) 2014-08-28

Similar Documents

Publication Publication Date Title
DE102014002134B4 (de) Vorrichtung zur Erkennung einer Beleuchtungsumgebung eines Fahrzeugs und Steuerungsverfahren davon
DE102018111778B4 (de) Verfahren, Vorrichtung und System zur Steuerung eines Fahrzeugs, das eine Kreuzung passiert.
DE102009036844B4 (de) Belichtungsbestimmungsvorrichtung und Bildverarbeitungsvorrichtung
DE102012201071B4 (de) Gesichtsabbildungssystem und verfahren zum steuern des gesichtsabbildungssystems sowie computerlesbares medium
DE102013112171B4 (de) Außenumgebungserkennungsvorrichtung
DE102007034657B4 (de) Bildverarbeitungsvorrichtung
DE102008063122B4 (de) Belichtungssteuervorrichtung und Belichtungssteuerprogramm für elektronische Fahrzeugkamera
DE102008063121B4 (de) Belichtungssteuervorrichtung und Belichtungssteuerprogramm für elektronische Fahrzeugkamera
DE102010060926A1 (de) Haltelinienerkennungsvorrichtung
DE102016216883A1 (de) Fahrunterstützungsvorrichtung und Fahrunterstützungsverfahren
DE112012004352B4 (de) Stereobildgebungsvorrichtung
DE102016200828A1 (de) Objekterfassungsvorrichtung und Objekterfassungsverfahren
DE102007019491A1 (de) Fahrzeugumgebungs-Überwachungsvorrichtung, Fahrzeug, Fahrzeugumgebungs-Überwachungsverfahren und Fahrzeugumgebungs-Überwachungsprogramm
DE112018007715B4 (de) Fahrzeug-bordanzeigesteuervorrichtung
DE102014012653A1 (de) Bildverarbeitungsverfahren für Fahrzeugkamera und dieses anwendende Bildverarbeitungsvorrichtung
DE102020130507A1 (de) Verfahren und vorrichtung zur bestimmung eines gelenkwinkels in einem kraftfahrzeug
DE112014000910T5 (de) Straßenzeichenerkennungsvorrichtung
DE102013012930A1 (de) Verfahren zum Bestimmen eines aktuellen Abstands und/oder einer aktuellen Geschwindigkeit eines Zielobjekts anhand eines Referenzpunkts in einem Kamerabild, Kamerasystem und Kraftfahrzeug
EP4078941A2 (de) Umwandlung von eingangs-bilddaten einer mehrzahl von fahrzeugkameras eines rundumsichtsystems in optimierte ausgangs-bilddaten
DE102013103952B4 (de) Spurerkennung bei voller Fahrt mit einem Rundumsichtsystem
DE102017207438B4 (de) Verfahren, Vorrichtung und deren Verwendung zur Ermittlung des Knickwinkels eines Gespanns
DE102013103953A1 (de) Spurerkennung bei voller Fahrt unter Verwendung mehrerer Kameras
DE102013020947A1 (de) Verfahren zum Verfolgen eines Zielobjekts bei Helligkeitsänderung, Kamerasystem und Kraftfahrzeug
DE102012015282B4 (de) Verfahren zur Detektion eines verdeckten Zustands einer Bilderfassungseinrichtung eines Kraftfahrzeugs, Kamerasystem und Kraftfahrzeug
DE102015012809A1 (de) Bildaufnahmeeinrichtung für ein Kraftfahrzeug und Verfahren zum Betreiben einer derartigen Bildaufnahmeeinrichtung

Legal Events

Date Code Title Description
R012 Request for examination validly filed
R016 Response to examination communication
R081 Change of applicant/patentee

Owner name: HL KLEMOVE CORP., KR

Free format text: FORMER OWNER: MANDO CORPORATION, PYEONGTAEK, KYONGGI, KR

Owner name: MANDO MOBILITY SOLUTIONS CORP., PYEONGTAEK-SI, KR

Free format text: FORMER OWNER: MANDO CORPORATION, PYEONGTAEK, KYONGGI, KR

R081 Change of applicant/patentee

Owner name: HL KLEMOVE CORP., KR

Free format text: FORMER OWNER: MANDO MOBILITY SOLUTIONS CORP., PYEONGTAEK-SI, GYEONGGI-DO, KR

R079 Amendment of ipc main class

Free format text: PREVIOUS MAIN CLASS: B60Q0001000000

Ipc: B60Q0001080000

R018 Grant decision by examination section/examining division