DE102009040252A1 - Device for detecting light signals of traffic light systems for a vehicle - Google Patents

Device for detecting light signals of traffic light systems for a vehicle Download PDF

Info

Publication number
DE102009040252A1
DE102009040252A1 DE102009040252A DE102009040252A DE102009040252A1 DE 102009040252 A1 DE102009040252 A1 DE 102009040252A1 DE 102009040252 A DE102009040252 A DE 102009040252A DE 102009040252 A DE102009040252 A DE 102009040252A DE 102009040252 A1 DE102009040252 A1 DE 102009040252A1
Authority
DE
Germany
Prior art keywords
camera
vehicle
light
light signals
traffic
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Withdrawn
Application number
DE102009040252A
Other languages
German (de)
Inventor
Stefan Dipl.-Inform. Hahn
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Mercedes Benz Group AG
Original Assignee
Daimler AG
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Daimler AG filed Critical Daimler AG
Priority to DE102009040252A priority Critical patent/DE102009040252A1/en
Priority to PCT/EP2010/005229 priority patent/WO2011026584A1/en
Publication of DE102009040252A1 publication Critical patent/DE102009040252A1/en
Withdrawn legal-status Critical Current

Links

Images

Classifications

    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R11/00—Arrangements for holding or mounting articles, not otherwise provided for
    • B60R11/04—Mounting of cameras operative during drive; Arrangement of controls thereof relative to the vehicle
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/50—Context or environment of the image
    • G06V20/52—Surveillance or monitoring of activities, e.g. for recognising suspicious objects
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/50—Context or environment of the image
    • G06V20/56—Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
    • G06V20/58—Recognition of moving objects or obstacles, e.g. vehicles or pedestrians; Recognition of traffic objects, e.g. traffic signs, traffic lights or roads
    • G06V20/584—Recognition of moving objects or obstacles, e.g. vehicles or pedestrians; Recognition of traffic objects, e.g. traffic signs, traffic lights or roads of vehicle lights or traffic lights
    • G—PHYSICS
    • G08—SIGNALLING
    • G08G—TRAFFIC CONTROL SYSTEMS
    • G08G1/00—Traffic control systems for road vehicles
    • G08G1/09—Arrangements for giving variable traffic instructions
    • G08G1/0962—Arrangements for giving variable traffic instructions having an indicator mounted inside the vehicle, e.g. giving voice messages
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R11/00—Arrangements for holding or mounting articles, not otherwise provided for
    • B60R2011/0001—Arrangements for holding or mounting articles, not otherwise provided for characterised by position
    • B60R2011/0003—Arrangements for holding or mounting articles, not otherwise provided for characterised by position inside the vehicle
    • B60R2011/0026—Windows, e.g. windscreen

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • Mechanical Engineering (AREA)
  • Traffic Control Systems (AREA)
  • Studio Devices (AREA)
  • Closed-Circuit Television Systems (AREA)

Abstract

Die Erfindung betrifft eine Vorrichtung zur Erfassung von Lichtsignalen von Lichtzeichenanlagen (L) für ein Fahrzeug (F), umfassend eine erste Kamera (1) zur Erfassung einer vor dem Fahrzeug (F) befindlichen Umgebung und eine Bildverarbeitungseinheit (2) zur Verarbeitung erfasster Bilddaten der Umgebung. Erfindungsgemäß ist in einem Gehäuse (1.1) der ersten Kamera (1) oder in einer zwischen dem Gehäuse (1.1) der ersten Kamera (1) und einer Windschutzscheibe (WSS) des Fahrzeugs angeordneten Streulichtblende (6) zumindest eine weitere Kamera (3, 4) angeordnet, wobei die weitere Kamera (3, 4) derart ausgerichtet ist, dass deren Erfassungsbereich (E2, E3) für Lichtzeichenanlagen (L) typische Positionen (POS1, POS2) einschließt und die weitere Kamera (3, 4) zur Auswertung der erfassten Lichtsignale mit der Bildverarbeitungseinheit (2) gekoppelt ist.The invention relates to a device for detecting light signals from light signaling systems (L) for a vehicle (F), comprising a first camera (1) for detecting an environment in front of the vehicle (F) and an image processing unit (2) for processing captured image data Surroundings. According to the invention, at least one additional camera (3, 4) is arranged in a housing (1.1) of the first camera (1) or in a scattered light diaphragm (6) arranged between the housing (1.1) of the first camera (1) and a windshield (WSS) of the vehicle ), the further camera (3, 4) being oriented such that its detection area (E2, E3) includes positions (POS1, POS2) typical of light signaling systems (L) and the further camera (3, 4) for evaluating the detected ones Light signals is coupled to the image processing unit (2).

Description

Die Erfindung betrifft eine Vorrichtung zur Erfassung von Lichtsignalen von Lichtzeichenanlagen für ein Fahrzeug, umfassend eine erste Kamera zur Erfassung einer vor dem Fahrzeug befindlichen Umgebung und eine Bildverarbeitungseinheit zur Verarbeitung erfasster Bilddaten der Umgebung.The invention relates to a device for detecting light signals of traffic signals for a vehicle, comprising a first camera for detecting an environment in front of the vehicle and an image processing unit for processing acquired image data of the environment.

Aus der JP 2009 015 759 A ist eine fahrzeugseitig angeordnete Vorrichtung zur Erfassung von Lichtzeichenanlagen – auch als Lichtsignalanlagen oder Ampeln bezeichnet – bekannt, wobei die Vorrichtung eine Kamera umfasst, anhand welcher Bilder der Lichtzeichenanlagen erzeugbar sind. Die Vorrichtung umfasst weiterhin eine Verarbeitungseinheit, mittels der unterschiedlich farbige Lichtsignale der Lichtzeichenanlage aus den Bildern ermittelbar sind, und eine Speichereinheit, in welcher Farb- und Helligkeitsinformationen der Lichtsignale der Lichtzeichenanlagen speicherbar sind. Die Vorrichtung weist weiterhin eine Beurteilungseinheit auf, welche anhand der gespeicherten Farb- und Helligkeitsinformationen der Lichtsignale das Lichtsignal mit der größten Helligkeit zur Beurteilung des Regelungsgehalts der Lichtzeichenanlage auswählt.From the JP 2009 015 759 A is a vehicle-mounted device for detecting light systems - also known as traffic lights or traffic lights - known, the device comprises a camera, based on which images of the traffic lights can be generated. The device further comprises a processing unit, by means of which different colored light signals of the traffic light system can be determined from the images, and a memory unit in which color and brightness information of the light signals of the traffic light systems can be stored. The device further comprises a judging unit, which selects the light signal with the highest brightness based on the stored color and brightness information of the light signals to evaluate the control content of the traffic light system.

Weiterhin ist aus der DE 603 05 124 T2 ein optisches System bekannt, welches eine CCD- oder CMOS-Matrix mit einem empfindlichen Bereich und eine Vielzahl von optischen Vorrichtungen, die unterschiedliche Ausrichtungen und/oder Erfassungsbereiche und/oder Betriebsarten einer optischen Trennung aufweisen, umfasst. Der empfindliche Bereich der Matrix ist in eine Vielzahl von getrennten Unterbereichen aufgeteilt, die für unterschiedliche spezifische Funktionen entwickelt sind, wobei ein Teil der Unterbereiche für eine Szenenüberwachung bestimmt ist und ein Teil der Unterbereiche für eine Erfassung von Umgebungsparametern bestimmt ist, wobei die Aufteilung durch die Vielzahl von optischen Vorrichtungen erreicht wird.Furthermore, from the DE 603 05 124 T2 an optical system comprising a CCD or CMOS matrix having a sensitive area and a plurality of optical devices having different orientations and / or detection areas and / or modes of optical separation. The sensitive area of the matrix is divided into a plurality of separate sub-areas, which are designed for different specific functions, wherein a part of the sub-areas is intended for scene monitoring and a part of the sub-areas is intended for detection of environmental parameters, the division by the Variety of optical devices is achieved.

Der Erfindung liegt die Aufgabe zugrunde, eine gegenüber dem Stand der Technik verbesserte Vorrichtung zur Erfassung von Lichtsignalen von Lichtzeichenanlagen für ein Fahrzeug anzugeben, welche mit geringem Material-, Herstellungs- und Kostenaufwand herstellbar ist und mittels welcher gleichzeitig eine Verkehrssicherheit und ein Komfort für Fahrer des Fahrzeugs erhöhbar sind.The invention has for its object to provide a comparison with the prior art improved device for detecting light signals from traffic lights for a vehicle, which can be produced with low material, manufacturing and cost and by means of which at the same time a traffic safety and comfort for drivers Vehicles are increased.

Die Aufgabe wird erfindungsgemäß mit einer Vorrichtung gelöst, welche die im Anspruch 1 angegebenen Merkmale aufweist.The object is achieved with a device having the features specified in claim 1.

Vorteilhafte Ausgestaltungen der Erfindung sind Gegenstand der Unteransprüche.Advantageous embodiments of the invention are the subject of the dependent claims.

Die Vorrichtung zur Erfassung von Lichtsignalen von Lichtzeichenanlagen für ein Fahrzeug umfasst eine erste Kamera zur Erfassung einer vor dem Fahrzeug befindlichen Umgebung und eine Bildverarbeitungseinheit zur Verarbeitung erfasster Bilddaten der Umgebung.The device for detecting light signals of traffic signals for a vehicle comprises a first camera for detecting an environment in front of the vehicle and an image processing unit for processing acquired image data of the environment.

Erfindungsgemäß ist in einem Gehäuse der ersten Kamera oder in einer zwischen dem Gehäuse der ersten Kamera und einer Windschutzscheibe des Fahrzeugs angeordneten Streulichtblende zumindest eine weitere Kamera angeordnet, wobei die weitere Kamera derart ausgerichtet ist, dass deren Erfassungsbereich für Lichtzeichenanlagen typische Positionen einschließt und die weitere Kamera zur Auswertung der erfassten Lichtsignale mit der Bildverarbeitungseinheit gekoppelt ist.According to the invention, at least one further camera is arranged in a housing of the first camera or in a scattered-light diaphragm arranged between the housing of the first camera and a windscreen of the vehicle, the further camera being oriented such that its detection area includes typical positions for traffic light installations and the further camera is coupled to the image processing unit for evaluating the detected light signals.

Daraus resultiert in besonders vorteilhafter Weise, dass ein großer Erfassungsbereich und ein großer Blickwinkel der Vorrichtung in einfacher Weise erzeugbar sind, so dass die Lichtsignale von Lichtzeichenanlagen sicher erfassbar sind. Somit ist es möglich, in einfacher Weise eine Unterstützung für einen Fahrer des Fahrzeugs zu realisieren. Dies erfolgt gemäß einer Weiterbildung der Erfindung mittels eines Hinweises auf einen aktuellen Regelungsgehalt einer Lichtzeichenanlage in Abhängigkeit der Lichtsignale anhand optischer, akustischer und/oder haptischer Fahrhinweise. Das heißt, es wird auf das aktuell ausgegebene Lichtzeichen hingewiesen. Insbesondere bei einer Anordnung der Lichtzeichenanlage vor einer Straßenkreuzung ist es somit für den Fahrer in komfortabler Weise möglich, die Lichtsignale zu erfassen.This results in a particularly advantageous manner that a large detection area and a large viewing angle of the device can be generated in a simple manner, so that the light signals of traffic lights are detected safely. Thus, it is possible to easily realize support for a driver of the vehicle. This is done according to an embodiment of the invention by means of an indication of a current regulatory content of a traffic light system as a function of the light signals based on optical, acoustic and / or haptic driving instructions. That is, it is pointed to the currently issued light. In particular, in an arrangement of the traffic light system in front of a road intersection, it is thus possible for the driver in a comfortable manner to detect the light signals.

Ausführungsbeispiele der Erfindung werden im Folgenden anhand von Zeichnungen näher erläutert.Embodiments of the invention are explained in more detail below with reference to drawings.

Dabei zeigen:Showing:

1 schematisch ein Fahrzeug, welches sich im Stillstand vor einer Lichtzeichenanlage befindet, und 1 schematically a vehicle, which is located at a standstill in front of a traffic light system, and

2 schematisch einen Ausschnitt eines Fahrzeugs im Bereich einer Windschutzscheibe. 2 schematically a section of a vehicle in the field of a windshield.

Einander entsprechende Teile sind in allen Figuren mit den gleichen Bezugszeichen versehen.Corresponding parts are provided in all figures with the same reference numerals.

In 1 ist ein Fahrzeug F dargestellt, welches sich im Stillstand vor einer Lichtzeichenanlage L befindet.In 1 a vehicle F is shown, which is located at a standstill in front of a traffic light system L.

Das Fahrzeug F umfasst eine erste Kamera 1, anhand welcher eine vor dem Fahrzeug F befindliche Umgebung erfassbar ist. Bei der ersten Kamera 1 handelt es sich insbesondere um eine Kamera 1 eines nicht näher dargestellten Fahrerassistenzsystems des Fahrzeugs F, welche im Innenraum des Fahrzeugs F hinter dessen Windschutzscheibe WSS angeordnet ist und mittels welcher beispielsweise Positionen von Fahrbahnmarkierungen, anderen Verkehrsteilnehmern und/oder Verkehrszeichen in einem Erfassungsbereich E1 erfassbar sind. Zur Verarbeitung der erfassten Bilddaten der Umgebung ist die erste Kamera 1 mit einer Bildverarbeitungseinheit 2 gekoppelt.The vehicle F includes a first camera 1 , by means of which an environment located in front of the vehicle F can be detected. At the first camera 1 it is in particular a camera 1 a driver assistance system of the vehicle F, not shown, which is arranged in the interior of the vehicle F behind the windshield WSS and by means of which, for example, positions of lane markings, other road users and / or traffic signs in a detection range E1 can be detected. For processing the captured image data of the environment is the first camera 1 with an image processing unit 2 coupled.

Gemäß des dargestellten Ausführungsbeispiels der Erfindung sind Lichtzeichenanlagen L häufig vor einer Straßenkreuzung aufgestellt, so dass aufgrund einer Position und eines Winkels der Lichtzeichenanlage L zu dem wartenden Fahrzeug F eine Beobachtung der Lichtzeichenanlage L für einen Fahrer des Fahrzeugs F häufig nur mit einer als unbequem empfundenen Körperhaltung möglich ist. Auch ist durch diese Körperhaltung eine Verletzungsgefahr bei Unfällen, insbesondere Auffahrunfällen bei stehendem Fahrzeug F, erhöht. Somit sieht die Erfindung vor, Lichtsignale der Lichtzeichenanlage L, d. h. zumindest ein ”Rotlicht”, ”Gelblicht” und ”Grünlicht” optisch zu erfassen. Eine Erfassung der Lichtsignale ist jedoch mittels der ersten Kamera 1 nicht oder nur mit erhöhten Anforderungen an deren Auflösung, Optik und an einen Streulichtschutz möglich.According to the illustrated embodiment of the invention, traffic lights L are often placed in front of a road intersection, so that due to a position and an angle of the traffic light L to the waiting vehicle F observation of the traffic light L for a driver of the vehicle F often only with a perceived as uncomfortable posture is possible. This posture also increases the risk of injury in the event of accidents, in particular rear-end collisions when the vehicle F is stationary. Thus, the invention provides to optically detect light signals of the traffic light system L, ie at least one "red light", "yellow light" and "green light". However, detection of the light signals is by means of the first camera 1 not possible or only with increased demands on their resolution, optics and a stray light protection.

Aus diesem Grund ist erfindungsgemäß zusätzlich in einem Gehäuse 1.1 der ersten Kamera 1 zumindest eine weitere Kamera 3, 4 angeordnet, wobei die weitere Kamera 3, 4 derart ausgerichtet ist, dass deren Erfassungsbereich E2, E3 für Lichtzeichenanlagen L typische Positionen POS1, POS2 einschließt und die weitere Kamera 3, 4 zur Auswertung der erfassten Lichtsignale mit der Bildverarbeitungseinheit 2 gekoppelt ist.For this reason, according to the invention is additionally in a housing 1.1 the first camera 1 at least one more camera 3 . 4 arranged, with the other camera 3 . 4 is aligned such that their detection range E2, E3 for traffic signals L typical positions POS1, POS2 includes and the other camera 3 . 4 for evaluating the detected light signals with the image processing unit 2 is coupled.

Im dargestellten Ausführungsbeispiel sind zwei weitere Kameras 3, 4 in das Gehäuse 1.1 der ersten Kamera 1.1 integriert, anhand welcher die Lichtsignale der Lichtzeichenanlage L erfassbar sind. Dabei sind die weiteren Kameras 3, 4 derart ausgerichtet, dass deren Erfassungsbereiche E2, E3 für die Lichtzeichenanlage L typische Positionen POS1, POS2 einschließt. Diese typischen Positionen POS1, POS2 befinden sich im dargestellten Ausführungsbeispiel am Fahrbahnrand rechts neben und erhöht zu dem Fahrzeug F sowie oberhalb vor dem Fahrzeug F im Bereich einer Fahrbahnmitte. In weiteren nicht näher dargestellten Ausführungsbeispielen sind weitere Positionen der Lichtzeichenanlage L, beispielsweise linksseitig vor dem Fahrzeugs F, und eine größere oder kleinere Anzahl von weiteren Kameras 3, 4 möglich, wobei jede der weiteren Kameras 3, 4 derart ausgerichtet ist, dass deren jeweiliger Erfassungsbereich E2, E3 die Positionen POS1, POS2 der verschieden ausgeführten Lichtzeichenanlagen L einschließt.In the illustrated embodiment, two more cameras 3 . 4 in the case 1.1 the first camera 1.1 integrated, based on which the light signals of the traffic light system L can be detected. Here are the other cameras 3 . 4 aligned such that their detection areas E2, E3 for the traffic light system L typical positions POS1, POS2 includes. These typical positions POS1, POS2 are in the illustrated embodiment at the edge of the road right next to and increases to the vehicle F and above the vehicle F in the region of a lane center. In further embodiments, not shown further positions of the traffic light system L, for example, left side in front of the vehicle F, and a larger or smaller number of other cameras 3 . 4 possible, with each of the other cameras 3 . 4 is aligned such that their respective detection range E2, E3 includes the positions POS1, POS2 of the differently designed traffic lights L.

Zu dieser Integration in das Gehäuse 1.1 der ersten Kamera 1 sind als weitere Kameras 3, 4 insbesondere so genannte Wafer-Level-Kameras vorgesehen, welche sich aufgrund ihrer geringen Größe, beispielsweise von 3 mm × 3 mm × 3 mm, und ihres geringen Anschaffungspreises besonders für eine derartige Integration eignen. Somit ist mit geringem Material-, Herstellungs- und Kostenaufwand eine Vorrichtung zur Erfassung der Lichtsignale der Lichtzeichenanlage L für das Fahrzeug F herstellbar.To this integration in the housing 1.1 the first camera 1 are as more cameras 3 . 4 in particular so-called wafer-level cameras are provided, which are particularly suitable for such integration due to their small size, for example of 3 mm × 3 mm × 3 mm, and their low purchase price. Thus, a device for detecting the light signals of the traffic light system L for the vehicle F can be produced with low material, manufacturing and cost.

Dabei sind die Kameras 3, 4 vorzugsweise derart ausgebildet, dass unterschiedliche Farben der Lichtsignale, insbesondere die Farben ”Rot”, ”Gelb” und ”Grün”, und/oder eine Position des Lichtsignals auf der Lichtzeichenanlage, d. h. welches Lichtsignal aktiv ist, erfassbar sind. Weiterhin sind die Kameras 3, 4 vorzugsweise derart ausgebildet, dass deren Belichtungseinstellungen genau auf einen zu erwartenden Helligkeitsbereich der Lichtsignale der Lichtzeichenanlage L abgestimmt sind.Here are the cameras 3 . 4 Preferably designed such that different colors of the light signals, in particular the colors "red", "yellow" and "green", and / or a position of the light signal on the traffic light system, ie which light signal is active, can be detected. Furthermore, the cameras 3 . 4 preferably configured such that their exposure settings are precisely matched to an expected brightness range of the light signals of the traffic light system L.

Zu einer Auswertung der erfassten Daten, d. h. der Lichtsignale, sind die weiteren Kameras 3, 4 mit der Bildverarbeitungseinheit 2 gekoppelt, so dass die Kamera 1 und die weiteren Kameras 3, 4 in besonders vorteilhafter Weise die gleiche Bildverarbeitungseinheit 2 zur Verarbeitung der erfassten Bilddaten nutzen. Die Ressourcen der Bildverarbeitungseinheit 2 sind insbesondere bei einem Stillstand des Fahrzeugs F, wie er bei einem Warten vor der Lichtzeichenanlage L vorliegt, nicht vollständig genutzt, so dass mit dieser in einfacher Weise und ohne einen großen zusätzlichen Aufwand die von den weiteren Kameras 3, 4 erfassten Daten verarbeitbar sind.For an evaluation of the acquired data, ie the light signals, the other cameras 3 . 4 with the image processing unit 2 coupled, so the camera 1 and the other cameras 3 . 4 in a particularly advantageous manner, the same image processing unit 2 to process the captured image data. The resources of the image processing unit 2 are in particular at a standstill of the vehicle F, as it is present at a waiting in front of the traffic light system L, not fully used, so that with this in a simple manner and without a large additional effort that of the other cameras 3 . 4 collected data are processable.

Zur Unterstützung und einer Komforterhöhung des Fahrers in der dargestellten Situation, in welcher sich das Fahrzeug F im Stillstand vor der Lichtzeichenanlage L befindet, werden die Lichtsignale der Lichtzeichenanlage L erfasst, die erfassten Daten an die Bildverarbeitungseinheit 2 übertragen und anhand dieser verarbeitet. Weiterhin ist die Bildverarbeitungseinheit 2 mit einer Steuereinheit 5 gekoppelt, anhand welcher in Abhängigkeit der erfassten und ausgewerteten Lichtsignale optische, akustische und/oder haptische Fahrhinweise erzeugbar und dem Fahrer ausgebbar sind, so dass dieser auf den aktuellen Zustand der Lichtzeichenanlage L hingewiesen wird. Hierzu sind beispielsweise eine nicht dargestellte Anzeigeeinheit und ein Lautsprecher im Fahrzeug F angeordnet, welche von der Steuereinheit 5 ansteuerbar sind. Somit wird dem Fahrer beispielsweise bei einem Umschalten der Lichtzeichenanlage L, d. h. der Ampel, auf ”Grün” ein optischer und akustischer Hinweis ausgegeben, so dass der Fahrer in komfortabler Weise ohne eine für diesen unangenehm empfundene Körperhaltung bei der Beobachtung der Ampel deren aktuellen Regelungsgehalt erfassen kann. Auch besteht die Möglichkeit, dem Fahrer anhand der Anzeigeeinheit die Lichtzeichenanlage L und/oder deren Lichtsignale als Bilder oder symbolisch dauerhaft während des Wartens auszugeben.To support and increase comfort of the driver in the illustrated situation in which the vehicle F is at a standstill in front of the traffic light system L, the light signals of the traffic light system L are detected, the detected data to the image processing unit 2 transferred and processed on the basis of this. Furthermore, the image processing unit 2 with a control unit 5 coupled, based on which depending on the detected and evaluated light signals optical, acoustic and / or haptic driving instructions generated and the driver can be output, so that it is pointed to the current state of the traffic light system L. For this purpose, for example, a display unit, not shown, and a speaker in the vehicle F are arranged, which of the control unit 5 are controllable. Thus, the driver, for example, when switching the traffic light system L, ie the traffic light, issued an "optical" and audible indication on "green", so that the driver in a comfortable way without their perceived for this uncomfortable posture in the observation of the traffic light detect their current regulatory content can. There is also the possibility the driver on the basis of the display unit, the traffic light system L and / or their light signals output as images or symbolically permanently during the waiting.

2 zeigt eine vorteilhafte alternative Ausgestaltung der Erfindung. Erfindungsgemäß ist in einer zwischen dem Gehäuse 1.1 der ersten Kamera 1 und einer Windschutzscheibe WSS des Fahrzeugs F angeordneten Streulichtblende 6 zumindest eine weitere Kamera 3, 4 angeordnet. 2 shows an advantageous alternative embodiment of the invention. According to the invention is in a between the housing 1.1 the first camera 1 and a windshield WSS of the vehicle F arranged lens hood 6 at least one more camera 3 . 4 arranged.

Im dargestellten Ausführungsbeispiel sind in die Streulichtblende 6, mittels welcher für die Bilderfassung anhand der ersten Kamera 1 ungünstige Einträge von Streulicht, beispielsweise durch Lichtreflexionen an einem nicht dargestellten Armaturenbrett des Fahrzeugs F, vermieden werden, zwei weitere Kameras 3, 4 eingebracht, wobei diese Integration alternativ zu der Integration im Gehäuse 1.1 der ersten Kamera 1 erfolgt.In the illustrated embodiment are in the lens hood 6 , by means of which for image acquisition using the first camera 1 unfavorable entries of stray light, for example by light reflections on a dashboard of the vehicle F, not shown, are avoided, two more cameras 3 . 4 introduced, this integration alternative to the integration in the housing 1.1 the first camera 1 he follows.

Zusätzlich ist jedoch in nicht dargestellter Weise eine Integration einer Anzahl der weiteren Kameras 3, 4 zur Erfassung der Lichtsignale in dem Gehäuse 1.1 der ersten Kamera 1 und eine Integration einer weiteren nicht dargestellten Anzahl von weiteren Kameras in der Streulichtblende 6 möglich.In addition, however, in an unillustrated manner is an integration of a number of other cameras 3 . 4 for detecting the light signals in the housing 1.1 the first camera 1 and an integration of another not shown number of other cameras in the lens hood 6 possible.

BezugszeichenlisteLIST OF REFERENCE NUMBERS

11
Erste KameraFirst camera
1.11.1
Gehäusecasing
22
BildverarbeitungseinheitImage processing unit
33
Kameracamera
44
Kameracamera
55
Steuereinheitcontrol unit
66
StreulichtblendeLens Hood
E1E1
Erfassungsbereichdetection range
E2E2
Erfassungsbereichdetection range
E3E3
Erfassungsbereichdetection range
FF
Fahrzeugvehicle
LL
LichtzeichenanlageTraffic light signals
POS1POS1
Positionposition
POS2POS2
Positionposition
WSSWSS
WindschutzscheibeWindshield

ZITATE ENTHALTEN IN DER BESCHREIBUNG QUOTES INCLUDE IN THE DESCRIPTION

Diese Liste der vom Anmelder aufgeführten Dokumente wurde automatisiert erzeugt und ist ausschließlich zur besseren Information des Lesers aufgenommen. Die Liste ist nicht Bestandteil der deutschen Patent- bzw. Gebrauchsmusteranmeldung. Das DPMA übernimmt keinerlei Haftung für etwaige Fehler oder Auslassungen.This list of the documents listed by the applicant has been generated automatically and is included solely for the better information of the reader. The list is not part of the German patent or utility model application. The DPMA assumes no liability for any errors or omissions.

Zitierte PatentliteraturCited patent literature

  • JP 2009015759 A [0002] JP 2009015759 A [0002]
  • DE 60305124 T2 [0003] DE 60305124 T2 [0003]

Claims (5)

Vorrichtung zur Erfassung von Lichtsignalen von Lichtzeichenanlagen (L) für ein Fahrzeug (F), umfassend eine erste Kamera (1) zur Erfassung einer vor dem Fahrzeug (F) befindlichen Umgebung und eine Bildverarbeitungseinheit (2) zur Verarbeitung erfasster Bilddaten der Umgebung, dadurch gekennzeichnet, dass in einem Gehäuse (1.1) der ersten Kamera (1) oder in einer zwischen dem Gehäuse (1.1) der ersten Kamera (1) und einer Windschutzscheibe (WSS) des Fahrzeugs (F) angeordneten Streulichtblende (6) zumindest eine weitere Kamera (3, 4) angeordnet ist, wobei die weitere Kamera (3, 4) derart ausgerichtet ist, dass deren Erfassungsbereich (E2, E3) für Lichtzeichenanlagen (L) typische Positionen (POS1, POS2) einschließt und die weitere Kamera (3, 4) zur Auswertung der erfassten Lichtsignale mit der Bildverarbeitungseinheit (2) gekoppelt ist.Device for detecting light signals of traffic light installations (L) for a vehicle (F), comprising a first camera ( 1 ) for detecting an environment in front of the vehicle (F) and an image processing unit ( 2 ) for processing acquired image data of the environment, characterized in that in a housing ( 1.1 ) of the first camera ( 1 ) or in between the housing ( 1.1 ) of the first camera ( 1 ) and a windshield (WSS) of the vehicle (F) arranged stray light ( 6 ) at least one more camera ( 3 . 4 ), the further camera ( 3 . 4 ) is aligned such that its detection area (E2, E3) for traffic light installations (L) includes typical positions (POS1, POS2) and the further camera (FIG. 3 . 4 ) for evaluating the detected light signals with the image processing unit ( 2 ) is coupled. Vorrichtung nach Anspruch 1, dadurch gekennzeichnet, dass die zumindest eine weitere Kamera (3, 4) eine Wafer-Level-Kamera ist.Apparatus according to claim 1, characterized in that the at least one further camera ( 3 . 4 ) is a wafer-level camera. Vorrichtung nach Anspruch 1 oder 2, dadurch gekennzeichnet, dass anhand der weiteren Kameras (3, 4) Farben und/oder Positionen der Lichtsignale der Lichtzeichenanlagen (L) erfassbar sind.Apparatus according to claim 1 or 2, characterized in that based on the other cameras ( 3 . 4 ) Colors and / or positions of the light signals of the traffic lights (L) can be detected. Vorrichtung nach einem der Ansprüche 1 bis 3, dadurch gekennzeichnet, dass als typische Positionen (POS1, POS2) für Lichtsignale der Lichtzeichenanlagen (L) rechts und/oder links vor dem Fahrzeug (F) und/oder in einer definierten Höhe vor dem Fahrzeug (F) befindliche Positionen vorgegeben sind.Device according to one of claims 1 to 3, characterized in that as typical positions (POS1, POS2) for light signals of the traffic light systems (L) right and / or left in front of the vehicle (F) and / or at a defined height in front of the vehicle ( F) positions are given. Vorrichtung nach einem der Ansprüche 1 bis 4, dadurch gekennzeichnet, dass die Bildverarbeitungseinheit (2) mit einer Steuereinheit (5) gekoppelt ist, anhand welcher in Abhängigkeit der Lichtsignale optische, akustische und/oder haptische Fahrhinweise erzeugbar sind.Device according to one of claims 1 to 4, characterized in that the image processing unit ( 2 ) with a control unit ( 5 ) is coupled, based on which optical, acoustic and / or haptic driving instructions can be generated in dependence of the light signals.
DE102009040252A 2009-09-04 2009-09-04 Device for detecting light signals of traffic light systems for a vehicle Withdrawn DE102009040252A1 (en)

Priority Applications (2)

Application Number Priority Date Filing Date Title
DE102009040252A DE102009040252A1 (en) 2009-09-04 2009-09-04 Device for detecting light signals of traffic light systems for a vehicle
PCT/EP2010/005229 WO2011026584A1 (en) 2009-09-04 2010-08-26 Device for detecting light signals of traffic lights for a vehicle

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
DE102009040252A DE102009040252A1 (en) 2009-09-04 2009-09-04 Device for detecting light signals of traffic light systems for a vehicle

Publications (1)

Publication Number Publication Date
DE102009040252A1 true DE102009040252A1 (en) 2011-03-10

Family

ID=43034558

Family Applications (1)

Application Number Title Priority Date Filing Date
DE102009040252A Withdrawn DE102009040252A1 (en) 2009-09-04 2009-09-04 Device for detecting light signals of traffic light systems for a vehicle

Country Status (2)

Country Link
DE (1) DE102009040252A1 (en)
WO (1) WO2011026584A1 (en)

Cited By (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102011105520A1 (en) 2011-06-24 2011-12-29 Daimler Ag Method for detecting light signal in traffic light system for vehicle, involves delivering detected surrounding area as image to evaluation unit, which monitors defined area along lanes and/or over lanes in light signal image
DE102011116304A1 (en) 2011-10-18 2012-04-12 Daimler Ag Vehicle has image forming medium with pre-determined detection range, where transmitting medium is provided for transmitting images generated by image forming medium
DE102011115734A1 (en) 2011-10-11 2013-04-11 Daimler Ag Method for controlling motor vehicle, involves initiating or maintaining delay or acceleration of motor vehicle based on signal or signal change of traffic control system, where signal or signal change is detected by control device
DE102012204192A1 (en) * 2012-03-16 2013-09-19 Bayerische Motoren Werke Aktiengesellschaft Camera device, such as stereo camera for use in front windshield of motor vehicle, has camera surrounded by light-shielding element at front and lateral areas, where partition wall section keeps away external light from camera
DE102012005468A1 (en) * 2012-03-17 2013-09-19 Volkswagen Aktiengesellschaft Method for representation of signal light information for e.g. motor vehicle, involves automatically determining section of image, automatically enlarging image section, and representing enlarged image section on display
WO2014044272A1 (en) * 2012-09-20 2014-03-27 Conti Temic Microelectronic Gmbh Method for calibrating a plurality of environment sensors in a vehicle
WO2014086349A1 (en) * 2012-12-03 2014-06-12 Conti Temic Microelectronic Gmbh Method for assisting a traffic light phase assistant of a vehicle, which detects a traffic light
DE102015003847A1 (en) 2015-03-26 2015-08-20 Daimler Ag Method and driver assistance system for detecting and signaling light signals from at least one light signal device of a alternating light signaling system
WO2016012524A1 (en) * 2014-07-23 2016-01-28 Valeo Schalter Und Sensoren Gmbh Detecting traffic lights from images
CN108154711A (en) * 2016-12-02 2018-06-12 铃木株式会社 Drive assistance device
CN108766002A (en) * 2018-07-18 2018-11-06 江西师范大学 A kind of traffic lights identification and prior-warning device for oversize vehicle
DE102023002124A1 (en) 2023-05-25 2023-07-13 Mercedes-Benz Group AG Method and device for operating a vehicle

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102011103302A1 (en) * 2011-06-03 2012-12-06 Conti Temic Microelectronic Gmbh Camera system for a vehicle
CN104442604A (en) * 2014-11-24 2015-03-25 郑成恩 Automobile with driving camera

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE60305124T2 (en) 2002-11-05 2006-09-28 C.R.F. Società Consortile per Azioni, Orbassano Multifunctional integrated optical system with a CMOS or CCD matrix
JP2009015759A (en) 2007-07-09 2009-01-22 Honda Motor Co Ltd Traffic light recognition apparatus

Family Cites Families (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE19829162A1 (en) * 1998-06-30 2000-01-05 Erwin Dietz Application of electronic camera and image recognition device in car for detecting traffic signs
JP2004199148A (en) * 2002-12-16 2004-07-15 Toshiba Corp Vehicular drive support system
US7724284B2 (en) * 2005-09-29 2010-05-25 Aptina Imaging Corporation Multi-camera system and method having a common processing block
DE102006010295B4 (en) * 2006-03-07 2022-06-30 Conti Temic Microelectronic Gmbh Camera system with at least two image recorders
US20070216768A1 (en) * 2006-03-14 2007-09-20 Ford Global Technologies, Llc Device and method for outwardly looking ir camera mounted inside vehicles particularly suited for pre-crash sensing and pedestrian detection
JP2008026991A (en) * 2006-07-18 2008-02-07 Tokai Rika Co Ltd Device for traffic light recognition
KR100793627B1 (en) * 2006-11-29 2008-01-10 팅크웨어(주) Navigation method and navigation system for guiding road driving
DE102007007910A1 (en) * 2007-02-14 2008-08-28 Schott Ag Camera module lens module/lens holder parallel production method, involves providing recesses with different inner dimensions, so that base of recesses with larger lateral dimensions form passages in passage holes
DE202007002448U1 (en) * 2007-02-19 2007-05-24 Robert Bosch Gmbh Vision enhancement device for e.g. personal motor vehicle, has attachment device for attachment of detection module to body of motor vehicle, and display device provided for representation of images detected by two image detection devices
DE102007013501B4 (en) * 2007-03-21 2019-06-06 Bayerische Motoren Werke Aktiengesellschaft Driver assistance system with differently oriented cameras
JP2009055554A (en) * 2007-08-29 2009-03-12 Fujifilm Corp Flexible imaging apparatus mounting a plurality of image sensors

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE60305124T2 (en) 2002-11-05 2006-09-28 C.R.F. Società Consortile per Azioni, Orbassano Multifunctional integrated optical system with a CMOS or CCD matrix
JP2009015759A (en) 2007-07-09 2009-01-22 Honda Motor Co Ltd Traffic light recognition apparatus

Cited By (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102011105520A1 (en) 2011-06-24 2011-12-29 Daimler Ag Method for detecting light signal in traffic light system for vehicle, involves delivering detected surrounding area as image to evaluation unit, which monitors defined area along lanes and/or over lanes in light signal image
DE102011115734A1 (en) 2011-10-11 2013-04-11 Daimler Ag Method for controlling motor vehicle, involves initiating or maintaining delay or acceleration of motor vehicle based on signal or signal change of traffic control system, where signal or signal change is detected by control device
DE102011116304A1 (en) 2011-10-18 2012-04-12 Daimler Ag Vehicle has image forming medium with pre-determined detection range, where transmitting medium is provided for transmitting images generated by image forming medium
DE102012204192A1 (en) * 2012-03-16 2013-09-19 Bayerische Motoren Werke Aktiengesellschaft Camera device, such as stereo camera for use in front windshield of motor vehicle, has camera surrounded by light-shielding element at front and lateral areas, where partition wall section keeps away external light from camera
DE102012204192B4 (en) 2012-03-16 2023-07-13 Bayerische Motoren Werke Aktiengesellschaft Camera device on a motor vehicle
DE102012005468A1 (en) * 2012-03-17 2013-09-19 Volkswagen Aktiengesellschaft Method for representation of signal light information for e.g. motor vehicle, involves automatically determining section of image, automatically enlarging image section, and representing enlarged image section on display
DE102012005468B4 (en) 2012-03-17 2021-08-19 Volkswagen Aktiengesellschaft Method and device for displaying signal light information for a vehicle
WO2014044272A1 (en) * 2012-09-20 2014-03-27 Conti Temic Microelectronic Gmbh Method for calibrating a plurality of environment sensors in a vehicle
US9274213B2 (en) 2012-09-20 2016-03-01 Conti Temic Microelectronic Gmbh Method for calibrating a plurality of environment sensors in a vehicle
US9409571B2 (en) 2012-12-03 2016-08-09 Conti Temic Microelectronic Gmbh Method for supporting a traffic-light-sequence assistant of a vehicle, said assistant detecting traffic lights
WO2014086349A1 (en) * 2012-12-03 2014-06-12 Conti Temic Microelectronic Gmbh Method for assisting a traffic light phase assistant of a vehicle, which detects a traffic light
WO2016012524A1 (en) * 2014-07-23 2016-01-28 Valeo Schalter Und Sensoren Gmbh Detecting traffic lights from images
FR3024256A1 (en) * 2014-07-23 2016-01-29 Valeo Schalter & Sensoren Gmbh DETECTION OF TRICOLORIC LIGHTS FROM IMAGES
DE102015003847A1 (en) 2015-03-26 2015-08-20 Daimler Ag Method and driver assistance system for detecting and signaling light signals from at least one light signal device of a alternating light signaling system
CN108154711A (en) * 2016-12-02 2018-06-12 铃木株式会社 Drive assistance device
CN108154711B (en) * 2016-12-02 2021-09-03 铃木株式会社 Driving support device
CN108766002A (en) * 2018-07-18 2018-11-06 江西师范大学 A kind of traffic lights identification and prior-warning device for oversize vehicle
DE102023002124A1 (en) 2023-05-25 2023-07-13 Mercedes-Benz Group AG Method and device for operating a vehicle

Also Published As

Publication number Publication date
WO2011026584A1 (en) 2011-03-10

Similar Documents

Publication Publication Date Title
DE102009040252A1 (en) Device for detecting light signals of traffic light systems for a vehicle
DE102007034505A1 (en) Method and device for traffic sign recognition
DE102008019461A1 (en) Device for displaying information in vehicle, has display unit, on which information determined by detection units is represented by spatially coded display elements
EP3488607B1 (en) Camera device for recording an environmental area of a vehicle, and method for providing a driver assistance function
DE102014219371A1 (en) Motor vehicle with a lighting device
DE102013002533A1 (en) Method and device for displaying information of a system
DE102008046544A1 (en) Vehicle e.g. passenger car, surrounding monitoring method, utilized for passenger transportation, involves displaying section of complete image for positioning of vehicle, and selecting section as function of vehicle movement direction
DE102012025354A1 (en) Method for indicating change of dynamic parameter e.g. velocity of vehicle e.g. passenger car, involves altering pre-defined light spots projected onto a surface in environment of vehicle, depending on variation of dynamic parameter
DE102016204877A1 (en) Method for operating a driver assistance system for carrying out an autonomous or semi-autonomous driving maneuver of a vehicle and such a driving assistance system
DE102017223160A1 (en) Method for detecting at least one object lying on a motor vehicle and control device and motor vehicle
DE102009014437A1 (en) Object e.g. pedestrian, recognition system i.e. stereoscopic system, for motor vehicle, has validation device checking whether object and/or preset character e.g. contour, of object is detected in image region in image
DE102016223317A1 (en) INFORMATION DISPLAY DEVICE FOR A VEHICLE
DE102013019371A1 (en) Method for operating a driver assistance system for protecting a motor vehicle from damage during a maneuvering process and motor vehicle
DE102016208398B4 (en) Method for calibrating a vehicle camera
DE102007021580B4 (en) Method and device for determining vehicle-relevant traffic signs
DE102011005780B4 (en) Method and device for determining a distance between a vehicle and an object
DE102009003220B4 (en) Procedure for collision warning and collision warning device
DE102010033786A1 (en) Method for detecting and displaying areas laterally and laterally behind a vehicle and vehicle with several image acquisition units for detecting areas located laterally next to and laterally behind the vehicle
DE102011109459A1 (en) Method for detecting objects on the side of a utility vehicle and utility vehicle with a detection system for carrying out the method
DE102008057671A1 (en) Vehicle's e.g. commercial passenger car, surrounding area monitoring method, involves illuminating vehicle and/or surrounding area of vehicle depending on captured real illumination in overall image
EP3807805A1 (en) Method for detecting identification lamps
DE102019004602A1 (en) Method for operating a vehicle
DE102007042966A1 (en) Parking aid information representing device for use in motor vehicle i.e. car, represents distance of motor vehicle to barrier by head-up displays, and represents information of sensor of front region of vehicle on displays
DE102012014115A1 (en) Method for assisting driver during driving vehicle, involves detecting environment of vehicle by detection unit of vehicle, detection unit of other road user or detection unit of infrastructure
DE102020210055A1 (en) Method and device for monitoring the interior of a vehicle

Legal Events

Date Code Title Description
R005 Application deemed withdrawn due to failure to request examination