JP2010512271A - カメラによる車両電灯の識別 - Google Patents
カメラによる車両電灯の識別 Download PDFInfo
- Publication number
- JP2010512271A JP2010512271A JP2009540589A JP2009540589A JP2010512271A JP 2010512271 A JP2010512271 A JP 2010512271A JP 2009540589 A JP2009540589 A JP 2009540589A JP 2009540589 A JP2009540589 A JP 2009540589A JP 2010512271 A JP2010512271 A JP 2010512271A
- Authority
- JP
- Japan
- Prior art keywords
- light
- intensity
- vehicle
- light spot
- image
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Classifications
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60Q—ARRANGEMENT OF SIGNALLING OR LIGHTING DEVICES, THE MOUNTING OR SUPPORTING THEREOF OR CIRCUITS THEREFOR, FOR VEHICLES IN GENERAL
- B60Q1/00—Arrangement of optical signalling or lighting devices, the mounting or supporting thereof or circuits therefor
- B60Q1/02—Arrangement of optical signalling or lighting devices, the mounting or supporting thereof or circuits therefor the devices being primarily intended to illuminate the way ahead or to illuminate other areas of way or environments
- B60Q1/04—Arrangement of optical signalling or lighting devices, the mounting or supporting thereof or circuits therefor the devices being primarily intended to illuminate the way ahead or to illuminate other areas of way or environments the devices being headlights
- B60Q1/14—Arrangement of optical signalling or lighting devices, the mounting or supporting thereof or circuits therefor the devices being primarily intended to illuminate the way ahead or to illuminate other areas of way or environments the devices being headlights having dimming means
- B60Q1/1415—Dimming circuits
- B60Q1/1423—Automatic dimming circuits, i.e. switching between high beam and low beam due to change of ambient light or light level in road traffic
- B60Q1/143—Automatic dimming circuits, i.e. switching between high beam and low beam due to change of ambient light or light level in road traffic combined with another condition, e.g. using vehicle recognition from camera images or activation of wipers
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/50—Context or environment of the image
- G06V20/56—Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
- G06V20/58—Recognition of moving objects or obstacles, e.g. vehicles or pedestrians; Recognition of traffic objects, e.g. traffic signs, traffic lights or roads
- G06V20/584—Recognition of moving objects or obstacles, e.g. vehicles or pedestrians; Recognition of traffic objects, e.g. traffic signs, traffic lights or roads of vehicle lights or traffic lights
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60Q—ARRANGEMENT OF SIGNALLING OR LIGHTING DEVICES, THE MOUNTING OR SUPPORTING THEREOF OR CIRCUITS THEREFOR, FOR VEHICLES IN GENERAL
- B60Q2300/00—Indexing codes for automatically adjustable headlamps or automatically dimmable headlamps
- B60Q2300/05—Special features for controlling or switching of the light beam
- B60Q2300/056—Special anti-blinding beams, e.g. a standard beam is chopped or moved in order not to blind
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60Q—ARRANGEMENT OF SIGNALLING OR LIGHTING DEVICES, THE MOUNTING OR SUPPORTING THEREOF OR CIRCUITS THEREFOR, FOR VEHICLES IN GENERAL
- B60Q2300/00—Indexing codes for automatically adjustable headlamps or automatically dimmable headlamps
- B60Q2300/40—Indexing codes relating to other road users or special conditions
- B60Q2300/41—Indexing codes relating to other road users or special conditions preceding vehicle
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60Q—ARRANGEMENT OF SIGNALLING OR LIGHTING DEVICES, THE MOUNTING OR SUPPORTING THEREOF OR CIRCUITS THEREFOR, FOR VEHICLES IN GENERAL
- B60Q2300/00—Indexing codes for automatically adjustable headlamps or automatically dimmable headlamps
- B60Q2300/40—Indexing codes relating to other road users or special conditions
- B60Q2300/42—Indexing codes relating to other road users or special conditions oncoming vehicle
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Multimedia (AREA)
- Theoretical Computer Science (AREA)
- Mechanical Engineering (AREA)
- Lighting Device Outwards From Vehicle And Optical Signal (AREA)
- Traffic Control Systems (AREA)
- Image Processing (AREA)
Abstract
Description
本発明の実施例において、探索される車両における画像部分(窓)が決定される。窓処理により、画像処理費用が著しく減少される。なぜならば、車両のためにもはや全画像を探索する必要がないからである。更に車線を識別する際、道路縁の誤検出が少なくなるように、窓を予想される車線に位置ぎめすることができる。窓の大きさは、求められる車両物体がきちんと入るように選ばれる。大きくなるほど予想される車両位置についての識別が不正確になる縁範囲が付け加えられる。探索窓の垂直位置、幅および高さは、カメラ写像方程式の知識からの距離仮定に従って位置ぎめされる(画像における光点の運動の部分分析を参照)。窓の水平な位置ぎめは、車両の前の車線の推移についての知識に基いて、画像処理による以前の車線算定から行われる。これらのデータは、例えば車両に統合されている車線離脱警告システム、運転者援助システム(ACC)、ディジタルカード及び(例えばナビゲーションシステムから)衛星により援助される位置算定により、又は慣性センサ装置により得られる進路評価から、利用可能にされる。
I)光点の時間的強度変動の分析
光点が識別されると、画像において追跡される。追跡される光点の強度は、多数の画 像において分析される。特に関心のあるのは、平均値の周りの強度である。光点の強 度は、カメラを持つ動く車両において一般に連続的に変化する距離に関係しているの で、浮動平均値が強度変動を求めるのに利用される。強度変動を示す別の方法は、順 次に続く測定値の偏移を求めることである。図2の上部には、向かって来る光源に対 して、また図2の下部には、反射体に対して、所定の強度範囲において強度変動が記 入されている。向かって来る車両の前照灯の所定の強度範囲内で求められた強度変動 が平均して反射体の強度変動より大きいことが、直ちにわかる。図2の上部及び下部 において、明らかにするため同じ白い線が記入されている。図2の上部(向かって来 る車両の前照灯)では、著しく多数の強度変動が線より上にあるのに反し、図2の下 部(車道区画用反射体)では、著しく多数の分散値が線より下にある。分散の異なる 特性の原因は、光が来た方向へこの光を反射する反射体の特別な反射特性である。自 動車にある前照灯及びカメラセンサは、自己の自動車と同じ自己運動を行うので、カ メラチップへの反射光の入射角従って光点の強度は比較的一定である。光源が問題で ある場合、少なくともカメラの担体である自己の車両が自己運動例えば縦揺れ運動を 示す。カメラチップへの光の入射角従って画像にある光点の強度はあまり一定ではな い。この特性が、反射体を発光する光源から区別するために利用される。強度変動値 が主として限界線より下にある光点は、反射体として分類される。強度変動値が主と して限界線より上にある光点は、発光する光点であると判定される。このような限界 線の推移は、データ処理のためプログラムに固定的に規定することができる。1つの 代案は、限界線の推移を前に記録された測定値に合わせることである。そのため光点 の分散値及びその分類(反射体、発光する光源)が、回顧的に考察される。分類は分 散基準及び/又は他の方法により行うことができる。限界線は、反射体のできるだけ 僅かな分散値が限界線より上にあり、発光する光源のできるだけ僅かな分散値が限界 線より下にあるように、計算される。
反射体により反射される自己の前照灯の光の強度は、1/x4に比例している。こ こでxは反射体と自動車との間隔を示す。これに反し発光する光源一般に車両前照 灯の強度は1/x2に比例している。即ち同じ距離では、向かって来る車両の前照 灯は、自己の車両の照灯の光を反射する反射体より明るく画像に描かれる。強度に ついて典型的な頻度分布が図3に示されている。発光する光源の頻度分布が破線で 示され、反射体の頻度分布が実線で示されている。明らかにわかるように、頻度分 布は互いにずれている。図において3つの強度範囲が確認される。Iで示す低い強 度範囲では反射体のみが示され、IIで示す中間の強度範囲では反射体及び発光す る光源が示され、IIIで示す高い強度範囲では発光する光源のみが示される。従 って上の閾値S1より上の強度を持つ光点は、前照灯により生じる。下の限界地S 2より下の強度を持つ光点は、反射体により高い確率で生じる。光点が両方の閾値 S1とS2の間にある強度を持っていると、この方法では、反射体であるかまたは 発光する光源であるかを表わすことができない。
更に少なくとも1つの光点の強度推移が記録される。
反射体により反射される自己の前照灯の光の強度は、1/x4に比例している。 ここでxは反射体と自動車との間隔である。即ち強度の時間的推移により、光点 を受動光源(反射体)として、又は発光する能動光源として分類することができ る。この対応関係は、本発明の好ましい構成では、求められる光点の距離及び自 己の前照灯の光度についての知識及び道路縁にある普通の反射体の反射特性によ り立証される。本発明の構成では、受動光源及び能動光源の予想される強度推移 を求めて、反射体であるか能動光源であるかの証明に利用するため、距離算定が 利用される。同様に本発明の好ましい構成では、測定される光点の強度が、前照 灯又は特定の距離にある普通の光度の反射光の予想される強度と比較される。同 じ予想が、自己の前照灯による照射を仮定して、特定の距離にある普通の反射体 についてなされる。計算される値は、反射体であるか又は能動光源(車両電灯) であるかを立証するために利用される。
I)画像流れ
車両電灯を識別するため、公知の画像処理方法(相関、形態素濾波、領域区分)によ り抽出される明るい点状画像対象の光流れが求められる。この画像対象の画像流れが 自己運動(速度、片揺れ運動)と一致すると、静止している光点から出発することが できる。そのため動かない画素のための仮定画像流れが種々の距離において求められ 、現在の画像から抽出される光点の実際の画像流れと比較される。これらの光点の画 像流れが大体において既知の自己運動(速度、片揺れ運動)により形成されていると 、静止している光点である。どの仮定も光点の測定される画像流れに当てはまらない と、それは動かない光でなければならない。区別の際、示される光点と車両との距離 をほぼ知ることが有益である。なぜならば、画像流れは、カメラ車両の自己運動及び 光点の起こり得る運動のほかに、光点の距離にも関係するからである。近くにある物 体は、離れている静止物体より強い画像流れをもっている。
前記のパラメータがカメラの視方向の調節により既知であると、距離dを求めることができる。
光源の運動方向の評価の際しばしば生じる問題は、自己の車両の車体従ってカメラ の揺れである。それにより物体の画像流れがカメラ車両の速度および片揺れ運動の 影響を受けるだけでなく、車道面に対する車体の回転運動、車両の縦揺れ運動の影 響を受ける。速度及び片揺れ運動とは異なり、縦揺れ運動はセンサにより直ちには 測定されない。この障害は、車道の凹凸及び(正及び負の方向における)縦加速度 において増大されて起こる。カメラ車両のシャシが生じる力をどれ位よく減衰でき るかに関係なく、縦揺れ運動により障害が常に存在する。
Claims (6)
- 色カメラセンサ及びデータ処理装置を持つ車両の前照灯及び/又は尾灯を識別する方法であって、色カメラセンサが、赤色光に対してのみ感度の高い多数の画素、及び他の色の光に対して感度の高い多数の画素を含んでいるものにおいて、画像において可能性のある前照灯又は尾灯を選択する第1の評価段階において、赤い光に対して感度の高い画素の強度のみが評価される、方法。
- i) 所定の第1の閾値より上の赤い色の強度を持つ光点が、可能性のある車両前照灯で あることを確認され、
ii)所定の第2の閾値より下の強度を持つ光点が、可能性のある車両尾灯であることを 確認される
ことを特徴とする、請求項1に記載の方法。 - 可能性のある車両尾灯である光点において、赤い光に対してのみ感度の高い画素の強度が、他の光に対して感度の高い少なくとも1つの画素の強度と比較され、赤い光が車両尾灯であることを確認されることを特徴とする、先行する請求項の1つに記載の方法。
- 可能性のある車両尾灯である光点において、更に時間的強度推移及び/又は光点の時間に関係する運動が画像において考察されて、他の光点から車両尾灯を区別することを特徴とする、請求項1または2に記載の方法。
- 可能性のある車両前照灯である光点において、更に時間的強度推移及び/又は絶対強度及び/又は光点の時間に関係する運動が画像において考察されて、他の光点から車両前照灯を区別することを特徴とする、請求項1または2に記載の方法。
- カメラセンサ及び請求項1〜5に記載の方法が実行される画像データ処理プログラムを持つ自動車。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
DE102006055903A DE102006055903A1 (de) | 2006-11-27 | 2006-11-27 | Erkennung von Fahrzeuglichtern mit einer Kamera |
PCT/DE2007/001936 WO2008064626A1 (de) | 2006-11-27 | 2007-10-29 | Erkennung von fahrzeuglichtern mit einer kamera |
Publications (1)
Publication Number | Publication Date |
---|---|
JP2010512271A true JP2010512271A (ja) | 2010-04-22 |
Family
ID=39055730
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2009540589A Pending JP2010512271A (ja) | 2006-11-27 | 2007-10-29 | カメラによる車両電灯の識別 |
Country Status (5)
Country | Link |
---|---|
US (1) | US8254632B2 (ja) |
EP (1) | EP2062198B1 (ja) |
JP (1) | JP2010512271A (ja) |
DE (2) | DE102006055903A1 (ja) |
WO (1) | WO2008064626A1 (ja) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2012140752A1 (ja) * | 2011-04-13 | 2012-10-18 | トヨタ自動車株式会社 | 車載周辺物認識装置及びこれを用いる運転支援装置 |
Families Citing this family (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US8587456B2 (en) * | 2007-10-25 | 2013-11-19 | Adc Automotive Distance Control Systems Gmbh | Method for distinguishing between reflectors arranged on the roadside and vehicle lights in the dark |
JP5809785B2 (ja) * | 2010-07-30 | 2015-11-11 | 日立オートモティブシステムズ株式会社 | 車両用外界認識装置およびそれを用いた配光制御システム |
BR112013019405B1 (pt) * | 2011-04-13 | 2021-04-27 | Nissan Motor Co., Ltd | Dispositivo e método de assistência à direção |
DE102012200048A1 (de) * | 2012-01-03 | 2013-07-04 | Robert Bosch Gmbh | Verfahren und Steuergerät zum Anpassen einer oberen Scheinwerferstrahlgrenze eines Scheinwerferkegels |
US9129159B2 (en) | 2012-06-05 | 2015-09-08 | Xerox Corporation | Vehicle headlight state monitoring methods, systems and processor-readable media |
CN102855608B (zh) * | 2012-07-18 | 2015-01-28 | 奇瑞汽车股份有限公司 | 一种图像弱化方法和装置 |
DE102013104335A1 (de) | 2013-03-26 | 2014-10-16 | Continental Automotive Gmbh | Verfahren zur Auslösung einer Fahrerassistenzfunktion bei einer Detektion eines Bremslichtes mittels einer Kamera |
KR101724921B1 (ko) * | 2015-10-08 | 2017-04-07 | 현대자동차주식회사 | 파워 테일 게이트 제어 장치 및 그 방법 |
KR101759138B1 (ko) * | 2015-12-10 | 2017-07-18 | 현대자동차주식회사 | 차량의 후방 카메라를 이용한 테일 게이트 제어 장치 및 방법 |
TWI700017B (zh) * | 2018-10-17 | 2020-07-21 | 財團法人車輛研究測試中心 | 車輛偵測方法、基於光強度動態之夜間車輛偵測方法及其系統 |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPS62131837A (ja) * | 1985-12-05 | 1987-06-15 | Nippon Denso Co Ltd | 車両のヘッドライト制御装置 |
JP2001519744A (ja) * | 1997-04-02 | 2001-10-23 | ジェンテックス コーポレイション | 車両のヘッドライトを自動的に減光する制御システム |
Family Cites Families (15)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US4891559A (en) * | 1985-06-13 | 1990-01-02 | Nippondenso Soken, Inc. | Apparatus for controlling a headlight of a vehicle |
US5796094A (en) * | 1993-02-26 | 1998-08-18 | Donnelly Corporation | Vehicle headlight control using imaging sensor |
US6044166A (en) | 1995-01-17 | 2000-03-28 | Sarnoff Corporation | Parallel-pipelined image processing system |
US5798786A (en) * | 1996-05-07 | 1998-08-25 | Recon/Optical, Inc. | Electro-optical imaging detector array for a moving vehicle which includes two axis image motion compensation and transfers pixels in row directions and column directions |
US7653215B2 (en) * | 1997-04-02 | 2010-01-26 | Gentex Corporation | System for controlling exterior vehicle lights |
US5990469A (en) * | 1997-04-02 | 1999-11-23 | Gentex Corporation | Control circuit for image array sensors |
US6049171A (en) * | 1998-09-18 | 2000-04-11 | Gentex Corporation | Continuously variable headlamp control |
DE19820348A1 (de) | 1998-05-07 | 1999-11-25 | Engelmann Helmut | Vorrichtung zum automatischen Abschalten/Einschalten des Fernlichts bei Kfz, so daß der Gegenverkehr nicht geblendet wird und der Fahrer nicht manuell schalten muß |
US6055166A (en) * | 1998-11-16 | 2000-04-25 | Lucent Technologies Inc. | Low trickle current startup bias circuit and method of operation thereof |
WO2004034183A2 (en) * | 2002-08-21 | 2004-04-22 | Gentex Corporation | Image acquisition and processing methods for automatic vehicular exterior lighting control |
US6930593B2 (en) * | 2003-02-24 | 2005-08-16 | Iteris, Inc. | Lane tracking system employing redundant image sensing devices |
US7148813B2 (en) * | 2003-03-20 | 2006-12-12 | Gentex Corporation | Light emitting traffic sign having vehicle sensing capabilities |
DE102004060461A1 (de) | 2004-12-16 | 2006-07-06 | Daimlerchrysler Ag | Verfahren zum Betreiben einer Leuchteinrichtung und Vorrichtung zum Betreiben einer Leuchteinrichtung |
DE502006007631D1 (de) * | 2005-02-22 | 2010-09-23 | Adc Automotive Dist Control | Verfahren zur erkennung der aktivierung von bremsleuchten vorausfahrender fahrzeuge |
DE102006055906A1 (de) | 2005-12-05 | 2007-06-14 | Adc Automotive Distance Control Systems Gmbh | Verfahren zur Erkennung von Reflektoren, Schildern und Fahrzeuglichtern |
-
2006
- 2006-11-27 DE DE102006055903A patent/DE102006055903A1/de not_active Withdrawn
-
2007
- 2007-10-29 JP JP2009540589A patent/JP2010512271A/ja active Pending
- 2007-10-29 DE DE112007001963T patent/DE112007001963A5/de not_active Withdrawn
- 2007-10-29 EP EP07846272A patent/EP2062198B1/de active Active
- 2007-10-29 US US12/312,391 patent/US8254632B2/en active Active
- 2007-10-29 WO PCT/DE2007/001936 patent/WO2008064626A1/de active Application Filing
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPS62131837A (ja) * | 1985-12-05 | 1987-06-15 | Nippon Denso Co Ltd | 車両のヘッドライト制御装置 |
JP2001519744A (ja) * | 1997-04-02 | 2001-10-23 | ジェンテックス コーポレイション | 車両のヘッドライトを自動的に減光する制御システム |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2012140752A1 (ja) * | 2011-04-13 | 2012-10-18 | トヨタ自動車株式会社 | 車載周辺物認識装置及びこれを用いる運転支援装置 |
Also Published As
Publication number | Publication date |
---|---|
DE102006055903A1 (de) | 2008-05-29 |
US20100061594A1 (en) | 2010-03-11 |
WO2008064626A1 (de) | 2008-06-05 |
DE112007001963A5 (de) | 2009-05-28 |
EP2062198A1 (de) | 2009-05-27 |
EP2062198B1 (de) | 2012-03-14 |
US8254632B2 (en) | 2012-08-28 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP4993322B2 (ja) | 車両周辺にある光点のカメラによる識別及び分類 | |
JP5207146B2 (ja) | 遠距離灯の自動制御方法 | |
JP2010512271A (ja) | カメラによる車両電灯の識別 | |
US11029583B2 (en) | Adjustable camera mount for a vehicle windshield | |
US7566851B2 (en) | Headlight, taillight and streetlight detection | |
JP5409929B2 (ja) | 車両用ヘッドライト装置の制御方法およびヘッドライト装置 | |
US7512252B2 (en) | Image processing system and vehicle control system | |
JP4108631B2 (ja) | 車両のヘッドライトを自動的に減光する制御システム | |
JP6175430B2 (ja) | 車両の周辺区域にある物体を認識する方法および装置 | |
TWI302879B (en) | Real-time nighttime vehicle detection and recognition system based on computer vision | |
KR101370215B1 (ko) | 차량용 헤드라이트 어셈블리의 제어 방법 및 그 헤드라이트 어셈블리 | |
CN103597498B (zh) | 用于向车辆的大灯控制装置传输关于当前车辆周围环境的数据的方法和控制装置 | |
WO2017014023A1 (ja) | 車載環境認識装置 | |
US8232895B2 (en) | Vehicle detection apparatus, vehicle detection program and light control apparatus | |
US9042600B2 (en) | Vehicle detection apparatus | |
EP3975138A1 (en) | Bundling of driver assistance systems | |
US20080030374A1 (en) | On-board device for detecting vehicles and apparatus for controlling headlights using the device | |
JP2005092861A (ja) | 車両制御システム | |
JP2012240530A (ja) | 画像処理装置 | |
CN103112391A (zh) | 用于分类位于车辆的前方区域中的光学物体的方法和装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20100914 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20121130 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20121211 |
|
A601 | Written request for extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A601 Effective date: 20130306 |
|
A602 | Written permission of extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A602 Effective date: 20130403 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20130404 |
|
A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20130917 |