JP6141787B2 - レーンマーク認識装置 - Google Patents
レーンマーク認識装置 Download PDFInfo
- Publication number
- JP6141787B2 JP6141787B2 JP2014075846A JP2014075846A JP6141787B2 JP 6141787 B2 JP6141787 B2 JP 6141787B2 JP 2014075846 A JP2014075846 A JP 2014075846A JP 2014075846 A JP2014075846 A JP 2014075846A JP 6141787 B2 JP6141787 B2 JP 6141787B2
- Authority
- JP
- Japan
- Prior art keywords
- lane mark
- candidate
- lane
- image
- mark
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/10—Segmentation; Edge detection
- G06T7/13—Edge detection
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B62—LAND VEHICLES FOR TRAVELLING OTHERWISE THAN ON RAILS
- B62D—MOTOR VEHICLES; TRAILERS
- B62D15/00—Steering not otherwise provided for
- B62D15/02—Steering position indicators ; Steering position determination; Steering aids
- B62D15/025—Active steering aids, e.g. helping the driver by actively influencing the steering system after environment evaluation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/40—Extraction of image or video features
- G06V10/56—Extraction of image or video features relating to colour
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/40—Extraction of image or video features
- G06V10/60—Extraction of image or video features relating to illumination properties, e.g. using a reflectance or lighting model
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/50—Context or environment of the image
- G06V20/56—Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
- G06V20/588—Recognition of the road, e.g. of lane markings; Recognition of the vehicle driving pattern in relation to the road
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10024—Color image
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30248—Vehicle exterior or interior
- G06T2207/30252—Vehicle exterior; Vicinity of vehicle
- G06T2207/30256—Lane; Road marking
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Multimedia (AREA)
- Transportation (AREA)
- Chemical & Material Sciences (AREA)
- Combustion & Propulsion (AREA)
- Mechanical Engineering (AREA)
- Software Systems (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Traffic Control Systems (AREA)
- Image Analysis (AREA)
Description
前記カメラの撮像画像から、周囲部に対する輝度の変化量が所定値以上であるエッジ点を抽出したエッジ画像を生成するエッジ画像生成部と、
前記エッジ画像から、レーンマークの画像部分の候補である候補画像部分を抽出する候補画像部分抽出部と、 前記候補画像部分に基づいてレーンマーク候補を検出し、近接した複数のレーンマーク候補を検出したときに、該近接した各レーンマーク候補について、前記撮像画像における対応領域の輝度に基づく参照値を算出し、該参照値が最も大きいレーンマーク候補をレーンマークとして認識するレーンマーク認識部と
を備えたことを特徴とする。
前記レーンマーク認識部は特定色のレーンマークを認識し、
前記参照値は、前記対応領域の前記特定色の度合いを示す値であることを特徴とする。
周囲を撮像するカメラと、
前記カメラの撮像画像から、周囲部に対する輝度の変化量が所定値以上であるエッジ点を抽出したエッジ画像を生成するエッジ画像生成部と、
前記エッジ画像から、レーンマークの画像部分の候補である候補画像部分を抽出する候補画像部分抽出部と、
前記候補画像部分に基づいてレーンマーク候補を検出し、近接した複数のレーンマーク候補を検出したときに、該近接した各レーンマーク候補について、前記撮像画像における対応領域の輝度に基づく参照値を算出し、該参照値が最も大きいレーンマーク候補をレーンマークとして認識するレーンマーク認識部と、を備え、
前記レーンマーク認識部は、近接した複数のレーンマーク候補の前記参照値の差が所定値以下であるときに、該複数のレーンマーク候補に連続線レーンマークと破線レーンマークとが含まれるか否かを判断し、連続線レーンマークと破線レーンマークとが含まれるときには、該複数のレーンマークが複合線レーンマークであると認識することを特徴とする。
前記カメラの撮像画像から、周囲部に対する輝度の変化量が所定値以上であるエッジ点を抽出したエッジ画像を生成するエッジ画像生成工程と、 前記エッジ画像から、レーンマークの画像部分の候補である候補画像部分を抽出する候補画像部分抽出工程と、
前記候補画像部分に基づいてレーンマーク候補を検出し、近接した複数のレーンマーク候補を検出したときに、該近接した各レーンマーク候補について、前記撮像画像における対応領域の輝度に基づく参照値を算出し、該参照値が最も大きいレーンマーク候補をレーンマークとして認識するレーンマーク認識工程と、を含み、
前記レーンマーク認識工程において、近接した複数のレーンマーク候補の前記参照値の差が所定値以下であるときに、該複数のレーンマーク候補に連続線レーンマークと破線レーンマークとが含まれるか否かを判断し、連続線レーンマークと破線レーンマークとが含まれるときには、該複数のレーンマークが複合線レーンマークであると認識することを特徴とする。
認識対象のレーンマークが白線であるときに、レーンマークとレーンマークの補修跡とを区別するための参照値として、カラーの撮像画像におけるRGBの階調値から算出した白の度合を示す値を用いてもよい。この場合は、複数のレーンマーク候補が検出された場合に、レーンマーク認識部14は、白の度合を示す参照値が最大であるレーンマーク候補をレーンマークとして認識する。
Claims (6)
- 車両に搭載されたカメラにより撮像された該車両周囲の画像に基づいて、道路に設けられたレーンマークを認識するレーンマーク認識装置であって、
前記カメラの撮像画像から、周囲部に対する輝度の変化量が所定値以上であるエッジ点を抽出したエッジ画像を生成するエッジ画像生成部と、
前記エッジ画像から、レーンマークの画像部分の候補である候補画像部分を抽出する候補画像部分抽出部と、
前記候補画像部分に基づいてレーンマーク候補を検出し、近接した複数のレーンマーク候補を検出したときに、該近接した各レーンマーク候補について、前記撮像画像における対応領域の輝度に基づく参照値を算出し、該参照値が最も大きいレーンマーク候補をレーンマークとして認識するレーンマーク認識部と、を備え、
前記レーンマーク認識部は、近接した複数のレーンマーク候補の前記参照値の差が所定値以下であるときに、該複数のレーンマーク候補に連続線レーンマークと破線レーンマークとが含まれるか否かを判断し、連続線レーンマークと破線レーンマークとが含まれるときには、該複数のレーンマークが複合線レーンマークであると認識することを特徴とするレーンマーク認識装置。 - 請求項1に記載のレーンマーク認識装置において、
前記カメラはカラーカメラであり、
前記レーンマーク認識部は特定色のレーンマークを認識し、
前記参照値は、前記対応領域の前記特定色の度合いを示す値であることを特徴とするレーンマーク認識装置。 - 請求項1に記載のレーンマーク認識装置において、
前記参照値は、前記対応領域の輝度値であることを特徴とするレーンマーク認識装置。 - 請求項1から請求項3のうちのいずれか1項に記載のレーンマーク認識装置において、
前記レーンマーク認識部により認識されたレーンマークにより区画された車線内を前記車両が走行するように、前記車両の操舵制御を行う操舵制御部を備えたことを特徴とするレーンマーク認識装置。 - 周囲を撮像するカメラと、
前記カメラの撮像画像から、周囲部に対する輝度の変化量が所定値以上であるエッジ点を抽出したエッジ画像を生成するエッジ画像生成部と、
前記エッジ画像から、レーンマークの画像部分の候補である候補画像部分を抽出する候補画像部分抽出部と、
前記候補画像部分に基づいてレーンマーク候補を検出し、近接した複数のレーンマーク候補を検出したときに、該近接した各レーンマーク候補について、前記撮像画像における対応領域の輝度に基づく参照値を算出し、該参照値が最も大きいレーンマーク候補をレーンマークとして認識するレーンマーク認識部と、を備え、
前記レーンマーク認識部は、近接した複数のレーンマーク候補の前記参照値の差が所定値以下であるときに、該複数のレーンマーク候補に連続線レーンマークと破線レーンマークとが含まれるか否かを判断し、連続線レーンマークと破線レーンマークとが含まれるときには、該複数のレーンマークが複合線レーンマークであると認識することを特徴とする車両。 - 車両に搭載されたカメラにより撮像された該車両の周囲の画像に基づいて、道路に設けられたレーンマークを認識するレーンマーク認識方法であって、
前記カメラの撮像画像から、周囲部に対する輝度の変化量が所定値以上であるエッジ点を抽出したエッジ画像を生成するエッジ画像生成工程と、 前記エッジ画像から、レーンマークの画像部分の候補である候補画像部分を抽出する候補画像部分抽出工程と、
前記候補画像部分に基づいてレーンマーク候補を検出し、近接した複数のレーンマーク候補を検出したときに、該近接した各レーンマーク候補について、前記撮像画像における対応領域の輝度に基づく参照値を算出し、該参照値が最も大きいレーンマーク候補をレーンマークとして認識するレーンマーク認識工程と、を含み、
前記レーンマーク認識工程において、近接した複数のレーンマーク候補の前記参照値の差が所定値以下であるときに、該複数のレーンマーク候補に連続線レーンマークと破線レーンマークとが含まれるか否かを判断し、連続線レーンマークと破線レーンマークとが含まれるときには、該複数のレーンマークが複合線レーンマークであると認識することを特徴とするレーンマーク認識方法。
Priority Applications (4)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2014075846A JP6141787B2 (ja) | 2014-04-01 | 2014-04-01 | レーンマーク認識装置 |
US14/658,620 US9436878B2 (en) | 2014-04-01 | 2015-03-16 | Lane mark recognition device |
CN201510132119.9A CN104978560B (zh) | 2014-04-01 | 2015-03-24 | 行车线标识识别装置 |
DE102015205685.6A DE102015205685B4 (de) | 2014-04-01 | 2015-03-30 | Fahrbahnmarkierungserkennungseinrichtung, fahrbahnmarkierungserkennungsverfahren sowie fahrzeug mit einer fahrbahnmarkierungserkennungseinrichtung |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2014075846A JP6141787B2 (ja) | 2014-04-01 | 2014-04-01 | レーンマーク認識装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2015197829A JP2015197829A (ja) | 2015-11-09 |
JP6141787B2 true JP6141787B2 (ja) | 2017-06-07 |
Family
ID=54067181
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2014075846A Active JP6141787B2 (ja) | 2014-04-01 | 2014-04-01 | レーンマーク認識装置 |
Country Status (4)
Country | Link |
---|---|
US (1) | US9436878B2 (ja) |
JP (1) | JP6141787B2 (ja) |
CN (1) | CN104978560B (ja) |
DE (1) | DE102015205685B4 (ja) |
Families Citing this family (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104603841B (zh) * | 2012-08-30 | 2017-10-24 | 本田技研工业株式会社 | 行车线标识识别装置 |
JP6348758B2 (ja) | 2014-04-15 | 2018-06-27 | 本田技研工業株式会社 | 画像処理装置 |
CN107710278A (zh) * | 2015-06-18 | 2018-02-16 | 日本电气方案创新株式会社 | 图像处理设备,图像处理方法和计算机可读记录介质 |
JP6691387B2 (ja) | 2016-02-15 | 2020-04-28 | 本田技研工業株式会社 | 車両維持制御装置 |
US20180067496A1 (en) * | 2016-09-06 | 2018-03-08 | Delphi Technologies, Inc. | Automated vehicle lane change control system |
JP2018173834A (ja) * | 2017-03-31 | 2018-11-08 | 本田技研工業株式会社 | 車両制御装置 |
JPWO2019171565A1 (ja) * | 2018-03-09 | 2021-03-18 | パイオニア株式会社 | 線検出装置、線検出方法、プログラム、及び記憶媒体 |
US10614320B2 (en) * | 2018-04-03 | 2020-04-07 | Honda Motor Co., Ltd. | System and method for advanced highway lane detection |
JP7359541B2 (ja) * | 2018-12-14 | 2023-10-11 | 株式会社デンソーテン | 画像処理装置および画像処理方法 |
CN111523360B (zh) * | 2019-09-09 | 2023-06-13 | 毫末智行科技有限公司 | 用于识别路面标记的方法、装置及单目摄像头 |
US11551459B1 (en) * | 2022-06-27 | 2023-01-10 | Plusai, Inc. | Ambiguous lane detection event miner |
Family Cites Families (19)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH11219435A (ja) | 1998-02-03 | 1999-08-10 | Honda Motor Co Ltd | 自動車用白線検出装置 |
JP2005157731A (ja) * | 2003-11-26 | 2005-06-16 | Nissan Motor Co Ltd | 車線認識装置および車線認識方法 |
US8924078B2 (en) * | 2004-11-18 | 2014-12-30 | Gentex Corporation | Image acquisition and processing system for vehicle equipment control |
JP4616046B2 (ja) * | 2005-03-22 | 2011-01-19 | 本田技研工業株式会社 | 車両用画像処理システム、車両用画像処理方法、車両用画像処理プログラム、及び車両 |
JP4616068B2 (ja) * | 2005-04-28 | 2011-01-19 | 本田技研工業株式会社 | 車両、画像処理システム、画像処理方法及び画像処理プログラム |
JP4603421B2 (ja) * | 2005-05-27 | 2010-12-22 | 本田技研工業株式会社 | 車両、画像処理システム、画像処理方法、及び画像処理プログラム |
JP5083658B2 (ja) * | 2008-03-26 | 2012-11-28 | 本田技研工業株式会社 | 車両用車線認識装置、車両、及び車両用車線認識プログラム |
JP5015849B2 (ja) * | 2008-04-11 | 2012-08-29 | トヨタ自動車株式会社 | 逆走警告装置、逆走警告方法 |
JP5014237B2 (ja) * | 2008-04-23 | 2012-08-29 | 本田技研工業株式会社 | レーンマーカ認識装置、車両、及びレーンマーカ認識用プログラム |
WO2010059570A1 (en) * | 2008-11-19 | 2010-05-27 | Contraptions, Llc | Vehicle guidance system and method |
CN101620732A (zh) * | 2009-07-17 | 2010-01-06 | 南京航空航天大学 | 道路行驶线的视觉检测方法 |
JP5016073B2 (ja) * | 2010-02-12 | 2012-09-05 | 株式会社デンソー | 白線認識装置 |
JP5220787B2 (ja) * | 2010-03-08 | 2013-06-26 | 株式会社日本自動車部品総合研究所 | 車載白線認識装置 |
JP2012155612A (ja) * | 2011-01-27 | 2012-08-16 | Denso Corp | 車線検出装置 |
US20120206252A1 (en) * | 2011-02-16 | 2012-08-16 | Toyota Motor Engineering & Manufacturing North America, Inc. | Lane departure warning system |
US9542847B2 (en) * | 2011-02-16 | 2017-01-10 | Toyota Motor Engineering & Manufacturing North America, Inc. | Lane departure warning/assistance method and system having a threshold adjusted based on driver impairment determination using pupil size and driving patterns |
JP5799784B2 (ja) * | 2011-12-06 | 2015-10-28 | 富士通株式会社 | 道路形状推定装置及びプログラム |
JP5997962B2 (ja) * | 2012-07-27 | 2016-09-28 | クラリオン株式会社 | 車載レーンマーカ認識装置 |
JP6128584B2 (ja) * | 2013-01-16 | 2017-05-17 | 株式会社Soken | 走行経路生成装置 |
-
2014
- 2014-04-01 JP JP2014075846A patent/JP6141787B2/ja active Active
-
2015
- 2015-03-16 US US14/658,620 patent/US9436878B2/en active Active
- 2015-03-24 CN CN201510132119.9A patent/CN104978560B/zh active Active
- 2015-03-30 DE DE102015205685.6A patent/DE102015205685B4/de active Active
Also Published As
Publication number | Publication date |
---|---|
CN104978560B (zh) | 2018-09-28 |
DE102015205685B4 (de) | 2021-03-18 |
US9436878B2 (en) | 2016-09-06 |
US20150278612A1 (en) | 2015-10-01 |
CN104978560A (zh) | 2015-10-14 |
JP2015197829A (ja) | 2015-11-09 |
DE102015205685A1 (de) | 2015-10-01 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6141787B2 (ja) | レーンマーク認識装置 | |
JP6230482B2 (ja) | レーンマーク認識装置、車両及びレーンマーク認識方法 | |
US20090123065A1 (en) | Vehicle and lane mark recognition apparatus | |
US9690994B2 (en) | Lane recognition device | |
KR20160023409A (ko) | 차선 이탈 경보 시스템의 동작방법 | |
JP5402828B2 (ja) | 車線境界検出装置、車線境界検出プログラム | |
JP2009237706A (ja) | 車両用車線認識装置、車両、及び車両用車線認識プログラム | |
JP6141788B2 (ja) | レーンマーク認識装置 | |
JP5480917B2 (ja) | 車両周辺監視装置 | |
EP3506169A2 (en) | Driver assistance system and method for object detection and notification | |
US9589213B2 (en) | Apparatus for recognizing turnoff from vehicle roadway | |
WO2013191078A1 (ja) | 車両周辺対象物検出装置 | |
US9558410B2 (en) | Road environment recognizing apparatus | |
JP6408935B2 (ja) | 走行区画線認識装置 | |
JP2010061375A (ja) | 物体認識装置及びプログラム | |
JP7068017B2 (ja) | 車両の走行路認識装置及び走行制御装置 | |
JP2009186301A (ja) | 車両用物体検出装置 | |
JP2015210609A (ja) | レーンマーク認識装置 | |
JP6173962B2 (ja) | レーンマーク認識装置 | |
JP2015215235A (ja) | 物体検出装置及び物体検出方法 | |
JP6293570B2 (ja) | レーンマーク認識装置及び方法並びに車両 | |
JP2014123301A (ja) | 白線検出装置 | |
JP6130326B2 (ja) | 車線認識装置 | |
JP2012190214A (ja) | 車両用画像認識装置、車両用画像認識方法、プログラム及び媒体 | |
JP2012185701A (ja) | 表示装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20160226 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20170201 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20170207 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20170329 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20170411 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20170508 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6141787 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |