CN104063877B - 一种候选车道线混合判断识别方法 - Google Patents

一种候选车道线混合判断识别方法 Download PDF

Info

Publication number
CN104063877B
CN104063877B CN201410338483.6A CN201410338483A CN104063877B CN 104063877 B CN104063877 B CN 104063877B CN 201410338483 A CN201410338483 A CN 201410338483A CN 104063877 B CN104063877 B CN 104063877B
Authority
CN
China
Prior art keywords
lane line
line
candidate
candidate lane
interest
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201410338483.6A
Other languages
English (en)
Other versions
CN104063877A (zh
Inventor
严江江
韩春立
楼曼
沈燕
李玲
陈群
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
CETHIK Group Ltd
Original Assignee
CETHIK Group Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by CETHIK Group Ltd filed Critical CETHIK Group Ltd
Priority to CN201410338483.6A priority Critical patent/CN104063877B/zh
Publication of CN104063877A publication Critical patent/CN104063877A/zh
Application granted granted Critical
Publication of CN104063877B publication Critical patent/CN104063877B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Landscapes

  • Image Analysis (AREA)

Abstract

本发明涉及智能交通领域,尤其涉及一种候选车道线混合判断识别方法,包括:确定感兴趣区域,对感兴趣区域进行细化,对所有边缘点进行Hough变换,得到N条候选车道线,候选车道线进行单侧车道线混合判断删除可靠性低的候选车道线,对可靠性一般的候选车道线进行主方向一致性判断删除主方向不一致的候选车道线,最后进行双侧车道线的混合判断,输出最终的候选车道线为结果。本发明采用细化感兴趣区域、单侧车道线混合判断、双侧车道线混合判断方法,在细化的感兴趣区域内进行独立处理分析,删除不符合的候选车道线,能快速找到最可能的车道线,计算冗余度少,稳定度高,减少干扰影响。

Description

一种候选车道线混合判断识别方法
技术领域
本发明涉及智能交通领域,尤其涉及一种候选车道线混合判断识别方法。
背景技术
车道线是基本的交通标志,用于分隔不同行驶车道的实线或虚线。车道偏离预警***是智能交通***的一个重要的应用,其核心技术为车道线检测。现有的车道线检测方法大部分是先获得车道边缘点,再通过Hough变换或者直线拟合算法得到多条候选直线参数。
边缘点的寻找受路面字符和箭头的影响大,从整个图像的寻找会增加复杂度。专利[201310534595]从内侧向外搜索靠近车辆最近的边缘点,容易受到道路干扰的影响。
专利[201110367612]是基于Hough变换的直线检测,对边缘点在90度内的变换仍然存在很多冗余计算量;候选车道线的筛选依据左右车道线之间宽度判断不够准确。没有从多个角度综合计算候选车道线的置信度。专利[201110144128]中置信度采用灰度值变换的梯度值,对道路上较亮的干扰鲁棒性差。
发明内容
本发明为克服上述的不足之处,目的在于提供一种快速准确的候选车道线混合判断识别方法。
本发明是通过以下技术方案达到上述目的:一种候选车道线混合判断识别方法,包括以下步骤:
1)提取图像帧并对图像帧进行相机标定,得到消失点Pvanish;根据预设值得到左、右边界点;由消失点、左边界点、右边界点形成等腰三角形为感兴趣区域,感兴趣区域的底角值为角度阈值θmax
2)细化感兴趣区域,图像分为左感兴趣区域和右感兴趣区域;
3)基于Hough变换的车道线检索步骤:分别对左感兴趣区域、右感兴趣区域进行扫描,得到边缘点;对所有边缘点进行Hough变换;
4)根据前帧车道线结果,在Hough矩阵M(ρ,θ)中进行N次不重复的最大值搜索,得到N条候选车道线;
5)单侧车道线混合判断:
5.1)候选车道线由L(ρ,θ)确定直线方程,L(x,y):y=-x/tan(θ)+ρ/sin(θ),由L(x,y)对得到的参数判断是否符合混合条件,删除不符合的候选车道;
所述候选车道线混合判断时,得到每条候选车道线的以下参数:候选车道线经过的边缘点个数n、候选车道线经过的边缘点位置Pt1,Pt2,…,Ptn、候选线L(x,y)与经过消失点且平行于x轴的消失线交点位置Pl-v、候选线上边缘点序列的局部最长起始点Ptlocalstart和终止点 Ptlocalend、候选线与前帧车道线位置真实距离差Dl-pre,对参数进行以下判断:
a)Pl-v与Pvanish的横向距离小于Dl-v,Dl-v取值在width原图/7和width原图/5之间;
b)Ptlocalstart与Ptlocalend之间的真实距离大于1米;
c)Dl-pre小于1米;
删除不满足其中任何一个条件的候选车道线;
5.2)由L(x,y)和边缘图像得到候选车道线的边缘点,边缘点的横向局部区域搜索得到边界点,边界点直线拟合后计算拟合相关系数r,对r进行判断:r大于0.85的候选车道线认为可靠性高,继续步骤7);r小于0.5的候选车道线认为可靠性低,删除该候选车道线;r介于0.5至0.85的候选车道线认为可靠性一般,继续步骤6);
6)可靠性一般的候选车道线进行主方向一致性判断:将候选车道线的角度换算为方向角度θline,计算每个边缘点的主方向并统计所有主方向得到某一方向个数最多的为主方向θmain,θline与θmain的差小于预设值,则候选车道线的主方向一致,反之不一致;
7)双侧车道线的混合判断:拟合候选车道线的路面直线L(x,y),由候选车道线L(x,y)确定基于路面坐标系的直线方程L(X,Y):Y=K*X+B,再计算两侧候选直线在车前方和车前10米两处的距离差,认为距离差小于0.5米的两侧候选车道线平行;不平行的两侧候选车道线根据候选车道线的边界置信度和候选线与前帧车道线位置真实距离差Dl-pre进行删除或保留;最终输出的候选车道线为检测结果。
作为优选,所述细化感兴趣区域具体包括以下步骤:
2.1)若全局检测表示前帧图像未检测到车道线,以图像中轴为分界线将感兴趣区域分为左感兴趣区域和右感兴趣区域;
2.2)若动态检测表示前帧图像检测到车道线,进行左感兴趣区域、右感兴趣区域动态设置。
作为优选,可靠性一般的候选车道线进行主方向一致性判断时,设置8个角度方向,分别为0°、23°、45°、67°、90°、113°、135°、157°,在梯度图像上依次计算Pt1,Pt2,…,Ptn在5*5的邻域内方向分布,确定每个边缘点的主方向,最后统计出个数最多的方向作为主方向θmain,θline与θmain的差小于23°,则候选车道线的主方向一致,反之不一致。
本发明的有益效果在于:本发明采用细化感兴趣区域、单侧车道线混合判断、双侧车道线混合判断方法,在细化的感兴趣区域内进行独立处理分析,删除不符合的候选车道线,能快速找到最可能的车道线,计算冗余度少,稳定度高,减少干扰影响。
附图说明
图1是本发明的方法步骤流程图。
具体实施方式
下面结合具体实施例对本发明进行进一步描述,但本发明的保护范围并不仅限于此:
实施例1:如图1所示,一种候选车道线混合判断识别方法,包括以下步骤:
S101、确定感兴趣区域:
具体地,由图像消失点位置Pvanish和离图像中轴位置左右3.5米远的边界点,由三点形成的等腰三角形感兴趣区域,以等腰三角形的两斜边对应角度分别作为左右车道线的角度阈值,值为θmax,θmax∈[0,90]。
S102、细化感兴趣区域:
感兴趣区域设置再分为两种情况,全局检测是前帧没有检测到车道线,就以图像中轴位置分为左感兴趣区域和右感兴趣区域;动态检测是前一帧检测到车道线,在车道线的周围形成一个动态梯形区域,实行左、右感兴趣区域动态设置。
S103、对边缘点进行Hough变换:
依次对图像左、右感兴趣区域内的边缘点进行Hough变换。设置Hough变换的角度范围:全局检测时,左车道检测范围为{0°,2°,…,θmax-2°,θmax},右车道检测范围为{-θmax,-θmax+2°,…,-2°};动态检测时,左车道检测范围为{-θanti,…,θmax},右车道检测范围为{-θmax,…,θanti},其中θmax为感兴趣区域内正方向最大角度,由S101步骤获得。θanti用于在左(右)感兴趣区域内检测右(左)方向直线预留的角度,θanti=90-θmax。Hough变换所遍历的角度值θhough为偶数角度值,代替自然数角度值θ,能为直线检测节省一半时间。根据Hough变换公式遍历边缘点坐标,带入角度计算直线到图像原点(0,0)位置的距离ρ:
ρ=x*cosθhough+y*sinθhough
其中全局检测时,左感兴趣区域内:θhough=2*θ,其中0≤θ≤θmax/2;右感兴趣区域内:θhough=-2*θ,其中0≤θ≤θmax/2。
动态检测时,左感兴趣区域内:右感兴趣区域内:
遍历计算得到ρ的值,限定ρ范围是[0,width原图],对满足限定范围内的ρ以及对应的θ存入Hough矩阵M(ρ,θ),对应所有可能直线L(ρ,θ)。
S104、寻找N条可能直线:
具体地,在矩阵M(ρ,θ)中进行N次不重复的最大值搜索,控制ρ的搜索范围是:
当ρpre存在时,ρ∈[max(ρpre-200,0),min(ρpre+200,width原图)];
当ρpre不存在时,ρ∈[0,width原图];
其中ρpre是前帧的车道线结果。当最大值小于MINpt时,表示连成线条的点数小于MINpt,认为图像没有可识别直线,设置MINpt取值在height原图/40和height原图/30之间。通过N次搜索找到N条最可能直线。计算N条直线与y=height原图-1的交点坐标,将横坐标与前帧车道线与y=height原图-1交点横坐标的距离从小到大排序,使得与前帧车道线位置更接近的候选线优先判断。
S105、单侧车道线的混合判断:
具体地,由L(ρ,θ)确定直线方程,L(x,y):y=-x/tan(θ)+ρ/sin(θ)。根据L(x,y)结合边缘图像,从图像底端向上搜索,确定候选线的起始边缘点位置Pt1和终止边缘点位置Ptn,并记录候选线所经过的边缘点位置Pt1,Pt2,…,Ptn。得到候选线经过的边缘点个数Nl-pt、候选线L(x,y)与消失线y=Pvanish.y交点位置Pl-v、候选线上边缘点序列的局部最长起始点Ptlocalstart和终止点Ptlocalend、候选线与前帧车道线位置真实距离差Dl-pre,判断是否满足如下条件:
①abs(Pl-v.x-Pvanish.x)<Dl-v,Dl-v取值在width原图/7和width原图/5之间;
②Ptlocalstart与Ptlocalend之间的真实距离大于1米;
③Dl-pre小于1米;
不满足其中任何一个条件就排除此候选线,对下个候选线进行判断。
计算直线所表示的车道线的边界置信度,根据置信度选择性删除车道线。候选车道线的边界置信度的计算依赖于候选线的边界点。单侧候选车道线边界点查找的步骤如下:
1)统计Pt1,Pt2,…,Ptn两侧的灰度值均值,均值之差作为边界判断的阈值;
2)依次对Pt1,Pt2,…,Ptn的横向局部区域搜索上升边界和下降边界,找到两侧边界点。
3)对边界点直线拟合,计算边界点的拟合相关系数r,越接近在同一条直线上的点拟 合系数越接近1,对r大于0.85的候选线认为可靠度高,对r小于0.5的候选线认为可靠度差,对于其他的候选线认为可靠度一般,进一步判断。
S106、对可靠度一般的候选线进行主方向一致性判断:
具体地,将候选线的角度换算到方向角度θline,0≤θline<180,使得角度可以等分成8个角度方向。计算候选线所表示的车道线上边缘点的主方向具体流程如下:
①设置8个角度方向,分别为0°,23°,45°,67°,90°,113°,135°,157°;在梯度图像上依次计算Pt1,Pt2,…,Ptn在5*5的邻域内方向分布,确定每个边界点的主方向,最后统计出个数最多的方向作为主方向θmain
②若θmain和θline之差在23°内,认为是直线主方向是一致的,反之不一致。
对不满足主方向一致性的候选线进行排除,得到两侧的车道线结果,再进行双侧车道线的混合判断。
S107、双侧车道线的混合判断:
具体地,在L(x,y)上取五个点,由标定数据算出对应路面五个点的坐标,拟合出候选车道线的路面直线方程L(X,Y):Y=K*X+B。计算两侧候选直线在车前方和车前10米两处的距离差,当距离差大于0.5米认为是不平行的,反之平行。对于不平行的两侧候选车道线,综合考虑候选车道线的边界置信度和位置差Dl-pre进行删除。最终保留下的候选车道线为检测结果。
以上的所述乃是本发明的具体实施例及所运用的技术原理,若依本发明的构想所作的改变,其所产生的功能作用仍未超出说明书及附图所涵盖的精神时,仍应属本发明的保护范围。

Claims (3)

1.一种候选车道线混合判断识别方法,其特征在于包括以下步骤:
1)提取图像帧并对图像帧进行相机标定,得到消失点Pvanish;根据预设值得到左、右边界点;由消失点、左边界点、右边界点形成等腰三角形为感兴趣区域,感兴趣区域的底角值为角度阈值θmax
2)细化感兴趣区域,图像分为左感兴趣区域和右感兴趣区域;
3)基于Hough变换的车道线检索步骤:分别对左感兴趣区域、右感兴趣区域进行扫描,得到边缘点;对所有边缘点进行Hough变换;
4)根据前帧车道线结果,在Hough矩阵M(ρ,θ)中进行N次不重复的最大值搜索,得到N条候选车道线;
5)单侧车道线混合判断:
5.1)候选车道线由L(ρ,θ)确定直线方程,L(x,y):y=-x/tan(θ)+ρ/sin(θ),由L(x,y)对得到的参数判断是否符合混合条件,删除不符合的候选车道;
所述候选车道线混合判断时,得到每条候选车道线的以下参数:候选车道线经过的边缘点个数n、候选车道线经过的边缘点位置Pt1,Pt2,…,Ptn、候选线L(x,y)与经过消失点且平行于x轴的消失线交点位置Pl-v、候选线上边缘点序列的局部最长起始点Ptlocalstart和终止点Ptlocalend、候选线与前帧车道线位置真实距离差Dl-pre,对参数进行以下判断:
a)Pl-v与Pvanish的横向距离小于Dl-v,Dl-v取值在width原图/7和width原图/5之间,width原图表示的是图像的宽度;
b)Ptlocalstart与Ptlocalend之间的真实距离大于1米;
c)Dl-pre小于1米;
删除不满足其中任何一个条件的候选车道线;
5.2)由L(x,y)和边缘图像得到候选车道线的边缘点,边缘点的横向局部区域搜索得到边界点,边界点直线拟合后计算拟合相关系数r,对r进行判断:r大于0.85的候选车道线认为可靠性高,继续步骤7);r小于0.5的候选车道线认为可靠性低,删除该候选车道线;r介于0.5至0.85的候选车道线认为可靠性一般,继续步骤6);
6)可靠性一般的候选车道线进行主方向一致性判断:将候选车道线的角度换算为方向角度θline,计算每个边缘点的主方向并统计所有主方向得到某一方向个数最多的为主方向θmain,θline与θmain的差小于预设值,则候选车道线的主方向一致,反之不一致;
7)双侧车道线的混合判断:拟合候选车道线的路面直线L(x,y),由候选车道线L(x,y)确定基于路面坐标系的直线方程L(X,Y):Y=K*X+B,其中K、B分别表示计算得到的斜率和截距,再计算两侧候选直线在车前方和车前10米两处的距离差,认为距离差小于0.5米的两侧候选车道线平行;不平行的两侧候选车道线根据候选车道线的边界置信度和候选线与前帧车道线位置真实距离差Dl-pre进行删除或保留;最终输出的候选车道线为检测结果。
2.根据权利要求1所述的一种候选车道线混合判断识别方法,其特征在于,所述细化感兴趣区域具体包括以下步骤:
2.1)若全局检测表示前帧图像未检测到车道线,以图像中轴为分界线将感兴趣区域分为左感兴趣区域和右感兴趣区域;
2.2)若动态检测表示前帧图像检测到车道线,进行左感兴趣区域、右感兴趣区域动态设置。
3.根据权利要求1所述的一种候选车道线混合判断识别方法,其特征在于,可靠性一般的候选车道线进行主方向一致性判断时,设置8个角度方向,分别为0°、23°、45°、67°、90°、113°、135°、157°,在梯度图像上依次计算Pt1,Pt2,…,Ptn在5*5的邻域内方向分布,确定每个边缘点的主方向,最后统计出个数最多的方向作为主方向θmain,θline与θmain的差小于23°,则候选车道线的主方向一致,反之不一致。
CN201410338483.6A 2014-07-16 2014-07-16 一种候选车道线混合判断识别方法 Active CN104063877B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201410338483.6A CN104063877B (zh) 2014-07-16 2014-07-16 一种候选车道线混合判断识别方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201410338483.6A CN104063877B (zh) 2014-07-16 2014-07-16 一种候选车道线混合判断识别方法

Publications (2)

Publication Number Publication Date
CN104063877A CN104063877A (zh) 2014-09-24
CN104063877B true CN104063877B (zh) 2017-05-24

Family

ID=51551569

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201410338483.6A Active CN104063877B (zh) 2014-07-16 2014-07-16 一种候选车道线混合判断识别方法

Country Status (1)

Country Link
CN (1) CN104063877B (zh)

Families Citing this family (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2018035815A1 (zh) * 2016-08-25 2018-03-01 深圳市锐明技术股份有限公司 一种成对车道线的检测方法和装置
CN106407893B (zh) * 2016-08-29 2019-11-22 东软集团股份有限公司 一种检测车道线的方法、装置和设备
CN107133985B (zh) * 2017-04-20 2020-05-12 常州智行科技有限公司 一种基于车道线消逝点的车载摄像机自动标定方法
CN109284674B (zh) * 2018-08-09 2020-12-08 浙江大华技术股份有限公司 一种确定车道线的方法及装置
CN110770741B (zh) * 2018-10-31 2024-05-03 深圳市大疆创新科技有限公司 一种车道线识别方法和装置、车辆
WO2020146983A1 (zh) * 2019-01-14 2020-07-23 深圳市大疆创新科技有限公司 一种车道检测方法、装置及车道检测设备、移动平台
CN110889378B (zh) * 2019-11-28 2023-06-09 湖南率为控制科技有限公司 一种多视图融合交通标志检测识别方法及其***
CN112215213A (zh) * 2020-12-11 2021-01-12 智道网联科技(北京)有限公司 车道线检测方法、装置、电子设备及存储介质
CN113920319B (zh) * 2021-12-15 2022-04-05 深圳佑驾创新科技有限公司 一种车道干扰噪声线的滤除方法及装置

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102122344A (zh) * 2011-01-07 2011-07-13 南京理工大学 基于红外图像的道路边界检测方法
CN102208019A (zh) * 2011-06-03 2011-10-05 东南大学 基于车载摄像机的车辆变道检测方法
CN102314599A (zh) * 2011-10-11 2012-01-11 东华大学 一种车道识别偏离检测方法

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4637618B2 (ja) * 2005-03-18 2011-02-23 株式会社ホンダエレシス 車線認識装置
JP4962581B2 (ja) * 2010-03-03 2012-06-27 株式会社デンソー 区画線検出装置

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102122344A (zh) * 2011-01-07 2011-07-13 南京理工大学 基于红外图像的道路边界检测方法
CN102208019A (zh) * 2011-06-03 2011-10-05 东南大学 基于车载摄像机的车辆变道检测方法
CN102314599A (zh) * 2011-10-11 2012-01-11 东华大学 一种车道识别偏离检测方法

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
Real time Detection of Lane Markers in Urban Streets;Mohamed Aly;《2008 IEEE Intelligent Vehicles Symposium》;20080606;第7-12页 *
基于动态区域规划的双模型车道线识别方法;王宝锋 等;《北京理工大学学报》;20140531;第34卷(第5期);第485-489页 *

Also Published As

Publication number Publication date
CN104063877A (zh) 2014-09-24

Similar Documents

Publication Publication Date Title
CN104063877B (zh) 一种候选车道线混合判断识别方法
US10140529B2 (en) Method, apparatus and device for detecting lane lines
KR101605514B1 (ko) 차선 인식 장치 및 방법
Ding et al. An adaptive road ROI determination algorithm for lane detection
CN109726717B (zh) 一种车辆综合信息检测***
US20130120125A1 (en) Method and system for lane departure warning
CN103530600A (zh) 复杂光照下的车牌识别方法及***
CN103714541A (zh) 一种利用山体轮廓区域约束识别定位建筑物的方法
CN103366179B (zh) 畅通路径检测中的俯视图分类
CN105809149A (zh) 基于最大长度直线的车道线检测方法
CN106446894A (zh) 一种基于轮廓识别球型目标物位置的方法
CN104217217A (zh) 一种基于两层分类的车辆标志物检测方法与***
CN104408711A (zh) 一种基于多尺度区域融合的显著区域检测方法
Li et al. Inverse perspective mapping based urban road markings detection
CN102982545A (zh) 一种图像深度估计方法
CN103336961A (zh) 一种交互式的自然场景文本检测方法
CN109635737A (zh) 基于道路标记线视觉识别辅助车辆导航定位方法
CN105261021A (zh) 去除前景检测结果阴影的方法及装置
US8396297B2 (en) Supervised edge detection using fractal signatures
CN104182728A (zh) 一种基于模式识别的车标自动定位与识别方法
Chong et al. License plate recognition based on edge detection algorithm
CN109389167A (zh) 交通标志识别方法及***
CN102663778A (zh) 一种基于多视点视频的目标跟踪方法和***
CN101369312A (zh) 检测图像中交叉口的方法和设备
CN107292238A (zh) 基于空间拓扑关系约束和消失点的建筑物轮廓识别方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
CB02 Change of applicant information

Address after: Yuhang District, Hangzhou City, Zhejiang Province, 311121 West No. 1500 Building 1 room 311

Applicant after: Zhong electricity Haikang Group Co.,Ltd

Address before: Ma Cheng Road Hangzhou City, Hangzhou City, Zhejiang Province, No. 36 310012

Applicant before: Zhong electricity Haikang Group Co.,Ltd

CB02 Change of applicant information
GR01 Patent grant
GR01 Patent grant