CN106529404A - 基于摄像原理的无人驾驶汽车对路面标志线的识别方法 - Google Patents

基于摄像原理的无人驾驶汽车对路面标志线的识别方法 Download PDF

Info

Publication number
CN106529404A
CN106529404A CN201610872287.6A CN201610872287A CN106529404A CN 106529404 A CN106529404 A CN 106529404A CN 201610872287 A CN201610872287 A CN 201610872287A CN 106529404 A CN106529404 A CN 106529404A
Authority
CN
China
Prior art keywords
markings
region
picture
pilotless automobile
road
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201610872287.6A
Other languages
English (en)
Inventor
李林聪
王文宇
樊晓楠
涂市委
宋京
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Zhangjiagang Automotive Engineering Research Institute Chang'an University
Original Assignee
Zhangjiagang Automotive Engineering Research Institute Chang'an University
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Zhangjiagang Automotive Engineering Research Institute Chang'an University filed Critical Zhangjiagang Automotive Engineering Research Institute Chang'an University
Priority to CN201610872287.6A priority Critical patent/CN106529404A/zh
Publication of CN106529404A publication Critical patent/CN106529404A/zh
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/50Context or environment of the image
    • G06V20/56Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
    • G06V20/588Recognition of the road, e.g. of lane markings; Recognition of the vehicle driving pattern in relation to the road

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • Image Processing (AREA)
  • Traffic Control Systems (AREA)
  • Image Analysis (AREA)

Abstract

本发明涉及一种基于摄像原理的无人驾驶汽车对路面标志线的识别方法,包括如下步骤:步骤1:在无人驾驶汽车的车前纵向中心处安装摄像装置,通过该摄像装置获取车辆当前所处的路面信息,并生成路面信息图像;步骤2:采集带有路面标志线的感兴趣区域,提取感兴趣区域形成区域图片;步骤3:对区域图片进行边缘化处理;步骤4:对区域图片进行二值化处理;步骤5:通过拟合算法对区域图片进行识别;当区域图片中的标志线残缺及破损不能识别时,控制器通过报警装置发出报警声音。本发明采用摄像装置获取图像信息,可有效识别路面标志线,比单线激光扫面雷达扫描识别更加准确,降低了无人驾驶车辆在行驶过程中的安全隐患。

Description

基于摄像原理的无人驾驶汽车对路面标志线的识别方法
技术领域
本发明涉及无人驾驶汽车技术领域,尤其是涉及一种基于摄像原理的无人驾驶汽车对路面标志线的识别方法。
背景技术
无人驾驶车辆在国际上也称为机器人车辆,属于室外移动机器人的一种,是一个集环境感知、规划与决策、控制等多项功能于一体的综合智能***,涵盖了机械、控制、传感器技术、信号处理、模式识别、人工智能和计算机技术等多学科知识。无人驾驶汽车也是衡量一个国家科研实力和工业水平的重要标志之一,在国防和公众交通方面具有广阔的应用前景。无人驾驶车辆起源于军事运动,从20世纪70年代开始,美、英、德等发达国家就开始了无人驾驶车辆的研究,经过这么多年的发展,无人驾驶车辆从军事领域也逐渐发展到民用领域。在民用领域阶段最显著的特点是需要对公路上的标志线进行识别,采用摄像原理的无人驾驶汽车在环境感知方面,相比于激光扫面雷达具体投入低、简单易行等优点,可以降低生产成本。
国内外目前无人驾驶汽车对标志线识别的最主要手段是通过单线激光雷达对标志线进行扫描,这种对于正常的标志线具有准确性和可靠性,但是对于某些残缺或者模糊的标志线,往往不能识别,还会导致汽车误判,可能造成安全事故。
发明内容
本发明要解决的技术问题是:提供一种基于摄像原理的无人驾驶汽车的路面标志线识别方法,可有效识别路面标志线。
本发明解决其技术问题所采用的技术方案是:一种基于摄像原理的无人驾驶汽车对路面标志线的识别方法,包括如下步骤:
步骤1:在无人驾驶汽车的车前纵向中心处安装摄像装置,通过该摄像装置获取车辆当前所处的路面信息,并生成路面信息图像;
步骤2:对上步生成的路面图像信息,采集带有路面标志线的感兴趣区域,提取感兴趣区域形成区域图片;
步骤3:对区域图片进行边缘化处理;
步骤4:对区域图片进行二值化处理;
步骤5:车道线识别:通过拟合算法对区域图片进行识别;当区域图片中的标志线残缺及破损不能识别时,控制器通过报警装置发出报警声音。
进一步地,所述边缘化处理方法为:
(1)在区域图片中确定大小为M×N的路面图像f(x,y);
(2)在其所采集到任意像素点的坐标值f(i,j),以该像素为中心的小邻块记为B×B,即基元块;
(3)取基元块为中心的区域块记为D×D;
(4)求基元块B×B的均方差σB,公式如下;
其中:μ为算数平均值;
(5)当均方差σB比设定的阈值T1小则输出边缘图像g(i,j)=0并结束,否则进行下一步;
(6)用如下公式求出区域图片的相似系数和相关系数;
其中:S为相似系数,R为相关系数;
bi为B×B所有像素点的灰度值;
di为D×D所有像素点的灰度值;
(7)若相似系数和相关系数小于设定的阈值T2,输出边缘图像g(i,j)=0并结束,否则输出g(i,j)=1并至下一步;
(8)返回步骤(2),继续对区域图片的图像点进行判断,直至区域图片中所有点全部判断完。
进一步地,通过拟合算法对区域图片进行识别包括如下步骤:
(1)建立图像平面坐标系,标定左上角坐标原点O,水平方向为X轴方向,垂直方向为Y轴方向;
(2)左、右道路标志线的模型为,如下公式:
yl=k_left×xl+b_left;
yr=k_riht×xr+b_right;
其中:xl,yl,xr,yr分别表示左、右道路的横、纵向坐标;
k_left,k_right分别表示左、右道路标志线的斜率;
b_left,b_right分别表示左、右道路标志线的截距;
(3)把上述公式转换为l=xcosθ+ysinθ,从而把X-Y平面的任一条直线变换为对应l-θ空间的一个点;
(4)将l-θ空间离散化为栅格,由每一个(x,y)点带入θ的离散值,并求出各个l值;
(5)统计所有点,计算值大的栅格对应于共线点,其(l,θ)作为直线的拟合参数;
(6)把l-θ空间的直线拟合参数转换为直角坐标内的参数,确定标志线的形状和面积;
(7)在标志线的形状和面积识别之后,判断汽车能否识别该标志线,如果标志线能够识别,则车辆按照识别的标志线类型前进,如果汽车不能识别该标志线,控制器通过报警装置发出报警声音。
本发明的有益效果是:本发明采用摄像装置获取图像信息,可有效识别路面标志线,比单线激光扫面雷达扫描识别更加准确,降低了无人驾驶车辆在行驶过程中的安全隐患。
另外,本发明改进了边缘化处理和车道线识别算法,二值化处理通过常用的二值化处理手段,对区域图片进行处理,提高了车辆在行驶过程中的安全系数。
附图说明
下面结合附图对本发明进一步说明。
图1是本发明的整体流程图;
图2是本发明的边缘化处理算法流程图;
图3是本发明中的基元块和区域快的示意图;
图4是本发明的平面坐标系图;
具体实施方式
现在结合附图对本发明作进一步的说明。这些附图均为简化的示意图仅以示意方式说明本发明的基本结构,因此其仅显示与本发明有关的构成。
如图1、图2、图3、图4所示,一种基于摄像原理的无人驾驶汽车对路面标志线的识别方法,包括如下步骤:
步骤1:在无人驾驶汽车的车前纵向中心处安装摄像装置,通过该摄像装置获取车辆当前所处的路面信息,并生成路面信息图像;
步骤2:对上步生成的路面图像信息,采集带有路面标志线的感兴趣区域,提取感兴趣区域形成区域图片;
步骤3:对区域图片进行边缘化处理;
步骤4:对区域图片进行二值化处理;
步骤5:车道线识别:通过拟合算法对区域图片进行识别;当区域图片中的标志线残缺及破损不能识别时,控制器通过报警装置发出报警声音。
进一步地,所述边缘化处理方法为:
(1)在区域图片中确定大小为M×N的路面图像f(x,y);
(2)在其所采集到任意像素点的坐标值f(i,j),以该像素为中心的小邻块记为B×B,即基元块;
(3)取基元块为中心的区域块记为D×D;
(4)求基元块B×B的均方差σB,公式如下;
其中:μ为算数平均值;
(5)当均方差σB比设定的阈值T1小则输出边缘图像g(i,j)=0并结束,否则进行下一步;
(6)用如下公式求出区域图片的相似系数和相关系数;
其中:S为相似系数,R为相关系数;
bi为B×B所有像素点的灰度值;
di为D×D所有像素点的灰度值;
(7)若相似系数和相关系数小于设定的阈值T2,输出边缘图像g(i,j)=0并结束,否则输出g(i,j)=1并至下一步;
(8)返回步骤(2),继续对区域图片的图像点进行判断,直至区域图片中所有点全部判断完。
进一步地,通过拟合算法对区域图片进行识别包括如下步骤:
(1)建立图像平面坐标系,标定左上角坐标原点O,水平方向为X轴方向,垂直方向为Y轴方向;
(2)左、右道路标志线的模型为,如下公式:
yl=k_left×xl+b_left;
yr=k_riht×xr+b_right;
其中:xl,yl,xr,yr分别表示左、右道路的横、纵向坐标;
k_left,k_right分别表示左、右道路标志线的斜率;
b_left,b_right分别表示左、右道路标志线的截距;
(3)把上述公式转换为l=xcosθ+ysinθ,从而把X-Y平面的任一条直线变换为对应l-θ空间的一个点;
(4)将l-θ空间离散化为栅格,由每一个(x,y)点带入θ的离散值,并求出各个l值;
(5)统计所有点,计算值大的栅格对应于共线点,其(l,θ)作为直线的拟合参数;
(6)把l-θ空间的直线拟合参数转换为直角坐标内的参数,确定标志线的形状和面积;
(7)在标志线的形状和面积识别之后,判断汽车能否识别该标志线,如果标志线能够识别,则车辆按照识别的标志线类型前进,如果汽车不能识别该标志线,控制器通过报警装置发出报警声音。
本发明采用摄像装置获取图像信息,可有效识别路面标志线,比单线激光扫面雷达扫描识别更加准确,降低了无人驾驶车辆在行驶过程中的安全隐患。
另外,本发明改进了边缘化处理和车道线识别算法,二值化处理通过常用的二值化处理手段,对区域图片进行处理,提高了车辆在行驶过程中的安全系数。摄像装置可采用高速面阵相机。
以上述依据本发明的理想实施例为启示,通过上述的说明内容,相关工作人员完全可以在不偏离本项发明技术思想的范围内,进行多样的变更以及修改。本项发明的技术性范围并不局限于说明书上的内容,必须要根据权利要求范围来确定其技术性范围。

Claims (3)

1.一种基于摄像原理的无人驾驶汽车对路面标志线的识别方法,其特征在于:包括如下步骤:
步骤1:在无人驾驶汽车的车前纵向中心处安装摄像装置,通过该摄像装置获取车辆当前所处的路面信息,并生成路面信息图像;
步骤2:对上步生成的路面图像信息,采集带有路面标志线的感兴趣区域,提取感兴趣区域形成区域图片;
步骤3:对区域图片进行边缘化处理;
步骤4:对区域图片进行二值化处理;
步骤5:车道线识别:通过拟合算法对区域图片进行识别;当区域图片中的标志线残缺及破损不能识别时,控制器通过报警装置发出报警声音。
2.根据权利要求1所述的基于摄像原理的无人驾驶汽车对路面标志线的识别方法,其特征在于:所述边缘化处理方法为:
(1)在区域图片中确定大小为M×N的路面图像f(x,y);
(2)在其所采集到任意像素点的坐标值f(i,j),以该像素为中心的小邻块记为B×B,即基元块;
(3)取基元块为中心的区域块记为D×D;
(4)求基元块B×B的均方差σB,公式如下;
σ B = 1 N Σ i = 1 N ( x i - μ ) 2 ;
其中:μ为算数平均值;
(5)当均方差σB比设定的阈值T1小则输出边缘图像g(i,j)=0并结束,否则进行下一步;
(6)用如下公式求出区域图片的相似系数和相关系数;
S = Σ i = 1 k d n i b n i ( Σ i = 1 k b n i 2 Σ i = 1 k d n i 2 ) 1 2 × k = B × B ;
R = Σ i = 1 k ( b i - b ‾ ) ( d i - d ‾ ) ( Σ i = 1 k ( b i - b ‾ ) 2 × Σ i = 1 k ( d i - d ‾ ) 2 ) 1 / 2 × k = B × B ;
其中:S为相似系数,R为相关系数;
bi为B×B所有像素点的灰度值;
di为D×D所有像素点的灰度值;
(7)若相似系数和相关系数小于设定的阈值T2,输出边缘图像g(i,j)=0并结束,否则输出g(i,j)=1并至下一步;
(8)返回步骤(2),继续对区域图片的图像点进行判断,直至区域图片中所有点全部判断完。
3.根据权利要求1所述的基于摄像原理的无人驾驶汽车对路面标志线的识别方法,其特征在于:通过拟合算法对区域图片进行识别包括如下步骤:
(1)建立图像平面坐标系,标定左上角坐标原点O,水平方向为X轴方向,垂直方向为Y轴方向;
(2)左、右道路标志线的模型为,如下公式:
yl=k_left×xl+b_left;
yr=k_riht×xr+b_right;
其中:xl,yl,xr,yr分别表示左、右道路的横、纵向坐标;
k_left,k_right分别表示左、右道路标志线的斜率;
b_left,b_right分别表示左、右道路标志线的截距;
(3)把上述公式转换为l=xcosθ+ysinθ,从而把X-Y平面的任一条直线变换为对应l-θ空间的一个点;
(4)将l-θ空间离散化为栅格,由每一个(x,y)点带入θ的离散值,并求出各个l值;
(5)统计所有点,计算值大的栅格对应于共线点,其(l,θ)作为直线的拟合参数;
(6)把l-θ空间的直线拟合参数转换为直角坐标内的参数,确定标志线的形状和面积;
(7)在标志线的形状和面积识别之后,判断汽车能否识别该标志线,如果标志线能够识别,则车辆按照识别的标志线类型前进,如果汽车不能识别该标志线,控制器通过报警装置发出报警声音。
CN201610872287.6A 2016-09-30 2016-09-30 基于摄像原理的无人驾驶汽车对路面标志线的识别方法 Pending CN106529404A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201610872287.6A CN106529404A (zh) 2016-09-30 2016-09-30 基于摄像原理的无人驾驶汽车对路面标志线的识别方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201610872287.6A CN106529404A (zh) 2016-09-30 2016-09-30 基于摄像原理的无人驾驶汽车对路面标志线的识别方法

Publications (1)

Publication Number Publication Date
CN106529404A true CN106529404A (zh) 2017-03-22

Family

ID=58331304

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610872287.6A Pending CN106529404A (zh) 2016-09-30 2016-09-30 基于摄像原理的无人驾驶汽车对路面标志线的识别方法

Country Status (1)

Country Link
CN (1) CN106529404A (zh)

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107895147A (zh) * 2017-11-07 2018-04-10 龚土婷 一种安全性高的无人驾驶汽车***
CN108068817A (zh) * 2017-12-06 2018-05-25 张家港天筑基业仪器设备有限公司 一种无人驾驶汽车自动变道装置及方法
CN108108703A (zh) * 2017-12-27 2018-06-01 天津英创汇智汽车技术有限公司 减速带缺失检测方法、装置及电子设备
CN108918532A (zh) * 2018-06-15 2018-11-30 长安大学 一种快速道路交通标志破损检测***及其检测方法
CN109522804A (zh) * 2018-10-18 2019-03-26 汽-大众汽车有限公司 一种道路边沿识别方法及***
CN112092827A (zh) * 2020-09-23 2020-12-18 北京百度网讯科技有限公司 自动驾驶功能控制方法、装置、电子设备及存储介质

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN201427553Y (zh) * 2009-06-26 2010-03-24 长安大学 一种车辆偏离车道报警***
US20110216938A1 (en) * 2010-03-03 2011-09-08 Denso Corporation Apparatus for detecting lane-marking on road
CN202134079U (zh) * 2011-06-16 2012-02-01 长安大学 一种无人驾驶车辆车道标志线识别与报警装置
CN203305895U (zh) * 2012-10-12 2013-11-27 天津图科科技研发有限公司 基于图像识别的车辆偏离车道报警***
CN104149783A (zh) * 2014-08-27 2014-11-19 刘红华 一种数字公路及其自动驾驶车辆

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN201427553Y (zh) * 2009-06-26 2010-03-24 长安大学 一种车辆偏离车道报警***
US20110216938A1 (en) * 2010-03-03 2011-09-08 Denso Corporation Apparatus for detecting lane-marking on road
CN202134079U (zh) * 2011-06-16 2012-02-01 长安大学 一种无人驾驶车辆车道标志线识别与报警装置
CN203305895U (zh) * 2012-10-12 2013-11-27 天津图科科技研发有限公司 基于图像识别的车辆偏离车道报警***
CN104149783A (zh) * 2014-08-27 2014-11-19 刘红华 一种数字公路及其自动驾驶车辆

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
王秀梅: "基于分形路面破损图像裂纹识别研究", 《中国优秀硕士学位论文全文数据库 工程科技辑》 *

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107895147A (zh) * 2017-11-07 2018-04-10 龚土婷 一种安全性高的无人驾驶汽车***
CN108068817A (zh) * 2017-12-06 2018-05-25 张家港天筑基业仪器设备有限公司 一种无人驾驶汽车自动变道装置及方法
CN108108703A (zh) * 2017-12-27 2018-06-01 天津英创汇智汽车技术有限公司 减速带缺失检测方法、装置及电子设备
CN108918532A (zh) * 2018-06-15 2018-11-30 长安大学 一种快速道路交通标志破损检测***及其检测方法
CN108918532B (zh) * 2018-06-15 2021-06-11 长安大学 一种快速道路交通标志破损检测***及其检测方法
CN109522804A (zh) * 2018-10-18 2019-03-26 汽-大众汽车有限公司 一种道路边沿识别方法及***
CN109522804B (zh) * 2018-10-18 2020-11-06 一汽-大众汽车有限公司 一种道路边沿识别方法及***
CN112092827A (zh) * 2020-09-23 2020-12-18 北京百度网讯科技有限公司 自动驾驶功能控制方法、装置、电子设备及存储介质
CN112092827B (zh) * 2020-09-23 2022-04-22 北京百度网讯科技有限公司 自动驾驶功能控制方法、装置、电子设备及存储介质

Similar Documents

Publication Publication Date Title
CN106529404A (zh) 基于摄像原理的无人驾驶汽车对路面标志线的识别方法
CN109460709B (zh) 基于rgb和d信息融合的rtg视觉障碍物检测的方法
CN105260699B (zh) 一种车道线数据的处理方法及装置
CN102779280B (zh) 一种基于激光传感器的交通信息提取方法
CN100403332C (zh) 用于车道偏离报警的车道线鲁棒识别方法
CN102508246B (zh) 车辆前方障碍物检测跟踪方法
CN110862033B (zh) 一种应用于煤矿斜井绞车的智能预警检测方法
CN103714538B (zh) 道路边缘检测方法、装置及车辆
CN110379168B (zh) 一种基于Mask R-CNN的交通车辆信息获取方法
CN105488454A (zh) 基于单目视觉的前方车辆检测与测距
CN106127113A (zh) 一种基于三维激光雷达的道路车道线检测方法
CN111369541A (zh) 一种智能汽车恶劣天气条件下车辆检测方法
CN108717540A (zh) 基于2d激光雷达区分行人和车辆的方法及装置
CN103034843B (zh) 一种基于单目视觉的夜间车辆检测方法
CN102831618A (zh) 基于霍夫森林的视频目标跟踪方法
CN104134209A (zh) 一种视觉导航中的特征提取与匹配方法及***
CN106683530A (zh) 一种基于三维激光视觉和高精度车道模型的计算机评判***和方法
CN110188606B (zh) 基于高光谱成像的车道识别方法、装置及电子设备
CN102768726A (zh) 一种预防行人碰撞的行人检测方法
CN109272482A (zh) 一种基于序列图像的城市路口车辆排队检测***
CN202134079U (zh) 一种无人驾驶车辆车道标志线识别与报警装置
CN114898296A (zh) 基于毫米波雷达与视觉融合的公交车道占用检测方法
Zhang et al. Vehicle detection method for intelligent vehicle at night time based on video and laser information
Li et al. Judgment and optimization of video image recognition in obstacle detection in intelligent vehicle
CN106960193A (zh) 一种车道线检测装置和方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
WD01 Invention patent application deemed withdrawn after publication
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20170322