CN104951790B - 基于多源逆透视图像无缝拼接的车道线识别方法 - Google Patents

基于多源逆透视图像无缝拼接的车道线识别方法 Download PDF

Info

Publication number
CN104951790B
CN104951790B CN201510081267.2A CN201510081267A CN104951790B CN 104951790 B CN104951790 B CN 104951790B CN 201510081267 A CN201510081267 A CN 201510081267A CN 104951790 B CN104951790 B CN 104951790B
Authority
CN
China
Prior art keywords
image
width
scope
lane
gray
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
CN201510081267.2A
Other languages
English (en)
Other versions
CN104951790A (zh
Inventor
袁家政
刘宏哲
鲍泓
郑永荣
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Union University
Original Assignee
Beijing Union University
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Union University filed Critical Beijing Union University
Priority to CN201510081267.2A priority Critical patent/CN104951790B/zh
Publication of CN104951790A publication Critical patent/CN104951790A/zh
Application granted granted Critical
Publication of CN104951790B publication Critical patent/CN104951790B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Landscapes

  • Image Processing (AREA)
  • Image Analysis (AREA)

Abstract

基于多源逆透视图像无缝拼接的车道线识别方法属于计算机视觉领域和安全智能交通领域。首先通过安装在车辆内后视镜处的摄像机和车辆左右倒车镜处的摄像机采集视频图像,分别对这三个摄像机的原始图像进行预处理,然后进行逆透视变换,再将三幅逆透视图像进行无缝拼接得到一幅图像,最后对图像进行车道线识别。基于多源逆透视图像无缝拼接的车道线识别方法可以解决多车道线识别、大曲率弯道识别等问题,适用于智能车视觉导航和车道偏离预警。

Description

基于多源逆透视图像无缝拼接的车道线识别方法
技术领域:
基于多源逆透视图像无缝拼接的车道线识别方法,属于计算机视觉领域和安全智能交通领域。
背景技术:
随着社会经济和科学技术的不断发展,汽车作为交通工具成为了人们生活中的一部分,安全驾驶和智能驾驶已经成为人们追求的方向。无论是车道偏离预警***还是无人驾驶智能汽车视觉导航,都需要进行车道线识别,但是多车道识别、大曲率弯道识别依然是车道线识别的难点,如何解决多车道、大曲率弯道识别变得越来越重要。
公布号为CN102806913A的中国发明专利公开了一种新型的车道线偏离检测方法及装置,该发明专利公开了一种车道线识别的方法,但只针对一般情况下的车道线识别,解决不了多车道线和大曲率弯道的识别问题。
发明内容:
本发明的目的在于克服现有车道线识别方法存在识别视野范围受限以及不能解决多车道、大曲率弯道的车道线识别问题等缺点,提出了基于多源逆透视图像无缝拼接的车道线识别方法。
为了实现上述目的,本发明采取了如下的技术方案:
基于多源逆透视图像无缝拼接的车道线识别方法,其特征在于包含下述步骤:
步骤1:传感器的安装;
步骤1-1:分别在车辆左右的倒车镜下方各安装一个单目摄像机,摄像机的镜头冲向前下方;
步骤1-2:在车辆内后视镜的正下方安装一个单目摄像机并与车体的纵向坐标轴平行;
步骤2:逆透视变换标定;
步骤2-1:对中间的摄像机进行标定,要求逆透视变换后的鸟瞰图的视野横轴宽度是车辆的宽度,纵轴宽度的范围是1000cm--2000cm;
步骤2-2:对右摄像机进行标定,要求逆透视变换后的鸟瞰图是是个倒直角梯形,视野下端横轴宽度的范围是150cm--250cm,纵轴宽度的范围是1000cm--2500cm;所述的视野横轴宽度的范围是指车辆右侧前后车轮外侧连线以右的视野范围;所述的视野纵轴宽度的范围是指车辆前方的视野范围,其范围最远端要求与中间摄像机的纵轴宽度一致;
步骤2-3:对左摄像机进行标定,要求逆透视变换后的鸟瞰图是是个倒直角梯形,视野下端横轴宽度的范围是150cm--250cm,纵轴宽度的范围是1000cm--2500cm;所述的视野横轴宽度的范围是指车辆左侧前后车轮外侧连线以左的视野范围;所述的视野纵轴宽度的范围是指车辆前方的视野范围,其范围最远端要求与中间摄像机的纵轴宽度一致;
步骤2-2和步骤2-3的顺序能任意调换;
步骤3:逆透视图像无缝拼接;
步骤3-1:从左摄像机获取车辆左侧路面图像L_image,先对图像L_image进行灰度化处理得到灰度图像L_gray,然后对图像L_gray进行自适应二值化处理得到二值化图像L_binary,再对图像L_binary进行逆透视变换得到鸟瞰图像L_bird-view;
步骤3-2:从右摄像机获取车辆右侧路面图像R_image,先对图像R_image进行灰度化处理得到灰度图像R_gray,然后对图像R_gray进行自适应二值化处理得到二值化图像R_binary,再对图像R_binary进行逆透视变换得到鸟瞰图像R_bird-view;
步骤3-3:从中间摄像机获取车辆前方路面图像M_image,先对图像M_image进行灰度化处理得到灰度图像M_gray,然后对图像M_gray进行自适应二值化处理得到二值化图像M_binary,再对图像M_binary进行逆透视变换得到鸟瞰图像M_bird-view;
步骤3-1、步骤3-2和步骤3-3的顺序能任意调换;
步骤3-4:将步骤3-1、步骤3-2和步骤3-3的结果进行拼接;从左到右的顺序是L_bird-view、M_bird-view、R_bird-view,得到一幅拼接的图像Bird-view;
步骤4:车道线识别;对步骤3得到图像Bird-view进行闭运算,消除拼接处车道线的断裂;然后再根据车道线的宽度对图像进行滤波,将不符合车道线宽度特征的线段过滤掉;再对图像进行线性拟合,计算拟合后线段的长度,根据车道线虚线段长度进行滤波,一般虚线车道线的最短长度是2米,将小于2米的线段过滤掉;然后再计算线段间的垂直距离,根据车道宽度进行滤波,城市道路的车道宽度范围在300cm--375cm,垂直距离在其范围内则认为是相邻的两条车道线。
上述方案需要特别说明是的:
步骤3中三幅图像的逆透视图像的参数必须是一致的,其中包括最远端视野范围、逆透视图像中像素与实际距离的比例系数K都必须一样,才能保证三幅逆透视图像进行无缝拼接。
本发明的有益效果是:
可以很好的解决多车道、大曲率弯道的车道线识别问题;使用左中右三个摄像机获取图像,进行逆透视图像无缝拼接,克服了单个摄像机视野受限的缺点。
附图说明:
图1本发明的流程示意图
图2逆透视图像无缝拼接示意图
图3实例中的摄像机安装
图4逆透视图像无缝拼接实例图
具体实施方式:
采用本发明的方法,给出一个非限定性的实例,结合图1进一步对本发明的具体实施过程进行说明。本发明在智能车辆平台、智能车测试场地进行实现,为了保证无人驾驶智能汽车以及人员安全,所用平台和场地均为无人驾驶技术专业实验平台和测试场地。所使用的一些通用技术如图像采集、图像变换等不在详细叙述。
本发明的实施方式如下:
1.按照步骤1要求在车辆左右倒车镜处和车内后视镜下方安装单目摄像机,本实例所用平台已安装所需装置,只需要稍作调整便可以进行实验。
2.按照步骤2、3、4的详细步骤进行实现,其中所涉及到的参数为:测试车道宽度为300cm;车道线的宽度为15cm,车辆宽度170cm;左右摄像机标定后逆透视变换得到的鸟瞰图的视野横轴宽度是450cm,纵轴宽度是2000cm;中间摄像机标定后逆透视变换得到鸟瞰图的视野横轴宽度是170cm,纵轴宽度是1500cm。
3.车道线识别正确率为100%。

Claims (1)

1.基于多源逆透视图像无缝拼接的车道线识别方法,其特征在于包含下述步骤:
步骤1:传感器的安装;
步骤1-1:分别在车辆左右的倒车镜下方各安装一个单目摄像机,摄像机的镜头冲向前下方;
步骤1-2:在车辆内后视镜的正下方安装一个单目摄像机并与车体的纵向坐标轴平行;
步骤2:逆透视变换标定;
步骤2-1:对中间的摄像机进行标定,要求逆透视变换后的鸟瞰图的视野横轴宽度是车辆的宽度,视野纵轴宽度的范围是1000cm--2000cm;
步骤2-2:对右摄像机进行标定,要求逆透视变换后的鸟瞰图是个倒直角梯形,视野下端横轴宽度的范围是150cm--250cm,视野纵轴宽度的范围是1000cm--2500cm;所述的视野横轴宽度的范围是指车辆右侧前后车轮外侧连线以右的视野范围;所述的视野纵轴宽度的范围是指车辆前方的视野范围,其范围最远端要求与中间摄像机的纵轴宽度一致;
步骤2-3:对左摄像机进行标定,要求逆透视变换后的鸟瞰图是个倒直角梯形,视野下端横轴宽度的范围是150cm--250cm,纵轴宽度的范围是1000cm--2500cm;所述的视野横轴宽度的范围是指车辆左侧前后车轮外侧连线以左的视野范围;所述的视野纵轴宽度的范围是指车辆前方的视野范围,其范围最远端要求与中间摄像机的纵轴宽度一致;
步骤2-2和步骤2-3的顺序能任意调换;
步骤3:逆透视图像无缝拼接;
步骤3-1:从左摄像机获取车辆左侧路面图像L_image,先对图像L_image进行灰度化处理得到灰度图像L_gray,然后对图像L_gray进行自适应二值化处理得到二值化图像L_binary,再对图像L_binary进行逆透视变换得到鸟瞰图像L_bird-view;
步骤3-2:从右摄像机获取车辆右侧路面图像R_image,先对图像R_image进行灰度化处理得到灰度图像R_gray,然后对图像R_gray进行自适应二值化处理得到二值化图像R_binary,再对图像R_binary进行逆透视变换得到鸟瞰图像R_bird-view;
步骤3-3:从中间摄像机获取车辆前方路面图像M_image,先对图像M_image进行灰度化处理得到灰度图像M_gray,然后对图像M_gray进行自适应二值化处理得到二值化图像M_binary,再对图像M_binary进行逆透视变换得到鸟瞰图像M_bird-view;
步骤3-1、步骤3-2和步骤3-3的顺序能任意调换;
步骤3-4:将步骤3-1、步骤3-2和步骤3-3的结果进行拼接;从左到右的顺序是L_bird-view、M_bird-view、R_bird-view,得到一幅拼接的图像Bird-view;
步骤4:车道线识别;对步骤3得到图像Bird-view进行闭运算,消除拼接处车道线的断裂;然后再根据车道线的宽度对图像进行滤波,将不符合车道线宽度特征的线段过滤掉;再对图像进行线性拟合,计算拟合后线段的长度,根据车道线虚线段长度进行滤波,一般虚线车道线的最短长度是2米,将小于2米的线段过滤掉;然后再计算线段间的垂直距离,根据车道宽度进行滤波,城市道路的车道宽度范围在300cm--375cm,垂直距离在其范围内则认为是相邻的两条车道线。
CN201510081267.2A 2015-02-15 2015-02-15 基于多源逆透视图像无缝拼接的车道线识别方法 Expired - Fee Related CN104951790B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201510081267.2A CN104951790B (zh) 2015-02-15 2015-02-15 基于多源逆透视图像无缝拼接的车道线识别方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201510081267.2A CN104951790B (zh) 2015-02-15 2015-02-15 基于多源逆透视图像无缝拼接的车道线识别方法

Publications (2)

Publication Number Publication Date
CN104951790A CN104951790A (zh) 2015-09-30
CN104951790B true CN104951790B (zh) 2018-02-02

Family

ID=54166431

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201510081267.2A Expired - Fee Related CN104951790B (zh) 2015-02-15 2015-02-15 基于多源逆透视图像无缝拼接的车道线识别方法

Country Status (1)

Country Link
CN (1) CN104951790B (zh)

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105966314B (zh) * 2016-06-15 2017-11-21 北京联合大学 基于双低成本摄像头的车道偏离预警方法
CN106529488A (zh) * 2016-11-18 2017-03-22 北京联合大学 一种基于orb特征提取的车道线检测方法
CN108319952B (zh) * 2017-01-16 2021-02-02 浙江宇视科技有限公司 一种车辆特征提取方法及装置
CN107389084B (zh) * 2017-06-09 2020-06-05 深圳市速腾聚创科技有限公司 行车路径规划方法及存储介质
CN107862290B (zh) * 2017-11-10 2021-09-24 智车优行科技(北京)有限公司 车道线检测方法及***
CN111835998B (zh) * 2019-04-13 2023-06-13 长沙智能驾驶研究院有限公司 超视距全景图像获取方法、装置、介质、设备及***

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103593671A (zh) * 2013-11-25 2014-02-19 中国航天科工集团第三研究院第八三五七研究所 基于三摄像机协同的大范围车道线视觉检测方法
CN103600707A (zh) * 2013-11-06 2014-02-26 同济大学 一种智能泊车***的泊车位检测装置及方法

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102010020330A1 (de) * 2010-05-14 2011-11-17 Conti Temic Microelectronic Gmbh Verfahren zur Erkennung von Verkehrszeichen

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103600707A (zh) * 2013-11-06 2014-02-26 同济大学 一种智能泊车***的泊车位检测装置及方法
CN103593671A (zh) * 2013-11-25 2014-02-19 中国航天科工集团第三研究院第八三五七研究所 基于三摄像机协同的大范围车道线视觉检测方法

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
An approach of lane detection based on Inverse Perspective Mapping;Jun Wang 等;《Intelligent Transportation Systems(ITSC), 2014 IEEE 17th International Conference on》;20141111;35-38 *
基于逆透视投影变换的图像拼接方法;袁启平 等;《微计算机信息》;20101231;第26卷(第7-3期);208-210 *

Also Published As

Publication number Publication date
CN104951790A (zh) 2015-09-30

Similar Documents

Publication Publication Date Title
CN104951790B (zh) 基于多源逆透视图像无缝拼接的车道线识别方法
US10051061B2 (en) Smart road system for vehicles
DE112020004931T5 (de) Systeme und verfahren zur bestimmung der verkehrssicherheit
CN104008645B (zh) 一种适用于城市道路车道线预测及预警方法
CN108281041A (zh) 一种基于超声波和视觉传感器相融合的泊车车位检测方法
DE112020003897T5 (de) Systeme und verfahren zur überwachung von fahrspurüberlastung
DE102016100737A1 (de) Betrieb eines autonomen Fahrzeugs in Umgebungen mit blockierter Insassensicht und Sensorerfassung
CN103308056B (zh) 一种道路标线检测方法
CN104899858A (zh) 基于双摄像机图像融合的车道线识别方法
DE102017119013A1 (de) Fahrzeugfahrsteuervorrichtung
CN203134149U (zh) 基于不同波段成像融合图像处理的车辆辅助驾驶***
CN104494598A (zh) 一种用于智能车辆的路口行驶控制方法
DE102015213884A1 (de) Vorrichtung zum Bestimmen einer Gefahr in einer Fahrtumgebung und Vorrichtung zum Anzeigen einer Gefahr in einer Fahrtumgebung
WO2013034347A2 (de) Verfahren zum entlasten eines fahrers beim führen eines fahrzeuges
CN101763734A (zh) 交通信号灯智能控制***及其控制方法
CN104508723A (zh) 图像处理装置
DE102011056671A1 (de) Bestimmung eines Höhenprofils einer Fahrzeugumgebung mittels einer 3D-Kamera
KR20110048798A (ko) 랜드마크를 이용한 조향 제어 장치 및 방법
CN103161121B (zh) 里程桩号自动校正方法、***及装置
DE102016122338A1 (de) Informations-verarbeitungseinrichtung, informations-verarbeitungsverfahren, steuerungsvorrichtung für ein fahrzeug und steuerungsverfahren für ein fahrzeug
Llorca et al. Daytime and nighttime passing maneuvers on a two-lane rural road in Spain
DE112021004128T5 (de) Systeme und verfahren für kartenbasierte modellierung der realen welt
DE112022000380T5 (de) Systeme und verfahren zur einheitlichen geschwindigkeitskartierung und navigation
CN106314432B (zh) 调整车辆速度的方法
CN103465825A (zh) 一种车载***及其控制方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20180202

Termination date: 20220215

CF01 Termination of patent right due to non-payment of annual fee