CN103600707B - 一种智能泊车***的泊车位检测装置及方法 - Google Patents

一种智能泊车***的泊车位检测装置及方法 Download PDF

Info

Publication number
CN103600707B
CN103600707B CN201310545995.5A CN201310545995A CN103600707B CN 103600707 B CN103600707 B CN 103600707B CN 201310545995 A CN201310545995 A CN 201310545995A CN 103600707 B CN103600707 B CN 103600707B
Authority
CN
China
Prior art keywords
module
parking
parking position
obstacle
vehicle
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
CN201310545995.5A
Other languages
English (en)
Other versions
CN103600707A (zh
Inventor
陈慧
范梦阳
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Tongji University
Original Assignee
Tongji University
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Tongji University filed Critical Tongji University
Priority to CN201310545995.5A priority Critical patent/CN103600707B/zh
Publication of CN103600707A publication Critical patent/CN103600707A/zh
Application granted granted Critical
Publication of CN103600707B publication Critical patent/CN103600707B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Landscapes

  • Traffic Control Systems (AREA)

Abstract

本发明公开一种智能泊车***的泊车位检测装置,包括传感器单元:四个广角摄像头和超声波测距传感器;信号处理单元:环视图生成模块、泊车位检测模块;人机接口单元:输出模块用以显示环视图和检测到的库位、输入模块用以接受驾驶员输入的各种指令。其中,泊车位检测模块包括库位线检测子模块、障碍车检测子模块和泊车位输出子模块。本发明还公开一种智能泊车***的泊车位检测方法。本发明采用低成本传感器方案,通过融合超声波测距传感器得到的距离值与摄像头采集到的图像信息,提高了泊车位检测的正确率和精度,而且在地面存在库位线和存在障碍车的多种情况下都能有效检测到泊车位。

Description

一种智能泊车***的泊车位检测装置及方法
技术领域
本发明属于汽车技术领域,涉及驾驶辅助***,尤其涉及到智能泊车***的泊车位检测装置及方法。
背景技术
随着汽车保有量的增大,停车位日益紧张,停车难这一问题变得更加严重。对于没有经验的新手而言,把车辆安全地停入泊车位非常困难;即使对于有经验的驾驶员来讲,把车辆停入狭小的泊车位也并不是一件容易的事情。开发智能泊车***,有利于保证泊车过程的安全性,同时提高泊车过程的舒适性和便捷性。
智能泊车***一般包括以下几个模块:泊车位检测模块、路径规划模块、跟踪模块、执行模块和人机接口模块。泊车位检测模块是智能泊车***的基础,很大程度上影响着整个泊车***的性能。
目前,智能泊车***的泊车位检测方法主要包括以下三种:1.利用超声波测距传感器进行泊车位检测。由于车辆前端或后端存在圆角,受超声波测距传感器本身特性的局限,在前后端圆角处存在接收不到回波的现象,这将造成检测到的泊车位比实际偏大;此外,这种方法也不适用于地面存在库位线但没有前后障碍车的情况,如停车场等。大众汽车的泊车辅助系利用安装在保险杠两侧的超声传感器,在车辆行驶时对车辆两侧进行扫描,进而检测泊车位。该***在大众旗下途观、迈腾、CC等车型上均有搭载。2.利用激光雷达进行泊车位检测,其优点在于检测精度高,但是激光雷达的成本高昂。本田技研工业株式会社申请的专利CN10187849利用雷达装置以规定的时间间隔发送电磁波,根据反射波的接收结果检测电磁波在物体上反射的反射点,并根据预先存储的自车的车身尺寸数据和反射点的排列判断泊车空间的有无。3.利用机器视觉技术进行泊车位检测,其难点在于图像易受到阴影、光照等环境条件的影响。***在“基于环视的自动泊车方法研究与***设计”中提出了基于Radon变换的亮点特征检测泊车位以及基于兴趣窗口提取空泊车位的方法。以上方案各有优点,不过仍然存在不足。
发明内容
本发明的目的在于提供一种智能泊车***的泊车位检测装置及方法,在地面存在库位线和存在障碍车的多种情况下都能有效检测到泊车位。
为达到以上目的,本发明所采用的解决方案是:
一种智能泊车***的泊车位检测装置,包括:传感器单元:位于车辆车身上的摄像头和测距传感器;信号处理单元:环视图生成模块、泊车位检测模块;人机接口:输出模块用以显示环视图和检测到的库位,输入模块用以接受驾驶员输入的各种指令。
所述泊车位检测模块包括泊车位线检测子模块、障碍车检测子模块、泊车位输出子模块;泊车位线检测子模块利用地面泊车位线检测泊车位;障碍车检测子模块利用障碍车检测泊车位;泊车位输出子模块根据泊车位线检测子模块和障碍车检测子模块的检测结果,最终确定出泊车位。
所述传感器单元包括位于车辆前侧、后侧、左侧、右侧的四个广角摄像头和位于车辆两侧的超声波测距传感器。
所述四个摄像头的安装位置应保证四个摄像头采集到的图片覆盖到车辆四周360度区域,而且相邻两摄像头采集到的图片有重叠区域。
所述人机接口输出模块将检测到的泊车位叠加显示在环视图上,如果检测到的泊车位不正确或者不符合驾驶员的意愿,驾驶员可以通过输入模块调整泊车位的位置和(或)方向,在驾驶员改变泊车位的位置和(或)方向后,将新的泊车位四个角点坐标输出到智能泊车***的路径规划模块。
所述的智能泊车***的泊车位检测装置中的泊车位线检测子模块确定泊车位的方法,包括如下步骤:(1)图像预处理;(2)从环视图中提取直线;(3)对直线进行后处理,以保留地面泊车位线对应的线段,删除其他杂乱线段;(4)得到矩形泊车位。
所述的智能泊车***的泊车位检测装置中的障碍车检测子模块确定泊车位的方法:根据障碍车的前后端轮廓的位置来确定泊车位。
第一辆障碍车前端轮廓在全局坐标系中的位置采用以下方法确定:(1)利用超声波测距传感器得到的距离值和车辆位姿信息,拟合出对应于障碍车侧面轮廓的一条直线;(2)当超声波测距传感器的距离值发生正跳变时,存储这一时刻的环视图;(3)在环视图中设定感兴趣区域(ROI),使障碍车前端轮廓位于感兴趣区域内;(4)对所述感兴趣区域图像灰度化,做边缘检测,得到障碍车前端轮廓向前最凸出点(最前点)的坐标;(5)由最前点向拟合出的直线作垂线,确定出障碍车前端轮廓在全局坐标系中的位置;
若存在两辆障碍车,则第二辆障碍车后端轮廓在全局坐标系中的位置采用以下方法确定:(6)利用超声波测距传感器得到的距离值和车辆位姿信息,拟合出对应于障碍车侧面轮廓的一条直线;(2)当超声波测距传感器的距离值发生负跳变时,存储这一时刻的环视图;(3)在环视图中设定感兴趣区域,使障碍车后端轮廓位于感兴趣区域内;(4)对所述感兴趣区域图像灰度化,做边缘检测,得到障碍车前端轮廓向后最凸出点即最后点的坐标;(5)由最后点向拟合出的直线作垂线,确定出障碍车后端轮廓在全局坐标系中的位置。
由于采用了上述技术方案,本发明具有以下有益效果:采用低成本传感器方案,通过融合超声波测距传感器得到的距离值与摄像头采集到的图像信息,提高了泊车位检测的正确率和精度,而且在地面存在库位线和存在障碍车的多种情况下都能有效检测到泊车位。
附图说明
图1是本发明智能泊车***的泊车位检测装置功能模块示意图。
图2是本发明智能泊车***的泊车位检测方法的流程图。
图3是本发明实施例中传感器在车辆上的布置方案。
图4是本发明实施例中拼接生成的一张环视图。
图5是本发明的泊车位线检测子模块的算法流程图。
图6是本发明实施例中直线后处理方法的流程图。
图7是本发明障碍车检测子模块的算法流程图。
图8为本发明中全局坐标系和车辆坐标系的示意图。
图9是本发明第一辆障碍车前端轮廓确定方法的流程图。
图10是本发明实施例中第一辆障碍车前端轮廓确定方法示意图。
图11是本发明实施例中将检测到的泊车位在环视图中叠加显示的效果图。
具体实施方式
以下结合附图所示实施例对本发明作进一步的说明。
请参阅图1和图2。
1、传感器单元:
传感器单元包括:位于车辆前侧、后侧、左侧、右侧的四个广角摄像头和位于车辆两侧的超声波测距传感器。其中,四个摄像头的安装位置应保证四个摄像头采集到的图片覆盖到车辆四周360度区域,而且相邻两摄像头采集到的图片有重叠区域。超声波测距传感器可以是左、右侧各布置一个,也可以是左、右侧分别布置多个。在实施例1中,将前摄像头布置在车辆前方格栅处,左右摄像头布置在左右后视镜处,后摄像头布置在车辆后背门上;在左右后视镜处分别安装一个超声波测距传感器。传感器在车辆上的布置方案如图3所示。
2、环视图生成模块
(1)矫正畸变
为了获得较大的视野范围,本发明中位于车身四周的四个摄像头使用鱼眼广角摄像头。鱼眼摄像头采集到的图像存在着较大的畸变,首先需要对其进行校正畸变。
在实施例2中,只考虑摄像机的径向畸变和切向畸变,根据标定得到的摄像机畸变参数,利用下式对四个摄像头采集到的图像分别进行校正畸变:
xcor=x+x(k1r2+k2r4+k3r6)+[2p1y+p2(r2+2x2)]式(2-1)
ycor=y+y(k1r2+k2r4+k3r6)+[p1(r2+2y2)+2p2x]式(2-2)
其中,(x,y)是某一像素点的原始坐标;(xcor,ycor)是此像素点校正畸变后的坐标;[k1,k2,k3]是径向畸变参数;[p1,p2]是切向畸变参数。
(2)生成四幅鸟瞰图
对矫正畸变后的四幅图像分别进行逆投影变换,将其转换为俯视效果的鸟瞰图。
1)摄像机模型
摄像机成像模型描述的是物体的成像过程,即任意一点在三维世界坐标系中的坐标到该点所成的像的坐标之间的数学映射关系。
①世界坐标系到摄像机坐标系的变换关系
X c Y c Z c 1 = R T 0 1 X w Y w Z w 1 式(2-3)
其中,R为3×3的旋转矩阵;T为3×1的平移向量; R T 0 1 为摄像机外参矩阵,(Xw,Yw,Zw)为空间中某点在世界坐标系中的坐标;(Xc,Yc,Zc)为此点在摄像机坐标系中的坐标。
②摄像机坐标系到图像坐标系的变换关系
Z c x y 1 = f x 0 c x 0 0 f y c y 0 0 0 1 0 X c Y c Z c 1 = f x 0 c x 0 0 f y c y 0 0 0 1 0 R T 0 1 X w Y w Z w 1 式(2-4)
其中, f x 0 c x 0 0 f y c y 0 0 0 1 0 为摄像机内参矩阵;(x,y)为该点在图像坐标系中的坐标。
2)逆透视投影变换
由式(2-4)可知,根据某点在三维世界坐标系中的坐标(Xw,Yw,Zw)可以计算得到该点在图像坐标系中的坐标(x,y),反之则不能。但是如果已知某点三维坐标中的某一维,则可以根据该点图像坐标系中的坐标(x,y),计算出该点三维坐标的另两维。逆透视变换就是指:建立图像坐标系中的点与三维世界坐标系中已知平面上的点的位置对应关系。
建立如下坐标系:选取车辆几何中心点竖直向下投影在地面上的点为坐标原点Ow;Yw轴方向平行于车辆后轴方向,指向车辆左侧为正;Xw垂直于Yw轴,指向车辆前方为正;垂直于地面向上为Zw轴正方向。将此坐标系作为世界坐标系。现假定Zw=0,即假定图像中的所有点在三维世界坐标系中都位于地面上,利用四个摄像机的内参矩阵和外参矩阵,对四个摄像机采集到的图像分别进行逆透视变换,得到俯视效果的鸟瞰图。
(3)拼接生成环视图
通过逆透视变换,得到四幅俯视效果的鸟瞰图,相邻摄像头得到的鸟瞰图会有部分重合区域,通过对齐重叠区域,可以将四幅鸟瞰图拼接为环视图。
首先,设定环视图的视野范围。这也就确定了鸟瞰图的缩放因子;
然后,确定拼缝。选取四幅鸟瞰图两两之间的重叠区域内的四条直线作为拼缝。
最后,将四幅鸟瞰图沿着拼缝的位置剪裁、拼接。
图4为实施例2中拼接生成的一张环视图。
3、泊车位检测模块
泊车位检测模块包括泊车位线检测子模块、障碍车检测子模块、泊车位输出子模块。泊车位线检测子模块利用地面泊车位线检测泊车位;障碍车检测子模块利用障碍车检测泊车位;泊车位输出子模块根据泊车位线检测子模块和障碍车检测子模块的检测结果,最终确定出泊车位。
(1)泊车位线检测子模块
泊车位线检测子模块的算法流程图如图5所示。
1)图像预处理
对环视图进行灰度化,将彩色图变成灰度图。再对灰度图进行中值滤波,减少图像中的噪声。
2)提取直线
①边缘检测
在实施例3中,使用canny算子对灰度图进行边缘检测。Canny边缘检测算子使用两个阈值,如果一个像素的梯度大于上限阈值,则被认为是边缘像素,如果低于下限阈值,则被抛弃,如果介于二者之间,只有当其与高于上限阈值的像素连接时才会被接受。
在实施例3中采用Otsu算法计算Canny算子的高低阈值。Otsu算法基本思路是选取的最佳阈值应当使得用该阈值分割得到的两类间具有最好的分离性,具体过程利用了图像的灰度直方图,以使得目标和背景的灰度值方差最大为目标来确定图像分割的阈值。canny算子的高阈值为:
T=ArgMax[w0(t)(u0(t)-u)2+w1(t)(u1(t)-u)2]式(3-1)
其中,T为canny算子的高阈值;t为假设的图像分割阈值;u0(t)为亮度值比t大的所有像素点的平均亮度值;w0(t)为亮度值大于t的像素点所占的比例;u1(t)为亮度值比t小的所有像素点的平均亮度值;w1(t)为亮度值小于t的像素点所占的比例;u为图像中所有像素点的平均亮度值。
计算得到高阈值T后,再采用高阈值等于低阈值两倍的常用经验公式得到低阈值。
②霍夫变换
二维平面上的直线可用如下方程描述:
ρ=xcos(θ)+ysin(θ)式(3-2)
其中,ρ为原点到直线的距离,θ为该直线的倾角。
ρ和θ构成二维空间H(ρ,θ),H(ρ,θ)中的任意一点都对应着某一平面区域上的一条直线。Hough变换就是利用图像空间和Hough参数空间的点-线对偶性,把图像空间中的检测问题转换到参数空间。通过在参数空间里进行简单的累加统计,然后在Hough参数空间寻找计数器峰值的方法检测直线。
3)直线后处理
由于泊车位线有缺损或者地面存在阴影等,可能检测出许多杂乱线段。因此需要利用泊车位线满足的约束条件,对检测出的直线进行处理,以保留库位线对应的线段,删除其他杂乱线段。泊车位线满足的约束条件包括:泊车位线对边互相平行、邻边互相垂直、标准泊车位的尺寸、泊车位线的线宽等,可以选取其中的一条或者几条约束条件对直线进行处理。在实施例3中,直线后处理算法的流程图如图6所示。以上算法提供了直线后处理的一种方法,在其他实施例中也可以选取不同的约束条件。
(2)障碍车检测子模块
障碍车检测子模块的算法流程图如图7所示。
1)计算第一辆障碍车前端轮廓的位置
将全局坐标系定义为以泊车起点处自身车辆后轴中点为原点OG;YG轴方向沿自身车辆在泊车起点处的后轴方向,指向车辆左侧为正;XG轴垂直于YG轴,指向自身车辆前进方向为正。将车辆坐标系定义为以自身车辆后轴中点为原点O;Y轴方向沿自身车辆的后轴方向,指向车辆左侧为正;X轴垂直于Y轴,指向自身车辆前进方向为正。车辆坐标系在全局坐标系中是跟随车辆运动的。图8为本发明中定义的全局坐标系和车辆坐标系的示意图。
计算第一辆障碍车前端轮廓位置的算法流程图如图9所示。
①障碍车侧面轮廓直线
Ⅰ计算障碍车侧面轮廓上的点在全局坐标系中的坐标
超声波测距传感器可以是左、右侧各布置一个,也可以是左、右侧分别布置多个。在实施例4中,车辆左、右侧各布置一个超声波测距传感器。车辆向前行驶,利用超声波测距传感器,得到自身车辆与障碍车之间距离值。当超声波测距传感器返回的距离值未发生正跳变时,利用距离值和超声波测距传感器的安装位置参数,得到侧面轮廓上的点在车辆坐标系中的坐标。
X=Xult式(3-1)
Y=dis+Yult式(3-2)
其中,(X,Y)为侧面轮廓上的点在车辆坐标系中的坐标;(Xult,Yult)为超声波传感器在车辆坐标系中安装位置的坐标;dis的计算方法如下:其值为左侧超声波测距传感器返回的距离值,或右侧超声波测距传感器返回的距离值的相反数。
其中,正跳变指:当前时刻的dis的绝对值相对于前一时刻的dis的绝对值的增大量大于给定阈值。
再利用对应时刻的车辆位姿信息,计算得到侧面轮廓上的点在全局坐标系中的坐标。
XG=(X+xv)cosθ-(Y+yv)sinθ式(3-3)
YG=(X+xv)sinθ+(Y+yv)cosθ式(3-4)
其中,(XG,YG)为侧面轮廓上的点在全局坐标系中的坐标;(xv,yv,θ)为对应时刻的车辆位姿信息(xv和yv分别为对应时刻车辆坐标系原点(即车辆后轴中点)在全局坐标系中的x、y坐标;θ是车辆的航向角)。
Ⅱ用侧面轮廓上的点拟合出一条直线
在实施例4中,用最小二乘法对侧面轮廓上的点做直线拟合。
在其他实施例中也可以在车辆左、右侧各布置多个超声波测距传感器。例如,
在左、右两侧分别布置两个超声波测距传感器,则可以利用上述方法拟合得到两条直线,这两条直线在全局坐标系中的方程分别为:YG=k1XG+b1、YG=k2XG+b2。取k=0.5*(k1+k2),b=0.5*(b1+b2),得到直线YG=kXG+b,即为障碍车侧面轮廓对应的直线。
②障碍车最前点
采用如下方法定义图像坐标系:将原点定义在图像的左上角处,水平向右为x轴正方向,竖直向下为y轴正方向。
Ⅰ设定ROI
当超声波测距传感器的距离值发生正跳变时,存储这一时刻的环视图。对环视图设定ROI,使障碍车前端轮廓位于ROI区域内。
Ⅱ灰度化、边缘检测
首先将ROI图像转换为灰度图,再利用canny边缘检测算子对灰度图进行边缘检测。
Ⅲ最前点在ROI图像坐标系中的坐标
在ROI边缘图像中,寻找y坐标值(图像坐标系中)最小的边缘点,将其作为障碍车前端轮廓向前最凸出点(最前点)。
Ⅳ最前点在全局坐标系中的坐标
首先,计算最前点在环视图的图像坐标系中的坐标:
XH=XR+XX式(3-5)
YH=YR+YY式(3-6)
其中,(XH,YH)为最前点在环视图的图像坐标系中的坐标;(XR,YR)为最前点在ROI图像的图像坐标系中的坐标;(XX,YY)为ROI区域的左上角点在环视图的图像坐标系中的坐标。
然后,计算最前点在车辆坐标系中的坐标:
XFV=(Ypix/2-YH)×(L/Ypix)+d式(3-7)
YFV=(-XH+Xpix/2)×(L/Ypix)式(3-8)
其中,(XFV,YFV)为最前点在车辆坐标系中的坐标,单位为厘米;Xpix为环视图在图像坐标系x方向上的像素点数,在实施例4中其值320;Ypix为环视图在图像坐标系y方向上的像素点数,在本实施例中其值为550;d为车辆的几何中心到车辆后轴的距离,在本实施例中为130(厘米);L为环视图在前后方向上能显示的范围对应的真实距离值,在本实施例中为1550(厘米)。
最后,计算最前点在全局坐标系中的坐标:
XF=(XFV+xv)cosθ-(YFV+yv)sinθ式(3-9)
YF=(XFV+xv)sinθ+(YFV+yv)cosθ式(3-10)
其中,(XF,YF)为最前点在全局坐标系中的坐标;(xv,yv,θ)为超声波传感器的距离值发生正跳变时的车辆位姿信息(xv和yv分别为对应时刻车辆坐标系原点(即车辆后轴中点)在全局坐标系中的x、y坐标;θ是车辆的航向角)。
③最前点向侧面轮廓直线作垂线
图10为本实施例中第一辆障碍车前端轮廓确定方法示意图。
2)判断是否存在第二辆障碍车
超声波测距传感器的距离值发生正跳变之后,车辆继续向前行驶,若向前行驶至预定距离,超声波测距传感器的距离值都未发生负跳变,则判定为不存在第二辆障碍车;若尚未行驶到预定距离,超声波测距传感器的距离值发生负跳变,判定为存在第二辆障碍车。其中,负跳变指:当前时刻的dis的绝对值相对于前一时刻的dis的绝对值的减小量大于给定阈值。dis的计算方法如下:其值为左侧超声波测距传感器返回的距离值,或右侧超声波测距传感器返回的距离值的相反数。
3)矩形泊车位
若存在第二辆障碍车,则根据第一辆障碍车前端轮廓和第二辆障碍车后端轮廓的位置,确定出两辆障碍车之间的矩形泊车位;若不存在第二辆障碍车,则根据第一辆障碍车前端轮廓或后端轮廓确定矩形泊车位。
(3)泊车位输出子模块
将泊车位线检测子模块和障碍车检测子模块的检测结果输入给泊车位输出子模块。泊车位线检测子模块和障碍车检测子模块的检测结果包括以下四种情况,泊车位输出子模块在四种情况下得到的可用泊车位如下表所示:
其中,√表示检测到库位,X表示未检测到库位。
对于情况1,如果障碍车检测子模块输出的泊车位区域包含泊车位线检测子模块输出的泊车位区域,则输出泊车位线检测子模块检测到的泊车位;否则,输出障碍车检测子模块检测到的泊车位。
对于情况3,输出障碍车检测子模块检测到的泊车位。
4、人机接口
人机接口包括输出模块和输入模块。输出模块用以显示环视图和检测到的库位,可以通过触摸屏、平视显示器(HUD)等实现。输入模块用以接受驾驶员输入的各种指令,可以通过触摸屏、语音指令、转向灯、车内按钮等实现。
如果叠加显示在环视图上的泊车位不正确或者不符合驾驶员的意愿,驾驶员可以通过人机接口的输入模块调整泊车位的位置和(或)方向。在驾驶员改变泊车位的位置和(或)方向后,将新的泊车位四个角点坐标输出到智能泊车***的路径规划模块。
图11为将检测到的泊车位在环视图中叠加显示的效果图。
上述的对实施例的描述是为便于该技术领域的普通技术人员能理解和应用本发明。熟悉本领域技术的人员显然可以容易地对这些实施例做出各种修改,并把在此说明的一般原理应用到其他实施例中而不必经过创造性的劳动。因此,本发明不限于上述实施例,本领域技术人员根据本发明的揭示,不脱离本发明的范畴所做出的改进和修改都应该在本发明的保护范围之内。

Claims (5)

1.一种智能泊车***的泊车位检测装置,其特征在于:包括:传感器单元:位于车辆车身上的摄像头和测距传感器;信号处理单元:环视图生成模块、泊车位检测模块;人机接口:输出模块用以显示环视图和检测到的库位,输入模块用以接受驾驶员输入的各种指令;
所述泊车位检测模块包括泊车位线检测子模块、障碍车检测子模块、泊车位输出子模块;泊车位线检测子模块利用地面泊车位线检测泊车位;障碍车检测子模块利用障碍车检测泊车位;泊车位输出子模块根据泊车位线检测子模块和障碍车检测子模块的检测结果,最终确定出泊车位;
所述障碍车检测子模块确定泊车位的方法:根据障碍车的前后端轮廓的位置来确定泊车位;
第一辆障碍车前端轮廓在全局坐标系中的位置采用以下方法确定:(1)利用超声波测距传感器得到的距离值和车辆位姿信息,拟合出对应于障碍车侧面轮廓的一条直线;(2)当超声波测距传感器的距离值发生正跳变时,存储这一时刻的环视图;(3)在环视图中设定感兴趣区域,使障碍车前端轮廓位于感兴趣区域内;
(4)对所述感兴趣区域图像灰度化,做边缘检测,得到障碍车前端轮廓向前最凸出点即最前点的坐标;(5)由最前点向拟合出的直线作垂线,确定出障碍车前端轮廓在全局坐标系中的位置;
若存在两辆障碍车,则第二辆障碍车后端轮廓在全局坐标系中的位置采用以下方法确定:(6)利用超声波测距传感器得到的距离值和车辆位姿信息,拟合出对应于障碍车侧面轮廓的一条直线;(7)当超声波测距传感器的距离值发生负跳变时,存储这一时刻的环视图;(8)在环视图中设定感兴趣区域,使障碍车后端轮廓位于感兴趣区域内;(9)对所述感兴趣区域图像灰度化,做边缘检测,得到障碍车前端轮廓向后最凸出点即最后点的坐标;(10)由最后点向拟合出的直线作垂线,确定出障碍车后端轮廓在全局坐标系中的位置。
2.根据权利要求1所述的智能泊车***的泊车位检测装置,其特征在于:所述传感器单元包括位于车辆前侧、后侧、左侧、右侧的四个广角摄像头和位于车辆两侧的超声波测距传感器。
3.根据权利要求2所述的智能泊车***的泊车位检测装置,其特征在于:所述四个摄像头的安装位置应保证四个摄像头采集到的图片覆盖到车辆四周360度区域,而且相邻两摄像头采集到的图片有重叠区域。
4.根据权利要求1所述的智能泊车***的泊车位检测装置,其特征在于:所述人机接口输出模块将检测到的泊车位叠加显示在环视图上,如果检测到的泊车位不正确或者不符合驾驶员的意愿,驾驶员可以通过输入模块调整泊车位的位置和或方向,在驾驶员改变泊车位的位置和或方向后,将新的泊车位四个角点坐标输出到智能泊车***的路径规划模块。
5.根据权利要求1所述的智能泊车***的泊车位检测装置,其特征在于:所述泊车位线检测子模块确定泊车位的方法包括如下步骤:(1)图像预处理;(2)从环视图中提取直线;(3)对直线进行后处理,以保留地面泊车位线对应的线段,删除其他杂乱线段;(4)得到矩形泊车位。
CN201310545995.5A 2013-11-06 2013-11-06 一种智能泊车***的泊车位检测装置及方法 Expired - Fee Related CN103600707B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201310545995.5A CN103600707B (zh) 2013-11-06 2013-11-06 一种智能泊车***的泊车位检测装置及方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201310545995.5A CN103600707B (zh) 2013-11-06 2013-11-06 一种智能泊车***的泊车位检测装置及方法

Publications (2)

Publication Number Publication Date
CN103600707A CN103600707A (zh) 2014-02-26
CN103600707B true CN103600707B (zh) 2016-08-17

Family

ID=50119002

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201310545995.5A Expired - Fee Related CN103600707B (zh) 2013-11-06 2013-11-06 一种智能泊车***的泊车位检测装置及方法

Country Status (1)

Country Link
CN (1) CN103600707B (zh)

Families Citing this family (71)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104943686B (zh) * 2014-03-28 2018-11-06 北京奇虎科技有限公司 基于无线信号识别的自动泊车实现方法和装置
CN104943687B (zh) * 2014-03-28 2018-10-23 北京奇虎科技有限公司 基于无线信号识别的自动泊车实现方法和装置
CN103950448B (zh) * 2014-04-21 2016-06-29 中国科学院深圳先进技术研究院 泊车轨迹指引方法和***、泊车轨迹生成方法和***
CN103950409B (zh) * 2014-04-24 2016-04-27 中国科学院深圳先进技术研究院 泊车辅助方法和***
CN104608715B (zh) * 2014-12-29 2016-11-30 江苏大学 一种自动泊车***的泊车位探测装置及方法
CN104637342B (zh) * 2015-01-22 2017-01-04 江苏大学 一种狭小垂直车位场景智能识别与泊车路径规划***及方法
CN104648243B (zh) * 2015-01-27 2017-03-22 奇瑞汽车股份有限公司 进行泊车的方法和装置
CN104951790B (zh) * 2015-02-15 2018-02-02 北京联合大学 基于多源逆透视图像无缝拼接的车道线识别方法
US9582881B2 (en) * 2015-03-18 2017-02-28 Intel Corporation Machine vision image sensor calibration
CN104916162B (zh) * 2015-05-28 2017-05-03 惠州华阳通用电子有限公司 泊车位检测方法和***
CN104933409B (zh) * 2015-06-12 2018-04-03 北京理工大学 一种基于全景图像点线特征的车位识别方法
KR101705558B1 (ko) * 2015-06-25 2017-02-13 (주)캠시스 Avm 시스템의 공차 보정 장치 및 방법
CN104916163B (zh) * 2015-06-29 2017-05-03 惠州华阳通用电子有限公司 泊车位检测方法
CN105015418B (zh) * 2015-07-17 2018-04-20 惠州华阳通用电子有限公司 车载显示屏视频切换方法
CN105139397B (zh) * 2015-08-25 2017-12-19 广州视源电子科技股份有限公司 一种pcb板检测方法及装置
CN105513175B (zh) * 2015-12-01 2017-10-24 盛视科技股份有限公司 机器人出入口控制方法及***
CN105355083A (zh) * 2015-12-14 2016-02-24 宁波裕兰信息科技有限公司 一种基于视觉的360度泊车辅助智能引导***
DE102016204044A1 (de) * 2016-03-11 2017-09-14 Bayerische Motoren Werke Aktiengesellschaft Verfahren und head-up-display zum perspektivischen transformieren und anzeigen eines bildinhalts sowie fahrzeug
CN106127736A (zh) * 2016-06-15 2016-11-16 南京信必达智能技术有限公司 一种泊车检测方法及处理器
KR101965834B1 (ko) * 2016-10-12 2019-08-13 엘지전자 주식회사 자동주차 보조장치 및 이를 포함하는 차량
CN106541914A (zh) * 2016-11-07 2017-03-29 纵目科技(上海)股份有限公司 一种具有摄像头以及测距装置的汽车
CN107085402B (zh) * 2017-01-21 2019-04-26 新昌县维利机械有限公司 安装物联网监控管理***的电动车
CN107085393B (zh) * 2017-01-22 2019-04-26 新昌县智创机械有限公司 自动导航的多功能电动车
CN106971166A (zh) * 2017-03-29 2017-07-21 纵目科技(上海)股份有限公司 停车位检测的图像预处理方法及***
CN106952308B (zh) * 2017-04-01 2020-02-28 上海蔚来汽车有限公司 运动物体的位置确定方法及***
CN107491738B (zh) * 2017-07-25 2020-09-08 纵目科技(上海)股份有限公司 停车位检测方法及***、存储介质及电子设备
CN107316492B (zh) * 2017-07-25 2020-10-23 纵目科技(上海)股份有限公司 在图像中定位停车位的方法及***
CN107527017B (zh) * 2017-07-25 2021-03-12 纵目科技(上海)股份有限公司 停车位检测方法及***、存储介质及电子设备
CN107719361A (zh) * 2017-10-10 2018-02-23 深圳市豪恩汽车电子装备股份有限公司 基于图像视觉的自动泊车辅助方法及***
CN109697860A (zh) * 2017-10-20 2019-04-30 上海欧菲智能车联科技有限公司 车位检测和跟踪***及方法及车辆
CN107719367A (zh) * 2017-10-26 2018-02-23 西安正昌电子股份有限公司 一种360°环视和位置识别***
CN109753840B (zh) * 2017-11-06 2023-09-01 纵目科技(上海)股份有限公司 一种基于响应值确定车位线角点的方法、***和存储介质
CN109859260B (zh) * 2017-11-30 2021-02-12 华为技术有限公司 确定车位位置的方法、装置及计算机可读存储介质
CN108154472B (zh) * 2017-11-30 2021-10-08 惠州市德赛西威汽车电子股份有限公司 融合导航信息的泊车位视觉检测方法与***
CN110015288B (zh) * 2018-01-09 2020-10-30 上海汽车集团股份有限公司 一种检测库位的方法、装置及电子设备
CN108281041A (zh) * 2018-03-05 2018-07-13 东南大学 一种基于超声波和视觉传感器相融合的泊车车位检测方法
CN109001757B (zh) * 2018-05-31 2022-12-20 重庆大学 一种基于2d激光雷达的车位智能检测方法
CN110654375A (zh) * 2018-06-29 2020-01-07 比亚迪股份有限公司 自动泊车方法、装置、***及车辆
CN110687539B (zh) * 2018-07-06 2021-04-13 广州小鹏汽车科技有限公司 一种车位检测方法、装置、介质和设备
CN109325498B (zh) * 2018-07-26 2022-02-25 河北师范大学 基于窗口动态阈值改进Canny算子的叶脉提取方法
CN110826364B (zh) * 2018-08-09 2024-02-02 上海汽车集团股份有限公司 一种库位识别方法及装置
CN110867092B (zh) * 2018-08-28 2022-03-22 上海为森车载传感技术有限公司 一种基于雷达***和环视***的库位生成方法
CN110889974B (zh) * 2018-09-11 2021-02-19 广州汽车集团股份有限公司 一种智能泊车车位识别方法及装置、汽车
CN109720340B (zh) * 2018-09-17 2021-05-04 魔门塔(苏州)科技有限公司 一种基于视觉识别的自动泊车***及方法
CN109443348B (zh) * 2018-09-25 2022-08-23 同济大学 一种基于环视视觉和惯导融合的地下车库库位跟踪方法
CN111256693B (zh) * 2018-12-03 2022-05-13 北京魔门塔科技有限公司 一种计算位姿变化方法及车载终端
CN109493633B (zh) * 2018-12-20 2020-12-15 广州小鹏汽车科技有限公司 一种可停车位的检测方法及装置
CN109740521B (zh) * 2018-12-29 2021-02-19 百度在线网络技术(北京)有限公司 自动泊车的车位位置确定方法及装置、电子设备和计算机可读介质
CN111376895B (zh) * 2018-12-29 2022-03-25 上海汽车集团股份有限公司 一种环视泊车感知方法、装置、自动泊车***和车辆
CN109738900A (zh) * 2019-01-02 2019-05-10 广州小鹏汽车科技有限公司 一种可停车位的检测方法及装置
CN109712427B (zh) * 2019-01-03 2021-02-19 广州小鹏汽车科技有限公司 一种车位检测方法及装置
CN109784344B (zh) * 2019-01-24 2020-09-29 中南大学 一种用于地平面标识识别的图像非目标滤除方法
CN109693666B (zh) * 2019-02-02 2021-03-05 中国第一汽车股份有限公司 一种用于泊车的人机交互***及泊车方法
CN111746503B (zh) * 2019-03-27 2022-09-06 上海欧菲智能车联科技有限公司 泊车方法、***、设备、车辆及计算机可读存储介质
CN109948591A (zh) * 2019-04-01 2019-06-28 广东安居宝数码科技股份有限公司 一种车位检测方法、装置、电子设备及可读取存储介质
CN112009461A (zh) * 2019-05-13 2020-12-01 上海博泰悦臻网络技术服务有限公司 泊车辅助方法以及泊车辅助***
CN110435638B (zh) * 2019-06-28 2021-01-01 惠州市德赛西威汽车电子股份有限公司 一种泊车位自动跟踪方法
CN110345952A (zh) * 2019-07-09 2019-10-18 同济人工智能研究院(苏州)有限公司 一种序列化车道线地图构建方法及构建***
CN110390306B (zh) * 2019-07-25 2021-08-10 湖州宏威新能源汽车有限公司 直角车位的检测方法、车辆和计算机可读存储介质
CN110415550B (zh) * 2019-07-31 2020-08-07 北京智行者科技有限公司 基于视觉的自动泊车方法
CN110517507B (zh) * 2019-08-27 2022-10-11 纵目科技(上海)股份有限公司 基于超声波传感器的车辆位姿检测方法、***、终端和存储介质
CN110444044B (zh) * 2019-08-27 2022-07-12 纵目科技(上海)股份有限公司 基于超声波传感器的车辆位姿检测***、终端和存储介质
CN110544386A (zh) * 2019-09-18 2019-12-06 奇瑞汽车股份有限公司 车位识别方法、装置及存储介质
CN111160172B (zh) * 2019-12-19 2024-04-16 武汉佑驾创新科技有限公司 泊车位检测方法、装置、计算机设备和存储介质
CN114141055B (zh) * 2020-08-13 2024-04-16 纵目科技(上海)股份有限公司 一种智能泊车***的泊车位检测装置和检测方法
CN112078538A (zh) * 2020-09-10 2020-12-15 浙江亚太机电股份有限公司 一种基于车载环视***的汽车尾门自动开启***
CN112037575A (zh) * 2020-09-11 2020-12-04 江苏小白兔智造科技有限公司 一种基于超声波测距仪的无需停车厅的智能停车方法
CN112114316A (zh) * 2020-09-11 2020-12-22 江苏小白兔智造科技有限公司 一种基于超声波测距仪的车辆位置确认方法及装置
CN112348817B (zh) * 2021-01-08 2021-05-11 深圳佑驾创新科技有限公司 车位识别方法、装置、车载终端和存储介质
CN113085838A (zh) * 2021-04-02 2021-07-09 的卢技术有限公司 一种基于多传感器融合的车位检测方法和***
CN114494428B (zh) * 2021-12-23 2022-11-11 禾多科技(北京)有限公司 车辆位姿矫正方法、装置、电子设备和计算机可读介质

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP1642808A1 (en) * 2004-09-30 2006-04-05 CLARION Co., Ltd. Parking-assist system using image information from an imaging camera and distance information from an infrared laser camera
CN1987357A (zh) * 2006-12-26 2007-06-27 浙江工业大学 基于全方位计算机视觉的智能停车辅助装置
CN101218127A (zh) * 2005-07-08 2008-07-09 罗伯特·博世有限公司 泊车装置
CN101426669A (zh) * 2006-04-25 2009-05-06 丰田自动车株式会社 停车辅助装置以及停车辅助方法
CN102449673A (zh) * 2009-06-03 2012-05-09 爱信精机株式会社 车辆周边监控方法及车辆周边监控装置
CN102474597A (zh) * 2009-08-03 2012-05-23 爱信精机株式会社 车辆周围图像生成装置

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005343417A (ja) * 2004-06-07 2005-12-15 Auto Network Gijutsu Kenkyusho:Kk 駐車アシスト装置

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP1642808A1 (en) * 2004-09-30 2006-04-05 CLARION Co., Ltd. Parking-assist system using image information from an imaging camera and distance information from an infrared laser camera
CN101218127A (zh) * 2005-07-08 2008-07-09 罗伯特·博世有限公司 泊车装置
CN101426669A (zh) * 2006-04-25 2009-05-06 丰田自动车株式会社 停车辅助装置以及停车辅助方法
CN1987357A (zh) * 2006-12-26 2007-06-27 浙江工业大学 基于全方位计算机视觉的智能停车辅助装置
CN102449673A (zh) * 2009-06-03 2012-05-09 爱信精机株式会社 车辆周边监控方法及车辆周边监控装置
CN102474597A (zh) * 2009-08-03 2012-05-23 爱信精机株式会社 车辆周围图像生成装置

Also Published As

Publication number Publication date
CN103600707A (zh) 2014-02-26

Similar Documents

Publication Publication Date Title
CN103600707B (zh) 一种智能泊车***的泊车位检测装置及方法
CN112180373B (zh) 一种多传感器融合的智能泊车***和方法
CN107738612B (zh) 基于全景视觉辅助***的自动泊车停车位检测与识别***
CN104933409B (zh) 一种基于全景图像点线特征的车位识别方法
CN105678787A (zh) 一种基于双目鱼眼摄像头的载重货车行驶障碍物检测及跟踪方法
CN102467821B (zh) 基于视频图像的路面距离检测方法及装置
US7672514B2 (en) Method and apparatus for differentiating pedestrians, vehicles, and other objects
CN105574552A (zh) 一种基于单目视觉的车辆测距与碰撞预警方法
CN103802725B (zh) 一种新的车载驾驶辅助图像生成方法
US20070225933A1 (en) Object detection apparatus and method
CN104751119A (zh) 基于信息融合的行人快速检测跟踪方法
US20110169957A1 (en) Vehicle Image Processing Method
CN104859538A (zh) 车辆图像显示***中基于视觉的物体感测和突出显示
CN104442567A (zh) 交通工具图像显示***中的物体突显和传感
CN110176151A (zh) 一种确定停车行为的方法、装置、介质及设备
CN107796373A (zh) 一种基于车道平面几何模型驱动的前方车辆单目视觉的测距方法
CN112776797A (zh) 泊出原始车位创建方法、***、车辆和存储介质
CN104574993A (zh) 一种道路监控的方法及装置
Li et al. Automatic parking slot detection based on around view monitor (AVM) systems
Adamshuk et al. On the applicability of inverse perspective mapping for the forward distance estimation based on the HSV colormap
Matuszyk et al. Stereo panoramic vision for monitoring vehicle blind-spots
JP4720446B2 (ja) 車両検出装置及びこれを用いた車両用表示装置
Chiu et al. Real-Time Front Vehicle Detection Algorithm for an Asynchronous Binocular System.
CN114141055B (zh) 一种智能泊车***的泊车位检测装置和检测方法
CN105740801A (zh) 一种基于摄像头的汽车并道辅助驾驶方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20160817