CN103791889A - 一种利用十字结构光辅助的单目视觉位姿测量方法 - Google Patents
一种利用十字结构光辅助的单目视觉位姿测量方法 Download PDFInfo
- Publication number
- CN103791889A CN103791889A CN201410015892.2A CN201410015892A CN103791889A CN 103791889 A CN103791889 A CN 103791889A CN 201410015892 A CN201410015892 A CN 201410015892A CN 103791889 A CN103791889 A CN 103791889A
- Authority
- CN
- China
- Prior art keywords
- sin
- cos
- psi
- theta
- gamma
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000691 measurement method Methods 0.000 title abstract description 3
- 238000000034 method Methods 0.000 claims abstract description 13
- 230000003287 optical effect Effects 0.000 claims abstract description 5
- 238000012545 processing Methods 0.000 claims abstract description 3
- 239000011159 matrix material Substances 0.000 claims description 9
- 238000013519 translation Methods 0.000 claims description 6
- 101100117236 Drosophila melanogaster speck gene Proteins 0.000 claims description 3
- 238000006073 displacement reaction Methods 0.000 claims description 3
- 238000009434 installation Methods 0.000 claims description 3
- 230000009466 transformation Effects 0.000 claims description 3
- 238000005259 measurement Methods 0.000 abstract description 19
- 239000000969 carrier Substances 0.000 abstract 1
- 238000006467 substitution reaction Methods 0.000 description 3
- 238000011160 research Methods 0.000 description 2
- 238000013459 approach Methods 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 238000012512 characterization method Methods 0.000 description 1
- 230000000052 comparative effect Effects 0.000 description 1
- 238000010586 diagram Methods 0.000 description 1
- 238000003384 imaging method Methods 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
- G01C11/00—Photogrammetry or videogrammetry, e.g. stereogrammetry; Photographic surveying
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
- G01C11/00—Photogrammetry or videogrammetry, e.g. stereogrammetry; Photographic surveying
- G01C11/04—Interpretation of pictures
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Radar, Positioning & Navigation (AREA)
- Remote Sensing (AREA)
- Length Measuring Devices By Optical Means (AREA)
Abstract
本发明提供了一种利用十字结构光辅助的单目视觉位姿测量方法,将相机与十字结构光传感器同向放置,根据物体表面的直线特征调整测量装置,使十字结构光与物体表面的一条直线有两个交点,测量时通过处理器对相机捕获的图像进行处理计算,得到物体于相机之间的相对位置和姿态信息。本发明实现了在相机对缺乏平行约束条件的非合作目标位姿的测量,大大简化了计算,提高了运算效率,满足室内微小型载体的载重要求。
Description
技术领域
本发明涉及位姿测量领域,具体是一种利用十字结构光辅助的单目视觉位姿测量方法。
背景技术
利用视觉进行位姿测量具有精度高、非接触和低成本等优点,根据测量所需的相机数一般可分为单目视觉测量和多目视觉测量。单目视觉测量由于结构简单、测量灵活,仅使用一台相机即可得到目标相对于相机的三维姿态和三维位移数据,得到了广泛的研究和应用。
目前,国内外对视觉位姿测量进行了大量并且深入的研究,视觉位姿测量可以分为对合作目标的测量和对非合作目标的测量,其中,合作测量算法已经较为成熟,比较成熟的算法是利用目标物体上N个特征点在物体坐标系下的位置关系进行求解,即PNP问题,而非合作视觉测量算法却无法事先获得特征点在物体坐标系下的坐标。非合作视觉测量算法的相关公开文献较少,大部分研究方法都是致力于将非合作问题转化为合作问题来处理,这样的方法在实际应用中有一定的局限性。目前部分直接进行非合作视觉测量的算法需要利用激光测距仪辅助获得位置和姿态信息,否则只能获得物体的姿态信息,由于激光测距仪重量与尺寸较大,不适合应用在室内微小型载体上进行自主导航;有专利利用单幅图像上具有平行四边形几何约束的四个特征点实现物体的空间定位;有论文针对无法获取大型非合作航天器完整特征图像的情况进行位姿求解,利用线结构光辅助获得航天器平行边上的四个特征点,同样利用平行约束条件进行位姿求解,以上两种方法在无法获得平行约束时无法进行位姿解算。总的来说,目前对非合作目标进行视觉位姿测量的方法存在计算量较大、辅助设备尺寸重量大以及需要平行约束条件,并不完全满足室内微小型载体视觉导航的要求。
发明内容
本发明为了解决室内微小型载体视觉导航时的位姿测量问题,提出了十字结构光辅助的单目视觉位姿测量方法,实现了在相机对缺乏平行约束条件的非合作目标位姿的测量,满足室内微小型载体的载重要求,同时计算量小,大大增加了计算效率。
一种利用十字结构光辅助的单目视觉位姿测量方法,其特征在于包括以下步骤:
1)建立相机坐标系C-XcYcZc、图像坐标系o-uv、十字结构光坐标系L-XlYlZl以及物体坐标系Oo-XoYoZo,其中相机坐标系、图像坐标系与通常的定义一致;十字结构光坐标系的原点为十字结构光发出点,Zl轴与十字结构光两平面的交线重合,方向与光线射出方向一致,Xl轴、Yl轴分别沿两个垂直光线平面与Zl轴构成右手系;物体坐标系原点位于物体表面某一线段的端点,Xo轴与该线段重合指向另一端点,Zo轴垂直物体表面向外,Yo轴与Xo轴、Zo轴构成右手系;
2)定义物体坐标系相对相机坐标系的旋转关系R与平移关系T,其中R表示物体坐标系先绕Xo轴逆时针转动γ角,再绕Yo轴逆时针转动θ角,最后绕Zo轴逆时针转动ψ角,即
3)将相机与十字结构光传感器同向放置并进行标定,包括相机内参、相机坐标系与十字结构光坐标系间的位移和旋转关系;使十字结构光在物体表面的亮斑与物体表面在Xo轴上的线段有两个交点,此交点即为特征点,相机捕捉这两点以及十字结构光与物体表面轮廓另外任意一个交点;
6)利用步骤2)中定义的旋转矩阵R以及步骤3)得到的三个交点中任意一点在相机坐标系下的坐标,可以得到该点在物体坐标系下的坐标,进而获得物体坐标系原点在相机坐标系下的坐标,即可得到物体坐标系与相机坐标系之间的平移矩阵
所述的步骤4)中单点三角测距法为:安装时获得ZL轴与平面XwOwZw的夹角λ与YL轴与平面XwOwZw的夹角由结构光坐标系与相机坐标系之间的旋转关系可知从而得到十字结构光在物体表面投影上任意一点在相机坐标系下的坐标:
其中,
本发明有益效果在于:
(1)本发明使用的十字结构光辅助的单目视觉位姿测量装置尺寸小,重量轻,不需要重量尺寸较大的激光测距仪辅助,满足室内微小型载体的载重要求;
(2)本发明仅利用十字结构光与物体表面的一条特征线段即可进行位姿测量,不需要事先知道合作特征点的信息,实现了在相机对缺乏平行约束条件的非合作目标位姿的测量;
(3)本发明使用的位姿测量方法利用结构光辅助单目视觉获得十字结构光与特征线段的两个交点在相机系下的坐标,通过沿特征线段建立物体坐标系获得两个交点在物体系下坐标的差,使得简单的线性变换即可得到相机系与物体系间三轴的旋转角度,大大简化了计算,提高了运算效率。
附图说明
图1为本发明整体流程图。
图2为结构光辅助单目视觉测量原理图。
图3为十字结构光在物体表面投影的示意图。
具体实施方式
下面结合附图对本发明作进一步说明。:
1、十字结构光辅助的单目视觉位姿测量***模型建立
本发明利用十字结构光辅助单目相机进行位姿测量。首先将十字结构光传感器与相机同向放置(不需要平行),保证相机能捕捉到十字结构光在物体表面的亮斑即可。如图2所示,建立相机坐标系C-XcYcZc、图像坐标系o-uv、十字结构光坐标系L-XlYlZl,其中相机坐标系、图像坐标系与通常的定义一致;十字结构光坐标系的原点为十字结构光原点,Zl轴与十字结构光两平面交线重合,方向与光线射出方向一致,Xl轴、Yl轴分别沿两个垂直光线平面与Zl轴构成右手系;如图3所示,建立物体坐标系Oo-XoYoZo,物体坐标系原点位于物体表面某一线段的端点,Xo轴与该线段重合,Zo轴垂直于物体表面,Yo轴与Xo轴、Zo轴构成右手系。
2、改进的三角法测距模型
如图2所示,平面S为任意平面,L-XLYLZL为十字结构光坐标系,原点L即结构光发射点,C-XcYcZc为相机坐标系,C为相机光心。两者在同一水平面且间距为d,CC1为相机光轴,与像平面的交点为C0(u0,v0),CC0=f为相机焦距。AL1为结构光平面与平面S的交线,A为结构光上任意一点,A,L1在像平面对应的点分别为过L1做L1C1垂直CC1于C1,做LL′平行于CC1交L1C1于L′。
由于安装时不易保证激光坐标系与相机坐标系完全平行,需要考虑两坐标系间的旋转关系。将激光笔与相机安装在同一水平面,可以保证ZL轴与水平面的夹角为0。ZL轴与平面XwOwZw的夹角θ与YL轴与平面XwOwZw的夹角对测量精度有较大影响,计算时需要考虑,这两个角度可以在安装时获得,并通过拟合获得精确值。
由相机的成像原理可知,相机坐标系到图像坐标系有如下转换关系:
所以点A在相机坐标系下的坐标为:
由相似三角形可知:
由结构光坐标系与相机坐标系之间的旋转关系可知:
其中,
将(4)代入(3),得到:
其中
将(5)代入(2)即可得到点A在相机系下的坐标,
3、旋转矩阵与平移矩阵的求解
如图3所示,十字结构光在物体表面S的投影与物体表面轮廓的交点为Pi(i=0,1,2,3),其中P1和P2是十字结构光与物体表面的特征线段(Xo轴)的两个交点。Pi(i=0,1,2,3)在相机系中的坐标为(i=0,1,2,3),则可得交点在物体系下坐标与交点在相机系下坐标之间的旋转关系:
其中,R表示物体系先绕Xo轴逆时针转动γ角,再绕Yo轴逆时针转动θ角,最后绕Zo轴逆时针转动ψ角。
由图3可知,P1P2=b,Pi(i=0,1,2)之间存在如下关系:
将(7)代入(6)得:
第二个方程组与第一个方程组相减得:
第三个方程组与第二个方程组相减得:
由(9)可以得到:
由(8)中第一式两边同乘sinψ,第二式两边同乘cosψ再相减可以得到:
由(8)中第一式两边同乘cosψ,第二式两边同乘sinψ再相加可以得到:
(12)的两边同乘以sinθ,(9)中第三式两边同乘以cosθ,两式相减得到:
(14)除以(12)得:
根据(10)(11)以及(15)即可得到旋转矩阵R中的角度,则旋转矩阵R为:
其中,
本发明具体应用途径很多,以上所述仅是本发明的优选实施方式,应当指出,对于本技术领域的普通技术人员来说,在不脱离本发明原理的前提下,还可以作出若干改进,这些改进也应视为本发明的保护范围。
Claims (2)
1.一种利用十字结构光辅助的单目视觉位姿测量方法,其特征在于包括以下步骤:
1)建立相机坐标系C-XcYcZc、图像坐标系o-uv、十字结构光坐标系L-XlYlZl以及物体坐标系Oo-XoYoZo,其中相机坐标系、图像坐标系与通常的定义一致;十字结构光坐标系的原点为十字结构光发出点,Zl轴与十字结构光两平面的交线重合,方向与光线射出方向一致,Xl轴、Yl轴分别沿两个垂直光线平面与Zl轴构成右手系;物体坐标系原点位于物体表面某一线段的端点,Xo轴与该线段重合指向另一端点,Zo轴垂直物体表面向外,Yo轴与Xo轴、Zo轴构成右手系;
2)定义物体坐标系相对相机坐标系的旋转关系R与平移关系T,其中R表示物体坐标系先绕Xo轴逆时针转动γ角,再绕Yo轴逆时针转动θ角,最后绕Zo轴逆时针转动ψ角,即
3)将相机与十字结构光传感器同向放置并进行标定,包括相机内参、相机坐标系与十字结构光坐标系间的位移和旋转关系;使十字结构光在物体表面的亮斑与物体表面在Xo轴上的线段有两个交点,此交点即为特征点,相机捕捉这两点以及十字结构光与物体表面轮廓另外任意一个交点;
6)利用步骤2)中定义的旋转关系R以及步骤3)得到的三个交点中任意一点在相机坐标系下的坐标,可以得到该点在物体坐标系下的坐标,进而获得物体坐标系原点在相机坐标系下的坐标,即可得到物体坐标系与相机坐标系之间的平移矩阵
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201410015892.2A CN103791889B (zh) | 2014-01-14 | 2014-01-14 | 一种利用十字结构光辅助的单目视觉位姿测量方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201410015892.2A CN103791889B (zh) | 2014-01-14 | 2014-01-14 | 一种利用十字结构光辅助的单目视觉位姿测量方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN103791889A true CN103791889A (zh) | 2014-05-14 |
CN103791889B CN103791889B (zh) | 2015-10-28 |
Family
ID=50667777
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201410015892.2A Expired - Fee Related CN103791889B (zh) | 2014-01-14 | 2014-01-14 | 一种利用十字结构光辅助的单目视觉位姿测量方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN103791889B (zh) |
Cited By (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103994755A (zh) * | 2014-05-29 | 2014-08-20 | 清华大学深圳研究生院 | 一种基于模型的空间非合作目标位姿测量方法 |
CN104570147A (zh) * | 2014-12-26 | 2015-04-29 | 北京控制工程研究所 | 一种基于单目相机和主动结构光的障碍探测方法 |
CN105783876A (zh) * | 2016-05-26 | 2016-07-20 | 华北理工大学 | 基于单目视觉和圆结构光的目标姿态测量***及测量方法 |
CN106052645A (zh) * | 2016-03-11 | 2016-10-26 | 中国矿业大学 | 一种悬臂式掘进机空间位姿实时检测***及方法 |
CN109405835A (zh) * | 2017-08-31 | 2019-03-01 | 北京航空航天大学 | 基于非合作目标直线与圆单目图像的相对位姿测量方法 |
CN113063362A (zh) * | 2021-04-07 | 2021-07-02 | 湖南凌翔磁浮科技有限责任公司 | 非接触式的磁浮列车转向架间距检测方法 |
CN113639748A (zh) * | 2020-04-26 | 2021-11-12 | 苏州北美国际高级中学 | 基于十字型激光器及单目视觉***的管道小车导航方法 |
-
2014
- 2014-01-14 CN CN201410015892.2A patent/CN103791889B/zh not_active Expired - Fee Related
Non-Patent Citations (3)
Title |
---|
赵天云等: "基于单目视觉的空间定位算法", 《西北工业大学学报》, vol. 27, no. 01, 15 February 2009 (2009-02-15), pages 47 - 51 * |
陈杉等: "物***姿单目视觉传感测量***", 《传感技术学报》, vol. 20, no. 09, 15 September 2007 (2007-09-15), pages 2011 - 2015 * |
高学海等: "基于单目视觉和激光测距仪的位姿测量算法", 《仪器仪表学报》, vol. 28, no. 08, 15 August 2007 (2007-08-15), pages 1479 - 1485 * |
Cited By (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103994755A (zh) * | 2014-05-29 | 2014-08-20 | 清华大学深圳研究生院 | 一种基于模型的空间非合作目标位姿测量方法 |
CN103994755B (zh) * | 2014-05-29 | 2016-03-30 | 清华大学深圳研究生院 | 一种基于模型的空间非合作目标位姿测量方法 |
CN104570147A (zh) * | 2014-12-26 | 2015-04-29 | 北京控制工程研究所 | 一种基于单目相机和主动结构光的障碍探测方法 |
CN104570147B (zh) * | 2014-12-26 | 2017-05-31 | 北京控制工程研究所 | 一种基于单目相机和主动结构光的障碍探测方法 |
CN106052645A (zh) * | 2016-03-11 | 2016-10-26 | 中国矿业大学 | 一种悬臂式掘进机空间位姿实时检测***及方法 |
CN105783876A (zh) * | 2016-05-26 | 2016-07-20 | 华北理工大学 | 基于单目视觉和圆结构光的目标姿态测量***及测量方法 |
CN109405835A (zh) * | 2017-08-31 | 2019-03-01 | 北京航空航天大学 | 基于非合作目标直线与圆单目图像的相对位姿测量方法 |
CN109405835B (zh) * | 2017-08-31 | 2020-11-13 | 北京航空航天大学 | 基于非合作目标直线与圆单目图像的相对位姿测量方法 |
CN113639748A (zh) * | 2020-04-26 | 2021-11-12 | 苏州北美国际高级中学 | 基于十字型激光器及单目视觉***的管道小车导航方法 |
CN113639748B (zh) * | 2020-04-26 | 2024-04-05 | 苏州北美国际高级中学 | 基于十字型激光器及单目视觉***的管道小车导航方法 |
CN113063362A (zh) * | 2021-04-07 | 2021-07-02 | 湖南凌翔磁浮科技有限责任公司 | 非接触式的磁浮列车转向架间距检测方法 |
CN113063362B (zh) * | 2021-04-07 | 2023-05-09 | 湖南凌翔磁浮科技有限责任公司 | 非接触式的磁浮列车转向架间距检测方法 |
Also Published As
Publication number | Publication date |
---|---|
CN103791889B (zh) | 2015-10-28 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN103791889A (zh) | 一种利用十字结构光辅助的单目视觉位姿测量方法 | |
US11157766B2 (en) | Method, apparatus, device and medium for calibrating pose relationship between vehicle sensor and vehicle | |
CN102589530B (zh) | 基于二维相机和三维相机融合的非合作目标位姿测量方法 | |
CN102162738B (zh) | 摄像头与惯性传感器组合定位定姿***的标定方法 | |
WO2023104207A1 (zh) | 一种协同三维建图方法及*** | |
CN101813465B (zh) | 非接触精密测转角的单目视觉测量方法 | |
CN106408601B (zh) | 一种基于gps的双目融合定位方法及装置 | |
CN105067011A (zh) | 一种基于视觉标定及坐标转换的测量***整体校准方法 | |
CN104268935A (zh) | 一种基于特征的机载激光点云与影像数据融合***及方法 | |
CN104180808A (zh) | 一种用于自主空中加油的圆形锥套视觉位姿解算方法 | |
CN113657224A (zh) | 车路协同中用于确定对象状态的方法、装置、设备 | |
CN109087355B (zh) | 基于迭代更新的单目相机位姿测量装置与方法 | |
CN112509065B (zh) | 一种应用于深海机械臂作业的视觉引导的方法 | |
WO2021022934A1 (zh) | 一种基于被动式毫米波/太赫兹成像技术的三维成像方法 | |
CN109724586B (zh) | 一种融合深度图和点云的航天器相对位姿测量方法 | |
CN112967344A (zh) | 相机外参标定的方法、设备、存储介质及程序产品 | |
CN106405581B (zh) | 卫星结构变形引起的多类型载荷间耦合指向精度评估方法 | |
CN109978954A (zh) | 基于箱体的雷达和相机联合标定的方法和装置 | |
Liu et al. | A high-accuracy pose measurement system for robotic automated assembly in large-scale space | |
CN104913775A (zh) | 无人机对地高度的测量方法、无人机定位方法及装置 | |
CN104154931A (zh) | 一种交会测量***的光机定位测量方法 | |
CN109712198B (zh) | 一种高级驾驶辅助***的标定方法 | |
CN109696179A (zh) | 一种遥感卫星星敏感器热弹性误差估计方法 | |
CN104121884B (zh) | 卫星影像像元观测天顶角和方位角的计算方法 | |
CN109631841B (zh) | 一种基于激光投影的快速道路横断面测量方法及装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
C14 | Grant of patent or utility model | ||
GR01 | Patent grant | ||
CF01 | Termination of patent right due to non-payment of annual fee | ||
CF01 | Termination of patent right due to non-payment of annual fee |
Granted publication date: 20151028 |