CN108469254A - 一种适用于仰视和俯视位姿的大视场多视觉视频测量***全局标定方法 - Google Patents

一种适用于仰视和俯视位姿的大视场多视觉视频测量***全局标定方法 Download PDF

Info

Publication number
CN108469254A
CN108469254A CN201810236785.0A CN201810236785A CN108469254A CN 108469254 A CN108469254 A CN 108469254A CN 201810236785 A CN201810236785 A CN 201810236785A CN 108469254 A CN108469254 A CN 108469254A
Authority
CN
China
Prior art keywords
visual field
visual
calibration
pose
looking
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201810236785.0A
Other languages
English (en)
Inventor
欧巧凤
韩杨杨
熊邦书
雷鸰
余磊
莫燕
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Nanchang Hangkong University
Original Assignee
Nanchang Hangkong University
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Nanchang Hangkong University filed Critical Nanchang Hangkong University
Priority to CN201810236785.0A priority Critical patent/CN108469254A/zh
Publication of CN108469254A publication Critical patent/CN108469254A/zh
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G01MEASURING; TESTING
    • G01CMEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C11/00Photogrammetry or videogrammetry, e.g. stereogrammetry; Photographic surveying
    • G01C11/04Interpretation of pictures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/80Analysis of captured images to determine intrinsic or extrinsic camera parameters, i.e. camera calibration
    • G06T7/85Stereo camera calibration

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Remote Sensing (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Theoretical Computer Science (AREA)
  • Length Measuring Devices By Optical Means (AREA)

Abstract

一种适用于仰视和俯视位姿的大视场多视觉视频测量***全局标定方法,包括步骤:1)将仰视大视场分割成多个子视场,每个子视场由一套仰视位姿的双目立体视觉***负责拍摄,每组双目立体视觉***进行双目立体标定;2)利用一组辅助双目立体视觉***对大视场多视觉视频测量***进行全局标定。本发明的优点是:针对目前基于全站仪的全局标定方法无法在仰视或俯视位姿下进行全局标定、且需要繁琐的人工瞄准和读数操作、人工误差大、标定速度慢等问题,本发明提出了基于一组辅助立体视觉***视场重叠拼接的全局标定方法,适用于包括仰视和俯视在内的任意位姿多视觉视频测量***全局标定,同时具有操作方便、精度高、速度快和成本低等优点。

Description

一种适用于仰视和俯视位姿的大视场多视觉视频测量***全 局标定方法
技术领域
本发明涉及多视觉视频测量***全局标定方法,尤其涉及一种适用于仰视和俯视位姿的大视场多视觉视频测量***全局标定方法。
背景技术
立体视觉测量作为一种新型的高精度非接触测量方法,被广泛应用于工业、农业、国防等领域。近年来,随着待测构件尺寸的不断增大,大视场的立体视觉测量***备受关注。由于该类视觉测量***通常需要多组相机的视场拼接,不同双目立体视觉***三维坐标系的全局标定是其关键步骤,因此,精准、高效、自动地对不同双目立体视觉***进行全局标定,对提高大视场多视觉视频测量***的实用性具有重要的意义。
目前多视觉视频测量***全局标定采用的方法是全站仪法:该方法利用全站仪一次完成一个空间点的水平角、高度角、距离的测量,即一站式完成一个空间点的三维信息测量。通过获取不同立体视觉***视场中空间特征点三维信息,对大视场多视觉视频测量***进行全局标定。但全站仪垂直方向上视角范围较小,不适用于仰视和俯视位姿空间点的三维测量,在位姿和空间受限的场景中无法使用;此外,全站仪需要人工逐点测量特征点坐标,通过人眼对齐十字丝和标记点的误差范围不可控。
综上所述,目前的全局标定方法无法满足自动化标定大视场多视觉视频测量***的需求。本发明通过添加另外的双目立体视觉***,分别覆盖部分待拼接的其他不同双目立体视觉***,可以使全局标定过程高效和自动化。
发明内容
本发明的目的在于提供一种适用于仰视和俯视位姿的大视场多视觉视频测量***全局标定方法。旨在解决现有全局标定技术无法在仰视和俯视位姿下标定、操作不方便、效率低和精度不高的问题。本发明方法包括以下方法步骤:
1)构建仰视或俯视位姿下的大视场多视觉视频测量***,具体包括以下步骤:
(1.1)利用两个工业相机、图像采集卡、光源、光电传感器和工业计算机构建一套高速双目立体视觉***;
(1.2)将待测的仰视或俯视大视场分割成N个互不重叠的子视场,每个子视场由一套仰视或俯视双目立体视觉***Hi(i=1…N)负责拍摄测量;
(1.3)对每组仰视或俯视双目立体视觉***进行立体标定。
2)利用一组辅助双目立体视觉***L对大视场多视觉视频测量***进行全局标定,具体包括以下步骤:
(2.1)L的视场同时与H1和H2的部分视场重叠,重叠区域记为LH1和LH2
(2.2)通过LH1区域的多个非共线靶标点,计算H1与L之间的旋转平移矩阵R1,L和T1,L
(2.3)通过LH2区域的多个非共线靶标点,计算H2与L之间的旋转平移矩阵R2,L和T2,L
(2.4)通过[R1,L T1,L]和[R2,L T2,L]把H2的坐标***一到H1坐标系中,完成H1和H2的全局标定;
(2.5)采用(2.1-2.4)中同样的方法标定H1_H3或H2_H3四目视觉***,把H3标定到H1_H2坐标系下,实现H1_H2_H3六目全局标定;
(2.6)重复(2.5)直到所有的双目立体视觉***都标定到H1坐标系下,撤离L,实现大视场多视觉视频测量***的全局标定。
本发明的优点是:本发明提出了基于一组辅助立体视觉***视场重叠拼接的全局标定方法,与目前普遍采用的全站仪方法相比,本方法能用于包括仰视和俯视在内的任意位姿多视觉视频测量***全局标定,同时具有操作方便、精度高、速度快和成本低等优点。
附图说明
图1为本发明的原理示意图。
图2为本发明的工作流程图。
具体实施方式
本发明采用如图2所示的方法,实现多视觉视频测量***全局标定。其具体实施步骤如下:
1)构建仰视或俯视位姿下的大视场多视觉视频测量***,具体包括以下步骤:
(1.1)利用两个工业相机、图像采集卡、光源、光电传感器和工业计算机构建一套高速双目立体视觉***;
(1.2)将待测的仰视或俯视大视场分割成N个互不重叠的子视场,每个子视场由一套仰视或俯视双目立体视觉***Hi(i=1…N)负责拍摄测量;
(1.3)对每组仰视或俯视双目立体视觉***进行立体标定。
本发明实施例中,工业相机选用的是德国BASLER公司产型号为acA2000-340km的工业相机,镜头焦距为12mm,图像分辨率为2040pixel×1024pixel,视觉传感器之间的距离为40mm,大视场测量位置离相机为5000mm,测量位置单个工业相机的视场范围为4675mm×2347mm。图像采集卡选用的是Matrox公司产的型号为Radient eV-CL的Cameralink采集卡。
本发明实施例中,待测大视场为4000mm×4000mm,将该视场划分为两个4000mm×2000mm的子视场,采用步骤(1.1)方法构建的两组双目立体视觉***负责拍摄测量。
本发明实施例中,对双目立体视觉***进行立体标定所采用的方法,具体步骤如下:
(1.3.a)利用一个或多个平面棋盘格靶标,获取10对以上不同方向的棋盘格图像,作为标定图像,且棋盘平面与摄像机的图像平面要有一定夹角,且不同方向的棋盘平面不平行;
(1.3.b)利用获取的标定图像,采用张正友提出的平面标定算法,对摄像机进行单目标定和立体标定,获得摄像机内部参数,以及两台摄像机之间的外部参数;
(1.3.c)利用(1.3.b)中获得的内外参数,通过Bouguet立体校正算法,计算行对准校正旋转矩阵Rl、Rr和重投影矩阵Q;
(1.3.d)重复步骤(1.3.a)—步骤(1.3.c),对另一个立体视觉***进行标定,如图1所示,分别对组别A、B和辅助定标组C进行双目标定。
2)利用一组辅助双目立体视觉***L对多视觉视频测量***进行全局标定,具体包括以下步骤:
(2.1)L的视场同时与H1和H2的部分视场重叠,重叠区域记为LH1和LH2
(2.2)利用LH1区域的多个非共线靶标点,计算H1与L之间的旋转平移矩阵R1,L和T1,L
(2.3)利用LH2区域的多个非共线靶标点,计算H2与L之间的旋转平移矩阵R2,L和T2,L
(2.4)通过[R1,L T1,L]和[R2,L T2,L]把H2的坐标***一到H1坐标系中,完成H1和H2的全局标定;
(2.5)采用(2.1-2.4)中同样的方法标定H1_H3或H2_H3四目视觉***,把H3标定到H1_H2坐标系下,实现H1_H2_H3六目全局标定;
(2.6)重复(2.5)直到所有的双目立体视觉***都标定到H1坐标系下,撤离L,实现大视场多视觉视频测量***的全局标定。
本发明实施例中,实现的是大视场四视觉视频测量***,只由两组双目立体视觉***组成,因此步骤2)的实施只包括步骤(2.1)-步骤(2.4)。步骤(2.2)和(2.3)中的旋转平移矩阵Ri,L和Ti,L,其中i=1,2,计算方法具体为:
采用步骤(1.3)中获得的标定参数,对全局标定图像进行行对齐校正,并计算视场重叠区域标记点P在Hi和L中的三维坐标Pi和PL;根据Pi和PL计算两个立体视觉***之间的旋转平移矩阵Ri,L和Ti,L。Ri,L和Ti,L的计算过程如下:
设第j个标记点在第1个和第2个双目立体视觉***所在坐标系下的坐标为Pi,j和PL,j,那么两个立体视觉***之间的转换关系Ri,L和Ti,L满足:
式中,Ri,L为3*3旋转矩阵,Ti,L为3*1列矩阵,共12个未知数,且为线性方程,利用至少4个不共面的标记点,即可计算出Ri,L和Ti,L的唯一解。
利用N(N>4)个标记点计算Ri,L和Ti,L时,由式(1)可得:
方程左边记为H,右边记为G·S-1,则H的最小二乘解为:
H=G·ST·(S·ST)-1 (3)
此时,H为拟合标记点信息最优的解,但是并不满足两个直角坐标系之间转换关系的要求,因此,以该最优值作为初始值,以式(4)为目标函数,对H进行非线性优化,进而求得Ri,L和Ti,L
分别获取第1组和第2组双目立体视觉***与辅助双目视觉***L之间的转换关系,如图1所示。
以其中任意一组立体视觉模块自身坐标系为参考坐标系,把其它双目立体视觉模块的坐标空间映射到参考坐标系,如图1所示,选取辅助定标组L所在坐标系为参考,可将第1组和第2组中的点坐标分别转换至参考坐标系下,以实现第1组和第2组之间的坐标***一。
本发明实施例中,采用重投影残差验证全局标定误差。第1组和第2组双目立体视觉***之间的重投影残差error的计算公式为:
式中,N为采用标记点的个数。
最后,撤离辅助定标摄像机,得到全局标定完成的大视场多视觉视频测量***。

Claims (3)

1.一种适用于仰视和俯视位姿的大视场多视觉视频测量***全局标定方法,其特征在于包括以下方法步骤:
1)构建仰视或俯视位姿下的大视场多视觉视频测量***;
2)利用一组辅助双目立体视觉***L对多视觉视频测量***进行全局标定。
2.根据权利要求1所述的一种适用于仰视和俯视位姿的大视场多视觉视频测量***全局标定方法,其特征在于:步骤1)中构建仰视或俯视位姿下的大视场多视觉视频测量***具体包括以下步骤:
(1.1)利用两个工业相机、图像采集卡、光源、光电传感器和工业计算机构建一套高速双目立体视觉***;
(1.2)将待测的仰视或俯视大视场分割成N个互不重叠的子视场,每个子视场由一套仰视或俯视双目立体视觉***Hi(i=1…N)负责拍摄测量;
(1.3)对每组仰视或俯视双目立体视觉***进行立体标定。
3.根据权利要求1所述的一种适用于仰视和俯视位姿的大视场多视觉视频测量***全局标定方法,其特征在于:步骤2)中利用一组辅助双目立体视觉***L对多视觉视频测量***进行全局标定,具体包括以下步骤:
(2.1)L的视场同时与H1和H2的部分视场重叠,重叠区域记为LH1和LH2
(2.2)通过LH1区域的多个非共线靶标点,计算H1与L之间的旋转平移矩阵R1,L和T1,L
(2.3)通过LH2区域的多个非共线靶标点,计算H2与L之间的旋转平移矩阵R2,L和T2,L
(2.4)通过[R1,L T1,L]和[R2,L T2,L]把H2的坐标***一到H1坐标系中,完成H1和H2的全局标定;
(2.5)采用(2.1-2.4)中同样的方法标定H1_H3或H2_H3四目视觉***,把H3标定到H1_H2坐标系下,实现H1_H2_H3六目全局标定;
(2.6)重复(2.5)直到所有的双目立体视觉***都标定到H1坐标系下,撤离L,实现多视觉测量***的全局标定。
CN201810236785.0A 2018-03-21 2018-03-21 一种适用于仰视和俯视位姿的大视场多视觉视频测量***全局标定方法 Pending CN108469254A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201810236785.0A CN108469254A (zh) 2018-03-21 2018-03-21 一种适用于仰视和俯视位姿的大视场多视觉视频测量***全局标定方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201810236785.0A CN108469254A (zh) 2018-03-21 2018-03-21 一种适用于仰视和俯视位姿的大视场多视觉视频测量***全局标定方法

Publications (1)

Publication Number Publication Date
CN108469254A true CN108469254A (zh) 2018-08-31

Family

ID=63265714

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810236785.0A Pending CN108469254A (zh) 2018-03-21 2018-03-21 一种适用于仰视和俯视位姿的大视场多视觉视频测量***全局标定方法

Country Status (1)

Country Link
CN (1) CN108469254A (zh)

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110136205A (zh) * 2019-04-12 2019-08-16 广州极飞科技有限公司 多目相机的视差校准方法、装置及***
CN111024117A (zh) * 2019-11-21 2020-04-17 中国航空工业集团公司西安飞行自动控制研究所 一种基于视觉的惯导***快速对准***及对准方法
CN111275770A (zh) * 2020-01-20 2020-06-12 南昌航空大学 基于一维靶标旋转运动的四目立体视觉***全局标定方法
CN112161571A (zh) * 2020-10-09 2021-01-01 山东科技大学 一种低数据量的双目视觉采煤机定位与位姿检测***及方法
CN112504263A (zh) * 2020-11-24 2021-03-16 北京交通大学 基于多目视觉的室内导航定位装置及其定位方法
CN113103228A (zh) * 2021-03-29 2021-07-13 航天时代电子技术股份有限公司 遥操作机器人
CN113513999A (zh) * 2021-06-08 2021-10-19 北京卫星制造厂有限公司 一种航天器结构静力试验大视场实时变形测量***及方法
WO2022134939A1 (zh) * 2020-12-24 2022-06-30 上海智能制造功能平台有限公司 一种人体数字化测量装置的数据拼接及***标定方法

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101794448A (zh) * 2010-04-07 2010-08-04 上海交通大学 主从摄像机***的全自动标定方法
US20130235199A1 (en) * 2008-04-11 2013-09-12 Nearmap Australia Pty Ltd Systems and methods of capturing large area images in detail including cascaded cameras and/or calibration features
CN106092057A (zh) * 2016-07-28 2016-11-09 南昌航空大学 一种基于四目立体视觉的直升机旋翼桨叶动态轨迹测量方法
CN106097300A (zh) * 2016-05-27 2016-11-09 西安交通大学 一种基于高精度运动平台的多相机标定方法
CN106204595A (zh) * 2016-07-13 2016-12-07 四川大学 一种基于双目摄像机的机场场面三维全景监视方法

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20130235199A1 (en) * 2008-04-11 2013-09-12 Nearmap Australia Pty Ltd Systems and methods of capturing large area images in detail including cascaded cameras and/or calibration features
CN101794448A (zh) * 2010-04-07 2010-08-04 上海交通大学 主从摄像机***的全自动标定方法
CN106097300A (zh) * 2016-05-27 2016-11-09 西安交通大学 一种基于高精度运动平台的多相机标定方法
CN106204595A (zh) * 2016-07-13 2016-12-07 四川大学 一种基于双目摄像机的机场场面三维全景监视方法
CN106092057A (zh) * 2016-07-28 2016-11-09 南昌航空大学 一种基于四目立体视觉的直升机旋翼桨叶动态轨迹测量方法

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
韩杨杨: "基于虚拟平面靶标的大视场摄像机标定技术研究", 《中国优秀硕士学位论文全文数据库信息科技辑》 *

Cited By (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110136205A (zh) * 2019-04-12 2019-08-16 广州极飞科技有限公司 多目相机的视差校准方法、装置及***
CN111024117A (zh) * 2019-11-21 2020-04-17 中国航空工业集团公司西安飞行自动控制研究所 一种基于视觉的惯导***快速对准***及对准方法
CN111024117B (zh) * 2019-11-21 2023-03-14 中国航空工业集团公司西安飞行自动控制研究所 一种基于视觉的惯导***快速对准***及对准方法
CN111275770A (zh) * 2020-01-20 2020-06-12 南昌航空大学 基于一维靶标旋转运动的四目立体视觉***全局标定方法
CN112161571A (zh) * 2020-10-09 2021-01-01 山东科技大学 一种低数据量的双目视觉采煤机定位与位姿检测***及方法
CN112161571B (zh) * 2020-10-09 2022-02-22 山东科技大学 一种低数据量的双目视觉采煤机定位与位姿检测***及方法
CN112504263A (zh) * 2020-11-24 2021-03-16 北京交通大学 基于多目视觉的室内导航定位装置及其定位方法
WO2022134939A1 (zh) * 2020-12-24 2022-06-30 上海智能制造功能平台有限公司 一种人体数字化测量装置的数据拼接及***标定方法
CN113103228A (zh) * 2021-03-29 2021-07-13 航天时代电子技术股份有限公司 遥操作机器人
CN113103228B (zh) * 2021-03-29 2023-08-15 航天时代电子技术股份有限公司 遥操作机器人
CN113513999A (zh) * 2021-06-08 2021-10-19 北京卫星制造厂有限公司 一种航天器结构静力试验大视场实时变形测量***及方法
CN113513999B (zh) * 2021-06-08 2023-11-10 北京卫星制造厂有限公司 一种航天器结构静力试验大视场实时变形测量***及方法

Similar Documents

Publication Publication Date Title
CN108469254A (zh) 一种适用于仰视和俯视位姿的大视场多视觉视频测量***全局标定方法
CN105716542B (zh) 一种基于柔性特征点的三维数据拼接方法
CN109242908B (zh) 用于水下双目视觉测量***的标定方法
CN108510551B (zh) 一种远距离大视场条件下相机参数的标定方法及***
CN109859272B (zh) 一种自动对焦双目摄像头标定方法及装置
CN109242915A (zh) 基于多面立体靶标的多相机***标定方法
CN107255443A (zh) 一种复杂环境下双目视觉传感器现场标定方法及装置
CN109559355B (zh) 一种基于相机组的无公共视场的多相机全局标定装置及方法
CN104240262B (zh) 一种用于摄影测量的相机外参数标定装置及标定方法
Song et al. Survey on camera calibration technique
CN109579695B (zh) 一种基于异构立体视觉的零件测量方法
CN106504287B (zh) 基于模板的单目视觉目标空间定位***
CN102136140B (zh) 一种基于矩形图样的视频图像距离检测方法
An et al. Building an omnidirectional 3-D color laser ranging system through a novel calibration method
CN104697463B (zh) 一种双目视觉传感器的消隐特征约束标定方法及装置
CN206611521U (zh) 一种基于多传感器的车载环境识别***及全方位视觉模块
Yu et al. A calibration method based on virtual large planar target for cameras with large FOV
CN106651957B (zh) 基于模板的单目视觉目标空间定位方法
Gao et al. A method of spatial calibration for camera and radar
CN108648242A (zh) 基于激光测距仪辅助无公共视场的两相机标定方法及装置
CN106403838A (zh) 一种手持式线结构光视觉三维扫描仪的现场标定方法
CN105513074B (zh) 一种羽毛球机器人相机以及车身到世界坐标系的标定方法
CN104807405A (zh) 一种基于光线角度标定的三维坐标测量方法
CN102628693A (zh) 一种用于摄像机主轴与激光束进行平行配准的方法
CN113379848A (zh) 基于双目ptz相机的目标定位方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20180831

RJ01 Rejection of invention patent application after publication