CN114139325A - 一种利用自然场景进行地下线缆可视化校准方法 - Google Patents
一种利用自然场景进行地下线缆可视化校准方法 Download PDFInfo
- Publication number
- CN114139325A CN114139325A CN202111487434.5A CN202111487434A CN114139325A CN 114139325 A CN114139325 A CN 114139325A CN 202111487434 A CN202111487434 A CN 202111487434A CN 114139325 A CN114139325 A CN 114139325A
- Authority
- CN
- China
- Prior art keywords
- matrix
- mobile terminal
- cable
- reference point
- camera
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F30/00—Computer-aided design [CAD]
- G06F30/10—Geometric CAD
- G06F30/18—Network design, e.g. design based on topological or interconnect aspects of utility systems, piping, heating ventilation air conditioning [HVAC] or cabling
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F30/00—Computer-aided design [CAD]
- G06F30/20—Design optimisation, verification or simulation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/80—Analysis of captured images to determine intrinsic or extrinsic camera parameters, i.e. camera calibration
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30172—Centreline of tubular or elongated structure
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Geometry (AREA)
- Evolutionary Computation (AREA)
- General Engineering & Computer Science (AREA)
- Computer Hardware Design (AREA)
- Computer Networks & Wireless Communication (AREA)
- Computational Mathematics (AREA)
- Mathematical Analysis (AREA)
- Mathematical Optimization (AREA)
- Pure & Applied Mathematics (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Image Processing (AREA)
Abstract
本发明公开了一种利用自然场景进行地下线缆可视化校准方法,具体为获取用户当前坐标;在地面绘制两条正交线模拟地下电缆,在相交线上取若干参考点,精确测量参考点的坐标并导入移动测量终端,在正交线的交点放置移动终端,沿模拟电缆方向位置拍摄图像,检测参考点在显示屏上的位置,记点坐标构建成像方程,完成对相机内参数矩阵求解并更新原***相机内参数进行校准;移动终端旋转90°拍摄于另一条正交模拟电缆,矫正移动终端现实***的内外参数,重复多次上一步骤直至显示线缆与地面标记重合;移动终端沿电缆方向后退,保持线缆相交位置逐渐显示在界面中。本发明能够实现使用预先绘制的标定参考点以及其地理位置坐标进行地下线缆可视化校准。
Description
技术领域
本发明涉及地下电缆管线可视化巡检的工程领域,具体涉及一种利用自然场景进行地下线缆可视化校准方法。
背景技术
电力电缆是电力公司重要的基础性资产,其投资大,使用周期长,使用地点分散,埋入地下隐蔽性强,管理较困难。为了掌握电力电缆的运行状态,必须对电力管线进行巡检,以保证电缆输配电线路及其设备安全可靠工作。由于地下电缆隐蔽性强,传统的人工巡检受巡检人员与管线敷设复杂环境的影响,巡检效率低,巡检数据统计不完善,常常出现管线错挖等。随着高精度卫星定位技术和增强现实技术的发展,通过增强现实技术与高精度定位技术相结合,使真实的环境和根据地下电缆坐标虚拟的电缆实时地叠加到了同一个画面里,使得准确、直观地对地下电缆进行可视化定位,便于在巡检或施工时精确的找到特定的电缆线或故障点,大大的节省巡检和施工的时间及提高施工安全性。这种可视化设备由智能移动终端和高精度定位模块构成,智能移动终端提供AR设备的可视化姿态信息,由于不同的AR设备在初始化时位置和姿势不同,AR坐标系可能就会不同,此外,AR设备在户外使用,视野范围大,因此,在户外自然场景下对AR设备进行较大范围内进行校准非常有必要。
发明内容
本发明的目的是为了克服现有技术的不足,一种利用自然场景进行地下线缆可视化校准方法,能够实现地下电缆的可视化校准。
实现上述目的的一种技术方案是:一种利用自然场景进行地下线缆可视化校准方法,包括以下步骤:
步骤1:在地面绘制两条正交线模拟地下电缆线,在相交线上取若干个参考点,精确测量参考点的地理位置坐标并导入移动测量终端,满足以下要求:
1.1标记参考点数据能模拟真实地下电缆的地理位置信息特征;
1.2标记参考点图案能够准确被移动终端显示***检测到;
步骤2:在正交线的交点放置移动终端,沿模拟电缆方向拍摄图像,观察模拟电缆线是否出现在图像内,若没有出现在界面内,则需重新获取各个标记参考点的地理位置坐标;
步骤4:相机的内参数矩阵可由公式1描述,相机的成像过程可由公式2描述;
其中在公式1中,sx和sy表示在x轴和y轴方向上的放大倍数,θx和θy表示相机中心坐标,sθ为倾斜因子,f为相机焦距;在公式2中,是检测算法获得的若干标记参考点图像坐标集合的齐次表示,表示与之对应的地理位置坐标集合的齐次表示,s表示缩放系数,K表示公式1中的相机内参数矩阵,R表示旋转矩阵,SO(3)表示旋转矩阵所在的特殊正交群,T表示平移向量;
将参考点的图像坐标和获取的地理位置坐标带入成像公式(2),单次成像时可默认移动终端设备没有运动,因此旋转矩阵R为单位阵I,平移向量T为0向量;此时成像公式可以化简为公式3,将标记参考点坐标和地理信息坐标带入公式(3),再由高斯消元法求解相机内参矩阵K
步骤5:完成对相机内参数矩阵求解并更新原***相机内参数进行校准,更新参数再次拍摄观察移动终端界面显示的模拟地下电缆是否与图像中的标记点一致,若不一致重复步骤4,并使用多次拍摄数据构建方程组求得最小二乘解;
步骤6:移动终端缓慢旋转90°拍摄于另一条正交模拟电缆,矫正移动终端现实***的内外参数,满足旋转过程中有尽可能多的标记点被观察到,在旋转过程中同一标记参考点被当前帧记录的图像坐标为C1,被前一帧记录标记参考点为C0,则从前一帧到当前帧移动终端设备的运动状态可由旋转矩阵R1和平移矩阵T1描述,且满足公式4:
步骤7:旋转90°整个过程的旋转平移矩阵(外参数矩阵)可由每一帧的旋转平移矩阵叠加得到,见公式6:
其中i表示当前帧为第i帧,Ri,Ti表示i-1帧到第i帧的旋转平移变换,R,T表示从0时刻开始到当前第n帧的总体旋转和平移变换;将旋转过程中可观测到的标记参考点以及对应的地理位置坐标和以及R,T带入成像公式2构建方程,求得相机参数的最小二乘解作为更新参数;以此提高***的静态准确度和动态准确度
步骤8:观察更新参数后所得模拟地下电缆图像是否与地面标记参考点一致,若不一致重复步骤6,7;
步骤9:沿模拟地下电缆方向后退,使模拟地下电缆相交位置逐渐显示在移动终端显示器上;观察是否有横向和纵向模拟地下电缆线显示在移动终端上,若模拟地下电缆正常显示则完成矫正,若显示地下电缆与标记参考点不一致,重新检测图像中的参考点的坐标,按照步骤7方法更新相机内外参数,重复步骤3-9。
本发明在使用预先绘制的标定参考点以及其地理位置坐标进行地下线缆可视化校准,实现真实地理坐标与相机像素映射关系校准,自身姿态估计参数校准,***绘制界面参数校准,从而提高地下线缆可视化***的准确性。
附图说明
图1表示地下线缆可视化***校准流程图;
图2表示绘制的地面标记点示意图,其中实心圆为底边标记点,空心圆表示开始矫正时用户位置;
图3表示步骤3拍摄图像示意图,其中菱形点表示当前时刻终端可观察到的标记点;
图4表示步骤6,7中完成旋转后拍摄图像示意图,其中菱形点表示当前时刻终端可观察到的标记点,R,T表示旋转过程中的旋转平移矩阵;
图5表示步骤9中沿管线方向后退拍摄示意图,其中空心圆为用户位置,菱形点为终端可以观察到的地面标记点。
具体实施方式
为了能更好地对本发明的技术方案进行理解,下面通过具体地实施例进行详细地说明:
本发明的一种利用自然场景进行地下线缆可视化校准方法,其流程如图1所示。包括以下步骤:
步骤1:如图2所示,在地面绘制两条正交线模拟地下电缆线,在相交线上取若干个参考点,精确测量参考点的地理位置坐标并导入移动测量终端,满足以下要求:
1.1标记参考点数据能模拟真实地下电缆的地理位置信息特征;
1.2标记参考点图案能够准确被移动终端显示***检测到;
步骤2:在正交线的交点放置移动终端,沿模拟电缆方向拍摄图像,观察模拟电缆线是否出现在图像内,若没有出现在界面内,则需重新获取各个标记参考点的地理位置坐标;
步骤4:相机的内参数矩阵可由公式1描述,相机的成像过程可由公式2描述;
其中在公式1中,sx和sy表示在x轴和y轴方向上的放大倍数,θx和θy表示相机中心坐标,sθ为倾斜因子,f为相机焦距;在公式2中,是检测算法获得的若干标记参考点图像坐标集合的齐次表示,表示与之对应的地理位置坐标集合的齐次表示,s表示缩放系数,K表示公式1中的相机内参数矩阵,R表示旋转矩阵,SO(3)表示旋转矩阵所在的特殊正交群,T表示平移向量;
将参考点的图像坐标和获取的地理位置坐标带入成像公式(2),单次成像时可默认移动终端设备没有运动,因此旋转矩阵R为单位阵I,平移向量T为0向量;此时成像公式可以化简为公式3,将标记参考点坐标和地理信息坐标带入公式(3),再由高斯消元法求解相机内参矩阵K
步骤5:完成对相机内参数矩阵求解并更新原***相机内参数进行校准,更新参数再次拍摄观察移动终端界面显示的模拟地下电缆是否与图像中的标记点一致,若不一致重复步骤4,并使用多次拍摄数据构建方程组求得最小二乘解;
步骤6:如图4所示,移动终端缓慢旋转90°拍摄于另一条正交模拟电缆,矫正移动终端现实***的内外参数,满足旋转过程中有尽可能多的标记点被观察到,在旋转过程中同一标记参考点被当前帧记录的图像坐标为C1,被前一帧记录标记参考点为C0,则从前一帧到当前帧移动终端设备的运动状态可由旋转矩阵R1和平移矩阵T1描述,且满足公式4:
步骤7:旋转90°整个过程的旋转平移矩阵(外参数矩阵)可由每一帧的旋转平移矩阵叠加得到,见公式6:
其中i表示当前帧为第i帧,Ri,Ti表示i-1帧到第i帧的旋转平移变换,R,T表示从0时刻开始到当前第n帧的总体旋转和平移变换;将旋转过程中可观测到的标记参考点以及对应的地理位置坐标和以及R,T带入成像公式2构建方程,求得相机参数的最小二乘解作为更新参数;以此提高***的静态准确度和动态准确度
步骤8:观察更新参数后所得模拟地下电缆图像是否与地面标记参考点一致,若不一致重复步骤6,7;
步骤9:如图5所示,沿模拟地下电缆方向后退,使模拟地下电缆相交位置逐渐显示在移动终端显示器上;观察是否有横向和纵向模拟地下电缆线显示在移动终端上,若模拟地下电缆正常显示则完成矫正,若显示地下电缆与标记参考点不一致,重新检测图像中的参考点的坐标,按照步骤7方法更新相机内外参数,重复步骤3-9。
本技术领域中的普通技术人员应当认识到,以上的实施例仅是用来说明本发明,而并非用作为对本发明的限定,只要在本发明的实质精神范围内,对以上所述实施例的变化、变型都将落在本发明的权利要求书范围内。
Claims (1)
1.一种利用自然场景进行地下线缆可视化校准方法,其特征在于,包括以下步骤:
步骤1:在地面绘制两条正交线模拟地下电缆线,在相交线上取若干个参考点,精确测量参考点的地理位置坐标并导入移动测量终端,满足以下要求:
1.1标记参考点数据能模拟真实地下电缆的地理位置信息特征;
1.2标记参考点图案能够准确被移动终端显示***检测到;
步骤2:在正交线的交点放置移动终端,沿模拟电缆方向拍摄图像,观察模拟电缆线是否出现在图像内,若没有出现在界面内,则需重新获取各个标记参考点的地理位置坐标;
步骤4:相机的内参数矩阵可由公式1描述,相机的成像过程可由公式2描述;
(1)
(2)
其中在公式1中,sx和sy表示在x轴和y轴方向上的放大倍数,θx和θy表示相机中心坐标,sθ为倾斜因子,f为相机焦距;在公式2中,是检测算法获得的若干标记参考点图像坐标集合的齐次表示,表示与之对应的地理位置坐标集合的齐次表示,s表示缩放系数,K表示公式1中的相机内参数矩阵,R表示旋转矩阵,SO(3)表示旋转矩阵所在的特殊正交群,T表示平移向量;
将参考点的图像坐标和获取的地理位置坐标带入成像公式(2),单次成像时可默认移动终端设备没有运动,因此旋转矩阵R为单位阵I,平移向量T为0向量;此时成像公式可以化简为公式3,将标记参考点坐标和地理信息坐标带入公式(3),再由高斯消元法求解相机内参矩阵K
(3)
步骤5:完成对相机内参数矩阵求解并更新原***相机内参数进行校准,更新参数再次拍摄观察移动终端界面显示的模拟地下电缆是否与图像中的标记点一致,若不一致重复步骤4,并使用多次拍摄数据构建方程组求得最小二乘解;
步骤6:移动终端缓慢旋转90°拍摄于另一条正交模拟电缆,矫正移动终端现实***的内外参数,满足旋转过程中有尽可能多的标记点被观察到,在旋转过程中同一标记参考点被当前帧记录的图像坐标为C1,被前一帧记录标记参考点为C0,则从前一帧到当前帧移动终端设备的运动状态可由旋转矩阵R1和平移矩阵T1描述,且满足公式4:
步骤7:旋转90°整个过程的旋转平移矩阵(外参数矩阵)可由每一帧的旋转平移矩阵叠加得到,见公式6:
其中i表示当前帧为第i帧,Ri,Ti表示i-1帧到第i帧的旋转平移变换,R,T表示从0时刻开始到当前第n帧的总体旋转和平移变换;将旋转过程中可观测到的标记参考点以及对应的地理位置坐标和以及R,T带入成像公式2构建方程,求得相机参数的最小二乘解作为更新参数;以此提高***的静态准确度和动态准确度
步骤8:观察更新参数后所得模拟地下电缆图像是否与地面标记参考点一致,若不一致重复步骤6,7;
步骤9:沿模拟地下电缆方向后退,使模拟地下电缆相交位置逐渐显示在移动终端显示器上;观察是否有横向和纵向模拟地下电缆线显示在移动终端上,若模拟地下电缆正常显示则完成矫正,若显示地下电缆与标记参考点不一致,重新检测图像中的参考点的坐标,按照步骤7方法更新相机内外参数,重复步骤3-9。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202111487434.5A CN114139325B (zh) | 2021-12-08 | 2021-12-08 | 一种利用自然场景进行地下线缆可视化校准方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202111487434.5A CN114139325B (zh) | 2021-12-08 | 2021-12-08 | 一种利用自然场景进行地下线缆可视化校准方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN114139325A true CN114139325A (zh) | 2022-03-04 |
CN114139325B CN114139325B (zh) | 2022-09-09 |
Family
ID=80384962
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202111487434.5A Active CN114139325B (zh) | 2021-12-08 | 2021-12-08 | 一种利用自然场景进行地下线缆可视化校准方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN114139325B (zh) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN115900706A (zh) * | 2023-01-04 | 2023-04-04 | 南开大学 | 基于惯性网络的姿态估计方法及*** |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102646275A (zh) * | 2012-02-22 | 2012-08-22 | 西安华旅电子科技有限公司 | 通过跟踪和定位算法实现虚拟三维叠加的方法 |
CN103718213A (zh) * | 2012-01-13 | 2014-04-09 | 索弗特凯耐提克软件公司 | 自动场景校准 |
CN108510551A (zh) * | 2018-04-25 | 2018-09-07 | 上海大学 | 一种远距离大视场条件下相机参数的标定方法及*** |
CN109658461A (zh) * | 2018-12-24 | 2019-04-19 | 中国电子科技集团公司第二十研究所 | 一种基于虚拟仿真环境的合作二维码的无人机定位方法 |
CN112927296A (zh) * | 2021-02-03 | 2021-06-08 | 上海橙捷健康科技有限公司 | 一种用于空间相对位置标定与校准的方法及*** |
-
2021
- 2021-12-08 CN CN202111487434.5A patent/CN114139325B/zh active Active
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103718213A (zh) * | 2012-01-13 | 2014-04-09 | 索弗特凯耐提克软件公司 | 自动场景校准 |
CN102646275A (zh) * | 2012-02-22 | 2012-08-22 | 西安华旅电子科技有限公司 | 通过跟踪和定位算法实现虚拟三维叠加的方法 |
CN108510551A (zh) * | 2018-04-25 | 2018-09-07 | 上海大学 | 一种远距离大视场条件下相机参数的标定方法及*** |
CN109658461A (zh) * | 2018-12-24 | 2019-04-19 | 中国电子科技集团公司第二十研究所 | 一种基于虚拟仿真环境的合作二维码的无人机定位方法 |
CN112927296A (zh) * | 2021-02-03 | 2021-06-08 | 上海橙捷健康科技有限公司 | 一种用于空间相对位置标定与校准的方法及*** |
Non-Patent Citations (3)
Title |
---|
吴琼等: "基于投影矩阵的摄像机标定新方法", 《半导体光电》 * |
武雪玲等: "混合硬件跟踪定位的空间信息虚实配准", 《地理与地理信息科学》 * |
舒远等: "利用空间正交约束的相机自标定和三维重建", 《西安交通大学学报》 * |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN115900706A (zh) * | 2023-01-04 | 2023-04-04 | 南开大学 | 基于惯性网络的姿态估计方法及*** |
CN115900706B (zh) * | 2023-01-04 | 2023-05-23 | 南开大学 | 基于惯性网络的姿态估计方法及*** |
Also Published As
Publication number | Publication date |
---|---|
CN114139325B (zh) | 2022-09-09 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US7693325B2 (en) | Transprojection of geometry data | |
US8139111B2 (en) | Height measurement in a perspective image | |
CN108168521A (zh) | 一种基于无人机实现景观三维可视化的方法 | |
US20050253870A1 (en) | Marker placement information estimating method and information processing device | |
CN111473739A (zh) | 一种基于视频监控的隧道塌方区围岩变形实时监测方法 | |
US20060004280A1 (en) | Placement information estimating method and information processing device | |
CN109816794A (zh) | 一种基于管网属性数据的三维可视化***及方法 | |
CN109920000B (zh) | 一种基于多相机协同的无死角的增强现实方法 | |
CN112419425B (zh) | 用于结构变形测量的抗扰动高精度相机群测量方法 | |
CN107102165B (zh) | 一种基于粒子图像测速的表面流场测量方法 | |
CN108988197B (zh) | 一种带电作业机器人***带电作业现场的快速重构方法 | |
CN114139325B (zh) | 一种利用自然场景进行地下线缆可视化校准方法 | |
CN104655106B (zh) | 基于gps rtk和全景影像的自主定位定向测图方法 | |
CN108954017A (zh) | 基于增强现实技术的燃气管道泄漏检测*** | |
CN106767895A (zh) | 利用标志点定向求解相机外方位元素的***和方法 | |
CN108957507A (zh) | 基于增强现实技术的燃气管道泄漏处置方法 | |
CN113902809A (zh) | 一种红外相机与激光雷达联合标定的方法 | |
CN113739765A (zh) | 一种无额外控制点的双目协同落点测量方法 | |
CN111402315A (zh) | 一种自适应调整双目摄像机基线的三维距离测量方法 | |
CN117152371B (zh) | 一种三维地形测绘方法及*** | |
CN109751986A (zh) | 一种根据管网属性数据生成ar图像的处理***及方法 | |
CN109859320A (zh) | 一种根据管网属性数据生成三维可视化图像的***及方法 | |
CN114693782A (zh) | 用于确定三维场景模型坐标系和物理坐标系的转换关系的方法及装置 | |
CN108954016A (zh) | 基于增强现实技术的燃气管道泄漏处置*** | |
CN116596824A (zh) | 多相机三维面模型融合方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |