CN115908706B - 实景三维模型与影像融合的高速铁路竣工验收方法 - Google Patents

实景三维模型与影像融合的高速铁路竣工验收方法 Download PDF

Info

Publication number
CN115908706B
CN115908706B CN202211425950.XA CN202211425950A CN115908706B CN 115908706 B CN115908706 B CN 115908706B CN 202211425950 A CN202211425950 A CN 202211425950A CN 115908706 B CN115908706 B CN 115908706B
Authority
CN
China
Prior art keywords
image
live
projection
model
action
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202211425950.XA
Other languages
English (en)
Other versions
CN115908706A (zh
Inventor
王凯
高文峰
邓继伟
张冠军
赵海
陈亮
刘延宏
樊齐旻
蔡德钩
李红彦
赵程昆
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
China Railway Design Corp
China State Railway Group Co Ltd
Original Assignee
China Railway Design Corp
China State Railway Group Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by China Railway Design Corp, China State Railway Group Co Ltd filed Critical China Railway Design Corp
Priority to CN202211425950.XA priority Critical patent/CN115908706B/zh
Publication of CN115908706A publication Critical patent/CN115908706A/zh
Application granted granted Critical
Publication of CN115908706B publication Critical patent/CN115908706B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • YGENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02TCLIMATE CHANGE MITIGATION TECHNOLOGIES RELATED TO TRANSPORTATION
    • Y02T10/00Road transport of goods or passengers
    • Y02T10/10Internal combustion engine [ICE] based vehicles
    • Y02T10/40Engine management systems

Landscapes

  • Image Analysis (AREA)
  • Image Processing (AREA)

Abstract

本发明公开了一种实景三维模型与影像融合的高速铁路竣工验收方法,包括:获取影像和POS数据,处理获取无畸变影像数据及内、外方位元素;进行实景三维重建,计算线性优列矩阵;利用线性优列矩阵搜索、提取最优匹配影像;对三维场景下的最优影像投影进行建模,得到投影模型;建立影像纹理映射,利用影像分级进行投影,形成数据可视化和融合交互;本申请采用线性优列矩阵提取最优匹配影像,通过最优匹配影像进行建模后,利用建立的纹理映射进行影像分级投影,能做大限度的消除视觉误差,避免模型拉花、空洞瓶颈性等问题。

Description

实景三维模型与影像融合的高速铁路竣工验收方法
技术领域
本发明涉及智能轨道交通技术领域,尤其涉及一种实景三维模型与影像融合的高速铁路竣工验收方法。
背景技术
高速铁路开展竣工验收涉及多个专业和专题,时间紧任务重。高速铁路竣工观感验收传统方式通过专业技术人员根据相关技术规范开展外业现场踏勘作业,梳理形成整改问题。随着高空间分辨率无人机影像和实景三维建模技术出现,使得内业***开展观感验收专业判读和分析成为了可能。
实景三维模型在竣工验收中应用存在模型拉花、空洞瓶颈性问题,单一模型本身无法直接应用于观感验收中,会引入视觉判读误差,因此本申请研究了一种实景三维模型与影像融合的高速铁路竣工验收方法。
发明内容
因此,本发明的目的在于提供一种实景三维模型与影像融合的高速铁路竣工验收方法,采用线性优列矩阵提取最优匹配影像,在一个视场观察点中通过最优匹配件影像进行投影建模后,进行影像纹理映射,利用分级影像,逐级融合交互,能做大限度的消除视觉误差,避免模型拉花、空洞瓶颈性等问题,实现了三维成果模型与影像的高质量融合,解决了实景模型不真实、单独影像无空间参考的问题。
为了实现上述目的,本发明提供的一种实景三维模型与影像融合的高速铁路竣工验收方法,包括以下步骤:
S1、获取影像和POS数据,并进行空三加密处理,获取无畸变影像数据及精确的内、外方位元素;
S2、采用倾斜建模方式在空三加密的基础上进行实景三维重建,得到实景三维模型;利用实景三维场景中观测位置、姿态和外方位元素;计算线性优列矩阵;利用线性优列矩阵提取最优匹配影像;
S3、对实景三维场景下的最优影像投影进行建模,得到投影模型;对投影模型的角点进行计算;
S4、以投影模型的角点,形成投影面,构建外包多面体,将影像进行纹理映射;
S5、利用S1中所述当前视场观察点、S3中投影模型的角点以及S4中的纹理映射;将原始影像分级切片后,进行数据可视化和融合交互;实现当前视场观察点变化时,同步进行对应影像的筛选和影像的映射加载;
S6、利用建立的实景三维模型对竣工工程进行视觉判识和几何尺寸测量;对识别和测量出的缺陷信息进行模板化整理输出。
进一步,优选的,在S1中,所述内方位元素包括相机焦距、像元大小、相幅宽、相幅高、像主点横坐标以及像主点纵坐标;所述外方位元素包括线元素和角元素;所述线元素包括曝光点横坐标、曝光点纵坐标、曝光点高程;所述角元素包括俯仰角、横滚角、航偏角。
进一步,优选的,在S2中,所述在实景三维场景中计算线性优列矩阵,包括以下步骤:
S201、在空三加密的基础上采用倾斜建模方式进行实景三维重建,获取OSGB格式的实景三维模型;
S202、将OSGB格式倾斜模型进行顶层重置、纹理压缩和格式转换为3dtiles格式实景模型数据;
S203、在实景三维场景的可视化界面下获取当前场景的观察位置点、外方位元素;计算观察位置点与外方位元素中的线元素的欧式距离,得到距离矩阵A;
S204、对距离矩阵A进行排序,将前10%的部分组成线性优列矩阵B。
进一步,优选的,在S2中,所述利用线性优列矩阵提取最优匹配影像包括以下步骤:
S205、将当前视场的观察位置点处的外方位元素中的角元素形成矩阵C,将优列矩阵B对应的角元素组成的矩阵Bj;分别计算C和Bj矩阵的相关系数rj,得到相关***矩阵R;
S206、对相关系数矩阵R进行排序,选择相关系数最大值对应的影像作为最优匹配影像。
进一步,优选的,在S3中,所述对实景三维场景下的最优影像投影进行建模,得到投影模型,包括如下步骤:
S301、利用内方位元素和最优匹配影像的外方位元素,计算投影中心D的地面投影横坐标和地面投影纵坐标;
S302、将当前视场观察点的平均高程,设定为初始高程值,利用高程值进行迭代计算,得到影像中心的三维投影坐标(XC,YC,ZC);
S303、根据得到的影像中心的三维投影坐标(XC,YC,ZC),分别利用高程值进行迭代计算,依次计算得出影像左上角、左下角、右上角、右下角的角点投影坐标。
进一步,优选的,在S4中,以投影模型的角点,形成投影面,将照片纹理进行映射,构建外包多面体,包括以下步骤:
将投影模型的角点,作为外包多面体的底面;
根据实景模型最高点至底面的距离,设置参考面;
将参考面其中一边为轴转动θ度,进行选址;得到角点投影面;其中,θ=90°-Phi;Phi为相机俯仰角;
利用角点投影面将照片作为纹理进行映射。
进一步,优选的,所述将原始影像分级切片采用如下方法:
将获取的原始影像,采用二叉树分类法进行影像分块和影像分辨率重采样;
将二叉树分类法分类后的每一级影像切片数据单独放在一个文件夹下;
采用影像名称+分级编号的形式,进行文件夹命名。
进一步,优选的,在S5中,进行数据可视化和融合交互时,采用WEBGL开源框架进行实景三维模型数据的加载,在实景三维模型场景上开展影像加载区域空间多边形面计算,对加载影像区域的实景模型进行隐藏显示;
在实景三维场景上,利用S3中计算的影像四个角点坐标,及S4中构建的外包多面体,将影像作为外包多面体的纹理进行映射;
将实景三维模型的观察位置角度、姿态变化作为触发影像筛选和加载的事件,每进行一次视角变换就进行一次影像的筛选与影像的映射加载。
进一步,优选的,在S6中,利用建立的实景三维模型对竣工工程进行视觉判识时,包括在实景三维模型的对应位置上通过拾取点获取缺陷位置空间坐标为point_qxi(X,Y,Z);
通过里程桩高索引表进行插值计算得到详细的里程坐标索引表;
计算缺陷点位与里程坐标索引表的欧式距离Di,得到距离矩阵[Di],对距离矩阵进行排序,选择距离最小的坐标对应的里程为缺陷位置的里程信息;
采用里程、标段、坐标信息、位置描述、问题描述、照片、备注作为表头建立模板化表格,进行缺陷报表输出。
本申请公开的一种实景三维模型与影像融合的高速铁路竣工验收方法,相比于现有技术,至少具有以下优点:
1、采用线性优列矩阵提取最优匹配影像,在一个视场观察点中通过最优匹配件影像进行投影建模后,形成的纹理映射为无空间参考的原始影像提供了空间参考,能做大限度的消除视觉误差,避免模型拉花、空洞瓶颈性等问题,实现了三维成果模型与影响的高质量融合,解决了实景三维模型无法直接应用工程竣工验收的技术问题。
2、本申请实现了基于融合场景的铁路观感缺陷检测、工程几何属性提取、专题应用分析示范应用,变革了现阶段需要现场开展铁路工程竣工观感验收的技术方式,大幅度提高了竣工验收的效率。
附图说明
图1为本发明提供的实景三维模型与影像融合的高速铁路竣工验收方法的流程图。
图2为本申请实景三维重建效果图。
图3为本申请的三维模型与影像融合的效果图。
图4为本申请基于融合场景的尺寸量测中拱形宽度量测及边坡坡度分析示意图。
图5为本申请基于融合场景的尺寸量测中声屏障高度、位置量测示意图。
图6为本申请缺陷检测与完成性分析中基于模型的缺陷观感检测示意图。
图7为本申请缺陷检测与完成性分析中另一处缺陷观感检测示意图。
图8为本申请缺陷检测与完成性分析中影像下的声屏障观感检测示意图。
图9为本申请构建外包多面体的示意图。
图10为本申请中原始影像分级切片的流程示意图。
具体实施方式
以下通过附图和具体实施方式对本发明作进一步的详细说明。
如图1所示,本发明一方面实施例提供的一种实景三维模型与影像融合的高速铁路竣工验收方法,包括以下步骤:
S1、获取影像和POS数据,并进行空三加密处理,获取无畸变影像数据及精确的内、外方位元素;
S2、采用倾斜建模方式在空三加密的基础上进行实景三维重建,得到实景三维模型;利用实景三维场景中观测位置、姿态和外方位元素;计算线性优列矩阵;利用线性优列矩阵提取最优匹配影像;
S3、对实景三维场景下的最优影像投影进行建模,得到投影模型;对投影模型的角点进行计算;
S4、以投影模型的角点,形成投影面,构建外包多面体,将影像进行纹理映射;
S5、利用S1中所述当前视场观察点、S3中投影模型的角点以及S4中的纹理映射;将原始影像分级切片后,进行数据可视化和融合交互;实现当前视场观察点变化时,同步进行对应影像的筛选和影像的映射加载;
S6、利用建立的实景三维模型对竣工工程进行视觉判识和几何尺寸测量;对识别和测量出的缺陷信息进行模板化整理输出。
在具体实施例中,在S1中,所述内方位元素包括相机焦距、像元大小、相幅宽、相幅高、像主点横坐标以及像主点纵坐标;所述外方位元素包括线元素和角元素;所述线元素包括曝光点横坐标、曝光点纵坐标、曝光点高程;所述角元素包括俯仰角、横滚角、航偏角。
对于一个设备而已言,具有相同的内方位元素,对于每张影像而言,具备自己独自的外方位元素。通过外业数据采集获取区域影像(一般为jpg或tiff格式)和POS数据(相片拍摄时的地理空间坐标位置),通过输入数据和相机参数进行空三加密处理,获取精确内、外方位元素和无畸变影像数据。其中:内方位元素为相机本身的参数信息主要包括:相机的焦距FocalLength、像元大小Pixel,相幅尺寸,宽Width,高Height、像主点位置。外方位元素包括:精确物方坐标和精确角元素。通过相机标定获取的相机内方位元素如表1所示,通过外业数据采集获取相片的外方位元素,其中i=0~count,count为本次作业的相片总数,如表2所示。
表1.内方位元素
相机焦距 像元大小 相幅宽 相幅高 像主点横坐标 像主点纵坐标
F P W H x y
表2.外方位元素
曝光点横坐标 曝光点纵坐标 曝光点高程 俯仰 横滚 航偏
Xi Yi Zi Phii Omegai Kappai
进一步,在S2中,所述在实景三维场景中计算线性优列矩阵,包括以下步骤:
S201、在空三加密的基础上采用倾斜建模方式进行实景三维重建,获取OSGB格式的实景三维模型;
S202、将OSGB格式倾斜模型进行顶层重置、纹理压缩和格式转换为3dtiles格式实景模型数据;
S203、在实景三维场景的可视化界面下获取当前场景的观察位置点、外方位元素;计算观察位置点与外方位元素中的线元素的欧式距离,得到距离矩阵A;
S204、对距离矩阵A进行排序,将前10%的部分组成线性优列矩阵B。
进一步,优选的,在S2中,所述利用线性优列矩阵提取最优匹配影像包括以下步骤:
S205、将当前视场的观察位置点处的外方位元素中的角元素形成矩阵C,将优列矩阵B对应的角元素组成的矩阵Bj;分别计算C和Bj矩阵的相关系数rj,得到相关***矩阵R;
S206、对相关系数矩阵R进行排序,选择相关系数最大值对应的影像作为最优匹配影像。
在进行线性优列矩阵的计算时,采用如下实施例的方法。
在实景三维场景的可视化界面下获取当前场景的观察位置点Views(XS,YS,ZS),视场角度的俯仰横滚和航偏。影像Imagei外方位线元素为Xi,Yi,Zi,角元素Omegai,Phii,Kappai。分别计算Views(XS,YS,ZS)与Imagei线元素的与(Xi,Yi,Zi)之间的欧式距离Di 得到距离矩阵A [Di],相关计算公式如下:
……………… (1)
对矩阵[Di]进行排序,选择前10%的部分组成线性优列矩阵B [Dj],其中j=i/10。
(4)最优匹配影像提取
将视场观测点处的角元素构成矩阵C [Phis, Omegas,Kappas],将优列矩阵B对应的角元素组成的矩阵为Bj[Phij,Omegaj,Kappaj],分别计算C和Bi矩阵的相关系数rj,得到相关***矩阵R;
…………… (2)
其中,Cov(Bj,C)为Bj与C的协方差,Var[Bj]为Bj的方差,Var[C]为C的方差。对相关系数矩阵R进行排序,选择相关系数值最大的rk为最优匹配影像Imagek
如图2所示,在S3中,所述对实景三维场景下的最优影像投影进行建模,得到投影模型,包括如下步骤:
S301、利用内方位元素和最优匹配影像的外方位元素,计算投影中心D的地面投影横坐标和地面投影纵坐标;
S302、将当前视场观察点的平均高程,设定为初始高程值,利用高程值进行迭代计算,得到影像中心的三维投影坐标(XC,YC,ZC
S303、根据得到的影像中心的三维投影坐标(XC,YC,ZC),分别利用高程值进行迭代计算,依次计算得出影像左上角、左下角、右上角、右下角的角点投影坐标。
具体为,利用上述方法得到的内方位元素F,P,W,H,x,y;以及得到的最优匹配影像Imagek的外方位元素:Xk,Yk,Zk,Phik,Omegak,Kappak。Z为投影点的地面高程。利用影像的外方位元素计算投影中心坐标值(X,Y),其计算公式为:
………………………………………………(3)
… (4)
…(5)
………………………………………(6)
(sin()*……(7)
(cos())…(8)
根据计算上述间接变量,得到地面投影横坐标X,
……………………(9)
………………………(10)
……………………………(11)
…………………………… (12)
根据计算上述间接变量,得到地面投影横坐标Y0,
……………………(13)
首先计算影像中心点的地面投影坐标。Z的初始值取当前视场下模型的平均高程 Z0,取0,利用公式(9),公式(13)计算得到影像中心点坐标(XC1,YC1),取得当前坐 标下的高程值为Z C1。计算Zre= ZC1- Z0,如果Zre>1,进入迭代运算,Z取Zc1,H、W取0,计算得到 (XC2,YC2),提取当前坐标高程为Zc2,计算Zre= ZC2- ZC1,如果Zre>1,继续迭代直到 Zre<=1结 束迭代,得到影像中心投影坐标(XC,YC,ZC)。
②计算影像左上角点LU的模型投影坐标,取Z为ZC,取相幅的高度H,取-W, 利 用公式(9),公式(13)计算得到坐标(XLU1,YLU1),取得当前坐标下的高程值为ZLU1。计算Zre= ZLU1- Zc,如果Zre>1,进入迭代运算,Z取ZLU1取相幅的高度H,取-W,计算得到 (X LU 2,Y LU 2),提取当前坐标高程Z LU 2,计算Zre= Z LU 2- Z LU 1,如果Zre>1,继续迭代直到 Zre<=1结束迭代,得到影像左上角点模型投影坐标(XLU,YLU,ZLU)。
③计算影像右上角点RU的模型投影坐标,取Z为ZC取相幅的高度H,取 W, 利用公式(9),公式(13)计算得到坐标(XRU1,YRU1),取得当前坐标下的高程值为ZRU1。计算 Zre= ZRU1- Zc,如果Zre>1,进入迭代运算,Z取ZRU1取相幅的高度H,取W,计算得到 (XRU2,YRU2),提取当前坐标高程ZRU 2,计算Zre= ZRU2- ZRU1,如果Zre>1,继续迭代直到 Zre<=1 结束迭代,得到影像右上角点模型投影坐标(XRU,YRU,ZRU)。
④计算影像右下角点RD的模型投影坐标,取Z为ZC取-H,取W, 利用公 式(9),公式(13)计算得到坐标(XRD1,YRD1),取得当前坐标下的高程值为Z RU1。计算Zre= ZRD1- Zc,如果Zre>1,进入迭代运算,Z取ZRD1取相幅的高度-H,取W,计算得到(XRD2, YRD2),提取当前坐标高程ZRD2,计算Zre=ZRD2-ZRD1,如果Zre>1,继续迭代直到 Zre<=1结束迭代, 得到影像右下角点模型投影坐标(XRD,YRD,ZRD)。
⑤计算影像左下角点LD的模型投影坐标,取Z为ZC取-H,取-W, 利用公 式(9),公式(13)计算得到坐标(XLD1,YLD1),取得当前坐标下的高程值为ZLD1。计算Zre= ZLD1- Zc,如果Zre>1,进入迭代运算,Z取ZLD1取相幅的高度-H,取-W,计算得到(XLD2, YLD2),提取当前坐标高程ZLD2,计算Zre=ZLD2-ZLD1,如果Zre>1,继续迭代直到 Zre<=1结束迭代, 得到影像左下角点模型投影坐标(XLD,YLD,ZLD)。
如图9所示,在S4中,以投影模型的角点,形成投影面,构建外包多面体,将影像进行纹理映射;包括以下步骤:
将投影模型的角点,作为外包多面体的底面;
根据实景模型最高点至底面的距离,设置参考面;
将参考面其中一边为轴转动θ度,进行选址;得到角点投影面;
利用角点投影面将照片作为纹理进行映射。
根据上述计算得出的四个角LU、LD、RD、RU四个角点,利用角点绘制外包多面体的底面。h值为区域范围内实景模型的最高点至底面的距离值。构建平行于LU、RU、RD和LD底面的参考面LU’、RU’、RD’和LD’。将LU’、RU’、RD’和LD’面以LD’、RD’按照θ角度进行选址得到以LU’’、RU’’、RD’和LD’为角点的投影面,将照片作为纹理进行映射。其中,θ=90°-Phi;为摄像机俯仰角的余角。
如图10所示,还包括将原始影像分级切片采用如下方法:
将获取的原始影像,采用二叉树分类法进行影像分块和影像分辨率重采样;
将二叉树分类法分类后的每一级影像切片数据单独放在一个文件夹下;
采用影像名称+分级编号的形式,进行文件夹命名。
原始影像的分辨率为m*n其中(m>n),切片的大小定义为长边为64像素。则动态分级为q1,其中q1应满足2q1<floor(m/64),其中floor.为向下取整函数。采用二分法对原始影像的进行分块,0级为不分块,1级为21*21块,Q1级为2Q1*2Q1块。
对3dtiles 格式专业换后的成果模型数据和影响分级后的单张影像数据采用云服务器进行集中存储,采用静态数据形式对影像文件夹进行发布,通过数据库实现不同里程段的模型、影像数据网络发布相对地址结构化管理。相关数据库表的结构如下:
表3.模型影像数据库表单结构
序号 工程名称 链段 起始里程 终止里程 Model_URL Photo_URL
1 朝凌高铁 DK 32.0 35.5 /CL/GEOdata/Model/DK/32.0-35.5/ /CL/GEOdata/Photo/DK/32.0-35.5/
2 杭绍台高铁 YDK 1.0 2.5 /HST/GEOdata/Model/DK/1-2.5/ /HST/GEOdata/Photo/DK/1-2.5/
进一步,优选的,在S5中,进行数据可视化和融合交互时,采用WEBGL开源框架进行实景三维模型数据的加载,在实景三维模型场景上开展影像加载区域空间多边形面计算,对加载影像区域的实景模型进行隐藏显示;
在实景三维场景上,利用S3中计算的影像四个角点坐标,利用S3中计算的影像四个角点坐标,及S4中构建的外包多面体,将影像作为外包多面体的纹理进行映射;
将实景三维模型的观察位置角度、姿态变化作为触发影像筛选和加载的事件,每进行一次视角变换就进行一次影像的筛选与影像的映射加载。
如图6-8所示,在S6中,利用建立的实景三维模型对竣工工程进行视觉判识时,包括在实景三维模型的对应位置上通过拾取点获取缺陷位置空间坐标为point_qxi(X,Y,Z);
通过里程桩高索引表进行插值计算得到详细的里程坐标索引表;如表4所示。
表4里程桩高表(模拟测试数据)
ID 里程 X Y Z 备注
1 DK100+250 21260562.77 3334516.71 152.33 原始数据
2 DK100+251 21260567.47 3334515.31 152.45 插值数据
3 DK100+252 21260572.17 3334513.92 152.55 插值数据
4 DK100+253 21260576.87 3334512.524 152.67 插值数据
5 DK100+254 21260581.57 3334511.13 152.75 插值数据
6
7 DK100+260 21260567.47 3334515.31 155.77 原始数据
计算缺陷点位与里程坐标索引表的欧式距离Di,得到距离矩阵[Di],对距离矩阵进行排序,选择距离最小的坐标对应的里程为缺陷位置的里程信息;采用里程、标段、坐标信息、位置描述、问题描述、照片、备注作为表头建立模板化表格,进行缺陷报表输出。如表5所示:
表5缺陷检测信息模板
如图4-5所示,还可利用模型进行几何尺寸量测;构建基于实景三维模型的几何尺度量测工具,工具包括水平距离d、垂直距离h、空间距离l、坡度i量测等工具。根据《高速铁路工程静态验收技术规范》TB 10760-2013中所涉及的关于尺寸量测的相关规定,结合设计施工要求执行。相关结构化表格如表6所示:
表6 工程目标几何尺寸量测检验统计表
相关计算公式如下:
获取要量测两点的空间坐标为(x1,y1,z1),(x2,y2,z2
①水平距离d计算:
…………………………(14)
②垂直高度h计算:
③空间距离计算l:
…………………(15)
④坡度计算i:
………………………………………(16)
显然,上述实施例仅是为清楚地说明所作的举例,而并非对实施方式的限定。对于所属领域的普通技术人员来说,在上述说明的基础上还可以做出其它不同形式的变化或变动。这里无需也无法对所有的实施方式予以穷举。而由此所引伸出的显而易见的变化或变动仍处于本发明创造的保护范围之中。

Claims (6)

1.一种实景三维模型与影像融合的高速铁路竣工验收方法,其特征在于:包括以下步骤:
S1、获取区域影像和拍摄时的地理空间坐标位置,并进行空三加密处理,获取无畸变影像数据及精确的内方位元素、外方位元素;
S2、采用倾斜建模方式在空三加密的基础上进行实景三维重建,得到实景三维模型;利用实景三维场景中观测位置、姿态和外方位元素;计算线性优列矩阵;利用线性优列矩阵提取最优匹配影像;其中,在实景三维场景中计算线性优列矩阵,包括以下步骤:
S201、在空三加密的基础上采用倾斜建模方式进行实景三维重建,获取OSGB格式的实景三维模型;
S202、将OSGB格式倾斜模型进行顶层重置、纹理压缩和格式转换为3dtiles格式实景模型数据;
S203、在实景三维场景的可视化界面下获取当前场景的观察位置点、外方位元素;计算观察位置点与外方位元素中的线元素的欧式距离,得到距离矩阵A;
S204、对距离矩阵A进行排序,将前10%的部分组成线性优列矩阵B;
在S2中,所述利用线性优列矩阵提取最优匹配影像包括以下步骤:
S205、将当前视场的观察位置点处的外方位元素中的角元素形成矩阵C,将优列矩阵B对应的角元素组成的矩阵Bj;分别计算C和Bj矩阵的相关系数rj,得到相关***矩阵R;
S206、对相关系数矩阵R进行排序,选择相关系数最大值对应的影像作为最优匹配影像;
S3、对实景三维场景下的最优匹配影像投影进行建模,得到投影模型;对投影模型的角点进行计算;所述对实景三维场景下的最优影像投影进行建模,得到投影模型,包括如下步骤:
S301、利用内方位元素和最优匹配影像的外方位元素,计算投影中心D的地面投影横坐标和地面投影纵坐标;
S302、将当前视场观察点的平均高程,设定为初始高程值,利用高程值进行迭代计算,得到影像中心的三维投影坐标(XC,YC,ZC);
S303、根据得到的影像中心的三维投影坐标(XC,YC,ZC),分别利用高程值进行迭代计算,依次计算得出影像左上角、左下角、右上角、右下角的角点投影坐标;
S4、以投影模型的角点,形成投影面,构建外包多面体,将影像进行纹理映射;
S5、利用S1中当前视场观察点、S3中投影模型的角点以及S4中的纹理映射;将原始影像分级切片后,进行数据可视化和融合交互;实现当前视场观察点变化时,同步进行对应影像的筛选和影像的映射加载;
S6、利用建立的实景三维模型对竣工工程进行视觉判识和几何尺寸测量;对识别和测量出的缺陷信息进行模板化整理输出。
2.根据权利要求1所述的实景三维模型与影像融合的高速铁路竣工验收方法,其特征在于:在S1中,所述内方位元素包括相机焦距、像元大小、相幅宽、相幅高、像主点横坐标以及像主点纵坐标;所述外方位元素包括线元素和角元素;所述线元素包括曝光点横坐标、曝光点纵坐标、曝光点高程;所述角元素包括俯仰角、横滚角、航偏角。
3.根据权利要求1所述的实景三维模型与影像融合的高速铁路竣工验收方法,其特征在于:在S4中,以投影模型的角点,形成投影面,将照片纹理进行映射,构建外包多面体,包括以下步骤:
将投影模型的角点,作为外包多面体的底面;
根据实景模型最高点至底面的距离,设置参考面;
将参考面其中一边为轴转动θ度,进行选址;得到角点投影面;其中,θ=90°-Phi;Phi为相机俯仰角;
利用角点投影面将照片作为纹理进行映射。
4.根据权利要求1所述的实景三维模型与影像融合的高速铁路竣工验收方法,其特征在于:在S5中,所述将原始影像分级切片采用如下方法:
将获取的原始影像,采用二叉树分类法进行影像分块和影像分辨率重采样;
将二叉树分类法分类后的每一级影像切片数据单独放在一个文件夹下;
采用影像名称+分级编号的形式,进行文件夹命名。
5.根据权利要求1所述的实景三维模型与影像融合的高速铁路竣工验收方法,其特征在于:在S5中,进行数据可视化和融合交互时,采用WEBGL开源框架进行实景三维模型数据的加载,在实景三维模型场景上开展影像加载区域空间多边形面计算,对加载影像区域的实景模型进行隐藏显示;
在实景三维场景上,利用S3中计算的影像四个角点坐标,及S4中构建的外包多面体,将影像作为外包多面体的纹理进行映射;
将实景三维模型的观察位置角度、姿态变化作为触发影像筛选和加载的事件,每进行一次视角变换就进行一次影像的筛选与影像的映射加载。
6.根据权利要求1所述的实景三维模型与影像融合的高速铁路竣工验收方法,其特征在于:在S6中,利用建立的实景三维模型对竣工工程进行视觉判识时,包括在实景三维模型的对应位置上通过拾取点获取缺陷位置空间坐标为point_qxi(X,Y,Z);
通过里程桩高索引表进行插值计算得到详细的里程坐标索引表;
计算缺陷点位与里程坐标索引表的欧式距离Di,得到距离矩阵[Di],对距离矩阵进行排序,选择距离最小的坐标对应的里程为缺陷位置的里程信息;
采用里程、标段、坐标信息、位置描述、问题描述、照片、备注作为表头建立模板化表格,进行缺陷报表输出。
CN202211425950.XA 2022-11-15 2022-11-15 实景三维模型与影像融合的高速铁路竣工验收方法 Active CN115908706B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202211425950.XA CN115908706B (zh) 2022-11-15 2022-11-15 实景三维模型与影像融合的高速铁路竣工验收方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202211425950.XA CN115908706B (zh) 2022-11-15 2022-11-15 实景三维模型与影像融合的高速铁路竣工验收方法

Publications (2)

Publication Number Publication Date
CN115908706A CN115908706A (zh) 2023-04-04
CN115908706B true CN115908706B (zh) 2023-08-08

Family

ID=86473968

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202211425950.XA Active CN115908706B (zh) 2022-11-15 2022-11-15 实景三维模型与影像融合的高速铁路竣工验收方法

Country Status (1)

Country Link
CN (1) CN115908706B (zh)

Citations (29)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CA2716257A1 (en) * 2010-10-01 2012-04-01 Martin Habbecke System and method for interactive painting of 2d images for iterative 3d modeling
CN103226838A (zh) * 2013-04-10 2013-07-31 福州林景行信息技术有限公司 地理场景中移动监控目标的实时空间定位方法
CN104361628A (zh) * 2014-11-27 2015-02-18 南宁市界围工程咨询有限公司 一种基于航空倾斜摄影测量的三维实景建模***
CN105262958A (zh) * 2015-10-15 2016-01-20 电子科技大学 一种虚拟视点的全景特写拼接***及其方法
WO2016138161A1 (en) * 2015-02-24 2016-09-01 HypeVR Lidar stereo fusion live action 3d model virtual reality video
WO2017027638A1 (en) * 2015-08-10 2017-02-16 The Board Of Trustees Of The Leland Stanford Junior University 3d reconstruction and registration of endoscopic data
KR101912396B1 (ko) * 2017-06-13 2018-10-26 주식회사 아이닉스 가상 카메라 기반의 임의 시점 영상 생성 장치 및 방법
CN110246221A (zh) * 2019-06-25 2019-09-17 中煤航测遥感集团有限公司 真正射影像获得方法及装置
CN110570466A (zh) * 2019-09-09 2019-12-13 广州建通测绘地理信息技术股份有限公司 三维实景点云模型的生成方法和装置
CN111260777A (zh) * 2020-02-25 2020-06-09 中国电建集团华东勘测设计研究院有限公司 一种基于倾斜摄影测量技术的建筑信息模型重构的方法
CN111429498A (zh) * 2020-03-26 2020-07-17 中国铁路设计集团有限公司 一种基于点云和影像融合技术的铁路营业线三维中线制作方法
CN111537515A (zh) * 2020-03-31 2020-08-14 国网辽宁省电力有限公司朝阳供电公司 基于三维实景模型的铁塔螺栓缺陷展示方法和***
CN111629193A (zh) * 2020-07-28 2020-09-04 江苏康云视觉科技有限公司 一种实景三维重建方法及***
CN111836012A (zh) * 2020-06-28 2020-10-27 航天图景(北京)科技有限公司 基于三维场景的视频融合与视频联动方法及电子设备
CN112085844A (zh) * 2020-09-11 2020-12-15 中国人民解放军军事科学院国防科技创新研究院 面向野外未知环境的无人机影像快速三维重建方法
CN112258624A (zh) * 2020-09-15 2021-01-22 广东电网有限责任公司 一种三维实景融合建模的方法
CN112927360A (zh) * 2021-03-24 2021-06-08 广州蓝图地理信息技术有限公司 一种基于倾斜模型与激光点云数据融合的三维建模方法和***
CN113192193A (zh) * 2021-04-23 2021-07-30 安徽省皖北煤电集团有限责任公司 基于Cesium三维地球框架的高压输电线路走廊三维重建方法
CN113192183A (zh) * 2021-04-29 2021-07-30 山东产研信息与人工智能融合研究院有限公司 基于倾斜摄影与全景视频融合的实景三维重建方法及***
CN113192200A (zh) * 2021-04-26 2021-07-30 泰瑞数创科技(北京)有限公司 一种基于空三并行计算算法的城市实景三维模型的构建方法
CN113506370A (zh) * 2021-07-28 2021-10-15 自然资源部国土卫星遥感应用中心 基于立体遥感影像的三维地理场景模型构建方法和装置
CN113706698A (zh) * 2021-10-25 2021-11-26 武汉幻城经纬科技有限公司 实景三维道路重建方法及装置、存储介质、电子设备
CN113706623A (zh) * 2021-11-01 2021-11-26 中国测绘科学研究院 一种适用于航空倾斜影像的空三加密方法
WO2022001590A1 (zh) * 2020-06-30 2022-01-06 中兴通讯股份有限公司 摄像***、移动终端以及三维图像获取方法
CN114387198A (zh) * 2022-03-24 2022-04-22 青岛市勘察测绘研究院 一种影像与实景模型的融合显示方法、装置及介质
CN114443793A (zh) * 2022-01-25 2022-05-06 陈进雄 一种时空数据可视化的国土空间详细规划三维场景设计的方法
CN114494388A (zh) * 2022-01-27 2022-05-13 中国铁建重工集团股份有限公司 一种大视场环境下图像三维重建方法、装置、设备及介质
CN114859374A (zh) * 2022-07-11 2022-08-05 中国铁路设计集团有限公司 基于无人机激光点云和影像融合的新建铁路交叉测量方法
CN115147538A (zh) * 2022-02-22 2022-10-04 山东赛瑞智能科技有限公司 一种基于环境监测无人机对实景三维建模动态更新的方法

Patent Citations (29)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CA2716257A1 (en) * 2010-10-01 2012-04-01 Martin Habbecke System and method for interactive painting of 2d images for iterative 3d modeling
CN103226838A (zh) * 2013-04-10 2013-07-31 福州林景行信息技术有限公司 地理场景中移动监控目标的实时空间定位方法
CN104361628A (zh) * 2014-11-27 2015-02-18 南宁市界围工程咨询有限公司 一种基于航空倾斜摄影测量的三维实景建模***
WO2016138161A1 (en) * 2015-02-24 2016-09-01 HypeVR Lidar stereo fusion live action 3d model virtual reality video
WO2017027638A1 (en) * 2015-08-10 2017-02-16 The Board Of Trustees Of The Leland Stanford Junior University 3d reconstruction and registration of endoscopic data
CN105262958A (zh) * 2015-10-15 2016-01-20 电子科技大学 一种虚拟视点的全景特写拼接***及其方法
KR101912396B1 (ko) * 2017-06-13 2018-10-26 주식회사 아이닉스 가상 카메라 기반의 임의 시점 영상 생성 장치 및 방법
CN110246221A (zh) * 2019-06-25 2019-09-17 中煤航测遥感集团有限公司 真正射影像获得方法及装置
CN110570466A (zh) * 2019-09-09 2019-12-13 广州建通测绘地理信息技术股份有限公司 三维实景点云模型的生成方法和装置
CN111260777A (zh) * 2020-02-25 2020-06-09 中国电建集团华东勘测设计研究院有限公司 一种基于倾斜摄影测量技术的建筑信息模型重构的方法
CN111429498A (zh) * 2020-03-26 2020-07-17 中国铁路设计集团有限公司 一种基于点云和影像融合技术的铁路营业线三维中线制作方法
CN111537515A (zh) * 2020-03-31 2020-08-14 国网辽宁省电力有限公司朝阳供电公司 基于三维实景模型的铁塔螺栓缺陷展示方法和***
CN111836012A (zh) * 2020-06-28 2020-10-27 航天图景(北京)科技有限公司 基于三维场景的视频融合与视频联动方法及电子设备
WO2022001590A1 (zh) * 2020-06-30 2022-01-06 中兴通讯股份有限公司 摄像***、移动终端以及三维图像获取方法
CN111629193A (zh) * 2020-07-28 2020-09-04 江苏康云视觉科技有限公司 一种实景三维重建方法及***
CN112085844A (zh) * 2020-09-11 2020-12-15 中国人民解放军军事科学院国防科技创新研究院 面向野外未知环境的无人机影像快速三维重建方法
CN112258624A (zh) * 2020-09-15 2021-01-22 广东电网有限责任公司 一种三维实景融合建模的方法
CN112927360A (zh) * 2021-03-24 2021-06-08 广州蓝图地理信息技术有限公司 一种基于倾斜模型与激光点云数据融合的三维建模方法和***
CN113192193A (zh) * 2021-04-23 2021-07-30 安徽省皖北煤电集团有限责任公司 基于Cesium三维地球框架的高压输电线路走廊三维重建方法
CN113192200A (zh) * 2021-04-26 2021-07-30 泰瑞数创科技(北京)有限公司 一种基于空三并行计算算法的城市实景三维模型的构建方法
CN113192183A (zh) * 2021-04-29 2021-07-30 山东产研信息与人工智能融合研究院有限公司 基于倾斜摄影与全景视频融合的实景三维重建方法及***
CN113506370A (zh) * 2021-07-28 2021-10-15 自然资源部国土卫星遥感应用中心 基于立体遥感影像的三维地理场景模型构建方法和装置
CN113706698A (zh) * 2021-10-25 2021-11-26 武汉幻城经纬科技有限公司 实景三维道路重建方法及装置、存储介质、电子设备
CN113706623A (zh) * 2021-11-01 2021-11-26 中国测绘科学研究院 一种适用于航空倾斜影像的空三加密方法
CN114443793A (zh) * 2022-01-25 2022-05-06 陈进雄 一种时空数据可视化的国土空间详细规划三维场景设计的方法
CN114494388A (zh) * 2022-01-27 2022-05-13 中国铁建重工集团股份有限公司 一种大视场环境下图像三维重建方法、装置、设备及介质
CN115147538A (zh) * 2022-02-22 2022-10-04 山东赛瑞智能科技有限公司 一种基于环境监测无人机对实景三维建模动态更新的方法
CN114387198A (zh) * 2022-03-24 2022-04-22 青岛市勘察测绘研究院 一种影像与实景模型的融合显示方法、装置及介质
CN114859374A (zh) * 2022-07-11 2022-08-05 中国铁路设计集团有限公司 基于无人机激光点云和影像融合的新建铁路交叉测量方法

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
低空无人机倾斜摄影测量成果精度研究;李欢;;甘肃科学学报(第02期);全文 *

Also Published As

Publication number Publication date
CN115908706A (zh) 2023-04-04

Similar Documents

Publication Publication Date Title
CN110148169B (zh) 一种基于ptz云台相机的车辆目标三维信息获取方法
CN102003938B (zh) 大型高温锻件热态在位检测方法
WO2020062434A1 (zh) 一种相机外部参数的静态标定方法
CN107767440B (zh) 基于三角网内插及约束的文物序列影像精细三维重建方法
EP2111530B1 (en) Automatic stereo measurement of a point of interest in a scene
CN109115186B (zh) 一种针对车载移动测量***的360°可量测全景影像生成方法
US5606627A (en) Automated analytic stereo comparator
CN108765298A (zh) 基于三维重建的无人机图像拼接方法和***
Pepe et al. Techniques, tools, platforms and algorithms in close range photogrammetry in building 3D model and 2D representation of objects and complex architectures
CN106447601B (zh) 一种基于投影-相似变换的无人机遥感影像拼接方法
JP2005308553A (ja) 三次元画像計測装置及び方法
CN106683173A (zh) 一种基于邻域块匹配提高三维重建点云稠密程度的方法
CN103017653A (zh) 一种球面全景影像与三维激光扫描点云的配准及测量方法
Gerke Using horizontal and vertical building structure to constrain indirect sensor orientation
CN104537707A (zh) 像方型立体视觉在线移动实时测量***
CN110555813B (zh) 一种无人机遥感影像的快速几何校正方法及***
CN112270698A (zh) 基于最邻近曲面的非刚性几何配准方法
US20100066740A1 (en) Unified spectral and Geospatial Information Model and the Method and System Generating It
Dahaghin et al. Precise 3D extraction of building roofs by fusion of UAV-based thermal and visible images
Carter et al. Evaluation of the accuracy of image based scanning as a basis for photogrammetric reconstruction of physical evidence
CN114372992A (zh) 一种基于动平台的边缘角点检测四目视觉算法
CN113962853B (zh) 一种旋转线阵扫描图像位姿自动化精密解算方法
CN115908706B (zh) 实景三维模型与影像融合的高速铁路竣工验收方法
CN107941241A (zh) 一种用于航空摄影测量质量评价的分辨率板及其使用方法
Zhao et al. Digital Elevation Model‐Assisted Aerial Triangulation Method On An Unmanned Aerial Vehicle Sweeping Camera System

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant