CN115830246A - 一种基于增量式sfm的球面全景影像三维重建方法 - Google Patents
一种基于增量式sfm的球面全景影像三维重建方法 Download PDFInfo
- Publication number
- CN115830246A CN115830246A CN202310026071.8A CN202310026071A CN115830246A CN 115830246 A CN115830246 A CN 115830246A CN 202310026071 A CN202310026071 A CN 202310026071A CN 115830246 A CN115830246 A CN 115830246A
- Authority
- CN
- China
- Prior art keywords
- image
- points
- matching
- images
- panoramic image
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Classifications
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
- Y02T—CLIMATE CHANGE MITIGATION TECHNOLOGIES RELATED TO TRANSPORTATION
- Y02T10/00—Road transport of goods or passengers
- Y02T10/10—Internal combustion engine [ICE] based vehicles
- Y02T10/40—Engine management systems
Landscapes
- Image Processing (AREA)
- Image Analysis (AREA)
Abstract
本发明公开了一种基于增量式SFM的球面全景影像三维重建方法,方法包括以下步骤:基于空间约束和顺序约束进行全景影像特征匹配,得到全景影像中两视影像的可靠特征匹配点;针对可靠特征匹配点,采用基于增量式SFM方法恢复全景影像的位置T和姿态R信息;根据位置T和姿态R信息,采用多视立体匹配算法生成密集匹配点云。本发明有益效果是:满足了基于球面全景影像的三维重建需求,具有巨大的实际工程应用价值。
Description
技术领域
本发明涉及三维重建领域,尤其涉及一种基于增量式SFM的球面全景影像三维重建方法。
背景技术
城市街道和室内环境已成为当前实景三维中国建设的重要内容。结合卫星、航空飞机、低空无人机和地面移动测量车等遥感平台,平面透视相机成为最重要的传感器。但是,面向上述复杂场景存在相机连续跟踪困难和数据采集代价高的问题。因此,亟需更加高效的数据采集方式,满足城市街道和室内场景的三维重建需求。
球面全景相机,也称为360相机,能覆盖采集点360°×180°的视角范围,获取具有全方位视场角的影像,已被广泛应用于安防监控、街景地图、机器人导航等领域。与平面透视相机相比,球面全景相机具有更大的视场角,可以实现复杂场景下的视角连续跟踪,并降低数据采集工作量,因而在城市街道和室内环境三维重建中得到越来越多关注。
现有方法有针对全景影像处理单个步骤的改进;也有研究者尝试利用全景影像进行三维重建。但是,现有研究主要集中于专业级全景相机的改进,或者与SLAM(Simultaneous Localization and Mapping)***集成,目的在于满足机器人的导航和定位。随着球面全景相机普及,如消费级Insta360、Ricoh THETA等,以及影像处理技术发展,基于球面全景影像的三维重建需求将会越来越大。
发明内容
为了解决现有的技术方案还不能满足基于球面全景影像的三维重建需求的问题,本发明提供一种基于增量式SFM(Structure from Motion)的球面全景影像三维重建方法,在球面全景相机成像模型的基础上,设计了基于球面同名点的影像相对定向、基于物方-球面三维点的绝对定向,以及平差优化代价函数,建立了一套适用于球面全景影像的增量式SFM方法。
本申请方法包括以下步骤:
S1:基于空间约束和顺序约束进行全景影像特征匹配,得到全景影像中两视影像的可靠特征匹配点;
S2、针对可靠特征匹配点,采用基于增量式SFM方法恢复全景影像的位置T和姿态R信息;
S3、根据位置T和姿态R信息,采用多视立体匹配算法生成密集匹配点云。
本发明提供的有益效果是:满足了基于球面全景影像的三维重建需求,具有巨大的实际工程应用价值。
附图说明
图1是球面相机成像模型示意图;
图2是本发明方法流程示意图;
图3是共面约束原理示意图;
图4是基于增量式SFM全景影像定位定向流程示意图。
具体实施方式
为使本发明的目的、技术方案和优点更加清楚,下面将结合附图对本发明实施方式作进一步地描述。
在具体阐述本申请前,先对球面全景三维重建的基础原理进行简单说明。
球面全景影像具有不同的存储方式和相机成像模型,请参考图1,图1是球面相机成像模型示意图;
考虑到球面影像不利于存储和处理,球面全景影像常采用等距圆柱投影(Equirectangular projection,ERP)表示。全景相机成像模型则建立了物方三维点到二维影像点的映射关系。
图1中的(a)图展示了物方三维点P到球面投影点p;
图1中的(b)图展示了从球面投影点p到二维影像点(I x ,I y );
假设经过球体中心点O和投影点p的大圆与赤道平面的交线为l。那么,投影点p的
经度θ和纬度定义为交线l分别与Z轴和OP的夹角。球面投影点p的经纬度坐标与直
角坐标(x,y,z)之间的转换关系如公式(1)所示。其中,球体半径设定为1。
根据图1(b)可知,球面经纬度坐标与二维影像平面坐标(I x ,I y )的转换关系
可以用公式(2)表示。其中,W和H分别为影像的宽度和高度;c x 和c y 为影像的像主点坐标。因
此,公式(1)和(2)建立了全景影像三维球面坐标与二维影像坐标的转换关系。
假设在世界坐标系O-X W Y W Z W 中,全景影像的姿态和位置分别表示为旋转矩阵R和平移向量T。那么,物方三维点P W 对应的全景球面投影点p可经过公式(3)获得。因此,公式(1)、(2)和(3)构成了球面全景相机的成像模型。
请参考图2,图2是本发明方法流程图;
基于球面全景影像的上述存储方式和相机成像模型,本发明提出的一种基于增量式SFM的球面全景影像三维重建方法,包括以下步骤:
S1:基于空间约束和顺序约束进行全景影像特征匹配,得到全景影像中两视影像的可靠特征匹配点;
需要说明的是,步骤S1具体包括以下过程:
S11、采用SIFT特征提取算法进行球面全景影像特征提取,得到特征点;
ERP格式球面全景影像导致影像在靠近球面两极的区域存在较大的几何变形,使得所提取特征的可重复性和可区分性等特性降低。考虑两个方面的因素,
本发明利用SIFT(Scale Invariant Feature Transform)算法进行球面全景影像的特征提取和描述。
一方面,大部分数据采集固定相机的滚动角和俯仰角,比如地面移动测量车采集***,保证了球面赤道附近的ERP影像几何结构一致;
另一方面,经典SIFT算法具有很好的尺度、旋转不变,也有很强的抗视角变化能力,且有对应的高性能开源库。
具体地,本发明利用SIFT算法的GPU(Graphic Processing Unit)版本SIFTGPU进行影像特征提取和描述子生成。该技术是数字摄影测量和计算机视觉领域的常用手段,本发明就不再赘述。
S12、基于空间约束形成影像匹配对1;
需要说明的是,对于大场景的三维重建,往往需要采集数量较大的全景影像。
如果采用穷举匹配模式,势必导致影像匹配的时间消耗非常大。因此,考虑到全景影像顺序采集,并且Exif信息记录了影像的GNSS(卫星定位)位置信息,本发明综合利用全景影像空间约束和顺序约束进行影像匹配对选择。
需要说明的是,Exif信息是可交换图像文件的缩写,是专门为数码相机的照片设定的,可以记录数码照片的属性信息和拍摄数据。EXIF可以附加于JPEG、TIFF、RIFF等文件之中,为其增加有关数码相机拍摄信息的内容和索引图或图像处理软件的版本信息。
本发明中,步骤S12具体为:
S121、从球面全景影像的Exif信息中读取记录的经度、纬度和高度信息;
S122、对任一张待匹配影像I i ,建立一个以待匹配影像为中心,r为半径的球形区域;
S123、将球形区域内包含的其它影像作为待匹配影像的匹配对,从而得到影像匹配对1。
S13、基于顺序约束得到影像匹配对2;
作为一种实施例,本发明中步骤S13具体为:
S131、在球面全景影像中,读取影像的Exif信息中的时间信息,并按照时间信息排列;
S132、对任一张待匹配影像I i ,获取其拍摄时刻前后n张影像,作为其最终的匹配影像,从而得到影像匹配对2。
需要说明的是,根据实验结果,本发明中规定球形区域半径r=20米;间隔窗口范围n为10;这里不用以作为限定,本领域技术人员可根据实际情况进行选择。
S14、针对影像匹配对1和2,采用欧式距离最近的特征匹配,得到初步特征匹配点;
需要说明的是,步骤S14具体为:
S141、对精确影像匹配对中,任意两张待匹配的全景影像I i 和I j ,采用kd-tree建立特征描述子的检索结构;
S142、针对影像I i 的每个特征描述子,基于kd-tree查找影像I j 中欧式距离最近的特征描述子,从而完成初步特征匹配。
其中kd-tree与欧式距离特征描述子均为本领域内常见的方法与手段,本申请中不再进行赘述。
S15、采用基于RANSAC算法的本质矩阵E对初步特征匹配点进行粗差剔除,得到可靠特征匹配点。
需要说明的是,SIFT算法利用关键点局部影像块计算特征描述子,导致上述策略得到的全景影像I i 和I j 的初始特征匹配不可避免地包含错误匹配。
本发明进一步基于RANSAC的本质矩阵E估计进行匹配粗差剔除。
基于本质矩阵E的粗差剔除主要依据同名点的共面约束。
对于球面同名光线p 1和p 2,满足公式(4)所示的共面约束
其中,E=[T]X R为位置T的反对称矩阵[T]X与姿态R的乘积,其几何意义如图3所示。
因此,步骤S15具体为:
S151、对于初步特征匹配点的两幅匹配图像,获取其相应的多个同名点,利用同名点解算本质矩阵E;
本发明中利用两张影像的8个同名点,通过8点法解算本质矩阵,然后找出不满足公式(4)共面约束的匹配点,即实现粗差剔除。
S152、判断两个初步特征匹配点是否满足基于本质矩阵E的共面约束条件,若不满足,则进行预粗差剔除;若满足,则表示两个初特征匹配点属于可靠特征匹配点;
考虑到粗差对本质矩阵E估计的影响,结合RANSAC进行解算。
S153、在预粗差剔除过程中,若对于本质矩阵E,其共面条件误差测度e小于预设的粗差判断阈值e a ,则认为两个初特征匹配点属于可靠特征匹配点,否则实现粗差剔除。
RANSAC参数估计依赖共面条件误差测度e和粗差判断阈值e p 。
本发明设定e为
其中,abs()表示取绝对值。
另外,粗差判断阈值e p 常采用像素值大小,与误差测度e的度量单位不一致。
进一步,本发明基于球面经纬度坐标与平面像素坐标之间的转换关系(参见公式(2)),利用公式(6)实现粗差判断阈值从平面像素值到球面角度值的转换:
其中,2π/max(W,H)表示两个度量单位的比例系数;e a 是以角度度量的粗差判断阈值。
基于上述设定,给定估计的本质矩阵E,如果误差测度e<e a ,则对应同名点标记为内点。
本发明利用球面三维点到对应核面的夹角误差测度进行粗差提取,可以得到优化后的可靠匹配点。在RANSAC的本质矩阵E估计中,粗差判断阈值e p 设置为4个像素。
上述步骤S1中构建了全景影像的两视影像的可靠特征匹配点,本发明基于增量式SFM恢复全景影像的位置T和姿态R信息。
S2、针对可靠特征匹配点,采用基于增量式SFM方法恢复全景影像的位置T和姿态R信息;
步骤S2具体为:
S21、基于可靠特征匹配点实现种子影像对重建,构建增量式SFM重建基准模型;
初值种子影像对构建了整个增量式SFM重建的基准模型。
种子影像对选择主要考虑匹配点数量和交会角大小,选择步骤:
(1)将所有影像按包含的匹配点数量进行降序排列;
(2)依次选择最前面的一张影像作为种子影像对的第一张影像I first ;
(3)将I first 的关联影像同样按照匹配点数量进行降序排列;
(4)依次选择排序关联影像的一张影像作为种子影像对的第二张影像I second ;
(5)利用I first 和I second 的球面同名点进行相对定向(步骤S142中欧式距离最近准则匹配);在得到相对定向参数E=[T]X R的初值后,根据根据公式(7)的代价函数进行平差优化。
迭代执行步骤(2)-(5),直到找到两张影像,且同时满足匹配内点数量N inlier 和交会角A tri 大于给定的阈值。
本发明设定N inlier >100,A tri >16°。作为拓展,本发明在建立了种子影像对I first 和I second 的相对定向模型后,还根据公式(8)的代价函数进行一次全局BA优化。
S22、采用绝对定向寻找与基准模型相匹配的候选影像next-best;
需要说明的是,next-best影像代表与已重建模型连接最稳健的候选影像,其选择依据是观测的三维点数量及其对应二维特征点的像平面分布:
步骤S22具体如下:
(1)对于所有未定向影像,统计影像特征点与已重建模型三维点的对应关系;
(2)过滤匹配特征点数量N obs <30的影像,并根据对应二维特征点的像平面分布计算重要值Score;
(3)将剩余影像按照Score值降序排列,得分最高的候选影像即为next-best影像;
(4)基于物方-球面三维对应点的RANSAC估计,解算next-best影像的姿态R和位置T。
具体实现如下:
在平面透视成像中,利用影像2D特征点与物方3D坐标点的对应关系,可进一步解算影像相对场景的绝对位置,即透视成像中PnP(Perspective-n-Point)绝对定向问题。
对于球面全景影像,投影中心、像点和物方点三点共线的性质依然保持。因此,也可以实现基于PnP的绝对定向。
不同之处在于,球面全景影像PnP绝对定向根据球面三维点p与物方三维点P的共线约束,参见公式(9)。其中,R和T是全景影像的旋转矩阵与平移向量。公式(9)包含2个独立方程。利用3个对应点,本发明根据P3P算法解算R和T。
在基于RANSAC的稳健估计中,本发明利用球面全景影像向量夹角误差测度e,即球面三维点p与物方三维点在相机坐标系下投影点RP+T之间的向量夹角,参见公式(10)。
与前述中基于球面同名点的E矩阵估计一样,粗差判断阈值e a 采用公式(6)将像素阈值转换为角度阈值,并规定e<e a 的对应点为内点。
基于上述方式获取绝对定向R和T的初值后,采用公式(8)所示的代价函数进行平差优化。
(5)next-best影像的所有匹配内点进行前方交会,进一步增加场景的三维点。
S23、对每次新增的候选影像进行局部或全局BA优化,得到全景影像的位置T和姿态R信息。
每次成功新增加next-best影像后,判断是否执行局部或全局BA优化:
(1)如果新增加影像数据N i_add <3,则执行局部BA优化,仅仅优化新增加影像位姿及关联三维点;
(2)如果新增加影像数量N i_add 或三维点数量N p_add 大于给定阈值,则执行全局BA优化,此时优化已重建模型的所有影像和三维点。
本发明设定N i_add 和N p_add 的阈值分别为已重建模型影像和三维点数量的10%。
局部或全局BA优化的代价函数参见公式(6),目标是最小化所有三维点的重投影误差。
其中,||·||表示向量L2模;ρ ij 是三维点X i 在影像C j 中的可见性指示函数,即X i 在影像C j 中可见性时,ρ ij =1;否者,ρ ij =0。
S3、根据位置T和姿态R信息,采用多视立体匹配算法生成密集匹配点云。
为了充分利用现有的密集匹配算法,本发明首先将增量式SFM解算的球面全景影像空三结果转换为对应的立方体平面影像。
假设立方体平面影像I的内参矩阵为K P ,其到球面全景影像坐标系的旋转矩阵为R PS ,那么立方体平面影像的生成方式:
(3)根据公式(1)和(2),计算u’的ERP全景影像像素坐标x’,并线性插值出立方体平面影像像点x的灰度值。
通过上述步骤(1)-(3)生成立方体平面影像。
考虑到立方体平面影像与球面全景影像投影中心重合,仅姿态相差R PS 表示的旋转变换,可利用公式(12)得到转换后立方体平面影像的位姿信息。
最后,本发明可利用经典多视立体匹配算法生成密集匹配点云,比如PMVS或者SGM等算法。该技术是数字摄影测量和计算机视觉领域的常用手段,本发明就不再赘述。
本发明的有益效果是:满足了基于球面全景影像的三维重建需求,具有巨大的实际工程应用价值。
以上所述仅为本发明的较佳实施例,并不用以限制本发明,凡在本发明的精神和原则之内,所作的任何修改、等同替换、改进等,均应包含在本发明的保护范围之内。
Claims (10)
1.一种基于增量式SFM的球面全景影像三维重建方法,其特征在于:包括以下步骤:
S1:基于空间约束和顺序约束进行全景影像特征匹配,得到全景影像中两视影像的可靠特征匹配点;
S2、针对可靠特征匹配点,采用基于增量式SFM方法恢复全景影像的位置T和姿态R信息;
S3、根据位置T和姿态R信息,采用多视立体匹配算法生成密集匹配点云。
2.如权利要求1所述的一种基于增量式SFM的球面全景影像三维重建方法,其特征在于:步骤S1具体包括以下过程:
S11、采用SIFT特征提取算法进行球面全景影像特征提取,得到特征点;
S12、基于空间约束形成影像匹配对1;
S13、基于顺序约束得到影像匹配对2;
S14、针对影像匹配对1和2,采用欧式距离最近的特征匹配,得到初步特征匹配点;
S15、采用基于RANSAC算法的本质矩阵E对初步特征匹配点进行粗差剔除,得到可靠特征匹配点。
3.如权利要求1所述的一种基于增量式SFM的球面全景影像三维重建方法,其特征在于:步骤S2具体为:
S21、基于可靠特征匹配点实现种子影像对重建,构建增量式SFM重建基准模型;
S22、采用绝对定向寻找与基准模型相匹配的候选影像next-best;
S23、对每次新增的候选影像进行局部或全局BA优化,得到全景影像的位置T和姿态R信息。
4.如权利要求2所述的一种基于增量式SFM的球面全景影像三维重建方法,其特征在于:步骤S12具体为:
S121、从球面全景影像的Exif信息中读取记录的经度、纬度和高度信息;
S122、对任一张待匹配影像I i ,建立一个以待匹配影像为中心,r为半径的球形区域;
S123、将球形区域内包含的其它影像作为待匹配影像的匹配对,从而得到影像匹配对1。
5.如权利要求2所述的一种基于增量式SFM的球面全景影像三维重建方法,其特征在于:步骤S13具体为:
S131、在球面全景影像中,读取影像的Exif信息中的时间信息,并按照时间信息排列;
S132、对任一张待匹配影像I i ,获取其拍摄时刻前后n张影像,作为其最终的匹配影像,从而得到影像匹配对2。
6.如权利要求2所述的一种基于增量式SFM的球面全景影像三维重建方法,其特征在于:步骤S14具体为:
S141、对影像匹配对1和2中任意两张待匹配的全景影像I i 和I j ,采用kd-tree建立特征描述子的检索结构;
S142、针对影像I i 的每个特征描述子,基于kd-tree查找影像I j 中欧式距离最近的特征描述子,从而完成初步特征匹配。
7.如权利要求2所述的一种基于增量式SFM的球面全景影像三维重建方法,其特征在于:步骤S15具体为:
S151、对于初步特征匹配点的两幅匹配图像,获取其相应的多个同名点,利用同名点解算本质矩阵E;
S152、判断两个初步特征匹配点是否满足基于本质矩阵E的共面约束条件,若不满足,则进行预粗差剔除;若满足,则表示两个初特征匹配点属于可靠特征匹配点;
S153、在预粗差剔除过程中,若对于本质矩阵E,其共面条件误差测度e小于预设的粗差判断阈值e a ,则认为两个初特征匹配点属于可靠特征匹配点,否则实现粗差剔除。
8.如权利要求3所述的一种基于增量式SFM的球面全景影像三维重建方法,其特征在于:步骤S21具体为:
S211、将所有球面全景影像按照匹配点的数量进行降序排列;
S212、选择最前面的一张影像作为种子影像对的第一张影像I first ;
S213、将与I first 的匹配影像同样按照匹配点数量进行降序排列;
S214、选择匹配影像中第一张影像作为种子影像对的第二张影像I second ;
S215、利用I first 和I second 进行相对定向,得到相对定向参数,并对相对定向参数进行平差优化;
S216、重复执行步骤S212~S215直至找到两张影像,同时满足匹配内点数量和交会角均大于给定的预设值,从而完成种子影像对I first 和I second 的基准模型建立。
9.如权利要求3所述的一种基于增量式SFM的球面全景影像三维重建方法,其特征在于:步骤S22具体为:
S221、对于所有未定向的影像,统计影像特征点与基准模型三维点的对应关系;
S222、过滤匹配特征点数量小于预设值的影像,并根据对应的二维特征点的像平面分布计算重要值Score;
S223、将剩余影像按照Score值降序排列,得分最高的影像为候选影像next-best;
S224、基于物方-球面三维对应点的RANSAC估计,解算候选影像next-best的姿态R和位置T。
10.如权利要求3所述的一种基于增量式SFM的球面全景影像三维重建方法,其特征在于:步骤S23具体为:
对于新增的候选影像,如果新增侯选影像数量小于预设阈值时,则执行局部BA优化,若增侯选影像数量大于或等于预设阈值或新增三维点的数量大于预设阈值时,则执行全局BA优化;
局部BA优化仅优化新增候选影像的位置T、姿态R信息和三维点信息;全局BA优化对基准模型、新增候选影像的位置T、姿态R信息和三维点信息全部进行优化。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202310026071.8A CN115830246B (zh) | 2023-01-09 | 2023-01-09 | 一种基于增量式sfm的球面全景影像三维重建方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202310026071.8A CN115830246B (zh) | 2023-01-09 | 2023-01-09 | 一种基于增量式sfm的球面全景影像三维重建方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN115830246A true CN115830246A (zh) | 2023-03-21 |
CN115830246B CN115830246B (zh) | 2023-04-28 |
Family
ID=85520419
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202310026071.8A Active CN115830246B (zh) | 2023-01-09 | 2023-01-09 | 一种基于增量式sfm的球面全景影像三维重建方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN115830246B (zh) |
Citations (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US7352386B1 (en) * | 1999-06-22 | 2008-04-01 | Microsoft Corporation | Method and apparatus for recovering a three-dimensional scene from two-dimensional images |
US20140267279A1 (en) * | 2013-03-15 | 2014-09-18 | Janne Kontkanen | System and method for overlaying two-dimensional map data on a three-dimensional scene |
CN104333675A (zh) * | 2014-10-20 | 2015-02-04 | 长春理工大学 | 一种基于球面投影的全景电子稳像方法 |
CN107767440A (zh) * | 2017-09-06 | 2018-03-06 | 北京建筑大学 | 基于三角网内插及约束的文物序列影像精细三维重建方法 |
CN108090960A (zh) * | 2017-12-25 | 2018-05-29 | 北京航空航天大学 | 一种基于几何约束的目标重建方法 |
WO2018104700A1 (en) * | 2016-12-05 | 2018-06-14 | Gaist Solutions Limited | Method and system for creating images |
US20190147622A1 (en) * | 2016-12-09 | 2019-05-16 | Sun Yat-Sen University | Unmanned aerial vehicle calibration method and system based on colour 3d calibration object |
CN111462326A (zh) * | 2020-03-31 | 2020-07-28 | 武汉大学 | 低成本360度全景视频相机城市管道三维重建方法及*** |
CN111798373A (zh) * | 2020-06-11 | 2020-10-20 | 西安视野慧图智能科技有限公司 | 一种基于局部平面假设及六自由度位姿优化的快速无人机图像拼接方法 |
CN111815765A (zh) * | 2020-07-21 | 2020-10-23 | 西北工业大学 | 一种基于异构数据融合的图像三维重建方法 |
WO2021197341A1 (zh) * | 2020-04-03 | 2021-10-07 | 速度时空信息科技股份有限公司 | 一种基于单目影像的道路标志标线的更新方法 |
US20220051431A1 (en) * | 2018-12-17 | 2022-02-17 | The Brigham And Women's Hospital, Inc. | System and methods for a trackerless navigation system |
-
2023
- 2023-01-09 CN CN202310026071.8A patent/CN115830246B/zh active Active
Patent Citations (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US7352386B1 (en) * | 1999-06-22 | 2008-04-01 | Microsoft Corporation | Method and apparatus for recovering a three-dimensional scene from two-dimensional images |
US20140267279A1 (en) * | 2013-03-15 | 2014-09-18 | Janne Kontkanen | System and method for overlaying two-dimensional map data on a three-dimensional scene |
CN104333675A (zh) * | 2014-10-20 | 2015-02-04 | 长春理工大学 | 一种基于球面投影的全景电子稳像方法 |
WO2018104700A1 (en) * | 2016-12-05 | 2018-06-14 | Gaist Solutions Limited | Method and system for creating images |
US20190147622A1 (en) * | 2016-12-09 | 2019-05-16 | Sun Yat-Sen University | Unmanned aerial vehicle calibration method and system based on colour 3d calibration object |
CN107767440A (zh) * | 2017-09-06 | 2018-03-06 | 北京建筑大学 | 基于三角网内插及约束的文物序列影像精细三维重建方法 |
CN108090960A (zh) * | 2017-12-25 | 2018-05-29 | 北京航空航天大学 | 一种基于几何约束的目标重建方法 |
US20220051431A1 (en) * | 2018-12-17 | 2022-02-17 | The Brigham And Women's Hospital, Inc. | System and methods for a trackerless navigation system |
CN111462326A (zh) * | 2020-03-31 | 2020-07-28 | 武汉大学 | 低成本360度全景视频相机城市管道三维重建方法及*** |
WO2021197341A1 (zh) * | 2020-04-03 | 2021-10-07 | 速度时空信息科技股份有限公司 | 一种基于单目影像的道路标志标线的更新方法 |
CN111798373A (zh) * | 2020-06-11 | 2020-10-20 | 西安视野慧图智能科技有限公司 | 一种基于局部平面假设及六自由度位姿优化的快速无人机图像拼接方法 |
CN111815765A (zh) * | 2020-07-21 | 2020-10-23 | 西北工业大学 | 一种基于异构数据融合的图像三维重建方法 |
Non-Patent Citations (7)
Title |
---|
PETER I.CORKE: "Spherical image-based visual servo and structure estimation" * |
姜三;江万寿;: "Delaunay三角网约束下的影像稳健匹配方法" * |
尹双双;邓非;: "GPS改进的移动球形全景影像三维重建方法" * |
杨必胜;李健平;: "轻小型低成本无人机激光扫描***研制与实践" * |
蓝朝桢;耿迅;徐青;崔平远;: "基于序列影像的小天体三维形状重建方法研究" * |
赵云皓;贺赛先;: "增量式SFM中特征点检测与匹配方法的改进" * |
陈驰;杨必胜;田茂;李健平;邹响红;吴唯同;宋易恒;: "车载MMS激光点云与序列全景影像自动配准方法" * |
Also Published As
Publication number | Publication date |
---|---|
CN115830246B (zh) | 2023-04-28 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN112085844B (zh) | 面向野外未知环境的无人机影像快速三维重建方法 | |
CN112085845B (zh) | 基于无人机影像的室外场景快速三维重建装置 | |
Rupnik et al. | MicMac–a free, open-source solution for photogrammetry | |
CN111627065B (zh) | 一种视觉定位方法及装置、存储介质 | |
Crandall et al. | SfM with MRFs: Discrete-continuous optimization for large-scale structure from motion | |
US10152828B2 (en) | Generating scene reconstructions from images | |
Coorg et al. | Acquisition of a large pose-mosaic dataset | |
Wang et al. | Accurate georegistration of point clouds using geographic data | |
Gao et al. | Ground and aerial meta-data integration for localization and reconstruction: A review | |
Kim et al. | Interactive 3D building modeling method using panoramic image sequences and digital map | |
CN111815765A (zh) | 一种基于异构数据融合的图像三维重建方法 | |
Kim et al. | Block world reconstruction from spherical stereo image pairs | |
Morelli et al. | Photogrammetry now and then–from hand-crafted to deep-learning tie points– | |
Lai et al. | 2D3D-MVPNet: Learning cross-domain feature descriptors for 2D-3D matching based on multi-view projections of point clouds | |
Jiang et al. | 3D reconstruction of spherical images: a review of techniques, applications, and prospects | |
Knyaz | Machine learning for scene 3d reconstruction using a single image | |
Ariff et al. | Exploratory study of 3D point cloud triangulation for smart city modelling and visualization | |
CN115830246B (zh) | 一种基于增量式sfm的球面全景影像三维重建方法 | |
Atik et al. | An automatic image matching algorithm based on thin plate splines | |
Liu et al. | Robust and accurate mobile visual localization and its applications | |
CN109118576A (zh) | 基于bds位置服务的大型场景三维重建***及重建方法 | |
Jiang et al. | 3D reconstruction of spherical images based on incremental structure from motion | |
Salarian et al. | Accurate image based localization by applying sfm and coordinate system registration | |
Munoz-Silva et al. | A Survey on Point Cloud Generation for 3D Scene Reconstruction | |
Li et al. | BDLoc: Global localization from 2.5 D building map |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |