CN104715479A - 基于增强虚拟的场景复现检测方法 - Google Patents

基于增强虚拟的场景复现检测方法 Download PDF

Info

Publication number
CN104715479A
CN104715479A CN201510100413.1A CN201510100413A CN104715479A CN 104715479 A CN104715479 A CN 104715479A CN 201510100413 A CN201510100413 A CN 201510100413A CN 104715479 A CN104715479 A CN 104715479A
Authority
CN
China
Prior art keywords
scene
dimensional
mechanical arm
detection method
real scene
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201510100413.1A
Other languages
English (en)
Inventor
陈卫东
王贺升
徐丽飞
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shanghai Jiaotong University
Original Assignee
Shanghai Jiaotong University
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shanghai Jiaotong University filed Critical Shanghai Jiaotong University
Priority to CN201510100413.1A priority Critical patent/CN104715479A/zh
Publication of CN104715479A publication Critical patent/CN104715479A/zh
Pending legal-status Critical Current

Links

Landscapes

  • Processing Or Creating Images (AREA)

Abstract

本发明提供了一种基于增强虚拟的场景复现检测方法,包括以下步骤:三维虚拟场景模型的生成;三维虚拟场景模型数据库的建立;对安装在机械臂上的相机进行内参矩阵标定;真实场景图像帧数据和机械臂位置数据的采集与保存;自动加载真实场景图像帧数据并进行图像处理;由特征点的像素坐标估计其在真实场景中的世界坐标值;真实场景特征点与三维虚拟场景模型中对应特征点的配准;实现虚实结合的增强虚拟显示效果。本发明充分发挥混合现实的三维显示优势,具有检测结果直观,三维立体感强,全角度立体展示,与真实场景逼真的优势取代传统的依靠查看图片序列或视频的繁琐观测方式。

Description

基于增强虚拟的场景复现检测方法
技术领域
本发明涉及一种检测方法,具体地,涉及一种基于增强虚拟的场景复现检测方法。
背景技术
混合现实是现实与虚拟的结合,分两种情况,一种情况是扩展现实(增强现实),是由真实的环境加上虚拟的物体功能组成;另一种情况是虚拟的环境加上某些真实的物体共同构成扩展虚拟(增强虚拟)。混合现实技术是虚拟现实技术的进一步发展,该技术通过在虚拟环境中引入现实场景信息,在虚拟世界、现实世界和用户之间搭起一个交互反馈的信息回路,以增强用户体验的真实感。这种介于现实与虚拟之间的混合现实技术成为了展示、体验、培训、医疗、古迹复原、工业维修等领域的前沿实用技术。
在一些不适合人工作业的极端工作环境中,常通过在极端环境中固定安装摄像机或将摄像机固定安装在机器人的机械臂上,利用遥操作技术来检测监控极端环境内部的现场信息,为后续的维护操作提供重要信息。两者均是依靠人工查看相机实时捕获的或在线保存的现场图片或视频来判断场景现场信息,由于相机视野有限,且图片是二维信息,依靠查看图片序列或视频的观测方式缺乏全局信息和三维信息,检测繁琐不直观。鉴于上述依靠查看图片序列或视频的观测方式缺乏全局和三维信息且繁琐不直观,本发明结合混合现实的三维显示优势,提出一种基于增强虚拟的虚实结合场景复现检测方法,具有检测效果直观、三维立体感强、全角度立体展示与真实场景逼真的效果。
发明内容
针对现有技术中的缺陷,本发明的目的是提供一种基于增强虚拟的场景复现检测方法,其通过鲁棒的图像处理算法对真实场景图片序列进行处理提取出特征目标图像,然后结合机器人机械臂的位置信息和已知的三维虚拟场景模型信息,进行虚实目标图像特征点定位配准,最终将特征目标图像叠加在虚拟的三维场景模型相应位置,实现虚实结合的丰富显示效果,具有三维立体感强、全角度立体展示、与真实场景逼真、观测直观方便等特点。
根据本发明的一个方面,提供一种基于增强虚拟的场景复现检测方法,其特征在于,包括以下步骤:
步骤一,三维虚拟场景模型的生成,主要是利用开源三维图形渲染引擎搭建而成;
步骤二,三维虚拟场景模型数据库的建立,三维虚拟场景模型数据库主要包括场景特征点的世界坐标值信息及其相关属性信息;
步骤三,对安装在机械臂上的相机进行内参矩阵标定,同时利用传统的手眼标定方法标定相机坐标系与机械臂末端坐标系之间的齐次变换矩阵;
步骤四,真实场景图像帧数据和机械臂位置数据的采集与保存,通过控制机械臂的运动来移动相机完成真实场景全方位的图像帧数据及其对应的机械臂位置数据的采集与保存,同时保存机械臂末端坐标系相对于世界坐标系之间的齐次变换矩阵,图像帧数据与对应的机械臂位置数据用相同的时间标记一一对应;
步骤五,自动加载真实场景图像帧数据并进行图像处理,获取真实场景特征点的像素坐标值并提取特征目标图像;
步骤六,结合机械臂的位置信息和已知的三维虚拟场景模型信息,由特征点的像素坐标估计其在真实场景中的世界坐标值;
步骤七,真实场景特征点与三维虚拟场景模型中对应特征点的配准;
步骤八,配准成功后,把提取出的真实场景特征目标图像叠加在虚拟的三维场景模型对应的位置,实现虚实结合的增强虚拟显示效果。
优选地,所述步骤一的三维场景模型生成包括构建三维场景,将三维模型导入场景。
优选地,所述步骤二依据虚拟模型计算场景特征点的世界三维坐标值并存入MYSQL数据库中。
优选地,所述步骤七是把步骤六计算的真实场景特征点的世界坐标值与步骤二所建立的三维虚拟场景模型数据库中的场景特征点的世界坐标值通过匹配条件相匹配,满足匹配条件即可实现虚实目标图像的成功配准。
与现有技术相比,本发明具有如下的有益效果:本发明通过鲁棒的图像处理算法对真实场景图片序列进行处理提取出特征目标图像,然后结合机器人机械臂的位置信息和已知的三维虚拟场景模型信息,进行虚实目标图像特征点定位配准,最终将特征目标图像叠加在虚拟的三维场景模型相应位置,实现虚实结合的丰富显示效果,具有三维立体感强,全角度立体展示,与真实场景逼真,观测直观方便等特点。
附图说明
通过阅读参照以下附图对非限制性实施例所作的详细描述,本发明的其它特征、目的和优点将会变得更明显:
图1为本发明的整体流程示意图。
图2为本发明的图像处理具体实现步骤流程图。
具体实施方式
下面结合具体实施例对本发明进行详细说明。以下实施例将有助于本领域的技术人员进一步理解本发明,但不以任何形式限制本发明。应当指出的是,对本领域的普通技术人员来说,在不脱离本发明构思的前提下,还可以做出若干变形和改进。这些都属于本发明的保护范围。
本发明是一种将真实场景图像经过鲁棒的图像处理算法后提取特征目标图像,然后结合机器人机械臂位置信息和已知的三维虚拟场景模型信息,进行虚实目标图像特征点定位配准,然后将特征目标图像叠加在虚拟的三维场景模型相应位置实现虚实结合,展示效果立体逼真的场景复现检测方法。
如图1所示,本发明基于增强虚拟的场景复现检测方法包括以下步骤:
步骤一:三维虚拟场景模型的生成,主要是利用OSG(Open Scene Graph,开源三维图形)渲染引擎搭建而成。三维场景模型生成包括构建三维场景,将三维模型导入场景。首先用Qt库生成一个图形用户界面(GUI),然后通过多重继承的方法构建场景类,然后在场景类中导入模型,在将模型通过对应的OSG语句读入场景中。
步骤二:三维虚拟场景模型数据库的建立,三维虚拟场景模型数据库主要包括场景特征点的世界坐标值信息及其相关属性信息,具体是依据虚拟模型计算场景特征点的世界三维坐标值并存入MYSQL数据库中,同时需要根据具体场景模型特征存入相关属性信息,比如场景模型不同区域特征点依据三维坐标值不同而具有唯一标示符ID等,用于虚实目标图像特征点的配准。
步骤三:利用MATLAB标定工具箱对安装在机械臂上的相机进行内参矩阵标定,同时利用传统的手眼标定方法标定相机坐标系与机械臂末端坐标系之间的齐次变换矩阵。
步骤四:真实场景图像帧数据和机械臂位置数据的采集与保存,通过控制机械臂的运动来移动相机完成真实场景全方位的图像帧数据及其对应的机械臂位置数据的采集与保存,同时保存机械臂末端坐标系相对于世界坐标系之间的齐次变换矩阵,图像帧数据与对应的机械臂位置数据用相同的时间标记一一对应。
步骤五:自动加载真实场景图像帧数据并进行图像处理,获取真实场景特征点的像素坐标值并提取特征目标图像。场景特征点检测流程参考图2,首先对原始的场景图像帧进行预处理,然后进行边缘检测,提取边缘特征,边缘直线拟合,然后利用Harris角点检测算法对真实场景特征点进行检测与提取,从而获取真实场景特征点在图像中的投影点的像素坐标值。图2中的图像帧预处理指对原始场景图像帧进行高斯平滑去噪及灰度变换。图2中的真实场景特征点检测具体实现如下:使用canny算法进行边缘检测,hough变换提取边缘直线,然后进行场景边缘特征点提取获得场景特征点图像,然后将场景特征点图像与边缘检测得到的边缘二值图像相与获得离散点后利用最小二乘拟合进行边缘直线拟合,同时对类直线噪声进行剔除,提取边缘特征,边缘直线拟合,最后利用Harris角点检测提取真实场景特征点,得到其像素坐标值。真实场景特征目标图像的提取:利用检测到的真实场景特征点提取特征目标图像,如果图像是在非垂直观测的角度拍摄而得,还需要进行透视变换得到校正后的标准正视图。
步骤六:结合机械臂的位置信息和已知的三维虚拟场景模型信息,由真实场景特征点的像素坐标估计其在真实场景中的世界坐标值。具体实施步骤为:以真实场景特征点所在平面为参考平面,以任意一个特征点为原点建立场景特征平面局部坐标系,通过计算公式(1)来计算真实场场景特征点的世界坐标值:
Pw=Te w·Tc e·Tb c·Pb………………………………………………………(1)
其中Pw,Pb分别表示场景特征点在世界坐标系和真实场场景特征平面局部坐标系下的齐次坐标值,Te w是机械臂末端坐标系相对世界坐标系的齐次变换矩阵,在机械臂扫描的过程中是个随着时间变化的已知量,已在步骤四中保存。Tc e表示机械臂末端坐标系相对相机坐标系的齐次变换矩阵,是个常量在步骤三中已标定,Tb c表示相机坐标系相对场景特征平面局部坐标系的齐次变换矩阵,可通过典型的PnP问题解决算法计算得到。
步骤七:真实场景特征点与三维虚拟场景模型中对应特征点的配准,即进行虚实目标图像特征点定位配准。把步骤六计算的真实场景特征点的世界坐标值与步骤二所建立的三维虚拟场景模型数据库中的场景特征点的世界坐标值通过匹配条件相匹配,满足匹配条件即可实现虚实目标图像的成功配准。具体过程是通过MYSQL查询语句在三维虚拟场景模型数据库中查询满足匹配条件的与计算所得的场景特征点世界坐标XYZ相匹配的点,查询出特征点的专属ID,从而实现配准。
步骤八:配准成功后,把提取出的真实场景特征目标图像叠加在虚拟的三维场景模型对应的位置,实现虚实结合的增强虚拟显示效果,即实现虚实结合的场景,为真实场景中的现场信息提供方便直观、立体感逼真的检测效果,即更加方便直观的检测真实场景中的现场信息。
相比于传统的依靠查看大量的真实场景图片序列或视频这种繁琐、不直观、缺乏全局位置信息等缺点的检测方式,本发明提出一种基于增强虚拟的虚实结合场景复现检测方法,该方法充分发挥混合现实具有的丰富的三维显示优势,具有检测效果直观,三维立体感强,全角度立体展示,与真实场景逼真等优点。
以上对本发明的具体实施例进行了描述。需要理解的是,本发明并不局限于上述特定实施方式,本领域技术人员可以在权利要求的范围内做出各种变形或修改,这并不影响本发明的实质内容。

Claims (4)

1.一种基于增强虚拟的场景复现检测方法,其特征在于,包括以下步骤:
步骤一,三维虚拟场景模型的生成,主要是利用开源三维图形渲染引擎搭建而成;
步骤二,三维虚拟场景模型数据库的建立,三维虚拟场景模型数据库主要包括场景特征点的世界坐标值信息及其相关属性信息;
步骤三,对安装在机械臂上的相机进行内参矩阵标定,同时利用传统的手眼标定方法标定相机坐标系与机械臂末端坐标系之间的齐次变换矩阵;
步骤四,真实场景图像帧数据和机械臂位置数据的采集与保存,通过控制机械臂的运动来移动相机完成真实场景全方位的图像帧数据及其对应的机械臂位置数据的采集与保存,同时保存机械臂末端坐标系相对于世界坐标系之间的齐次变换矩阵,图像帧数据与对应的机械臂位置数据用相同的时间标记一一对应;
步骤五,自动加载真实场景图像帧数据并进行图像处理,获取真实场景特征点的像素坐标值并提取特征目标图像;
步骤六,结合机械臂的位置信息和已知的三维虚拟场景模型信息,由特征点的像素坐标估计其在真实场景中的世界坐标值;
步骤七,真实场景特征点与三维虚拟场景模型中对应特征点的配准;
步骤八,配准成功后,把提取出的真实场景特征目标图像叠加在虚拟的三维场景模型对应的位置,实现虚实结合的增强虚拟显示效果。
2.根据权利要求1所述的基于增强虚拟的场景复现检测方法,其特征在于,所述步骤一的三维场景模型生成包括构建三维场景,将三维模型导入场景。
3.根据权利要求1所述的基于增强虚拟的场景复现检测方法,其特征在于,所述步骤二依据虚拟模型计算场景特征点的世界三维坐标值并存入MYSQL数据库中。
4.根据权利要求1所述的基于增强虚拟的场景复现检测方法,其特征在于,所述步骤七是把步骤六计算的真实场景特征点的世界坐标值与步骤二所建立的三维虚拟场景模型数据库中的场景特征点的世界坐标值通过匹配条件相匹配,满足匹配条件即可实现虚实目标图像的成功配准。
CN201510100413.1A 2015-03-06 2015-03-06 基于增强虚拟的场景复现检测方法 Pending CN104715479A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201510100413.1A CN104715479A (zh) 2015-03-06 2015-03-06 基于增强虚拟的场景复现检测方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201510100413.1A CN104715479A (zh) 2015-03-06 2015-03-06 基于增强虚拟的场景复现检测方法

Publications (1)

Publication Number Publication Date
CN104715479A true CN104715479A (zh) 2015-06-17

Family

ID=53414773

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201510100413.1A Pending CN104715479A (zh) 2015-03-06 2015-03-06 基于增强虚拟的场景复现检测方法

Country Status (1)

Country Link
CN (1) CN104715479A (zh)

Cited By (29)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105631161A (zh) * 2016-01-29 2016-06-01 首都医科大学附属北京安贞医院 一种虚实模型重合的确定方法与装置
CN106023307A (zh) * 2016-07-12 2016-10-12 深圳市海达唯赢科技有限公司 基于现场环境的快速重建三维模型方法及***
CN106898049A (zh) * 2017-01-18 2017-06-27 北京商询科技有限公司 一种用于混合现实设备的空间匹配方法及***
CN107016704A (zh) * 2017-03-09 2017-08-04 杭州电子科技大学 一种基于增强现实的虚拟现实实现方法
CN107067010A (zh) * 2017-02-20 2017-08-18 深圳怡化电脑股份有限公司 一种去除图像轮廓噪声点的方法和相关装置
CN107158695A (zh) * 2017-06-16 2017-09-15 苏州蜗牛数字科技股份有限公司 一种现实与虚拟场景混合展现的方法及***
CN107225561A (zh) * 2017-06-02 2017-10-03 成都福莫斯智能***集成服务有限公司 基于mr技术的机器人手臂控制方法
CN108132052A (zh) * 2018-02-06 2018-06-08 武汉市云宇智能科技有限责任公司 一种电子全站仪及其使用方法
CN108629843A (zh) * 2017-03-24 2018-10-09 成都理想境界科技有限公司 一种实现增强现实的方法及设备
CN108645637A (zh) * 2018-04-25 2018-10-12 刘翠先 一种基于增强现实技术应用的设备异响检测***
CN108858187A (zh) * 2018-06-01 2018-11-23 南京理工大学 一种带电接搭引流线作业现场的快速重构方法
CN108920517A (zh) * 2018-06-01 2018-11-30 南京理工大学 一种带电更换隔离刀闸作业场景的快速重构方法
CN109285130A (zh) * 2018-09-10 2019-01-29 珠海格力电器股份有限公司 一种景物复现方法、装置、存储介质及终端
CN109348132A (zh) * 2018-11-20 2019-02-15 北京小浪花科技有限公司 全景拍摄方法及装置
CN109427095A (zh) * 2017-08-28 2019-03-05 福建天晴数码有限公司 一种显示混合现实场景的方法及***
CN109583260A (zh) * 2017-09-28 2019-04-05 北京猎户星空科技有限公司 一种数据采集方法、装置及***
CN109961471A (zh) * 2017-12-14 2019-07-02 北京猎户星空科技有限公司 一种图像中物***置的标注方法、装置及电子设备
CN110062216A (zh) * 2019-04-18 2019-07-26 北京森焱精创科技有限公司 实景交互方法、***、计算机设备和存储介质
CN110264818A (zh) * 2019-06-18 2019-09-20 国家电网有限公司 一种基于增强现实的机组进水阀拆装训练方法
CN110308785A (zh) * 2019-07-08 2019-10-08 深圳市蓝游网络科技有限公司 基于ar技术的电子书实现方法
CN110321000A (zh) * 2019-04-25 2019-10-11 南开大学 一种面向智能***复杂任务的虚拟仿真***
CN110688500A (zh) * 2018-06-20 2020-01-14 华为技术有限公司 一种数据库构建方法、一种定位方法及其相关设备
CN110751681A (zh) * 2019-10-18 2020-02-04 西南科技大学 一种增强现实的配准方法、装置、设备及存储介质
CN111179341A (zh) * 2019-12-09 2020-05-19 西安交通大学 一种增强现实设备与移动机器人的配准方法
CN111459277A (zh) * 2020-04-01 2020-07-28 重庆大学 基于混合现实的机械臂遥操作***及交互界面构建方法
CN114102618A (zh) * 2021-11-16 2022-03-01 中国电信集团***集成有限责任公司 运维机器人、基于运维机器人的机房运维方法及***
WO2022061673A1 (zh) * 2020-09-24 2022-03-31 西门子(中国)有限公司 用于机器人的标定方法和装置
CN114979612A (zh) * 2022-06-20 2022-08-30 极世代(武汉)文化科技有限公司 一种基于区块链的虚拟场景应用***
WO2024027082A1 (zh) * 2022-08-01 2024-02-08 天翼云科技有限公司 一种飞机出入库碰撞预警方法、装置、设备及介质

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5838262A (en) * 1996-12-19 1998-11-17 Sikorsky Aircraft Corporation Aircraft virtual image display system and method for providing a real-time perspective threat coverage display
CN102368810A (zh) * 2011-09-19 2012-03-07 长安大学 一种半自动化对齐的视频融合***和方法
CN102646275A (zh) * 2012-02-22 2012-08-22 西安华旅电子科技有限公司 通过跟踪和定位算法实现虚拟三维叠加的方法
CN103226830A (zh) * 2013-04-25 2013-07-31 北京大学 三维虚实融合环境中视频纹理投影的自动匹配校正方法
CN104376552A (zh) * 2014-09-19 2015-02-25 四川大学 一种3d模型与二维图像的虚实配准算法

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5838262A (en) * 1996-12-19 1998-11-17 Sikorsky Aircraft Corporation Aircraft virtual image display system and method for providing a real-time perspective threat coverage display
CN102368810A (zh) * 2011-09-19 2012-03-07 长安大学 一种半自动化对齐的视频融合***和方法
CN102646275A (zh) * 2012-02-22 2012-08-22 西安华旅电子科技有限公司 通过跟踪和定位算法实现虚拟三维叠加的方法
CN103226830A (zh) * 2013-04-25 2013-07-31 北京大学 三维虚实融合环境中视频纹理投影的自动匹配校正方法
CN104376552A (zh) * 2014-09-19 2015-02-25 四川大学 一种3d模型与二维图像的虚实配准算法

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
辛静: "基于增强现实的机械臂运动碰撞检测算法研究", 《中国优秀硕士学位论文全文数据库.信息科技辑》 *

Cited By (45)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105631161A (zh) * 2016-01-29 2016-06-01 首都医科大学附属北京安贞医院 一种虚实模型重合的确定方法与装置
CN105631161B (zh) * 2016-01-29 2018-11-20 首都医科大学附属北京安贞医院 一种虚实模型重合的确定方法与装置
CN106023307B (zh) * 2016-07-12 2018-08-14 深圳市海达唯赢科技有限公司 基于现场环境的快速重建三维模型方法及***
CN106023307A (zh) * 2016-07-12 2016-10-12 深圳市海达唯赢科技有限公司 基于现场环境的快速重建三维模型方法及***
CN106898049A (zh) * 2017-01-18 2017-06-27 北京商询科技有限公司 一种用于混合现实设备的空间匹配方法及***
CN107067010A (zh) * 2017-02-20 2017-08-18 深圳怡化电脑股份有限公司 一种去除图像轮廓噪声点的方法和相关装置
CN107067010B (zh) * 2017-02-20 2019-09-20 深圳怡化电脑股份有限公司 一种去除图像轮廓噪声点的方法和相关装置
CN107016704A (zh) * 2017-03-09 2017-08-04 杭州电子科技大学 一种基于增强现实的虚拟现实实现方法
CN108629843A (zh) * 2017-03-24 2018-10-09 成都理想境界科技有限公司 一种实现增强现实的方法及设备
CN108629843B (zh) * 2017-03-24 2021-07-13 成都理想境界科技有限公司 一种实现增强现实的方法及设备
CN107225561A (zh) * 2017-06-02 2017-10-03 成都福莫斯智能***集成服务有限公司 基于mr技术的机器人手臂控制方法
CN107158695A (zh) * 2017-06-16 2017-09-15 苏州蜗牛数字科技股份有限公司 一种现实与虚拟场景混合展现的方法及***
CN109427095B (zh) * 2017-08-28 2022-10-21 福建天晴数码有限公司 一种显示混合现实场景的方法及***
CN109427095A (zh) * 2017-08-28 2019-03-05 福建天晴数码有限公司 一种显示混合现实场景的方法及***
CN109583260A (zh) * 2017-09-28 2019-04-05 北京猎户星空科技有限公司 一种数据采集方法、装置及***
CN109961471B (zh) * 2017-12-14 2021-05-28 北京猎户星空科技有限公司 一种图像中物***置的标注方法、装置及电子设备
CN109961471A (zh) * 2017-12-14 2019-07-02 北京猎户星空科技有限公司 一种图像中物***置的标注方法、装置及电子设备
CN108132052A (zh) * 2018-02-06 2018-06-08 武汉市云宇智能科技有限责任公司 一种电子全站仪及其使用方法
CN108645637A (zh) * 2018-04-25 2018-10-12 刘翠先 一种基于增强现实技术应用的设备异响检测***
CN108920517B (zh) * 2018-06-01 2022-03-08 南京理工大学 一种带电更换隔离刀闸作业场景的快速重构方法
CN108920517A (zh) * 2018-06-01 2018-11-30 南京理工大学 一种带电更换隔离刀闸作业场景的快速重构方法
CN108858187A (zh) * 2018-06-01 2018-11-23 南京理工大学 一种带电接搭引流线作业现场的快速重构方法
CN110688500B (zh) * 2018-06-20 2021-09-14 华为技术有限公司 一种数据库构建方法、一种定位方法及其相关设备
CN110688500A (zh) * 2018-06-20 2020-01-14 华为技术有限公司 一种数据库构建方法、一种定位方法及其相关设备
US11644339B2 (en) 2018-06-20 2023-05-09 Huawei Technologies Co., Ltd. Database construction method, positioning method, and related device
CN109285130B (zh) * 2018-09-10 2020-09-22 珠海格力电器股份有限公司 一种景物复现方法、装置、存储介质及终端
CN109285130A (zh) * 2018-09-10 2019-01-29 珠海格力电器股份有限公司 一种景物复现方法、装置、存储介质及终端
CN109348132A (zh) * 2018-11-20 2019-02-15 北京小浪花科技有限公司 全景拍摄方法及装置
CN110062216A (zh) * 2019-04-18 2019-07-26 北京森焱精创科技有限公司 实景交互方法、***、计算机设备和存储介质
CN110062216B (zh) * 2019-04-18 2021-05-25 北京森焱精创科技有限公司 实景交互方法、***、计算机设备和存储介质
CN110321000A (zh) * 2019-04-25 2019-10-11 南开大学 一种面向智能***复杂任务的虚拟仿真***
CN110321000B (zh) * 2019-04-25 2022-12-23 南开大学 一种面向智能***复杂任务的虚拟仿真***
CN110264818A (zh) * 2019-06-18 2019-09-20 国家电网有限公司 一种基于增强现实的机组进水阀拆装训练方法
CN110264818B (zh) * 2019-06-18 2021-08-24 国家电网有限公司 一种基于增强现实的机组进水阀拆装训练方法
CN110308785A (zh) * 2019-07-08 2019-10-08 深圳市蓝游网络科技有限公司 基于ar技术的电子书实现方法
CN110751681B (zh) * 2019-10-18 2022-07-08 西南科技大学 一种增强现实的配准方法、装置、设备及存储介质
CN110751681A (zh) * 2019-10-18 2020-02-04 西南科技大学 一种增强现实的配准方法、装置、设备及存储介质
CN111179341A (zh) * 2019-12-09 2020-05-19 西安交通大学 一种增强现实设备与移动机器人的配准方法
CN111459277A (zh) * 2020-04-01 2020-07-28 重庆大学 基于混合现实的机械臂遥操作***及交互界面构建方法
CN111459277B (zh) * 2020-04-01 2023-05-30 重庆大学 基于混合现实的机械臂遥操作***及交互界面构建方法
WO2022061673A1 (zh) * 2020-09-24 2022-03-31 西门子(中国)有限公司 用于机器人的标定方法和装置
CN114102618A (zh) * 2021-11-16 2022-03-01 中国电信集团***集成有限责任公司 运维机器人、基于运维机器人的机房运维方法及***
CN114102618B (zh) * 2021-11-16 2023-10-10 ***数智科技有限公司 运维机器人、基于运维机器人的机房运维方法及***
CN114979612A (zh) * 2022-06-20 2022-08-30 极世代(武汉)文化科技有限公司 一种基于区块链的虚拟场景应用***
WO2024027082A1 (zh) * 2022-08-01 2024-02-08 天翼云科技有限公司 一种飞机出入库碰撞预警方法、装置、设备及介质

Similar Documents

Publication Publication Date Title
CN104715479A (zh) 基于增强虚拟的场景复现检测方法
CN110568447B (zh) 视觉定位的方法、装置及计算机可读介质
CN103810685B (zh) 一种深度图的超分辨率处理方法
US11051000B2 (en) Method for calibrating cameras with non-overlapping views
EP2614487B1 (en) Online reference generation and tracking for multi-user augmented reality
US8885920B2 (en) Image processing apparatus and method
KR101758058B1 (ko) 깊이 정보를 이용한 카메라 모션 추정 방법 및 장치, 증강 현실 시스템
CN112686877B (zh) 基于双目相机的三维房屋损伤模型构建测量方法及***
CN103345736A (zh) 一种虚拟视点绘制方法
JP2020042772A (ja) 深度マップに対して画像位置合せを行って深度データを最適化することができる深度データ処理システム
JP2014112055A (ja) カメラ姿勢の推定方法およびカメラ姿勢の推定システム
CN109934873B (zh) 标注图像获取方法、装置及设备
Khoshelham et al. Generation and weighting of 3D point correspondences for improved registration of RGB-D data
US11989827B2 (en) Method, apparatus and system for generating a three-dimensional model of a scene
CN109902675B (zh) 物体的位姿获取方法、场景重构的方法和装置
Afzal et al. Rgb-d multi-view system calibration for full 3d scene reconstruction
CN112613123A (zh) 一种飞机管路ar三维注册方法及装置
JP6228239B2 (ja) プリミティブの組を用いてデータをレジストレーションする方法
JP6304815B2 (ja) 画像処理装置ならびにその画像特徴検出方法、プログラムおよび装置
JP6341540B2 (ja) 情報端末装置、方法及びプログラム
Li et al. Overview of 3d reconstruction methods based on multi-view
Kim et al. Vision-based all-in-one solution for augmented reality and its storytelling applications
Zhang et al. Point cloud registration with 2D and 3D fusion information on mobile robot integrated vision system
Lee et al. RGB-D fusion: Real-time robust tracking and dense mapping with RGB-D data fusion
Pudchuen et al. 3-D Mapping and Localization using RGB-D Camera

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20150617