CN106595518A - 基于特征点立体匹配的曲面外观形状检测vr*** - Google Patents
基于特征点立体匹配的曲面外观形状检测vr*** Download PDFInfo
- Publication number
- CN106595518A CN106595518A CN201611078623.6A CN201611078623A CN106595518A CN 106595518 A CN106595518 A CN 106595518A CN 201611078623 A CN201611078623 A CN 201611078623A CN 106595518 A CN106595518 A CN 106595518A
- Authority
- CN
- China
- Prior art keywords
- data
- curved surface
- processing system
- stereo matching
- equipment
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Classifications
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01B—MEASURING LENGTH, THICKNESS OR SIMILAR LINEAR DIMENSIONS; MEASURING ANGLES; MEASURING AREAS; MEASURING IRREGULARITIES OF SURFACES OR CONTOURS
- G01B11/00—Measuring arrangements characterised by the use of optical techniques
- G01B11/24—Measuring arrangements characterised by the use of optical techniques for measuring contours or curvatures
Landscapes
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Image Processing (AREA)
- Processing Or Creating Images (AREA)
Abstract
本发明公开了一种基于特征点立体匹配的曲面外观形状检测VR***,其包括3D重建处理***、VR设备、交互***,3D重建处理***读取原始3D设计的数据进行处理,通过VR设备上的摄像装置实时显示被测量构件,采集到的数据传到3D重建处理***进行特征点匹配,同时可根据测量者不断调整,经交互***确认后,生成最终的可视化的3D显示数据,此数据最终显示在VR设备上,3D显示数据可以通过有线或无线连接的通信方式传输图像数据。本发明能够用于工业曲面外观形状检测,将设计过程和检测过程结合在一起,解决了现有技术和方法无法对特殊曲面或部件之间的遮挡、重叠部分检测的问题,操作简便使用成本低,适用于普通操作人员。
Description
技术领域
本发明涉及一种VR(Virtual Reality,虚拟现实)***,特别是涉及一种基于特征点立体匹配的曲面外观形状检测VR***。
背景技术
目前工业领域,尤其是机械结构加工制造领域,针对大型的曲面(体)外观外形的质量检测,是一个比较复杂的难题,如针对各种不规则曲面(异形)加工、制造的后期外观外形质量检测。对具有整体协调要求的大型复杂曲面的宏观形状检测/测量问题,目前仍是国内外检测/测量技术领域尚未完全解决的问题。大型复杂曲面的宏观形状测量问题是具有重要理论意义和广阔应用前景的实际课题。例如,飞机机翼曲面的宏观形状对飞机整体性能而言至关重要,解决其快速外形形状检测问题有助于提高飞机的空气动力性能、形式性能和寿命、降低油耗、节约能源,更重要的是有助于加速飞机产品更新换代周期。一般都是采用专用的、价格高昂的大型定位、测量设备完成,操作复杂、费时费力,效率低下,对操作者有很高的技术门槛。
目前现有的外观外形检测(测量技术)方法,有激光自动测量技术、应用图像编码器三维曲面测量、或复杂的数学和算法建模进行匹配,这些设备机械电子结构、机电控制相当复杂、专业技术门槛极高、操作人员需要很强的专业知识和需要长时间的专业培训。随着计算机技术和图形图像以及虚拟可视化技术的发展,各种可视化的三维显示,如虚拟现实体验、增强现实技术,也得到快速发展,但目前这些显示只能用于观察并不能直接用于外观外形的监测和测量。目前工业测量上急需要一种简便的可视化的大型曲面(体)外形检测/测量设备,这种设备可以将个体化的(异型)曲面(体)虚拟结构图像与真实的现场物理结构进行匹配,同时可根据测量者的最佳观察需要进行可视化调整(显示属性),如3D成像的透明度、色彩、特征点等,以便更好地与实际物体进行三维空间的立体匹配,从而达到外形形状的检测和测量。
发明内容
本发明所要解决的技术问题是提供一种基于特征点立体匹配的曲面外观形状检测VR***,其能够用于工业曲面外观形状检测,将设计过程和检测过程结合在一起,解决了现有技术和方法无法对特殊曲面或部件之间的遮挡、重叠部分检测的问题,操作简便使用成本低,适用于普通操作人员。
本发明是通过下述技术方案来解决上述技术问题的:一种基于特征点立体匹配的曲面外观形状检测VR***,其包括3D重建处理***、VR设备、交互***,3D重建处理***读取原始3D设计的数据进行处理,通过VR设备上的摄像装置实时显示被测量构件,采集到的数据传到3D重建处理***进行特征点匹配,同时可根据测量者不断调整,经交互***确认后,生成最终的可视化的3D显示数据,此数据最终显示在VR设备上,3D显示数据可以通过有线或无线连接的通信方式传输图像数据,测量者通过观察VR设备上显示的可视化特征点和物理世界中的构件上的特征点进行最佳3D匹配,从而确定此被测构建是否符合外形尺寸的质量要求。
优选地,所述3D重建处理***由高性能计算机***和图像图形处理算法组成,图像图形算法根据被测量部件的3D设计数据,提取被测量部位3D/2D空间信息和特征信息,根据测量者确认或交互确认,最终生成待匹配的可视化图形图像数据,供VR设备显示。
优选地,所述VR设备指导操作者用来进行虚实3D特征点匹配的的可视化显示,可提供2D或3D实时动态或静止图形图像数据。
优选地,所述交互***包括3D重建处理***和操作者的交互,用于和PC***相连接的鼠标、键盘、手柄、遥控器等输入设备的交互输入输出,也用于和操作着对于VR数据的交互确认过程。
优选地,所述3D重建处理***可以是任何具有信息处理功能的通用处理器、DSP、FPGA,GPU承担核心数据处理、转换、变换。
优选地,所述VR设备可以是具有和3D重建处理***进行某种直接或者间接、有线或无线的连接,在线或离线进行连接的显示设备,可以和3D重建处理***进行基于通用数据线的连接,也可以是基于wifi的连接,也可以是进行专业视频数据线的连接,传输数据格式可以是基于网络包的数据,也可以是基于并行或串行的视频数据或图像格式的数据。
本发明的积极进步效果在于:本发明能够用于工业曲面外观形状检测,将设计过程和检测过程结合在一起,解决了现有技术和方法无法对特殊曲面或部件之间的遮挡、重叠部分检测的问题,操作简便使用成本低,适用于普通操作人员。
附图说明
图1为本发明基于特征点立体匹配的曲面外观形状检测VR***的原理图。
图2位本发明中3D重建处理***的处理流程图。
图3位本发明中3D重建处理***的原理图。
具体实施方式
下面结合附图给出本发明较佳实施例,以详细说明本发明的技术方案。
如图1至图3所示,本发明基于特征点立体匹配的曲面外观形状检测VR***包括3D重建处理***、VR设备、交互***,3D重建处理***读取原始3D设计的数据进行处理,通过VR设备上的摄像装置实时显示被测量构件,采集到的数据传到3D重建处理***进行特征点匹配,同时可根据测量者不断调整,经交互***确认后,生成最终的可视化的3D显示数据,此数据最终显示在VR设备上,3D显示数据可以通过有线或无线连接的通信方式传输图像数据,测量者通过观察VR设备上显示的可视化特征点和物理世界中的构件上的特征点进行最佳3D匹配,从而确定此被测构建是否符合外形尺寸的质量要求。
3D重建处理***由高性能计算机***和图像图形处理算法组成,图像图形算法根据被测量部件的3D设计数据,提取被测量部位3D/2D空间信息和特征信息,根据测量者确认或交互确认,最终生成待匹配的可视化图形图像数据,供VR设备显示。3D重建处理***可以是任何具有信息处理功能的通用处理器、DSP、FPGA,GPU承担核心数据处理、转换、变换。
VR设备指导操作者用来进行虚实3D特征点匹配的的可视化显示,可提供2D或3D实时动态或静止图形图像数据。VR设备可以是具有和3D重建处理***进行某种直接或者间接、有线或无线的连接,在线或离线进行连接的显示设备,可以和3D重建处理***进行基于通用数据线的连接,也可以是基于wifi的连接,也可以是进行专业视频数据线的连接,传输数据格式可以是基于网络包的数据,也可以是基于并行或串行的视频数据或图像格式的数据。
交互***包括3D重建处理***和操作者的交互,用于和PC***相连接的鼠标、键盘、手柄、遥控器等输入设备的交互输入输出,也用于和操作着对于VR数据的交互确认过程。交互***可以通过3D重建处理***,或VR设备上分别部分实现或独立实现,交互方式可以是接触式的,例如操纵杆或鼠标键盘等设备;也可以是无接触式的,例如基于遥控器方式的。
本发明不需要额外太多的辅助的专业化仪器和设备。通过核心可视化数据处理、显示算法和通用处理能力的***组成的3D重建***,外加VR设备和简单的交互,即可实现高效率大型异型曲面的外形检测和测量。
本发明具有以下六个优点和效果:
一,易用性:通用处理***,制作简单,体积轻巧,只由一台(便携式)计算机处理***和一套具有显示功能(或摄像)的VR设备。
二,安全性:所有匹配数据均来自设计数据本身和实际被测构件本身(生产加工后),***只提供关键设计数据生成及显示,加工制造者之根据自身条件,根据设计数据进行加工制造;操作者通过最佳立体匹配决定匹配是否合格。
三,结构:不需要复杂的、高度精度要求的机械或电气结构,图形化和可视化数据软件处理***和显示***即可。
四,成本:基本属于原材料固定成本,核心数据处理算法或具体功能可以定制或根据需要可以升级,不额外增加固定成本。
五,技术参数:***3D重建时间取决于处理***的性能,配置越高,所需重建时间越少;操作精度取决于VR设备显示图像的比例和虚实匹配的程序;生成局部显示图像尺寸越大、匹配区域越小,匹配精度越高。
六,实验效果:操作简单,操作过程高效便捷,数据处理效果稳定可靠,具有实用推广价值。
综上所述,本发明能够用于工业曲面外观形状检测,将设计过程和检测过程结合在一起,解决了现有技术和方法无法对特殊曲面或部件之间的遮挡、重叠部分检测的问题,操作简便使用成本低,适用于普通操作人员。
以上所述的具体实施例,对本发明的解决的技术问题、技术方案和有益效果进行了进一步详细说明,所应理解的是,以上所述仅为本发明的具体实施例而已,并不用于限制本发明,凡在本发明的精神和原则之内,所做的任何修改、等同替换、改进等,均应包含在本发明的保护范围之内。
Claims (6)
1.一种基于特征点立体匹配的曲面外观形状检测VR***,其特征在于,其包括3D重建处理***、VR设备、交互***,3D重建处理***读取原始3D设计的数据进行处理,通过VR设备上的摄像装置实时显示被测量构件,采集到的数据传到3D重建处理***进行特征点匹配,同时可根据测量者不断调整,经交互***确认后,生成最终的可视化的3D显示数据,此数据最终显示在VR设备上,3D显示数据可以通过有线或无线连接的通信方式传输图像数据,测量者通过观察VR设备上显示的可视化特征点和物理世界中的构件上的特征点进行最佳3D匹配,从而确定此被测构建是否符合外形尺寸的质量要求。
2.如权利要求1所述的基于特征点立体匹配的曲面外观形状检测VR***,其特征在于,所述3D重建处理***由高性能计算机***和图像图形处理算法组成,图像图形算法根据被测量部件的3D设计数据,提取被测量部位3D/2D空间信息和特征信息,根据测量者确认或交互确认,最终生成待匹配的可视化图形图像数据,供VR设备显示。
3.如权利要求1所述的基于特征点立体匹配的曲面外观形状检测VR***,其特征在于,所述VR设备指导操作者用来进行虚实3D特征点匹配的可视化显示,提供2D或3D实时动态或静止图形图像数据。
4.如权利要求1所述的基于特征点立体匹配的曲面外观形状检测VR***,其特征在于,所述交互***包括3D重建处理***和操作者的交互,用于和PC***相连接的鼠标、键盘、手柄、遥控器等输入设备的交互输入输出,也用于和操作着对于VR数据的交互确认过程。
5.如权利要求1所述的基于特征点立体匹配的曲面外观形状检测VR***,其特征在于,所述3D重建处理***是任何具有信息处理功能的通用处理器、DSP、FPGA,GPU承担核心数据处理、转换、变换。
6.如权利要求1所述的基于特征点立体匹配的曲面外观形状检测VR***,其特征在于,所述VR设备是具有和3D重建处理***进行某种直接或者间接、有线或无线的连接,在线或离线进行连接的显示设备,和3D重建处理***进行基于通用数据线的连接,或是基于wifi的连接,或是进行专业视频数据线的连接,传输数据格式是基于网络包的数据,或是基于并行或串行的视频数据或图像格式的数据。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201611078623.6A CN106595518A (zh) | 2016-11-30 | 2016-11-30 | 基于特征点立体匹配的曲面外观形状检测vr*** |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201611078623.6A CN106595518A (zh) | 2016-11-30 | 2016-11-30 | 基于特征点立体匹配的曲面外观形状检测vr*** |
Publications (1)
Publication Number | Publication Date |
---|---|
CN106595518A true CN106595518A (zh) | 2017-04-26 |
Family
ID=58594182
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201611078623.6A Pending CN106595518A (zh) | 2016-11-30 | 2016-11-30 | 基于特征点立体匹配的曲面外观形状检测vr*** |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN106595518A (zh) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN117252867A (zh) * | 2023-11-14 | 2023-12-19 | 广州市品众电子科技有限公司 | 一种基于图像识别的vr设备生产产品质量监测分析方法 |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20020133264A1 (en) * | 2001-01-26 | 2002-09-19 | New Jersey Institute Of Technology | Virtual reality system for creation of design models and generation of numerically controlled machining trajectories |
CN104137030A (zh) * | 2011-12-28 | 2014-11-05 | 菲托尼克斯公司 | 通过包含激光扫描显微镜的测量装置测量三维样品的方法及该测量装置 |
CN106127758A (zh) * | 2016-06-21 | 2016-11-16 | 四川大学 | 一种基于虚拟现实技术的视觉检测方法及装置 |
CN106110627A (zh) * | 2016-06-20 | 2016-11-16 | 曲大方 | 体育和武术运动动作校正设备和方法 |
-
2016
- 2016-11-30 CN CN201611078623.6A patent/CN106595518A/zh active Pending
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20020133264A1 (en) * | 2001-01-26 | 2002-09-19 | New Jersey Institute Of Technology | Virtual reality system for creation of design models and generation of numerically controlled machining trajectories |
CN104137030A (zh) * | 2011-12-28 | 2014-11-05 | 菲托尼克斯公司 | 通过包含激光扫描显微镜的测量装置测量三维样品的方法及该测量装置 |
CN106110627A (zh) * | 2016-06-20 | 2016-11-16 | 曲大方 | 体育和武术运动动作校正设备和方法 |
CN106127758A (zh) * | 2016-06-21 | 2016-11-16 | 四川大学 | 一种基于虚拟现实技术的视觉检测方法及装置 |
Non-Patent Citations (2)
Title |
---|
李鹏慧 等: "虚拟现实投影匹配的单幅图像卡车体积测量", 《光学精密工程》 * |
雷运发 等: "《多媒体技术与应用教程》", 30 September 2008, 清华大学出版社 * |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN117252867A (zh) * | 2023-11-14 | 2023-12-19 | 广州市品众电子科技有限公司 | 一种基于图像识别的vr设备生产产品质量监测分析方法 |
CN117252867B (zh) * | 2023-11-14 | 2024-02-27 | 广州市品众电子科技有限公司 | 一种基于图像识别的vr设备生产产品质量监测分析方法 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN107067470B (zh) | 基于红外热像仪与深度相机的便携式三维温度场重建*** | |
CN109559381B (zh) | 一种基于ar空间测量技术的变电站验收方法 | |
CN103392191A (zh) | 混合拼接 | |
JP2016510462A (ja) | 検査データのグラフィカルフィルタ | |
CN103220500B (zh) | 电网设备监控图像与业务分析图像叠加展示方法 | |
Takahashi et al. | A system for three-dimensional gaze fixation analysis using eye tracking glasses | |
CN106127758A (zh) | 一种基于虚拟现实技术的视觉检测方法及装置 | |
CN110322564A (zh) | 一种适用于vr/ar的变电站运行环境的三维模型构建方法 | |
Andersen et al. | Immersion or diversion: Does virtual reality make data visualisation more effective? | |
CN113655415B (zh) | 一种磁场分布的增强现实在线可视化方法 | |
CN106959748A (zh) | 一种基于虚拟现实的巷道围岩灾害应急预案***及方法 | |
CN105700385A (zh) | 机器人调试模拟平台 | |
Munoz et al. | Camera 3D positioning mixed reality-based interface to improve worker safety, ergonomics and productivity | |
CN105184622A (zh) | 利用虚拟技术帮助消费者网络购物 | |
CN107170039A (zh) | 人体三维数据模型库的生成方法 | |
CN109471533A (zh) | 一种vr/ar教室内的学生端***及其使用方法 | |
CN115469744A (zh) | 一种基于ar技术的机房设备巡检作业方法 | |
CN109141286A (zh) | 一种基于机器视觉和旋合模型的螺纹通止检测方法及*** | |
Smith et al. | Machine vision 3D skin texture analysis for detection of melanoma | |
CN106595518A (zh) | 基于特征点立体匹配的曲面外观形状检测vr*** | |
CN107945607A (zh) | 超声演示***及装置 | |
WO2020156627A1 (en) | The virtual caliper: rapid creation of metrically accurate avatars from 3d measurements | |
CN109191559A (zh) | 基于深度传感器的人体模型建立方法 | |
Gu et al. | Online fashion design education supported by digital three dimensions technologies | |
CN107730134A (zh) | 基于vr技术的交互式自动评分*** |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
WD01 | Invention patent application deemed withdrawn after publication |
Application publication date: 20170426 |
|
WD01 | Invention patent application deemed withdrawn after publication |