CN115375855A - 工程项目的可视化方法、装置、电子设备和可读介质 - Google Patents
工程项目的可视化方法、装置、电子设备和可读介质 Download PDFInfo
- Publication number
- CN115375855A CN115375855A CN202211308993.XA CN202211308993A CN115375855A CN 115375855 A CN115375855 A CN 115375855A CN 202211308993 A CN202211308993 A CN 202211308993A CN 115375855 A CN115375855 A CN 115375855A
- Authority
- CN
- China
- Prior art keywords
- generate
- dimensional model
- engineering project
- target
- dimensional
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000007794 visualization technique Methods 0.000 title abstract description 11
- 230000002159 abnormal effect Effects 0.000 claims abstract description 51
- 238000000034 method Methods 0.000 claims abstract description 36
- 238000010586 diagram Methods 0.000 claims abstract description 25
- 230000004044 response Effects 0.000 claims abstract description 14
- 230000000007 visual effect Effects 0.000 claims abstract description 9
- 238000001514 detection method Methods 0.000 claims description 24
- 238000004590 computer program Methods 0.000 claims description 13
- 238000004088 simulation Methods 0.000 claims description 11
- 238000012795 verification Methods 0.000 claims description 9
- 238000007781 pre-processing Methods 0.000 claims description 2
- 238000010276 construction Methods 0.000 abstract description 33
- 238000012800 visualization Methods 0.000 description 21
- 238000012545 processing Methods 0.000 description 14
- 230000006870 function Effects 0.000 description 9
- 239000000463 material Substances 0.000 description 8
- 238000004891 communication Methods 0.000 description 7
- 238000000605 extraction Methods 0.000 description 4
- 230000003287 optical effect Effects 0.000 description 4
- 230000009467 reduction Effects 0.000 description 3
- 238000005516 engineering process Methods 0.000 description 2
- 230000035515 penetration Effects 0.000 description 2
- 230000008569 process Effects 0.000 description 2
- 230000000644 propagated effect Effects 0.000 description 2
- 230000005856 abnormality Effects 0.000 description 1
- 238000003491 array Methods 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 238000013527 convolutional neural network Methods 0.000 description 1
- 238000007689 inspection Methods 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000012544 monitoring process Methods 0.000 description 1
- 239000013307 optical fiber Substances 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 238000012546 transfer Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T17/00—Three dimensional [3D] modelling, e.g. data description of 3D objects
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/50—Information retrieval; Database structures therefor; File system structures therefor of still image data
- G06F16/54—Browsing; Visualisation therefor
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Data Mining & Analysis (AREA)
- Databases & Information Systems (AREA)
- General Engineering & Computer Science (AREA)
- Computer Graphics (AREA)
- Geometry (AREA)
- Software Systems (AREA)
- Processing Or Creating Images (AREA)
Abstract
本公开的实施例公开了工程项目的可视化方法、装置、电子设备和可读介质。该方法的一具体实施方式包括:通过目标采集设备,对目标工程项目对应的区域进行图像采集,以生成区域图像组集合,其中,区域图像组中包括目标采集设备同时刻在多个角度下采集的多张图像;根据区域图像组集合,对目标工程项目对应的区域进行三维重建,以生成目标工程项目对应的三维模型;根据三维模型对应的工程项目图,对三维模型进行一致性校验;响应于未通过一致性校验,生成异常构件信息集合;根据异常构件信息集合,对三维模型进行模型调整,以生成调整后三维模型;对调整后三维模型进行三维可视化展示。该实施方式保证了工程项目的施工安全性。
Description
技术领域
本公开的实施例涉及计算机技术领域,具体涉及工程项目的可视化方法、装置、电子设备和可读介质。
背景技术
工程项目的可视化,是指通过可视化的方式,对工程项目进行立体展现的一种技术。目前,在进行工程项目可视化时,通常采用的方式为:基于工程项目对应的二维施工图纸进行三维可视化。然而,发明人发现,当采用上述方式时,经常会存在如下技术问题:
第一,对二维施工图纸进行三维可视化,无法有效地对实际工程项目中的异常构件进行有效检测,无法保证工程项目的施工安全性;第二,当工程项目包含的构件较多时,采用人工的方式进行异常构件检测,检测效率低下。
该背景技术部分中所公开的以上信息仅用于增强对本发明构思的背景的理解,并因此,其可包含并不形成本国的本领域普通技术人员已知的现有技术的信息。
发明内容
本公开的内容部分用于以简要的形式介绍构思,这些构思将在后面的具体实施方式部分被详细描述。本公开的内容部分并不旨在标识要求保护的技术方案的关键特征或必要特征,也不旨在用于限制所要求的保护的技术方案的范围。
本公开的一些实施例提出了工程项目的可视化方法、装置、电子设备和可读介质,来解决以上背景技术部分提到的技术问题中的一项或多项。
第一方面,本公开的一些实施例提供了一种工程项目的可视化方法,该方法包括:通过目标采集设备,对目标工程项目对应的区域进行图像采集,以生成区域图像组集合,其中,区域图像组中包括上述目标采集设备同时刻在多个角度下采集的多张图像;根据上述区域图像组集合,对上述目标工程项目对应的区域进行三维重建,以生成上述目标工程项目对应的三维模型;根据上述三维模型对应的工程项目图,对上述三维模型进行一致性校验;响应于未通过一致性校验,生成异常构件信息集合;根据上述异常构件信息集合,对上述三维模型进行模型调整,以生成调整后三维模型;对上述调整后三维模型进行三维可视化展示。
第二方面,本公开的一些实施例提供了一种工程项目的可视化装置,装置包括:图像采集单元,被配置成通过目标采集设备,对目标工程项目对应的区域进行图像采集,以生成区域图像组集合,其中,区域图像组中包括上述目标采集设备同时刻在多个角度下采集的多张图像;三维重建单元,被配置成根据上述区域图像组集合,对上述目标工程项目对应的区域进行三维重建,以生成上述目标工程项目对应的三维模型;一致性校验单元,被配置成根据上述三维模型对应的工程项目图,对上述三维模型进行一致性校验;生成单元,被配置成响应于未通过一致性校验,生成异常构件信息集合;模型调整单元,被配置成根据上述异常构件信息集合,对上述三维模型进行模型调整,以生成调整后三维模型;展示单元,被配置成对上述调整后三维模型进行三维可视化展示。
第三方面,本公开的一些实施例提供了一种电子设备,包括:一个或多个处理器;存储装置,其上存储有一个或多个程序,当一个或多个程序被一个或多个处理器执行,使得一个或多个处理器实现上述第一方面任一实现方式所描述的方法。
第四方面,本公开的一些实施例提供了一种计算机可读介质,其上存储有计算机程序,其中,程序被处理器执行时实现上述第一方面任一实现方式所描述的方法。
第五方面,本公开的一些实施例提供了一种计算机程序产品,包括计算机程序,计算机程序在被处理器执行时实现上述第一方面任一实现方式所描述的方法。
本公开的上述各个实施例具有如下有益效果:通过本公开的一些实施例的工程项目的可视化方法保证了工程项目的施工安全性。具体来说,造成施工安全性较低的原因在于:对二维施工图纸进行三维可视化,无法有效地对实际施工项目中的异常构件进行有效检测,使得无法保证工程项目的施工安全性。基于此,本公开的一些实施例的工程项目的可视化方法,首先,通过目标采集设备,对目标工程项目对应的区域进行图像采集,以生成区域图像组集合,其中,区域图像组中包括上述目标采集设备同时刻在多个角度下采集的多张图像。通过图像采集的方式,以此得到工程项目对应的多个角度下的实际施工图像。其次,根据上述区域图像组集合,对上述目标工程项目对应的区域进行三维重建,以生成上述目标工程项目对应的三维模型。通过三维重建,以生成目标工程项目对应的实际三维模型。进一步,根据上述三维模型对应的工程项目图,对上述三维模型进行一致性校验。以此确定实际的工程项目与对应的工程项目图是否对应。接着,响应于未通过一致性校验,生成异常构件信息集合。当不一致时,确定存在的异常构件。此外,根据上述异常构件信息集合,对上述三维模型进行模型调整,以生成调整后三维模型。最后,对上述调整后三维模型进行三维可视化展示。通过此种方式,实现了对实际工程项目中的异常构件的有效监测,保证了工程项目的施工安全性。同时,通过三维可视化的方式对三维模型进行展示,使得可以直观的展示工程项目的当前进展,进一步提高了模型的可用性。
附图说明
结合附图并参考以下具体实施方式,本公开各实施例的上述和其他特征、优点及方面将变得更加明显。贯穿附图中,相同或相似的附图标记表示相同或相似的元素。应当理解附图是示意性的,元件和元素不一定按照比例绘制。
图1是根据本公开的工程项目的可视化方法的一些实施例的流程图;
图2是根据本公开的工程项目的可视化装置的一些实施例的结构示意图;
图3是适于用来实现本公开的一些实施例的电子设备的结构示意图。
其中,图2所示的工程项目的可视化装置200的结构示意图包括:图像采集单元201、三维重建单元202、一致性校验单元203、生成单元204、模型调整单元205和展示单元206。
图3所示的电子设备的结构示意图包括:处理装置301、只读存储器302、随机访问存储器303、总线304、输入/输出接口305、输入装置306、输出装置307、存储装置308和通信装置309。
具体实施方式
下面将参照附图更详细地描述本公开的实施例。虽然附图中显示了本公开的某些实施例,然而应当理解的是,本公开可以通过各种形式来实现,而且不应该被解释为限于这里阐述的实施例。相反,提供这些实施例是为了更加透彻和完整地理解本公开。应当理解的是,本公开的附图及实施例仅用于示例性作用,并非用于限制本公开的保护范围。
另外还需要说明的是,为了便于描述,附图中仅示出了与有关发明相关的部分。在不冲突的情况下,本公开中的实施例及实施例中的特征可以相互组合。
需要注意,本公开中提及的“第一”、“第二”等概念仅用于对不同的装置、模块或单元进行区分,并非用于限定这些装置、模块或单元所执行的功能的顺序或者相互依存关系。
需要注意,本公开中提及的“一个”、“多个”的修饰是示意性而非限制性的,本领域技术人员应当理解,除非在上下文另有明确指出,否则应该理解为“一个或多个”。
本公开实施方式中的多个装置之间所交互的消息或者信息的名称仅用于说明性的目的,而并不是用于对这些消息或信息的范围进行限制。
下面将参考附图并结合实施例来详细说明本公开。
参考图1,示出了根据本公开的工程项目的可视化方法的一些实施例的流程100。该工程项目的可视化方法,包括以下步骤:
步骤101,通过目标采集设备,对目标工程项目对应的区域进行图像采集,以生成区域图像组集合。
在一些实施例中,工程项目的可视化方法的执行主体(例如,计算设备)可以通过目标采集设备,对目标工程项目对应的区域进行图像采集,以生成区域图像组集合。其中,上述目标采集设备可以是具有图像采集功能的设备。例如,上述目标采集设备可以是合成孔径雷达。上述目标工程项目可以是待进行三维可视化展示的工程项目。例如,上述目标工程项目可以是“桥梁工程项目A”。区域图像组中包括上述目标采集设备同时刻在多个角度下采集的多张图像。
可选地,上述目标采集设备可以是目标无人机。上述目标无人机可以包括:主摄像头和至少一个侧摄像头。其中,至少一个侧摄像头中的侧摄像头围绕上述主摄像头设置。上述主摄像头和上述至少一个侧摄像头同时拍摄。
在一些实施例的一些可选的实现方式中,上述执行主体通过目标采集设备,对目标工程项目对应的区域进行图像采集,以生成区域图像组集合,包括:
控制上述目标采集设备在预先规划的飞行轨迹上移动、以及控制上述主摄像头和上述至少一个侧摄像头进行无人机倾斜摄影,以得到上述区域图像组集合。
其中,上述飞行轨迹可以通过以下步骤生成:
第一步,对上述目标工程项目对应的区域进行空域层级划分,得到扫描层集合。
作为示例,扫描层集合可以包括:第一扫描层、第二扫描层和第三扫描层。其中,第一扫描层的海拔高度可以是10米。第二扫描层的海拔高度可以是20米。第三扫描层的海拔高度可以是30米。其中,扫描层集合中的扫描层的数量可以根据现实需求进行设计。在此不再限定。
第二步,对于扫描层集合中的每个扫描层集执行以下处理步骤:
第一子步骤,当上述扫描层不存在障碍物时,采用弓形扫描的方式,生成上述飞行轨迹。
第二子步骤,当上述扫描层存在障碍物时,采用蚁群算法确定上述飞行轨迹。
需要说明的是,上述计算设备可以是硬件,也可以是软件。当计算设备为硬件时,可以实现成多个服务器或终端设备组成的分布式集群,也可以实现成单个服务器或单个终端设备。当计算设备体现为软件时,可以安装在上述所列举的硬件设备中。其可以实现成例如用来提供分布式服务的多个软件或软件模块,也可以实现成单个软件或软件模块。在此不做具体限定。应该理解,计算设备的数目根据实现需要,可以具有任意数目的计算设备。
步骤102,根据区域图像组集合,对目标工程项目对应的区域进行三维重建,以生成目标工程项目对应的三维模型。
在一些实施例中,上述执行主体可以根据区域图像组集合,对目标工程项目对应的区域进行三维重建,以生成目标工程项目对应的三维模型。
作为示例,上述执行主体可以通过根据区域图像组集合,对上述目标工程项目对应的区域进行BIM(Building Information Modeling,建筑信息模型)模型构建,以生成上述目标工程项目对应的三维模型。
可选地,上述执行主体还可以根据上述目标工程项目对应的工程项目图,对上述目标工程项目对应的区域进行BIM模型构建,以生成上述目标工程项目对应的三维模型。
其中,采用上述工程项目图,生成的三维模型包含有上述目标工程项目对应的各个构件。上述三维模型可以与预先构建的标准细目库中的细目进行关联,以生成上述目标工程项目对应的理论物资计划。其中,上述理论物资计划表征上述目标工程项目的理论物资消耗。
作为示例,首先,施工人员可以通过打开施工日志,以显示上述三维模型。然后,施工人员可以点击上述三维模型包含的构件,或点击构件的某个部位,并输入构件,或构件的某个部位对应的完成比例,自动生成构件,或构件的某个部位对应的物资消耗量。
通过此种方式,首先,可以自动地生成工程项目对应的理论物资计划,相较于采用人工的方式,依据工程项目图生成理论物资计划,理论物资计划的生成效率和准确率大大提高。此外,通过上述三维模型和施工人员输入的构件,或构件的某个部位对应的施工比例,可以自动地、实时地计算对应的当前物资消耗量。
可选地,上述执行主体可以根据上述三维模型,确定上述三维模型包括的各个构建对应的工程量。
通过此种方式,可以快速地确定工程量,无需消耗人工。
在一些实施例的一些可选的实现方式中,上述执行主体根据区域图像组集合,对目标工程项目对应的区域进行三维重建,以生成目标工程项目对应的三维模型可以包括以下步骤:
第一步,对于上述区域图像组集合中的每个区域图像组,执行以下异常图像剔除步骤:
第一子步骤,对上述区域图像组中的每张区域图像进行异常图像检测,以生成图像检测结果。
其中,上述图像检测结果可以表征区域图像是否异常。实践中,图像检测结果可以包括:异常标识值和异常类别。其中,上述异常标识值可以表征区域图像是否异常。例如,当区域图像无异常时,可以通过异常标识值“0”表征。当区域图像异常时,可以通过异常标识值“1”表征。异常类别可以表征区域图像的具体异常类别。实践中,异常类别可以包括:图像失焦,图像内容缺失和图像内容重复。上述执行主体可以通过预先训练的带有多分类层的卷积神经网络,对区域图像进行异常图像检测,以生成图像检测结果。
第二子步骤,响应于确定上述区域图像组中存在目标区域图像,从上述区域图像组中剔除上述目标区域图像,以生成候选区域图像组。
其中,上述目标区域图像是对应的图像检测结果表征图像异常的区域图像。
第二步,对得到的候选区域图像组集合中的每张候选区域图像进行图像预处理,以生成预处理后图像,得到预处理后图像组集合。
其中,首先,上述执行主体可以对候选区域图像进行降噪处理,以生成降噪处理后的候选区域图像。然后,上述执行主体可以对降噪后的候选区域图像进行锐化处理,以生成预处理后图像。
第三步,根据上述预处理后图像组集合,进行区域三维重建,以生成上述三维模型。
步骤103,根据三维模型对应的工程项目图,对三维模型进行一致性校验。
在一些实施例中,上述执行主体可以根据三维模型对应的工程项目图,对三维模型进行一致性校验。
作为示例,对于上述三维模型中的每个构件,上述执行主体可以确定上述构件的当前构件参数是否满足工程项目图中上述构件对应的预设参数。当三维模型中的各个构件均满足对应的预设参数,则三维模型通过一致性校验。
在一些实施例的一些可选的实现方式中,上述执行主体根据三维模型对应的工程项目图,对三维模型进行一致性校验,可以包括以下步骤:
对于上述三维模型中的每个构件,执行以下一致性校验步骤:
第一步,对上述三维模型中、上述构件对应的子三维模型进行模型表面特征点提取,以生成第一特征点信息,得到第一特征点信息集合。
其中,第一特征点信息集合中的第一特征点信息表征上述构件对应的子三维模型表面的特征点。上述执行主体可以通过特征金字塔模型,对上述构件对应的子三维模型进行模型表面特征点提取,以生成第一特征点信息。
第二步,根据上述构件在上述工程项目图中对应的构件参数,进行构件三维重建,以生成三维模拟构件。
第三步,对上述三维模拟构件进行表面特征点提取,以生成第二特征点信息集合。
其中,上述执行主体可以通过上述特征金字塔模型对上述三维模拟构件进行表面特征点提取,以生成第二特征点信息集合。
第四步,确定上述构件在三维模型中对应的位置,以生成第一位置信息。
其中,上述第一位置信息包括上述构件上的至少一个关键点在上述三维模型中的坐标。
第五步,确定上述构件在上述工程项目图中对应的位置,以生成第二位置信息。
其中,上述第二位置信息包括上述构件上的至少一个关键点在上述工程项目图中的坐标。
第六步,对上述第一特征点信息集合进行特征点向量构建,以生成第一特征点向量。
其中,上述执行主体可以对上述第一特征点信息集合中的各个第一特征点信息进行拼接,以生成上述第一特征点向量。
第七步,对上述第二特征点信息集合进行特征点向量构建,以生成第二特征点向量。
其中,上述执行主体可以对第二特征点信息集合中的各个第二特征点信息进行拼接,以生成上述第二特征向量。
第八步,将上述第一特征点向量和上述第一位置信息进行拼接,以生成第一拼接向量。
第九步,将上述第二特征点向量和上述第二位置信息进行拼接,以生成第二拼接向量。
第十步,确定上述第一拼接向量和上述第二拼接向量的向量相似度,以生成子校验结果。
其中,上述执行主体可以计算上述第一拼接向量和上述第二拼接向量的余弦相似度,作为向量相似度。当向量相似度大于预设阈值时,生成表征构件正常的子校验结果。当向量相似度小于等于预设阈值时,生成表征构件异常的子校验结果。
上述第一步至第十步,作为本公开的一个发明点,解决了背景技术提及的技术问题二,即“当工程项目包含的构件较多时,采用人工的方式进行异常构件检测,检测效率低下”。实际情况中,较大的工程项目往往包含较多的构件,采用人工的方式逐一进行异常构建的检测,一是会导致检测效率低下,二是由于人工检测具有一定的主观性,从而影响异常检测的结果。基于此,首先,本公开对构件对应的子三维模型进行模型表面特征点提取,以生成第一特征点信息。然后,对上述三维模拟构件进行表面特征点提取,以生成第二特征点信息集合。实际情况中,直接将子三维模型和三维模拟构件进行比对,当构建较为复杂时,需比较的数据量较大,同样会造成检测效率低下,因此,本公开采用特征点提取的方式,提取关键点。降低了后续的数据处理量。接着,确定上述构件在三维模型中对应的位置,以生成第一位置信息。然后,确定上述构件在上述工程项目图中对应的位置,以生成第二位置信息。实际情况中,构建对应的子三维模型在三维模型构建时,可能存在穿模等问题,从而导致构件的位置出现偏移,或者构件在施工阶段未按照对应的工程项目图进行施工,导致构建的位置出现偏移。基于此,通过确定构件在三维模型和工程项目图中的位置,以此确定构件是否存在穿模或未按照工程项目图进行施工的问题。进一步,将上述第一特征点向量和上述第一位置信息进行拼接,以生成第一拼接向量。以及,将上述第二特征点向量和上述第二位置信息进行拼接,以生成第二拼接向量。最后,确定上述第一拼接向量和上述第二拼接向量的向量相似度,以生成子校验结果,通过确定相似度的方式,以此确定构件是否与对应的工程项目图一致。通过此种方式,减少了人工参与,并在减少数据处理量的前提下,提高了异常构建的检测效率。
步骤104,响应于未通过一致性校验,生成异常构件信息集合。
在一些实施例中,响应于未通过一致性校验,上述执行主体可以生成异常构件信息集合。其中,异常构件信息集合中的异常构件信息是对应的向量相似度大于预设阈值的构件对应的构件信息。
作为示例,当得到的子校验结果集合中存在表征构建异常的子校验结果,将表征构建异常的子校验结果对应的构件信息,确定为异常构件信息,得到异常构件信息集合。
步骤105,根据异常构件信息集合,对三维模型进行模型调整,以生成调整后三维模型。
在一些实施例中,上述执行主体可以根据异常构件信息集合,对三维模型进行模型调整,以生成调整后三维模型。
作为示例,首先,上述执行主体可以将异常构件信息集合发送至信息接收端。其中,信息接收端可以是供模型调整人员进行三维模型调整的终端。然后,上述模型调整人员可以对异常构件信息集合中的异常构件信息对应的构件进行检查,并进行调整,以生成调整后的三维模型。
步骤106,对调整后三维模型进行三维可视化展示。
在一些实施例中,上述执行主体可以对调整后三维模型进行三维可视化展示。
作为示例,上述执行主体可以在工程项目监控界面,以三维可视化的形式,实时展示上述调整后三维模型。
可选地,上述执行主体还可以执行以下处理步骤:
第一步,与目标穿戴设备进行设备连接。
其中,上述目标穿戴设备包括:虚拟现实显示设备和虚拟现实控制设备。
作为示例,上述执行主体可以通过有线的方式与上述目标穿戴设备进行设备连接,也可以通过蓝牙,3G/4G/5G,局域网中的任一一种方式与上述目标穿戴设备进行设备连接。
第二步,响应于与上述目标穿戴设备连接成功,执行以下节点标记处理步骤:
第一子步骤,获取上述虚拟现实控制设备发送的控制信号。
其中,上述控制信号可以是用于调整虚拟现实显示设备内所展示的虚拟画面的信号。
第二子步骤,根据上述控制信号,调整上述虚拟现实显示设备内所展示的虚拟画面,以实现针对上述调整后三维模型的检查。
第三子步骤,响应于接收到上述虚拟现实控制设备发送的标记信号,对上述调整后三维模型包括的、上述标记信号对应的节点进行节点标记。
可选地,响应于开启虚拟驾驶模式,执行以下驾驶模拟处理步骤:
第一步,获取上述虚拟现实控制设备发送的虚拟车辆控制信号。
其中,虚拟驾驶模式是在上述虚拟现实显示设备中,模拟驾驶环境的模式。上述虚拟车辆控制信号可以是用于控制虚拟车辆,以调整虚拟现实显示设备内虚拟车辆的移动的信号。上述虚拟车辆控制信号是用于控制虚拟车辆在上述调整后三维模型内移动的信号。
第二步,根据上述虚拟车辆控制信号,控制上述虚拟现实显示设备内虚拟车辆移动,以及调整主视野内所展示的虚拟画面。
首先,通过目标穿戴设备,可以实现通过不同角度对工程项目中包含的各个构建进行模拟检测。针对存在检测难度的构件,可以降低其检测难度。此外,通过增加虚拟驾驶模式,可以实现以驾驶角度,对如路面等区域的模拟检测。相较于直接进入工程项目对应的区域进行检测,检测效率大大提高。
本公开的上述各个实施例具有如下有益效果:通过本公开的一些实施例的工程项目的可视化方法保证了工程项目的施工安全性。具体来说,造成施工安全性较低的原因在于:对二维施工图纸进行三维可视化,无法有效地对实际施工项目中的异常构件进行有效检测,使得无法保证工程项目的施工安全性。基于此,本公开的一些实施例的工程项目的可视化方法,首先,通过目标采集设备,对目标工程项目对应的区域进行图像采集,以生成区域图像组集合,其中,区域图像组中包括上述目标采集设备同时刻在多个角度下采集的多张图像。通过图像采集的方式,以此得到工程项目对应的多个角度下的实际施工图像。其次,根据上述区域图像组集合,对上述目标工程项目对应的区域进行三维重建,以生成上述目标工程项目对应的三维模型。通过三维重建,以生成目标工程项目对应的实际三维模型。进一步,根据上述三维模型对应的工程项目图,对上述三维模型进行一致性校验。以此确定实际的工程项目与对应的工程项目图是否对应。接着,响应于未通过一致性校验,生成异常构件信息集合。当不一致时,确定存在的异常构件。此外,根据上述异常构件信息集合,对上述三维模型进行模型调整,以生成调整后三维模型。最后,对上述调整后三维模型进行三维可视化展示。通过此种方式,实现了对实际工程项目中的异常构件的有效监测,保证了工程项目的施工安全性。同时,通过三维可视化的方式对三维模型进行展示,使得可以直观的展示工程项目的当前进展,进一步提高了模型的可用性。
进一步参考图2,作为对上述各图所示方法的实现,本公开提供了一种工程项目的可视化装置的一些实施例,这些装置实施例与图1所示的那些方法实施例相对应,该工程项目的可视化装置具体可以应用于各种电子设备中。
如图2所示,一些实施例的工程项目的可视化装置200包括:图像采集单元201、三维重建单元202、一致性校验单元203、生成单元204、模型调整单元205和展示单元206。其中,图像采集单元201,被配置成通过目标采集设备,对目标工程项目对应的区域进行图像采集,以生成区域图像组集合,其中,区域图像组中包括上述目标采集设备同时刻在多个角度下采集的多张图像;三维重建单元202,被配置成根据上述区域图像组集合,对上述目标工程项目对应的区域进行三维重建,以生成上述目标工程项目对应的三维模型;一致性校验单元203,被配置成根据上述三维模型对应的工程项目图,对上述三维模型进行一致性校验;生成单元204,被配置成响应于未通过一致性校验,生成异常构件信息集合;模型调整单元205,被配置成根据上述异常构件信息集合,对上述三维模型进行模型调整,以生成调整后三维模型;展示单元206,被配置成对上述调整后三维模型进行三维可视化展示。
可以理解的是,该工程项目的可视化装置200中记载的诸单元与参考图1描述的方法中的各个步骤相对应。由此,上文针对方法描述的操作、特征以及产生的有益效果同样适用于工程项目的可视化装置200及其中包含的单元,在此不再赘述。
下面参考图3,其示出了适于用来实现本公开的一些实施例的电子设备300(例如,计算设备)的结构示意图。图3示出的电子设备仅仅是一个示例,不应对本公开的实施例的功能和使用范围带来任何限制。
如图3所示,电子设备300可以包括处理装置301(例如中央处理器、图形处理器等),其可以根据存储在只读存储器302(ROM)中的程序或者从存储装置308加载到随机访问存储器303(RAM)中的程序而执行各种适当的动作和处理。在随机访问存储器303中,还存储有电子设备300操作所需的各种程序和数据。处理装置301、只读存储器302以及随机访问存储器303通过总线304彼此相连。输入/输出接口305也连接至总线304。
通常,以下装置可以连接至I/O接口305:包括例如触摸屏、触摸板、键盘、鼠标、摄像头、麦克风、加速度计、陀螺仪等的输入装置306;包括例如液晶显示器(LCD)、扬声器、振动器等的输出装置307;包括例如磁带、硬盘等的存储装置308;以及通信装置309。通信装置309可以允许电子设备300与其他设备进行无线或有线通信以交换数据。虽然图3示出了具有各种装置的电子设备300,但是应理解的是,并不要求实施或具备所有示出的装置。可以替代地实施或具备更多或更少的装置。图3中示出的每个方框可以代表一个装置,也可以根据需要代表多个装置。
特别地,根据本公开的一些实施例,上文参考流程图描述的过程可以被实现为计算机软件程序。例如,本公开的一些实施例包括一种计算机程序产品,其包括承载在计算机可读介质上的计算机程序,该计算机程序包含用于执行流程图所示的方法的程序代码。在这样的一些实施例中,该计算机程序可以通过通信装置309从网络上被下载和安装,或者从存储装置308被安装,或者从只读存储器302被安装。在该计算机程序被处理装置301执行时,执行本公开的一些实施例的方法中限定的上述功能。
需要说明的是,本公开的一些实施例中记载的计算机可读介质可以是计算机可读信号介质或者计算机可读存储介质或者是上述两者的任意组合。计算机可读存储介质例如可以是——但不限于——电、磁、光、电磁、红外线、或半导体的***、装置或器件,或者任意以上的组合。计算机可读存储介质的更具体的例子可以包括但不限于:具有一个或多个导线的电连接、便携式计算机磁盘、硬盘、随机访问存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、光纤、便携式紧凑磁盘只读存储器(CD-ROM)、光存储器件、磁存储器件、或者上述的任意合适的组合。在本公开的一些实施例中,计算机可读存储介质可以是任何包含或存储程序的有形介质,该程序可以被指令执行***、装置或者器件使用或者与其结合使用。而在本公开的一些实施例中,计算机可读信号介质可以包括在基带中或者作为载波一部分传播的数据信号,其中承载了计算机可读的程序代码。这种传播的数据信号可以采用多种形式,包括但不限于电磁信号、光信号或上述的任意合适的组合。计算机可读信号介质还可以是计算机可读存储介质以外的任何计算机可读介质,该计算机可读信号介质可以发送、传播或者传输用于由指令执行***、装置或者器件使用或者与其结合使用的程序。计算机可读介质上包含的程序代码可以用任何适当的介质传输,包括但不限于:电线、光缆、RF(射频)等等,或者上述的任意合适的组合。
在一些实施方式中,客户端、服务器可以利用诸如HTTP(Hyper Text TransferProtocol,超文本传输协议)之类的任何当前已知或未来研发的网络协议进行通信,并且可以与任意形式或介质的数字数据通信(例如,通信网络)互连。通信网络的示例包括局域网(“LAN”),广域网(“WAN”),网际网(例如,互联网)以及端对端网络(例如,ad hoc端对端网络),以及任何当前已知或未来研发的网络。
上述计算机可读介质可以是上述电子设备中所包含的;也可以是单独存在,而未装配入该电子设备中。上述计算机可读介质承载有一个或者多个程序,当上述一个或者多个程序被该电子设备执行时,使得该电子设备:通过目标采集设备,对目标工程项目对应的区域进行图像采集,以生成区域图像组集合,其中,区域图像组中包括上述目标采集设备同时刻在多个角度下采集的多张图像;根据上述区域图像组集合,对上述目标工程项目对应的区域进行三维重建,以生成上述目标工程项目对应的三维模型;根据上述三维模型对应的工程项目图,对上述三维模型进行一致性校验;响应于未通过一致性校验,生成异常构件信息集合;根据上述异常构件信息集合,对上述三维模型进行模型调整,以生成调整后三维模型;对上述调整后三维模型进行三维可视化展示。
可以以一种或多种程序设计语言或其组合来编写用于执行本公开的一些实施例的操作的计算机程序代码,上述程序设计语言包括面向对象的程序设计语言—诸如Java、Smalltalk、C++,还包括常规的过程式程序设计语言—诸如“C”语言或类似的程序设计语言。程序代码可以完全地在用户计算机上执行、部分地在用户计算机上执行、作为一个独立的软件包执行、部分在用户计算机上部分在远程计算机上执行、或者完全在远程计算机或服务器上执行。在涉及远程计算机的情形中,远程计算机可以通过任意种类的网络——包括局域网(LAN)或广域网(WAN)——连接到用户计算机,或者,可以连接到外部计算机(例如利用因特网服务提供商来通过因特网连接)。
附图中的流程图和框图,图示了按照本公开各种实施例的***、方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上,流程图或框图中的每个方框可以代表一个模块、程序段、或代码的一部分,该模块、程序段、或代码的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。也应当注意,在有些作为替换的实现中,方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如,两个接连地表示的方框实际上可以基本并行地执行,它们有时也可以按相反的顺序执行,这依所涉及的功能而定。也要注意的是,框图和/或流程图中的每个方框、以及框图和/或流程图中的方框的组合,可以用执行规定的功能或操作的专用的基于硬件的***来实现,或者可以用专用硬件与计算机指令的组合来实现。
描述于本公开的一些实施例中的单元可以通过软件的方式实现,也可以通过硬件的方式来实现。所描述的单元也可以设置在处理器中,例如,可以描述为:一种处理器包括图像采集单元、三维重建单元、一致性校验单元、生成单元、模型调整单元和展示单元。其中,这些单元的名称在某种情况下并不构成对该单元本身的限定,例如,三维重建单元还可以被描述为“根据上述区域图像组集合,对上述目标工程项目对应的区域进行三维重建,以生成上述目标工程项目对应的三维模型的单元”。
本文中以上描述的功能可以至少部分地由一个或多个硬件逻辑部件来执行。例如,非限制性地,可以使用的示范类型的硬件逻辑部件包括:现场可编程门阵列(FPGA)、专用集成电路(ASIC)、专用标准产品(ASSP)、片上***(SOC)、复杂可编程逻辑设备(CPLD)等等。
本公开的一些实施例还提供一种计算机程序产品,包括计算机程序,计算机程序在被处理器执行时实现上述的任一种工程项目的可视化方法。
以上描述仅为本公开的一些较佳实施例以及对所运用技术原理的说明。本领域技术人员应当理解,本公开的实施例中所涉及的发明范围,并不限于上述技术特征的特定组合而成的技术方案,同时也应涵盖在不脱离上述发明构思的情况下,由上述技术特征或其等同特征进行任意组合而形成的其它技术方案。例如上述特征与本公开的实施例中公开的(但不限于)具有类似功能的技术特征进行互相替换而形成的技术方案。
Claims (7)
1.一种工程项目的可视化方法,其特征在于,包括:通过目标采集设备,对目标工程项目对应的区域进行图像采集,以生成区域图像组集合,其中,区域图像组中包括所述目标采集设备同时刻在多个角度下采集的多张图像;根据所述区域图像组集合,对所述目标工程项目对应的区域进行三维重建,以生成所述目标工程项目对应的三维模型;根据所述三维模型对应的工程项目图,对所述三维模型进行一致性校验;响应于未通过一致性校验,生成异常构件信息集合;根据所述异常构件信息集合,对所述三维模型进行模型调整,以生成调整后三维模型;对所述调整后三维模型进行三维可视化展示。
2.根据权利要求1所述的方法,其特征在于,所述目标采集设备为目标无人机,所述目标无人机包括:主摄像头和至少一个侧摄像头;以及所述通过目标采集设备,对目标工程项目对应的区域进行图像采集,以生成区域图像组集合,包括:控制所述目标采集设备在预先规划的飞行轨迹上移动、以及控制所述主摄像头和所述至少一个侧摄像头进行无人机倾斜摄影,以得到所述区域图像组集合。
3.根据权利要求2所述的方法,其特征在于,所述根据所述区域图像组集合,对所述目标工程项目对应的区域进行三维重建,以生成所述目标工程项目对应的三维模型,包括:
对于所述区域图像组集合中的每个区域图像组,执行以下异常图像剔除步骤:
对所述区域图像组中的每张区域图像进行异常图像检测,以生成图像检测结果;
响应于确定所述区域图像组中存在目标区域图像,从所述区域图像组中剔除所述目标区域图像,以生成候选区域图像组,其中,所述目标区域图像是对应的图像检测结果表征图像异常的区域图像;对得到的候选区域图像组集合中的每张候选区域图像进行图像预处理,以生成预处理后图像,得到预处理后图像组集合;根据所述预处理后图像组集合,进行区域三维重建,以生成所述三维模型。
4.根据权利要求3所述的方法,其特征在于,所述根据所述三维模型对应的工程项目图,对所述三维模型进行一致性校验,包括:对于所述三维模型中的每个构件,执行以下一致性校验步骤:对所述三维模型中、所述构件对应的子三维模型进行模型表面特征点提取,以生成第一特征点信息,得到第一特征点信息集合;根据所述构件在所述工程项目图中对应的构件参数,进行构件三维重建,以生成三维模拟构件;对所述三维模拟构件进行表面特征点提取,以生成第二特征点信息集合;确定所述构件在三维模型中对应的位置,以生成第一位置信息;确定所述构件在所述工程项目图中对应的位置,以生成第二位置信息;对所述第一特征点信息集合进行特征点向量构建,以生成第一特征点向量;对所述第二特征点信息集合进行特征点向量构建,以生成第二特征点向量;将所述第一特征点向量和所述第一位置信息进行拼接,以生成第一拼接向量;将所述第二特征点向量和所述第二位置信息进行拼接,以生成第二拼接向量;确定所述第一拼接向量和所述第二拼接向量的向量相似度,以生成子校验结果。
5.根据权利要求3所述的方法,其特征在于,所述根据所述三维模型对应的工程项目图,对所述三维模型进行一致性校验,包括:对于所述三维模型中的每个构件,执行以下一致性校验步骤:对所述三维模型中、所述构件对应的子三维模型进行模型表面特征点提取,以生成第一特征点信息,得到第一特征点信息集合;根据所述构件在所述工程项目图中对应的构件参数,进行构件三维重建,以生成三维模拟构件;对所述三维模拟构件进行表面特征点提取,以生成第二特征点信息集合;确定所述构件在三维模型中对应的位置,以生成第一位置信息;确定所述构件在所述工程项目图中对应的位置,以生成第二位置信息;对所述第一特征点信息集合进行特征点向量构建,以生成第一特征点向量;对所述第二特征点信息集合进行特征点向量构建,以生成第二特征点向量;将所述第一特征点向量和所述第一位置信息进行拼接,以生成第一拼接向量;将所述第二特征点向量和所述第二位置信息进行拼接,以生成第二拼接向量;确定所述第一拼接向量和所述第二拼接向量的向量相似度,以生成子校验结果。
6.一种电子设备,其特征在于,包括:一个或多个处理器;存储装置,其上存储有一个或多个程序;当所述一个或多个程序被所述一个或多个处理器执行,使得所述一个或多个处理器实现如权利要求1至4中任一所述的方法。
7.一种计算机可读介质,其特征在于,其上存储有计算机程序,其中,所述程序被处理器执行时实现如权利要求1至4中任一所述的方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202211308993.XA CN115375855B (zh) | 2022-10-25 | 2022-10-25 | 工程项目的可视化方法、装置、电子设备和可读介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202211308993.XA CN115375855B (zh) | 2022-10-25 | 2022-10-25 | 工程项目的可视化方法、装置、电子设备和可读介质 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN115375855A true CN115375855A (zh) | 2022-11-22 |
CN115375855B CN115375855B (zh) | 2023-01-10 |
Family
ID=84073632
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202211308993.XA Active CN115375855B (zh) | 2022-10-25 | 2022-10-25 | 工程项目的可视化方法、装置、电子设备和可读介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN115375855B (zh) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN117575985A (zh) * | 2024-01-19 | 2024-02-20 | 大连亚明汽车部件股份有限公司 | 一种汽车零部件铸造监管方法、装置、设备及介质 |
Citations (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN107590444A (zh) * | 2017-08-23 | 2018-01-16 | 深圳市易成自动驾驶技术有限公司 | 静态障碍物的检测方法、装置及存储介质 |
CN111415388A (zh) * | 2020-03-17 | 2020-07-14 | Oppo广东移动通信有限公司 | 一种视觉定位方法及终端 |
CN111598379A (zh) * | 2020-03-31 | 2020-08-28 | 中铁建华南建设有限公司 | 项目管理方法、平台、装置、计算机设备和存储介质 |
CN112506900A (zh) * | 2020-11-27 | 2021-03-16 | 中广核工程有限公司 | 核电厂通风管三维数据检查方法、装置、设备及存储介质 |
CN113033529A (zh) * | 2021-05-27 | 2021-06-25 | 北京德风新征程科技有限公司 | 基于图像识别的预警方法、装置、电子设备和介质 |
CN113570704A (zh) * | 2021-07-27 | 2021-10-29 | 江苏图创医疗科技有限公司 | 一种基于3d打印及可视化算法的神经导航辅助*** |
CN113724391A (zh) * | 2020-11-09 | 2021-11-30 | 北京沃东天骏信息技术有限公司 | 三维模型构建方法、装置、电子设备和计算机可读介质 |
CN114404039A (zh) * | 2021-12-30 | 2022-04-29 | 华科精准(北京)医疗科技有限公司 | 三维模型的组织漂移校正方法、装置、电子设备及存储介质 |
CN114913277A (zh) * | 2022-05-30 | 2022-08-16 | 浙江浩瀚能源科技有限公司 | 一种物体立体交互展示方法、装置、设备及介质 |
CN115035250A (zh) * | 2022-06-15 | 2022-09-09 | 薛志强医疗科技(上海)工作室 | 一种建模图形数据信息交互处理方法及*** |
-
2022
- 2022-10-25 CN CN202211308993.XA patent/CN115375855B/zh active Active
Patent Citations (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN107590444A (zh) * | 2017-08-23 | 2018-01-16 | 深圳市易成自动驾驶技术有限公司 | 静态障碍物的检测方法、装置及存储介质 |
CN111415388A (zh) * | 2020-03-17 | 2020-07-14 | Oppo广东移动通信有限公司 | 一种视觉定位方法及终端 |
CN111598379A (zh) * | 2020-03-31 | 2020-08-28 | 中铁建华南建设有限公司 | 项目管理方法、平台、装置、计算机设备和存储介质 |
CN113724391A (zh) * | 2020-11-09 | 2021-11-30 | 北京沃东天骏信息技术有限公司 | 三维模型构建方法、装置、电子设备和计算机可读介质 |
CN112506900A (zh) * | 2020-11-27 | 2021-03-16 | 中广核工程有限公司 | 核电厂通风管三维数据检查方法、装置、设备及存储介质 |
CN113033529A (zh) * | 2021-05-27 | 2021-06-25 | 北京德风新征程科技有限公司 | 基于图像识别的预警方法、装置、电子设备和介质 |
CN113570704A (zh) * | 2021-07-27 | 2021-10-29 | 江苏图创医疗科技有限公司 | 一种基于3d打印及可视化算法的神经导航辅助*** |
CN114404039A (zh) * | 2021-12-30 | 2022-04-29 | 华科精准(北京)医疗科技有限公司 | 三维模型的组织漂移校正方法、装置、电子设备及存储介质 |
CN114913277A (zh) * | 2022-05-30 | 2022-08-16 | 浙江浩瀚能源科技有限公司 | 一种物体立体交互展示方法、装置、设备及介质 |
CN115035250A (zh) * | 2022-06-15 | 2022-09-09 | 薛志强医疗科技(上海)工作室 | 一种建模图形数据信息交互处理方法及*** |
Non-Patent Citations (2)
Title |
---|
李涛: "宽幅钢箱梁顶推施工技术控制措施", 《四川水泥》 * |
高璇: "关于三维可视化技术在基建维修中的应用", 《信息***工程》 * |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN117575985A (zh) * | 2024-01-19 | 2024-02-20 | 大连亚明汽车部件股份有限公司 | 一种汽车零部件铸造监管方法、装置、设备及介质 |
CN117575985B (zh) * | 2024-01-19 | 2024-06-04 | 大连亚明汽车部件股份有限公司 | 一种汽车零部件铸造监管方法、装置、设备及介质 |
Also Published As
Publication number | Publication date |
---|---|
CN115375855B (zh) | 2023-01-10 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN108520220B (zh) | 模型生成方法和装置 | |
CN111079619A (zh) | 用于检测图像中的目标对象的方法和装置 | |
CN111414879B (zh) | 人脸遮挡程度识别方法、装置、电子设备及可读存储介质 | |
CN111859597B (zh) | 一种自动驾驶算法的评估方法和*** | |
CN115631418A (zh) | 图像处理方法、神经辐射场的训练方法和神经网络 | |
CN115375855B (zh) | 工程项目的可视化方法、装置、电子设备和可读介质 | |
CN115616937B (zh) | 自动驾驶仿真测试方法、装置、设备和计算机可读介质 | |
CN113126624B (zh) | 自动驾驶仿真测试方法、装置、电子设备和介质 | |
CN115082813A (zh) | 检测方法、无人机、检测***及介质 | |
CN111340015A (zh) | 定位方法和装置 | |
CN116738867B (zh) | 一种基于机器学习的无人机防御仿真方法及其*** | |
Gudmundsson et al. | Porting Computer Vision Models to the Edge for Smart City Applications: Enabling Autonomous Vision-Based Power Line Inspection at the Smart Grid Edge for Unmanned Aerial Vehicles (UAVs). | |
CN111586295A (zh) | 图像生成方法、装置和电子设备 | |
Wei et al. | [Retracted] Adoption of Convolutional Neural Network Algorithm Combined with Augmented Reality in Building Data Visualization and Intelligent Detection | |
CN115575931A (zh) | 标定方法、装置、电子设备及存储介质 | |
CN113438318B (zh) | 云控平台的性能测试***、方法、电子设备及存储介质 | |
CN115578432A (zh) | 图像处理方法、装置、电子设备及存储介质 | |
CN117726145B (zh) | 电缆巡检处理方法、装置、电子设备和计算机可读介质 | |
CN110119721B (zh) | 用于处理信息的方法和装置 | |
CN112580773A (zh) | 用于压缩深度学习模型的方法和装置 | |
CN111540009A (zh) | 用于生成检测信息的方法、装置、电子设备和介质 | |
US20200208986A1 (en) | Systems, methods, and storage media for providing navigation directions | |
CN111914861A (zh) | 目标检测方法和装置 | |
CN115307652B (zh) | 车辆位姿确定方法、装置、设备及介质 | |
CN113239943B (zh) | 基于部件语义图的三维部件提取组合方法和装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |