CN113141498A - 信息生成方法、装置、计算机设备及存储介质 - Google Patents
信息生成方法、装置、计算机设备及存储介质 Download PDFInfo
- Publication number
- CN113141498A CN113141498A CN202110382007.4A CN202110382007A CN113141498A CN 113141498 A CN113141498 A CN 113141498A CN 202110382007 A CN202110382007 A CN 202110382007A CN 113141498 A CN113141498 A CN 113141498A
- Authority
- CN
- China
- Prior art keywords
- video frame
- information
- determining
- shooting
- image
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims abstract description 96
- 230000000875 corresponding effect Effects 0.000 claims description 73
- 238000001514 detection method Methods 0.000 claims description 61
- 239000003086 colorant Substances 0.000 claims description 19
- 230000002596 correlated effect Effects 0.000 claims description 15
- 238000004590 computer program Methods 0.000 claims description 11
- 230000001276 controlling effect Effects 0.000 claims description 10
- 230000008569 process Effects 0.000 description 21
- 230000002159 abnormal effect Effects 0.000 description 20
- 238000005286 illumination Methods 0.000 description 11
- 238000010586 diagram Methods 0.000 description 7
- 230000008859 change Effects 0.000 description 6
- 230000000694 effects Effects 0.000 description 6
- 230000003287 optical effect Effects 0.000 description 4
- 230000005856 abnormality Effects 0.000 description 3
- 230000008901 benefit Effects 0.000 description 3
- 230000004397 blinking Effects 0.000 description 3
- 238000004891 communication Methods 0.000 description 3
- 230000008878 coupling Effects 0.000 description 3
- 238000010168 coupling process Methods 0.000 description 3
- 238000005859 coupling reaction Methods 0.000 description 3
- 238000005516 engineering process Methods 0.000 description 3
- 230000006870 function Effects 0.000 description 3
- 230000033001 locomotion Effects 0.000 description 3
- 238000012545 processing Methods 0.000 description 3
- 238000005070 sampling Methods 0.000 description 3
- 238000009877 rendering Methods 0.000 description 2
- 238000011160 research Methods 0.000 description 2
- 206010034719 Personality change Diseases 0.000 description 1
- 230000003190 augmentative effect Effects 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 230000001413 cellular effect Effects 0.000 description 1
- 230000007812 deficiency Effects 0.000 description 1
- 238000006073 displacement reaction Methods 0.000 description 1
- 230000007613 environmental effect Effects 0.000 description 1
- 238000010191 image analysis Methods 0.000 description 1
- 230000003993 interaction Effects 0.000 description 1
- 230000004807 localization Effects 0.000 description 1
- 238000013507 mapping Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000000737 periodic effect Effects 0.000 description 1
- 239000000126 substance Substances 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/20—Image signal generators
- H04N13/204—Image signal generators using stereoscopic image cameras
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
- G06F3/04845—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range for image manipulation, e.g. dragging, rotation, expansion or change of colour
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T17/00—Three dimensional [3D] modelling, e.g. data description of 3D objects
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/0002—Inspection of images, e.g. flaw detection
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/20—Image signal generators
- H04N13/275—Image signal generators from 3D object models, e.g. computer-generated stereoscopic image signals
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/20—Image signal generators
- H04N13/296—Synchronisation thereof; Control thereof
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10016—Video; Image sequence
- G06T2207/10021—Stereoscopic video; Stereoscopic image sequence
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Multimedia (AREA)
- General Physics & Mathematics (AREA)
- Signal Processing (AREA)
- General Engineering & Computer Science (AREA)
- Human Computer Interaction (AREA)
- Quality & Reliability (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Computer Graphics (AREA)
- Geometry (AREA)
- Software Systems (AREA)
- Studio Devices (AREA)
Abstract
本公开提供了一种信息生成方法、装置、计算机设备及存储介质,其中,该方法包括:获取图像采集设备采集目标场景获得的视频帧图像;基于视频帧图像,确定对目标场景中目标区域进行拍摄的拍摄角度完整性信息;基于拍摄角度完整性信息生成状态提示信息;状态提示信息用于指示是否需要对目标区域重新进行图像采集。本公开实施例利用图像采集设备拍摄目标场景获得的视频帧图像,确定用于表征对目标场景中的目标区域的拍摄角度完整性信息,生成状态提示信息,能够及时指示用户或图像采集设备怎样进行下一步拍摄,以使图像采集设备能够准确获取目标场景中各个目标区域角度较为全面的图像,从而能够提升建立目标场景三维模型的效率。
Description
技术领域
本公开涉及机器视觉技术领域,具体而言,涉及一种信息生成方法、装置、计算机设备及存储介质。
背景技术
增强现实(Augmented Reality,AR),是指透过图像采集设备采集影像的位置及角度精算并加上图像分析技术,让屏幕上的虚拟世界能够与现实世界场景进行结合与交互的技术。为了在AR设备上将AR特效显示出来,通常需要预先使用图像采集设备对目标场景进行拍摄,并基于拍摄的图像对目标场景进行建模,以构建目标场景对应的三维模型;当前在生成目标场景的三维模型时的效率较低。
发明内容
本公开实施例至少提供一种信息生成方法、装置、计算机设备及存储介质。
第一方面,本公开实施例提供了一种信息生成方法,包括:获取图像采集设备采集目标场景获得的视频帧图像;基于所述视频帧图像,确定对所述目标场景中目标区域进行拍摄的拍摄角度完整性信息;基于所述拍摄角度完整性信息生成状态提示信息;所述状态提示信息用于指示是否需要对所述目标区域重新进行图像采集。
这样,利用图像采集设备拍摄目标场景获得的视频帧图像,确定用于表征对所述目标场景中的目标区域的拍摄角度完整性信息,生成状态提示信息,能够及时指示用户或图像采集设备怎样进行下一步拍摄,以使图像采集设备能够准确获取目标场景中各个目标区域角度较为全面的图像,进而能够根据获取的对目标区域拍摄角度较为全面的图像,生成较为完整的、更贴合实际区域的模型,而不需要重新拍摄,导致需要多次尝试当前拍摄得到图像是否能建立较为准确的三维模型,从而能够提升建立目标场景三维模型的效率。
一种可选的实施方式中,所述基于所述视频帧图像,确定对所述目标场景中目标区域进行拍摄的拍摄角度完整性信息,包括:从所述视频帧图像中获取所述目标区域对应的多帧连续的第一视频帧图像;对多帧所述第一视频帧图像中每帧第一视频帧图像进行质量检测;基于多帧所述第一视频帧图像中所述每帧第一视频帧图像的质量检测结果,确定所述拍摄角度完整性信息。
进而,使得用户或图像采集设备依据拍摄角度完整性信息获取对目标区域的拍摄角度更为完整的视频帧图像,并且在基于所示视频帧图像建立目标场景的三维模型后,能够利用该目标场景的三维模型实现对图像采集设备进行更加准确的定位。
一种可选的实施方式中,所述基于多帧所述第一视频帧图像中所述每帧第一视频帧图像的质量检测结果,确定所述拍摄角度完整性信息,包括:基于所述多帧第一视频帧图像中所述每帧第一视频帧图像的质量检测结果,从所述多帧第一视频帧图像中,确定满足预设图像质量要求的第一视频帧图像的第一数量;基于所述第一数量以及所述第一视频帧图像的总数量,确定所述拍摄角度完整性信息。
进而,通过上述拍摄角度完整性信息的生成过程生成指示信息,使得指示信息能够更准确的指示出对目标区域的拍摄角度是否完整,以更准确的指导用户或图像采集设备对目标场景中目标区域的采集过程。
一种可选的实施方式中,所述基于所述视频帧图像,确定对所述目标场景中目标区域进行拍摄的拍摄角度完整性信息,包括:基于所述视频帧图像,确定所述图像采集设备在预设拍摄时长内的移动路径总长度及旋转总角度;基于所述移动路径总长度及所述旋转总角度,确定所述拍摄角度完整性信息。
一种可选的实施方式中,所述基于所述视频帧图像,确定图像采集设备在预设拍摄时长内的移动路径总长度及旋转总角度,包括:基于当前视频帧图像的时间戳、以及所述预设拍摄时长,从所述视频帧图像中确定连续的多帧第二视频帧图像;针对所述多帧第二视频帧图像中每相邻的两帧第二视频帧图像,基于所述每相邻的两帧第二视频帧图像,确定所述图像采集设备在获取所述每相邻的两帧第二视频帧图像时的移动距离和旋转角度;基于所述每相邻的两帧目标视频帧图像分别对应的移动距离,确定所述移动路径总长度;并基于所述每相邻的两帧目标视频帧图像分别对应的旋转角度,确定所述旋转总角度。
进而,可以细化至相邻的两帧第二视频帧图像,进而更准确的确定移动路径总长度以及旋转总角度,从而使得利用移动路径总长度以及旋转总角度确定的拍摄角度完整性信息更为准确。
一种可选的实施方式中,所述状态提示信息包括:图形形式的提示信息;所述图形包括下述至少一种:指示灯、以及进度条;所述信息生成方法还包括:通过所述图像采集设备的图形用户界面,展示所述图形形式的提示信息。
进而,用更直观的方式向用户显示拍摄角度完整性信息,以使用户依据拍摄角度完整性信息,更高效的对目标区域进行有效拍摄。
一种可选的实施方式中,针对所述图形包括所述指示灯,且所述指示灯有多个的情况,所述图形形式的提示信息包括:多个指示灯分别对应的颜色;所述基于所述拍摄角度完整性信息生成状态提示信息,包括:基于所述拍摄角度完整性信息,确定多个所述指示灯分别对应的颜色;其中,所述拍摄角度完整性信息与显示第一颜色的指示灯的数量成正相关,且所述拍摄角度完整性信息与显示第二颜色的指示灯的数量成负相关;所述通过所述图像采集设备的图形用户界面,展示所述图形形式的提示信息,包括:在所述图形用户界面中,基于确定的多个所述指示灯分别对应的颜色展示多个所述指示灯。
这样,利用不同颜色的指示灯向用户反映拍摄角度完整性信息时,由于不同颜色的区分度更高,因此在利用多种不同颜色的指示灯向用户展示时更加直观,以使用户能够判断是否需要对目标区域重新进行拍摄,或者继续对目标区域进行拍摄。
一种可选的实施方式中,针对所述图形包括所述指示灯,且所述指示灯有至少一个的情况,所述图形形式的提示信息包括:所述指示灯对应的闪烁频率;所述基于所述拍摄角度完整性信息生成状态提示信息,包括:基于所述拍摄角度完整性信息,确定所述指示灯对应的闪烁频率;其中,所述拍摄角度完整性与所述指示灯的闪烁频率成负相关;所述通过所述图像采集设备的图形用户界面,展示所述图形形式的提示信息,包括:在所述图形用户界面中,展示所述指示灯,并控制所述指示灯按照确定的闪烁频率闪烁。
进而,利用一个可以以不同频率闪烁的指示灯,更加方便并且直接的向用户传递拍摄角度完整性信息,以使用户能够判断是否需要对目标区域进行拍摄,或者继续对目标区域进行拍摄。对于一些图形用户界面较小的设备,使用一个指示灯可以减少对图形用户界面的占用。
一种可选的实施方式中,针对所述图形包括所述进度条的情况,所述进度条包括:第一端、第二端以及能够在所述第一端和所述第二端之间移动的指示标识;所述图形形式的提示信息包括:所述指示标识与所述第一端之间的距离;所述基于所述拍摄角度完整性信息生成状态提示信息,包括:基于所述拍摄角度完整性信息,确定所述指示标识与所述第一端之间的距离;其中,所述拍摄角度完整性与所述距离成正相关;所述通过所述图像采集设备的图形用户界面,展示所述图形形式的提示信息,包括:在所述图形用户界面中展示所述进度条,并基于确定的所述距离,在所述进度条的第一端和第二端之间展示所述指示标识。
一种可选的实施方式中,所述进度条中的第一区域和第二区域的颜色不同;其中,所述第一区域为所述指示标识和所述第一端之间的区域;所述第二区域为所述指示标识和所述第二端之间的区域。
进而,利用进度条形式向用户传递拍摄角度完整性信息,由于其相较于有限数量的指示灯,可以对应的反映更精确的数值,因此用户根据进度条形式的显示,可以更准确的确定当前对目标场景中的目标区域的拍摄是否达到其所需的完整度。
一种可选的实施方式中,所述信息生成方法还包括:在所述状态提示信息指示需要对所述目标区域重新进行图像采集的情况下,控制所述图像采集设备对所述目标区域重新进行图像采集。
一种可选的实施方式中,在所述状态提示信息指示不需要对所述目标区域重新进行图像采集的情况下,所述方法还包括:利用所述视频帧图像,建立所述目标区域的三维模型。
进而,基于所述完整的视频帧图像,准确地建立所述目标区域的三维模型,以在基于三维模型对AR设备进行定位时,具有更高的定位精度。
第二方面,本公开实施例还提供一种信息生成装置,包括:获取模块,用于获取图像采集设备采集目标场景获得的视频帧图像;确定模块,用于基于所述视频帧图像,确定对所述目标场景中目标区域进行拍摄的拍摄角度完整性信息;生成模块,用于基于所述拍摄角度完整性信息生成状态提示信息;所述状态提示信息用于指示是否需要对所述目标区域重新进行图像采集。
一种可选的实施方式中,所述确定模块在基于所述视频帧图像,确定对所述目标场景中目标区域进行拍摄的拍摄角度完整性信息时,用于:从所述视频帧图像中获取所述目标区域对应的多帧连续的第一视频帧图像;对多帧所述第一视频帧图像中每帧第一视频帧图像进行质量检测;基于多帧所述第一视频帧图像中所述每帧第一视频帧图像的质量检测结果,确定所述拍摄角度完整性信息。
一种可选的实施方式中,所述确定模块在基于多帧所述第一视频帧图像中所述每帧第一视频帧图像的质量检测结果,确定所述拍摄角度完整性信息时,用于:基于所述多帧第一视频帧图像中所述每帧第一视频帧图像的质量检测结果,从所述多帧第一视频帧图像中,确定满足预设图像质量要求的第一视频帧图像的第一数量;基于所述第一数量以及所述第一视频帧图像的总数量,确定所述拍摄角度完整性信息。
一种可选的实施方式中,所述确定模块在基于所述视频帧图像,确定对所述目标场景中目标区域进行拍摄的拍摄角度完整性信息时,用于:基于所述视频帧图像,确定所述图像采集设备在预设拍摄时长内的移动路径总长度及旋转总角度;基于所述移动路径总长度及所述旋转总角度,确定所述拍摄角度完整性信息。
一种可选的实施方式中,所述确定模块在基于所述视频帧图像,确定图像采集设备在预设拍摄时长内的移动路径总长度及旋转总角度时,用于:基于当前视频帧图像的时间戳、以及所述预设拍摄时长,从所述视频帧图像中确定连续的多帧第二视频帧图像;针对所述多帧第二视频帧图像中每相邻的两帧第二视频帧图像,基于所述每相邻的两帧第二视频帧图像,确定所述图像采集设备在获取所述每相邻的两帧第二视频帧图像时的移动距离和旋转角度;基于所述每相邻的两帧目标视频帧图像分别对应的移动距离,确定所述移动路径总长度;并基于所述每相邻的两帧目标视频帧图像分别对应的旋转角度,确定所述旋转总角度。
一种可选的实施方式中,所述状态提示信息包括:图形形式的提示信息;所述图形包括下述至少一种:指示灯、以及进度条;所述信息生成装置还包括显示模块,用于:通过所述图像采集设备的图形用户界面,展示所述图形形式的提示信息。
一种可选的实施方式中,针对所述图形包括所述指示灯,且所述指示灯有多个的情况,所述图形形式的提示信息包括:多个指示灯分别对应的颜色;所述生成模块在基于所述拍摄角度完整性信息生成状态提示信息时,用于:基于所述拍摄角度完整性信息,确定多个所述指示灯分别对应的颜色;其中,所述拍摄角度完整性信息与显示第一颜色的指示灯的数量成正相关,且所述拍摄角度完整性信息与显示第二颜色的指示灯的数量成负相关;所述显示模块在通过所述图像采集设备的图形用户界面,展示所述图形形式的提示信息时,用于:在所述图形用户界面中,基于确定的多个所述指示灯分别对应的颜色展示多个所述指示灯。
一种可选的实施方式中,针对所述图形包括所述指示灯,且所述指示灯有至少一个的情况,所述图形形式的提示信息包括:所述指示灯对应的闪烁频率;所述生成模块在基于所述拍摄角度完整性信息生成状态提示信息时,用于:基于所述拍摄角度完整性信息,确定所述指示灯对应的闪烁频率;其中,所述拍摄角度完整性与所述指示灯的闪烁频率成负相关;所述显示模块通过所述图像采集设备的图形用户界面,展示所述图形形式的提示信息时,用于:在所述图形用户界面中,展示所述指示灯,并控制所述指示灯按照确定的闪烁频率闪烁。
一种可选的实施方式中,针对所述图形包括所述进度条的情况,所述进度条包括:第一端、第二端以及能够在所述第一端和所述第二端之间移动的指示标识;所述图形形式的提示信息包括:所述指示标识与所述第一端之间的距离;所述生成模块在基于所述拍摄角度完整性信息生成状态提示信息时,用于:基于所述拍摄角度完整性信息,确定所述指示标识与所述第一端之间的距离;其中,所述拍摄角度完整性与所述距离成正相关;所述显示模块通过所述图像采集设备的图形用户界面,展示所述图形形式的提示信息时,用于:在所述图形用户界面中展示所述进度条,并基于确定的所述距离,在所述进度条的第一端和第二端之间展示所述指示标识。
一种可选的实施方式中,所述进度条中的第一区域和第二区域的颜色不同;其中,所述第一区域为所述指示标识和所述第一端之间的区域;所述第二区域为所述指示标识和所述第二端之间的区域。
一种可选的实施方式中,所述信息生成装置还包括控制模块,用于:在所述状态提示信息指示需要对所述目标区域重新进行图像采集的情况下,控制所述图像采集设备对所述目标区域重新进行图像采集。
一种可选的实施方式中,在所述状态提示信息指示不需要对所述目标区域重新进行图像采集的情况下,所述方法还包括模型建立模块,用于:利用所述视频帧图像,建立所述目标区域的三维模型。
第三方面,本公开可选实现方式还提供一种计算机设备,处理器、存储器,所述存储器存储有所述处理器可执行的机器可读指令,所述处理器用于执行所述存储器中存储的机器可读指令,所述机器可读指令被所述处理器执行时,所述机器可读指令被所述处理器执行时执行上述第一方面,或第一方面中任一种可能的实施方式中的步骤。
第四方面,本公开可选实现方式还提供一种计算机可读存储介质,该计算机可读存储介质上存储有计算机程序,该计算机程序被运行时执行上述第一方面,或第一方面中任一种可能的实施方式中的步骤。
关于上述信息生成装置、计算机设备及存储介质的效果描述参见上述信息生成方法的说明,这里不再赘述。
为使本公开的上述目的、特征和优点能更明显易懂,下文特举较佳实施例,并配合所附附图,作详细说明如下。
附图说明
为了更清楚地说明本公开实施例的技术方案,下面将对实施例中所需要使用的附图作简单地介绍,此处的附图被并入说明书中并构成本说明书中的一部分,这些附图示出了符合本公开的实施例,并与说明书一起用于说明本公开的技术方案。应当理解,以下附图仅示出了本公开的某些实施例,因此不应被看作是对范围的限定,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他相关的附图。
图1示出了本公开实施例所提供的一种信息生成方法的流程图;
图2示出了本公开实施例所提供的信息生成方法中,一种基于视频帧图像,确定对目标场景中目标区域进行拍摄的拍摄角度完整性信息的具体方法的流程图;
图3示出了本公开实施例所提供的信息生成方法中,另外一种基于所述视频帧图像,确定用于表征对所述目标场景中目标区域的拍摄角度完整性信息的具体方法的流程图;
图4示出了本公开实施例所提供的一种指示灯形式的状态提示信息的示意图;
图5示出了本公开实施例所提供的一种进度条形式的状态提示信息的示意图;
图6示出了本公开实施例所提供的一种信息生成装置的示意图;
图7示出了本公开实施例所提供的一种计算机设备的示意图。
具体实施方式
为使本公开实施例的目的、技术方案和优点更加清楚,下面将结合本公开实施例中附图,对本公开实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本公开一部分实施例,而不是全部的实施例。通常在此处描述和示出的本公开实施例的组件可以以各种不同的配置来布置和设计。因此,以下对本公开的实施例的详细描述并非旨在限制要求保护的本公开的范围,而是仅仅表示本公开的选定实施例。基于本公开的实施例,本领域技术人员在没有做出创造性劳动的前提下所获得的所有其他实施例,都属于本公开保护的范围。
经研究发现,为了让多AR设备之间可定位共享同一世界坐标系,实现多端AR设备统一的AR体验,需要预先构建目标场景的三维模型,并确定AR特效在目标场景中的预设位姿;在获取任一AR设备拍摄的图像后,利用该任一AR设备在目标场景内的当前位姿、AR特效在目标场景中的预设位姿、以及目标场景的三维模型,为AR特效确定其相对于AR设备的显示位姿,基于该显示位姿,将AR特效显示在该任一AR设备的图形用户界面中。该过程要求预先对目标场景进行较完整的三维建模,而为了实现对目标场景的三维建模,通常依赖采集目标场景内的图像来实现;但是在实际过程中,对目标场景进行图像采集的过程难以控制,在很多情况下会对部分区域存在图像采集不足的情况,例如仅在部分角度下针对某区域进行图像采集,或者在图像采集过程中由于环境因素或采集过程导致的图像不可用的情况;这就造成了对目标场景的三维建模会存在某些角度或者某些区域的缺失,造成需要对这些区域重复进行图像采集,进而降低生成三维模型的效率。
另外,由于目标场景中目标区域的图像在采集时会存在一定程度的不足,因此生成的三维模型可能会存在点云点稀疏或缺失的问题,导致生成的三维模型的质量较差,利用这种三维模型进行定位时的准确度也较低。
基于上述研究,本公开提供了一种信息生成方法、装置、计算机设备及存储介质,利用图像采集设备采集目标场景获得的视频帧图像,确定用于表征对目标场景中目标区域的拍摄角度完整性信息,通过该拍摄角度完整性信息,生成状态提示信息,可以指示用户或图像采集设备对目标场景中目标区域的采集过程,以得到目标场景中目标区域更全面的图像,从而可以直接利用采集到的这些图像生成完整的目标区域对应的三维模型,而减少了基于直接获取到的图像建立三维模型后,判断是否准确再进行下一次拍摄的重复次数,有效的提高了效率。
另外,由于对目标场景中目标区域的图像采集较为完整,因此利用这些图像生成的三维模型也较为准确,质量较高;利用这样的三维模型进行定位时,定位的准确度也会相应的提高。
针对以上方案所存在的缺陷,均是发明人在经过实践并仔细研究后得出的结果,因此,上述问题的发现过程以及下文中本公开针对上述问题所提出的解决方案,都应该是发明人在本公开过程中对本公开做出的贡献。
应注意到:相似的标号和字母在下面的附图中表示类似项,因此,一旦某一项在一个附图中被定义,则在随后的附图中不需要对其进行进一步定义和解释。
本文中术语“和/或”,仅仅是描述一种关联关系,表示可以存在三种关系,例如,A和/或B,可以表示:单独存在A,同时存在A和B,单独存在B这三种情况。另外,本文中术语“至少一种”表示多种中的任意一种或多种中的至少两种的任意组合,例如,包括A、B、C中的至少一种,可以表示包括从A、B和C构成的集合中选择的任意一个或多个元素。
为便于对本实施例进行理解,首先对本公开实施例所公开的一种信息生成方法进行详细介绍,本公开实施例所提供的信息生成方法的执行主体一般为具有一定计算能力的计算机设备,该计算机设备例如包括:终端设备或服务器或其它处理设备,终端设备可以为用户设备(User Equipment,UE)、移动设备、用户终端、终端、蜂窝电话、无绳电话、个人数字助理(Personal Digital Assistant,PDA)、手持设备、计算设备、车载设备、可穿戴设备等。在一些可能的实现方式中,该信息生成方法可以通过处理器调用存储器中存储的计算机可读指令的方式来实现。
下面对本公开实施例提供的信息生成方法加以说明。
参见图1所示,为本公开实施例提供的信息生成方法的流程图,所述方法包括步骤S101~S103,其中:
S101:获取图像采集设备采集目标场景获得的视频帧图像;
S102:基于视频帧图像,确定对目标场景中目标区域进行拍摄的拍摄角度完整性信息;
S103:基于拍摄角度完整性信息生成状态提示信息;状态提示信息用于指示是否需要对目标区域重新进行图像采集。
本公开实施例利用图像采集设备拍摄目标场景获得的视频帧图像,确定用于表征对目标场景中的目标区域的拍摄角度完整性信息,并基于该拍摄角度完整性信息生成状态提示信息,指示是否需要对目标场景内的目标区域重新进行图像采集,从而可以直接利用采集到的这些图像生成完整的目标区域对应的三维模型,而减少了基于直接获取到的图像建立三维模型后,判断是否准确再进行下一次拍摄的重复次数,有效的提高了效率。
下面对上述S101~S103加以详细说明。
针对上述S101,图像采集设备包括下述至少一种:深度相机、彩色(red、green、blue,RGB)相机、雷达设备、彩色-深度(RGB-depth,RGB-D)相机。
目标场景例如包括但不限于下述至少一种:景区、游乐场、展览馆等。目标场景内的目标区域,根据目标场景的不同会有所区别。以景区为目标场景时,目标区域例如包括游览景点建筑、游览指示牌等对象所在的区域,或者根据建筑功能划分的功能区域等,例如不同的场馆分别作为一个区域;或者按照预设面积将目标场景划分多个区域;以游乐场为目标场景时,目标区域例如包括游乐设施、功能性建筑等对象所在的区域;以展览馆为目标场景时,目标区域例如包括馆藏展览品、讲解指示牌、特定的墙面等对象所在的区域。
图像采集设备对目标场景进行拍摄时,能够获取实时拍摄的视频流;本公开实施例中的视频帧图像,例如是从视频流中采样得到的视频帧图像,或者还可以将视频流中包括的所有图像均作为视频帧图像。
本公开实施例以从视频流中采样得到视频帧图像为例,在本公开实施例提供的信息生成方法在终端设备中执行的情况下,图像采集设备例如是安装在终端设备上的摄像头;终端设备控制图像采集设备对目标场景进行图像采集,得到视频流,并对视频帧图像进行采样得到视频帧图像。在本公开实施例提供的信息生成方法在服务器中执行的情况下,图像采集设备在获取视频流后,能够实现对视频流的采样,将采样得到的视频帧图像发送至服务器,或者将视频流发送至服务器,服务器对视频流进行采样,得到视频帧图像。
基于视频帧图像,实现后续对目标场景的三维建模。
针对上述S102,利用图像采集设备对目标场景中的目标区域进行视频拍摄时,可能会存在拍摄异常,导致图像采集设备采集到的视频帧图像无法涵盖目标场景中的目标区域完整的拍摄角度,使得利用视频帧图像建立目标场景的三维模型时,会存在某些目标区域的建模存在一定角度的缺失,造成了利用AR设备从建模缺失角度拍摄图像对AR设备定位时,存在定位失败、或者定位不准确的问题。其中,拍摄异常的情况例如包括由于拍摄过程造成的拍摄异常,或者由于拍摄环境造成的拍摄异常;拍摄过程造成的拍摄异常例如包括:图像采集设备在采集视频时由于卡顿造成的某些角度的视频帧缺帧、图像采集设备采集到某些区域的分辨率过低、图像采集设备在拍摄过程中移动速度过快造成的视频帧图像存在一定程度的运动模糊。拍摄环境造成的拍摄异常例如包括:目标场景中光线强度过高或者过低,造成了视频帧图像的亮度过高或者过低等。
为了在图像采集时,所得到的视频帧图像能够涵盖到角度更为完整的目标区域,需要依据图像采集设备采集到的视频帧图像,确定用于表征对所述目标场景中目标区域的拍摄角度完整性信息,以利用所述拍摄角度完整性信息指导图像采集设备的图像采集过程。
具体地,由于可以确定在一定拍摄时间中,例如为0.5秒,若拍摄时的移动路径过长,例如移动路径超过5米,或者旋转角度过大,例如旋转角度超过90度,则可以判断拍摄得到的视频帧图像会对目标区域的拍摄不够完整,因此拍摄角度完整性信息例如可以包括移动路径长度、旋转角度、或者移动路径长度与旋转角度的比值等数值;又例如,可以先设置在一定拍摄时间内,可以完整采集目标区域时的最大移动路径和最大旋转角度,并将实际确定的移动路径或旋转角度超出对应的最大移动路径和最大旋转角度的百分比,作为拍摄角度完整性信息。另外,也可以将在拍摄目标场景的多个视频帧中,确定满足质量检测结果的视频帧的数量占所有拍摄得到的视频帧数量的比值,作为拍摄角度完整性信息。也即,拍摄角度完整性信息可以包括一个数值,其实际表征的意义可以根据确定其数值的具体方法确定,在此并不做出限定。
参见图2所示,本公开实施例提供一种基于视频帧图像,确定对目标场景中目标区域进行拍摄的拍摄角度完整性信息的具体方法,包括:
S201:从视频帧图像中获取目标区域对应的多帧连续的第一视频帧图像;
S202:对多帧第一视频帧图像中每帧第一视频帧图像进行质量检测;
S203:基于多帧第一视频帧图像中每帧第一视频帧图像的质量检测结果,确定拍摄角度完整性信息。
具体地,在从视频帧图像中获取多帧连续的第一视频帧图像时,例如可以采用但不限于下述至少两种可能的方式:
(a1):周期性从视频帧图像中,获取多帧连续的第一视频帧图像
其中,具体的获取周期可以依据实际情况进行设定,例如,可以周期可以包括:1秒、2秒、5秒等。以周期为2秒为例,即每隔2秒从视频帧图像中获取一次第一视频帧图像。
这里需要注意的是,若是针对图像采集设备获取的视频流得到视频帧图像,则确定第一视频帧图像的周期对应的时长,通常大于采样周期对应的时长。若将图像采集设备获取的视频流中的图像作为视频帧图像,则获取的周期通常大于视频流中每相邻两帧图像的时间戳之间的差值。
这里,相邻的两个周期获取的第一视频帧图像,可以部分相同,也可以完全不同,具体的,与周期的时长、相邻视频帧图像之间时间戳的差值、以及获取的第一视频帧的数量相关。
周期性获取第一视频帧图像时,若所要获取的第一视频帧图像的数量为N,在当前时刻达到预设周期时,例如以当前时刻获取的视频帧图像作为第N帧第一视频帧图像,从时间戳早于当前时刻的视频帧图像中,获取对应于第N帧第一视频帧图像的连续N-1帧第一视频帧图像。
然后,基于获取的N帧第一视频帧图像,确定与当前周期对应的拍摄角度完整性信息。
(a2):利用滑动窗口法,从获取的帧视频帧图像中,确定第一视频帧图像。
在该种情况下,可以预先设置一滑动窗口;该滑动窗口的长度为N,按照步长M,沿着视频帧图像所构成的图像流滑动该滑动窗口,滑动窗口每滑动一次,都会有N帧视频图像落入滑动窗口内,将此时落入滑动窗口内的N帧视频帧图像作为此次滑动获取的第一视频帧图像,并针对此次滑动获取的第一视频帧图像,确定与该次滑动对应的拍摄角度完整性信息。
示例性的,上述S101和S102的过程,可以是在获取了数量足够的视频帧图像(至少N帧视频帧图像)后,才会执行S102的操作。
由于本公开实施例提供的信息生成方法,是边采集视频帧图像,边生成拍摄角度完整性信息的过程,因此在利用滑动窗口法获取多帧连续的第一视频帧图像时,在滑动窗口到达图像流的某个位置时,若此时落入滑动窗口内的视频帧图像的数量不足N,则可以等待接收新的视频帧图像,直至滑动窗口内的视频帧数量达到N,再基于当前落入滑动窗口内的N帧视频帧图像,确定拍摄角度完整性信息。
在获取了N帧第一视频帧图像后,例如可以对N帧第一视频帧图像中的每帧第一视频帧图像进行质量检测。其中,所述质量检测包括下述至少一种:模糊程度检测、分辨率检测、以及光照程度检测。
在基于多帧第一视频帧图像分别对应的质量检测结果,确定所述拍摄角度完整性信息时,例如可以采用下述方式:
基于所述多帧第一视频帧图像中所述每帧第一视频帧图像的质量检测结果,从所述多帧第一视频帧图像中,确定满足预设图像质量要求的第一视频帧图像的第一数量;基于所述第一数量以及所述第一视频帧图像的总数量,确定所述拍摄角度完整性信息。
在一种可能的实施方式中,在对第一视频帧图像进行模糊程度检测、分辨率检测、以及光照程度检测中一种质量检测的情况下,基于所述第一数量和总数量,确定正常视频帧图像在所述多帧第一视频帧图像中的占比,作为表征对所述目标场景中目标区域的拍摄角度完整性信息。
在另一种可能的实施方式中,在对第一视频帧图像进行模糊程度检测、分辨率检测、以及光照程度检测中至少两种质量检测的情况下,可以基于所述第一数量和总数量,确定多帧第一视频帧图像中异常视频帧图像的第二数量(其中,第一数量和第二数量的和,等于第一视频帧的总数量),并基于预先设置异常图像的权重信息,利用加权的方式计算加权后异常视频帧图像与多帧第一视频帧图像总数量的比值,作为表征对所述目标场景中目标区域的拍摄角度完整性信息。所述权重信息为可以允许的异常视频帧图像在所述多帧第一视频帧图像中的权重比例,此时,由于对异常图像进行了加权,在加权的权值大于1的情况下,表征对异常图像的容忍度较低;此时,所生成的三维模型精度较高。在加权的权值小于1的情况下,表征对异常图像的容忍度较高,允许多帧第一视频帧图像中存在数量较多的异常图像,此时,生成三维模型的速度更快。
权重信息可以依据实际情况的需要进行设定,在此不做限定。
示例性的,针对质量检测包括模糊程度检测的情况,可以预先设置一模糊程度阈值;在任一帧第一视频帧图像对应的模糊程度值,小于该模糊程度阈值时,则确定该任一帧第一视频帧图像对应的质量检测结果满足预设图像质量要求。
此时,将该任一帧第一视频帧图像确定为正常图像;统计N帧第一视频帧图像中的正常图像的数量S,将正常图像的数量S、与第一视频帧图像的总数量N的比值,确定为拍摄角度完整性信息。此时,拍摄角度完整性信息的值越小,则表征需要对目标区域重新进行图像采集的程度越高。
另外,还可以统计N帧第一视频帧图像中异常图像的数量K,也即模糊程度值大于预设的模糊程度阈值的第一视频帧图像的数量;将异常图像的数量K、与第一视频帧图像的总数量N的比值,确定为拍摄角度完整性信息。此时,拍摄角度完整性信息的值越小,则表征需要对目标区域重新进行图像采集的程度越低。
示例性的,针对质量检测包括模分辨率检测的情况,可以预先设置一分辨率阈值;在任一帧第一视频帧图像对应的分辨率大于该分辨率阈值时,则确定该任一帧第一视频帧图像对应的质量检测结果满足预设图像质量要求。
此时,将该任一帧第一视频帧图像确定为正常图像;统计N帧第一视频帧图像中的正常图像的数量S,将正常图像的数量S、与第一视频帧图像的总数量N的比值,确定为拍摄角度完整性信息。此时,拍摄角度完整性信息的值越小,则表征需要对目标区域重新进行图像采集的程度越高。
另外,还可以统计N帧第一视频帧图像中异常图像的数量K,也即分辨率小于预设的分辨率阈值的第一视频帧图像的数量;将异常图像的数量K、与第一视频帧图像的总数量N的比值,确定为拍摄角度完整性信息。此时,拍摄角度完整性信息的值越小,则表征需要对目标区域重新进行图像采集的程度越低。
示例性的,针对质量检测包括光照程度检测的情况,可以预先设置图像的亮度第一阈值和第二阈值;其中第一阈值小于第二阈值;在任一帧第一视频帧图像对应的亮度值大于第一阈值,且小于第二阈值的情况下,则确定该任一帧第一视频帧图像对应的质量检测结果满足预设图像质量要求。
此时,将该任一帧第一视频帧图像确定为正常图像;统计N帧第一视频帧图像中的正常图像的数量S,将正常图像的数量S、与第一视频帧图像的总数量N的比值,确定为拍摄角度完整性信息。此时,拍摄角度完整性信息的值越小,则表征需要对目标区域重新进行图像采集的程度越高。
另外,还可以统计N帧第一视频帧图像中异常图像的数量K,其中,异常图像是指亮度小于第一阈值,或者大于第二阈值的第一视频帧图像;将异常图像的数量K、与第一视频帧图像的总数量N的比值,确定为拍摄角度完整性信息。此时,拍摄角度完整性信息的值越小,则表征需要对目标区域重新进行图像采集的程度越低。
针对质量检测包括模糊程度检测、分辨率检测、以及光照程度检测中至少两种的情况,
(1)基于预先设置的在模糊程度、分辨率、以及光照程度中至少两种对应的权重,利用加权求和的方法计算N帧第一视频帧图像对应的拍摄角度完整性信息。
示例性的,在质量检测包括模糊程度检测、分辨率检测、以及光照程度检测的情况下,将模糊程度、分辨率、以及光照程度对应的权重分别表示为w1、w2、w3。统计N帧第一视频帧图像中依据模糊程度检测确定为正常帧图像的数量K1、依据分辨率检测确定为正常帧图像的数量K2、及依据光照程度检测确定为正常帧图像的数量K3,K1与N的比值为R1,K2和N的比值为R2,K3和N比比值为R3。基于所述模糊程度、分辨率、以及光照程度分别对应的权重w1、w2、w3,对R1、R2、R3进行加权求和,将利用加权求和的方式获取的结果作为拍摄角度完整性信息。此时,拍摄角度完整性信息的值越大,则表征需要对目标区域重新进行图像采集的程度越低。
(2)对第一视频帧图像进行模糊程度检测、分辨率检测、以及光照程度检测中多种质量检测的情况下,基于对第一视频帧图像进行不同种的质量检测结果,确定第一视频帧图像中正常图像的数量;其中,正常图像是指在多种质量检测的每种质量检测中,均满足对应的预设图像质量要求。
假设正常图像的数量为S,将正常图像的数量S、与第一视频帧图像的总数量N的比值,确定为拍摄角度完整性信息。此时,拍摄角度完整性信息的值越小,则表征需要对目标区域重新进行图像采集的程度越高。
另外,还可以统计N帧第一视频帧图像中异常图像的数量K,将异常图像的数量K、与第一视频帧图像的总数量N的比值,确定为拍摄角度完整性信息。此时,拍摄角度完整性信息的值越小,则表征需要对目标区域重新进行图像采集的程度越低。
参见图3所示,本公开实施例提供另外一种基于所述视频帧图像,确定用于表征对所述目标场景中目标区域的拍摄角度完整性信息的具体方法,包括:
S301:基于视频帧图像,确定图像采集设备在预设拍摄时长内的移动路径总长度及旋转总角度;
S302:基于移动路径总长度及旋转总角度,确定拍摄角度完整性信息。
在具体实施中,所述图像采集设备对所述目标区域进行拍摄时的移动路径总长度及旋转总角度中,移动路径总长度例如为图像采集设备在对所述目标区域进行拍摄的一段时间内移动的距离总长,旋转总角度例如为图像采集设备对目标对应进行拍摄的一段时间内光轴偏移的总角度。
具体地,在基于所述视频帧图像,确定图像采集设备在对所述目标区域进行拍摄时的移动路径总长度及旋转总角度时,包括:从所述视频帧图像中确定连续的多帧第二视频帧图像;针对多帧第二视频帧图像中每相邻的两帧第二视频帧图像,基于所述每相邻的两帧第二视频帧图像,确定图像采集设备在获取所述每相邻的两帧第二视频帧图像时的移动距离和旋转角度;基于所述每相邻的两帧第二视频帧图像分别对应的移动距离,确定所述移动路径总长度;并基于所述每相邻的两帧第二视频帧图像分别对应的旋转角度,确定所述旋转总角度。
其中,从多帧视频帧图像中确定连续的多帧第二视频帧图像的方法,与上述图2对应的实施例中从多帧视频帧图像中确定第一视频帧图像的额方法类似,在此不再赘述。
获取多帧连续的第二视频帧图像后,基于连读的第二视频帧图像中每相邻的两帧第二视频帧图像,可以确定图像采集设备在获取所述每相邻的两帧第二视频帧图像时的移动距离、和旋转角度。
例如,多帧连续的第二视频帧图像包括:a1~a10共十帧;
则针对a1和a2,确定a1到a2的移动距离和移动角度;针对a2和a3,确定a2到a3的移动距离和移动角度,……,针对a9和a10,确定a9到a10的移动距离和移动角度,最终,将a1到a2的移动距离、a2到a3的移动距离、……、a9到a10的移动距离进行求和,得到多帧连续的第二视频帧图像对应的移动路径总长度;并将a1到a2的移动角度、a2到a3的移动角度、……、a9到a10的移动角度进行求和,得到多帧连续的第二视频帧图像对应旋转总角度。
在具体实施中,以确定a1和a2之间的移动距离和移动角度为例,可以获取图像采集设备在拍摄a1和a2时的位姿变化信息,并基于所述位姿变化信息,确定图像采集设备在拍摄a1和a2时的移动距离和旋转角度。
示例性的,可以利用图像采集设备在拍摄a1和a2时的位姿变化信息中的位移信息,例如2米,作为图像采集设备在拍摄a1和a2时的移动距离;另外,在位姿变化信息中,例如还可以直接包括或者能够推算出方位角变化的信息,例如由东0度转换到东北10度,则可以确定旋转角度为10度。或者,还可以根据图像采集设备的俯仰角等的变化角度,确定在纵深较大的建筑物(例如高塔)内部进行拍摄时的旋转角度,也即此时的旋转角度还可以包括俯仰角的变化幅度。具体确定移动距离和旋转角度的方式可以根据实际情况确定,在此不做限定。
在另一种可能的实施方式中,还可以基于图像采集设备自身安装的定位装置与陀螺仪设备,读取图像采集设备在拍摄a1和a2时分别对应的拍摄位置和拍摄角度,从而基于a1和a2时分别对应的拍摄位置和拍摄角度确定图像采集设备在拍摄a1和a2时移动距离、和旋转角度。
其中,所述图像采集设备自身安装的定位装置、及陀螺仪设备可以实时获取图像采集设备在任一时刻的位置和光轴朝向,在确定所述每相邻的两帧第二视频帧图像对应的拍摄时刻(也即时间戳)后,可以获取对应于两帧视频帧图像拍摄时刻之间任一时刻图像采集设备的位置和光轴朝向,从而确定图像采集设备在拍摄a1和a2时的移动距离和旋转角度。
基于所述移动路径总长度和旋转总角度,可以确定对应的拍摄角度完整性信息。
示例性的,基于所述移动路径总长度和旋转总角度,可以确定所述移动路径总长度与所述旋转总角度的比值,作为表征对所述目标场景中目标区域的拍摄角度完整性信息。其中,移动路径总长度与所述旋转总角度的比值越大,则表征对目标区域的拍摄角度越少,则对目标区域的建模缺失的部分越多;移动路径总长度与所述旋转总角度的比值越小,则表征对目标区域的拍摄角度越多,则对目标区域的建模越全面、准确。
针对S103,状态提示信息,能够指示是否需要对所述目标区域重新进行图像采集,以指导用户或图像采集设备的图像采集过程。
其中,状态提示信息例如包括:其中,所述状态提示信息,包括图形图示信息、和/或声音提示信息;图形提示信息在显示时示出的图形例如可以包括下述至少一种:指示灯或者进度条。
首先,以利用指示灯样式的图形作为图形形式的提示信息为例进行说明。
在一种可能的实施方式中,指示灯可能存在多个,则对应的图形形式的提示信息例如可以包括多个指示灯分别对应的颜色。
在具体实施中,在基于拍摄角度完整性信息生成状态提示信息时,例如可以基于所述拍摄角度完整性信息,确定多个所述指示灯分别对应的颜色;其中,所述拍摄角度完整性信息与显示第一颜色的指示灯的数量成正相关,且所述拍摄角度完整性信息与显示第二颜色的指示灯的数量成负相关。
示例性的,参见图4所示,示出了一种指示灯形式的状态提示信息,其中,指示灯有5个,通过指示灯的不同颜色,表征当前需要重新进行图像采集的程度:第一颜色的指示灯数量越多,则需要重新进行图像采集的程度越低;第二颜色的指示灯数量越多,则需要重新进行图像采集的程度越高。在该示例中,确定的第一视频帧图像为10帧,其中满足图像质量要求的第一视频帧图像的数量为8帧,也即第一数量为8;此时,将第一数量和第一视频帧图像的总数量的比值确定为拍摄角度完整性信息,则对应的第一颜色的指示灯41和第二颜色的指示灯42如图4所示,第一颜色的指示灯41有4个,第二颜色的指示灯42有1个;其中第一颜色的指示灯41的数量占据指示灯总数量的80%。
此处,在通过图像采集设备的图形用户界面展示图形形式的提示信息时,例如可以在图形用户界面中,基于确定的多个指示灯分别对应的颜色展示多个指示灯。用户在看到多个指示灯中第一颜色的指示灯较多时,可以确定对目标区域的拍摄较为完整;在看到多个指示灯中第二颜色的指示灯较少时,可以确定当前对目标区域的拍摄不够完整。
在另一种可能的实施方式中,指示灯仅存在一个,则对应的图形形式的提示信息例如可以包括指示灯对应的闪烁频率。
在具体实施中,可以基于所述拍摄角度完整性信息,确定所述指示灯对应的闪烁频率;其中,所述拍摄角度完整性与所述指示灯的闪烁频率成负相关。
同样以上述图4中的示例为例进行说明。在将第一数量和第一视频帧图像的总数量的比值确定为拍摄角度完整性信息时,可以确定第一数量和第一视频帧的总数量的比值为80%。在确定指示灯的闪烁频率时,可以按照在一分钟内指示灯的闪烁次数确定。例如,指示灯一分钟至多可以在每2秒闪烁一次,以在保证减少指示灯寿命损耗的同时,减少对人眼的伤害,则指示灯最高的闪烁频率为30次每分钟。在确定以第一数量和第一视频帧的总数量的比值作为拍摄角度完整性信息时,可以将闪烁频率设置为最高闪烁频率的20%,也即6次每分钟。同样的,在确定第一数量和第一视频帧的总数量的比值为100%时,闪烁频率则为0次每分钟,也即指示灯不闪烁。
此处,通过图像采集设备的图形用户界面展示图形形式的提示信息时,例如可以在所述图形用户界面中,展示所述指示灯,并控制所述指示灯按照确定的闪烁频率闪烁。用户在看到指示灯闪烁频率较低或不闪烁时,可以确定对目标区域的拍摄较为完整;在看到指示灯闪烁频率较高时,可以确定当前对目标区域的拍摄不够完整。
在本公开另一实施例中,还提供了一种在利用进度条显示状态提示信息的具体示例。进度条包括第一端、第二端以及能够在所述第一端和所述第二端之间移动的指示标识。对应图形形式的提示信息包括:所述指示标识与所述第一端之间的距离。
具体地,在基于拍摄角度完整性信息生成状态提示信息时,例如可以采用下述方式:基于拍摄角度完整性信息,确定指示标识与第一端之间的距离;其中,拍摄角度完整性与距离成正相关。
参见图5所示,示出了一种进度条形式的状态提示信息,通过为进度条的两端渲染不同的颜色,表征当前需要重新进行图像采集的程度;其中,51指示的位置为可以在第一端和第二端之间移动的指示标识。利用指示标识以及第一端,可以确定渲染第一颜色的区域,然后即可以确定渲染第二颜色的区域。对于进度条,其中第一颜色的区域越长,则对应重新进行图像采集的程度越低;进度条中第二颜色的区域越长,则对应重新进行图像采集的程度越高。
此时,在通过所述图像采集设备的图形用户界面展示所述图形形式的提示信息时,即可以在所述图形用户界面中展示所述进度条,并基于确定的所述距离,在所述进度条的第一端和第二端之间展示所述指示标识。
另外,用户可以基于状态图示信息判断当前对目标区域的拍摄角度是否完整;在不完整的情况下,可以对目标区域重新进行图像采集,或者以更多的拍摄角度进行图像采集,这样,得到目标区域更全面的视频帧图像。进而在基于视频帧图像对目标场景进行建模时,得到更加完整的场景三维模型。
其中,利用所述视频帧图像,建立所述目标区域的三维模型的方法例如包括下述至少一种:同步定位与建图(Simultaneous Localization and Mapping,SLAM)建模、运动恢复结构(Structure-From-Motion,SFM)建模。
在本公开另一实施例中,状态提示信息还可以包括声音提示信息,例如可以采用周期性发出“嘀”声进行提示;在需要重新进行图像采集的程度越高时,“嘀”声的频率越高;在需要重新进行图像采集的程度越低时,“嘀”声的频率越趋向于预设的频率。又例如,该声音提示信息还可以是语音提示信息;当需要重新进行图像采集的程度达到某一阈值时,通过语音发出警示信息“请对当前区域重新进行图像采集”等。语音提示信息的具体形式和内容,可以根据需要进行设定。
在另一种可能的实施方式中,状态提示信息还可以用以指导图像采集设备自动完成图像采集。此时,图像采集设备例如为安装在机器人上;该机器人能够在目标场景内自主移动,并在移动过程中获取视频帧图像。
示例性的,机器人在接收到状态提示信息后,基于该状态提示信息进行移动路径的规划;在进行移动路径规划过程中,若状态提示信息指示需要对目标区域重新进行图像采集的程度越高,则控制机器人回头、大角度调整图像采集设备的拍摄角度等;若状态提示信息指示需要对目标区域重新进行图像采集的程度越低,则控制机器人直行、小角度调整图像采集设备的拍摄角度。具体的机器人控制方法可以根据实际的情况进行设定,在此不再赘述。
另外,目标场景例如为环形展览馆时,利用图像采集设备对环形展览馆进行采集后,由于图像采集设备对环形展览馆进行采集时偏转角度较大,容易因为路径不闭合使得获取的视频帧图像不能覆盖场景的所有角度,以致基于所述视频帧图像建立的三维模型无法完成准确的定位。利用所述状态提示信息可以判断图像采集设备基于获取的视频帧图像是否覆盖了场景的所有角度,从而可以判断在环形展览馆中采集时的行进路线是否闭合,并生成拍摄角度完整性信息,从而获得可以建立环形展览馆的准确三维模型所需的一组视频帧图像。基于所述对应于环形展览馆的一组视频帧图像,可以构建环形展览馆完整的三维模型,并实现准确的定位。
本领域技术人员可以理解,在具体实施方式的上述方法中,各步骤的撰写顺序并不意味着严格的执行顺序而对实施过程构成任何限定,各步骤的具体执行顺序应当以其功能和可能的内在逻辑确定。
基于同一发明构思,本公开实施例中还提供了与信息生成方法对应的信息生成装置,由于本公开实施例中的装置解决问题的原理与本公开实施例上述信息生成方法相似,因此装置的实施可以参见方法的实施,重复之处不再赘述。
参照图6所示,为本公开实施例提供的一种信息生成装置的示意图,所述装置包括:获取模块61、确定模块62、生成模块63;其中,
获取模块61,用于获取图像采集设备采集目标场景获得的视频帧图像;确定模块62,用于基于所述视频帧图像,确定对所述目标场景中目标区域进行拍摄的拍摄角度完整性信息;生成模块63,用于基于所述拍摄角度完整性信息生成状态提示信息;所述状态提示信息用于指示是否需要对所述目标区域重新进行图像采集。
一种可选的实施方式中,所述确定模块62在基于所述视频帧图像,确定对所述目标场景中目标区域进行拍摄的拍摄角度完整性信息时,用于:从所述视频帧图像中获取所述目标区域对应的多帧连续的第一视频帧图像;对多帧所述第一视频帧图像中每帧第一视频帧图像进行质量检测;基于多帧所述第一视频帧图像中所述每帧第一视频帧图像的质量检测结果,确定所述拍摄角度完整性信息。
一种可选的实施方式中,所述确定模块62在基于多帧所述第一视频帧图像中所述每帧第一视频帧图像的质量检测结果,确定所述拍摄角度完整性信息时,用于:基于所述多帧第一视频帧图像中所述每帧第一视频帧图像的质量检测结果,从所述多帧第一视频帧图像中,确定满足预设图像质量要求的第一视频帧图像的第一数量;基于所述第一数量以及所述第一视频帧图像的总数量,确定所述拍摄角度完整性信息。
一种可选的实施方式中,所述确定模块62在基于所述视频帧图像,确定对所述目标场景中目标区域进行拍摄的拍摄角度完整性信息时,用于:基于所述视频帧图像,确定所述图像采集设备在预设拍摄时长内的移动路径总长度及旋转总角度;基于所述移动路径总长度及所述旋转总角度,确定所述拍摄角度完整性信息。
一种可选的实施方式中,所述确定模块62在基于所述视频帧图像,确定图像采集设备在预设拍摄时长内的移动路径总长度及旋转总角度时,用于:基于当前视频帧图像的时间戳、以及所述预设拍摄时长,从所述视频帧图像中确定连续的多帧第二视频帧图像;针对所述多帧第二视频帧图像中每相邻的两帧第二视频帧图像,基于所述每相邻的两帧第二视频帧图像,确定所述图像采集设备在获取所述每相邻的两帧第二视频帧图像时的移动距离和旋转角度;基于所述每相邻的两帧目标视频帧图像分别对应的移动距离,确定所述移动路径总长度;并基于所述每相邻的两帧目标视频帧图像分别对应的旋转角度,确定所述旋转总角度。
一种可选的实施方式中,所述状态提示信息包括:图形形式的提示信息;所述图形包括下述至少一种:指示灯、以及进度条;所述信息生成装置还包括显示模块64,用于:通过所述图像采集设备的图形用户界面,展示所述图形形式的提示信息。
一种可选的实施方式中,针对所述图形包括所述指示灯,且所述指示灯有多个的情况,所述图形形式的提示信息包括:多个指示灯分别对应的颜色;所述生成模块63在基于所述拍摄角度完整性信息生成状态提示信息时,用于:基于所述拍摄角度完整性信息,确定多个所述指示灯分别对应的颜色;其中,所述拍摄角度完整性信息与显示第一颜色的指示灯的数量成正相关,且所述拍摄角度完整性信息与显示第二颜色的指示灯的数量成负相关;所述显示模块64在通过所述图像采集设备的图形用户界面,展示所述图形形式的提示信息时,用于:在所述图形用户界面中,基于确定的多个所述指示灯分别对应的颜色展示多个所述指示灯。
一种可选的实施方式中,针对所述图形包括所述指示灯,且所述指示灯有至少一个的情况,所述图形形式的提示信息包括:所述指示灯对应的闪烁频率;所述生成模块63在基于所述拍摄角度完整性信息生成状态提示信息时,用于:基于所述拍摄角度完整性信息,确定所述指示灯对应的闪烁频率;其中,所述拍摄角度完整性与所述指示灯的闪烁频率成负相关;所述显示模块64通过所述图像采集设备的图形用户界面,展示所述图形形式的提示信息时,用于:在所述图形用户界面中,展示所述指示灯,并控制所述指示灯按照确定的闪烁频率闪烁。
一种可选的实施方式中,针对所述图形包括所述进度条的情况,所述进度条包括:第一端、第二端以及能够在所述第一端和所述第二端之间移动的指示标识;所述图形形式的提示信息包括:所述指示标识与所述第一端之间的距离;所述生成模块63在基于所述拍摄角度完整性信息生成状态提示信息时,用于:基于所述拍摄角度完整性信息,确定所述指示标识与所述第一端之间的距离;其中,所述拍摄角度完整性与所述距离成正相关;所述显示模块64通过所述图像采集设备的图形用户界面,展示所述图形形式的提示信息时,用于:在所述图形用户界面中展示所述进度条,并基于确定的所述距离,在所述进度条的第一端和第二端之间展示所述指示标识。
一种可选的实施方式中,所述进度条中的第一区域和第二区域的颜色不同;其中,所述第一区域为所述指示标识和所述第一端之间的区域;所述第二区域为所述指示标识和所述第二端之间的区域。
一种可选的实施方式中,所述信息生成装置还包括控制模块65,用于:在所述状态提示信息指示需要对所述目标区域重新进行图像采集的情况下,控制所述图像采集设备对所述目标区域重新进行图像采集。
一种可选的实施方式中,在所述状态提示信息指示不需要对所述目标区域重新进行图像采集的情况下,所述方法还包括模型建立模块66,用于:利用所述视频帧图像,建立所述目标区域的三维模型。
关于装置中的各模块的处理流程、以及各模块之间的交互流程的描述可以参照上述方法实施例中的相关说明,这里不再详述。
本公开实施例还提供了一种计算机设备,如图7所示,为本公开实施例提供的计算机设备结构示意图,包括:
处理器71和存储器72;所述存储器72存储有处理器71可执行的机器可读指令,处理器71用于执行存储器72中存储的机器可读指令,所述机器可读指令被处理器71执行时,处理器71执行下述步骤:
获取图像采集设备采集目标场景获得的视频帧图像;基于所述视频帧图像,确定对所述目标场景中目标区域进行拍摄的拍摄角度完整性信息;基于所述拍摄角度完整性信息生成状态提示信息;所述状态提示信息用于指示是否需要对所述目标区域重新进行图像采集。
上述存储器72包括内存721和外部存储器722;这里的内存721也称内存储器,用于暂时存放处理器71中的运算数据,以及与硬盘等外部存储器722交换的数据,处理器71通过内存721与外部存储器722进行数据交换。
上述指令的具体执行过程可以参考本公开实施例中所述的信息生成方法的步骤,此处不再赘述。
本公开实施例还提供一种计算机可读存储介质,该计算机可读存储介质上存储有计算机程序,该计算机程序被处理器运行时执行上述方法实施例中所述的信息生成方法的步骤。其中,该存储介质可以是易失性或非易失的计算机可读取存储介质。
本公开实施例还提供一种计算机程序产品,该计算机程序产品承载有程序代码,所述程序代码包括的指令可用于执行上述方法实施例中所述的信息生成方法的步骤,具体可参见上述方法实施例,在此不再赘述。
其中,上述计算机程序产品可以具体通过硬件、软件或其结合的方式实现。在一个可选实施例中,所述计算机程序产品具体体现为计算机存储介质,在另一个可选实施例中,计算机程序产品具体体现为软件产品,例如软件开发包(Software Development Kit,SDK)等等。
所属领域的技术人员可以清楚地了解到,为描述的方便和简洁,上述描述的***和装置的具体工作过程,可以参考前述方法实施例中的对应过程,在此不再赘述。在本公开所提供的几个实施例中,应该理解到,所揭露的***、装置和方法,可以通过其它的方式实现。以上所描述的装置实施例仅仅是示意性的,例如,所述单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,又例如,多个单元或组件可以结合或者可以集成到另一个***,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些通信接口,装置或单元的间接耦合或通信连接,可以是电性,机械或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外,在本公开各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。
所述功能如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个处理器可执行的非易失的计算机可读取存储介质中。基于这样的理解,本公开的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行本公开各个实施例所述方法的全部或部分步骤。而前述的存储介质包括:U盘、移动硬盘、只读存储器(Read-OnlyMemory,ROM)、随机存取存储器(Random Access Memory,RAM)、磁碟或者光盘等各种可以存储程序代码的介质。
最后应说明的是:以上所述实施例,仅为本公开的具体实施方式,用以说明本公开的技术方案,而非对其限制,本公开的保护范围并不局限于此,尽管参照前述实施例对本公开进行了详细的说明,本领域的普通技术人员应当理解:任何熟悉本技术领域的技术人员在本公开揭露的技术范围内,其依然可以对前述实施例所记载的技术方案进行修改或可轻易想到变化,或者对其中部分技术特征进行等同替换;而这些修改、变化或者替换,并不使相应技术方案的本质脱离本公开实施例技术方案的精神和范围,都应涵盖在本公开的保护范围之内。因此,本公开的保护范围应所述以权利要求的保护范围为准。
Claims (15)
1.一种信息生成方法,其特征在于,包括:
获取图像采集设备采集目标场景获得的视频帧图像;
基于所述视频帧图像,确定对所述目标场景中目标区域进行拍摄的拍摄角度完整性信息;
基于所述拍摄角度完整性信息生成状态提示信息;所述状态提示信息用于指示是否需要对所述目标区域重新进行图像采集。
2.根据权利要求1所述的信息生成方法,其特征在于,所述基于所述视频帧图像,确定对所述目标场景中目标区域进行拍摄的拍摄角度完整性信息,包括:
从所述视频帧图像中获取所述目标区域对应的多帧连续的第一视频帧图像;
对多帧所述第一视频帧图像中每帧第一视频帧图像进行质量检测;
基于多帧所述第一视频帧图像中所述每帧第一视频帧图像的质量检测结果,确定所述拍摄角度完整性信息。
3.根据权利要求1或2所述的信息生成方法,其特征在于,所述基于多帧所述第一视频帧图像中所述每帧第一视频帧图像的质量检测结果,确定所述拍摄角度完整性信息,包括:
基于所述多帧第一视频帧图像中所述每帧第一视频帧图像的质量检测结果,从所述多帧第一视频帧图像中,确定满足预设图像质量要求的第一视频帧图像的第一数量;
基于所述第一数量以及所述第一视频帧图像的总数量,确定所述拍摄角度完整性信息。
4.根据权利要求1-3任一项所述的信息生成方法,其特征在于,所述基于所述视频帧图像,确定对所述目标场景中目标区域进行拍摄的拍摄角度完整性信息,包括:
基于所述视频帧图像,确定所述图像采集设备在预设拍摄时长内的移动路径总长度及旋转总角度;
基于所述移动路径总长度及所述旋转总角度,确定所述拍摄角度完整性信息。
5.根据权利要求4所述的信息生成方法,其特征在于,所述基于所述视频帧图像,确定图像采集设备在预设拍摄时长内的移动路径总长度及旋转总角度,包括:
基于当前视频帧图像的时间戳、以及所述预设拍摄时长,从所述视频帧图像中确定连续的多帧第二视频帧图像;
针对所述多帧第二视频帧图像中每相邻的两帧第二视频帧图像,基于所述每相邻的两帧第二视频帧图像,确定所述图像采集设备在获取所述每相邻的两帧第二视频帧图像时的移动距离和旋转角度;
基于所述每相邻的两帧目标视频帧图像分别对应的移动距离,确定所述移动路径总长度;并基于所述每相邻的两帧目标视频帧图像分别对应的旋转角度,确定所述旋转总角度。
6.根据权利要求1-5任一项所述的信息生成方法,其特征在于,所述状态提示信息包括:图形形式的提示信息;所述图形包括下述至少一种:指示灯、以及进度条;
所述信息生成方法还包括:通过所述图像采集设备的图形用户界面,展示所述图形形式的提示信息。
7.根据权利要求6所述的信息生成方法,其特征在于,针对所述图形包括所述指示灯,且所述指示灯有多个的情况,所述图形形式的提示信息包括:多个指示灯分别对应的颜色;
所述基于所述拍摄角度完整性信息生成状态提示信息,包括:基于所述拍摄角度完整性信息,确定多个所述指示灯分别对应的颜色;其中,所述拍摄角度完整性信息与显示第一颜色的指示灯的数量成正相关,且所述拍摄角度完整性信息与显示第二颜色的指示灯的数量成负相关;
所述通过所述图像采集设备的图形用户界面,展示所述图形形式的提示信息,包括:在所述图形用户界面中,基于确定的多个所述指示灯分别对应的颜色展示多个所述指示灯。
8.根据权利要求7所述的信息生成方法,其特征在于,针对所述图形包括所述指示灯,且所述指示灯有至少一个的情况,所述图形形式的提示信息包括:所述指示灯对应的闪烁频率;
所述基于所述拍摄角度完整性信息生成状态提示信息,包括:基于所述拍摄角度完整性信息,确定所述指示灯对应的闪烁频率;其中,所述拍摄角度完整性与所述指示灯的闪烁频率成负相关;
所述通过所述图像采集设备的图形用户界面,展示所述图形形式的提示信息,包括:
在所述图形用户界面中,展示所述指示灯,并控制所述指示灯按照确定的闪烁频率闪烁。
9.根据权利要求8所述的信息生成方法,其特征在于,针对所述图形包括所述进度条的情况,所述进度条包括:第一端、第二端以及能够在所述第一端和所述第二端之间移动的指示标识;所述图形形式的提示信息包括:所述指示标识与所述第一端之间的距离;
所述基于所述拍摄角度完整性信息生成状态提示信息,包括:基于所述拍摄角度完整性信息,确定所述指示标识与所述第一端之间的距离;其中,所述拍摄角度完整性与所述距离成正相关;
所述通过所述图像采集设备的图形用户界面,展示所述图形形式的提示信息,包括:
在所述图形用户界面中展示所述进度条,并基于确定的所述距离,在所述进度条的第一端和第二端之间展示所述指示标识。
10.根据权利要求9所述的信息生成方法,其特征在于,所述进度条中的第一区域和第二区域的颜色不同;
其中,所述第一区域为所述指示标识和所述第一端之间的区域;所述第二区域为所述指示标识和所述第二端之间的区域。
11.根据权利要求1-10任一项所述的生成方法,其特征在于,所述信息生成方法还包括:
在所述状态提示信息指示需要对所述目标区域重新进行图像采集的情况下,控制所述图像采集设备对所述目标区域重新进行图像采集。
12.根据权利要求1-11任一项所述的信息生成方法,其特征在于,在所述状态提示信息指示不需要对所述目标区域重新进行图像采集的情况下,所述方法还包括:
利用所述视频帧图像,建立所述目标区域的三维模型。
13.一种信息生成装置,其特征在于,包括:
获取模块,用于获取图像采集设备采集目标场景获得的视频帧图像;
确定模块,用于基于所述视频帧图像,确定对所述目标场景中目标区域进行拍摄的拍摄角度完整性信息;
生成模块,用于基于所述拍摄角度完整性信息生成状态提示信息;所述状态提示信息用于指示是否需要对所述目标区域重新进行图像采集。
14.一种计算机设备,其特征在于,包括:处理器、存储器,所述存储器存储有所述处理器可执行的机器可读指令,所述处理器用于执行所述存储器中存储的机器可读指令,所述机器可读指令被所述处理器执行时,所述处理器执行如权利要求1至12任一项所述的信息生成方法。
15.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质上存储有计算机程序,所述计算机程序被计算机设备运行时,所述计算机设备执行如权利要求1至12任一项所述的信息生成方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110382007.4A CN113141498B (zh) | 2021-04-09 | 2021-04-09 | 信息生成方法、装置、计算机设备及存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110382007.4A CN113141498B (zh) | 2021-04-09 | 2021-04-09 | 信息生成方法、装置、计算机设备及存储介质 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN113141498A true CN113141498A (zh) | 2021-07-20 |
CN113141498B CN113141498B (zh) | 2023-01-06 |
Family
ID=76810498
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202110382007.4A Active CN113141498B (zh) | 2021-04-09 | 2021-04-09 | 信息生成方法、装置、计算机设备及存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN113141498B (zh) |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN113657307A (zh) * | 2021-08-20 | 2021-11-16 | 北京市商汤科技开发有限公司 | 一种数据标注方法、装置、计算机设备及存储介质 |
CN113660469A (zh) * | 2021-08-20 | 2021-11-16 | 北京市商汤科技开发有限公司 | 一种数据标注方法、装置、计算机设备及存储介质 |
CN114200967A (zh) * | 2021-11-29 | 2022-03-18 | 河南牧原智能科技有限公司 | 用于确定预置角度的方法、检测牲畜体温的方法及产品 |
CN115174885A (zh) * | 2022-06-28 | 2022-10-11 | 深圳数位大数据科技有限公司 | 基于ar终端的线下场景信息采集方法、平台、***及介质 |
Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20100007715A1 (en) * | 2008-07-09 | 2010-01-14 | Ortery Technologies, Inc. | Method of Shooting Angle Adjustment for an Image Capturing Device that Moves Along a Circular Path |
KR20140058192A (ko) * | 2012-11-06 | 2014-05-14 | 에스케이텔레콤 주식회사 | 관심객체 이동방향에 따른 관제 영상 재배치 방법 및 장치 |
CN105208271A (zh) * | 2015-09-21 | 2015-12-30 | 努比亚技术有限公司 | 拍摄角度提示方法和装置 |
CN106605403A (zh) * | 2014-08-29 | 2017-04-26 | 三星电子株式会社 | 拍摄方法和电子设备 |
CN109040603A (zh) * | 2018-10-15 | 2018-12-18 | Oppo广东移动通信有限公司 | 高动态范围图像获取方法、装置及移动终端 |
CN110533015A (zh) * | 2019-08-30 | 2019-12-03 | Oppo广东移动通信有限公司 | 验证方法及验证装置、电子设备、计算机可读存储介质 |
CN111862296A (zh) * | 2019-04-24 | 2020-10-30 | 京东方科技集团股份有限公司 | 三维重建方法及装置、***、模型训练方法、存储介质 |
-
2021
- 2021-04-09 CN CN202110382007.4A patent/CN113141498B/zh active Active
Patent Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20100007715A1 (en) * | 2008-07-09 | 2010-01-14 | Ortery Technologies, Inc. | Method of Shooting Angle Adjustment for an Image Capturing Device that Moves Along a Circular Path |
KR20140058192A (ko) * | 2012-11-06 | 2014-05-14 | 에스케이텔레콤 주식회사 | 관심객체 이동방향에 따른 관제 영상 재배치 방법 및 장치 |
CN106605403A (zh) * | 2014-08-29 | 2017-04-26 | 三星电子株式会社 | 拍摄方法和电子设备 |
CN105208271A (zh) * | 2015-09-21 | 2015-12-30 | 努比亚技术有限公司 | 拍摄角度提示方法和装置 |
CN109040603A (zh) * | 2018-10-15 | 2018-12-18 | Oppo广东移动通信有限公司 | 高动态范围图像获取方法、装置及移动终端 |
CN111862296A (zh) * | 2019-04-24 | 2020-10-30 | 京东方科技集团股份有限公司 | 三维重建方法及装置、***、模型训练方法、存储介质 |
CN110533015A (zh) * | 2019-08-30 | 2019-12-03 | Oppo广东移动通信有限公司 | 验证方法及验证装置、电子设备、计算机可读存储介质 |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN113657307A (zh) * | 2021-08-20 | 2021-11-16 | 北京市商汤科技开发有限公司 | 一种数据标注方法、装置、计算机设备及存储介质 |
CN113660469A (zh) * | 2021-08-20 | 2021-11-16 | 北京市商汤科技开发有限公司 | 一种数据标注方法、装置、计算机设备及存储介质 |
CN114200967A (zh) * | 2021-11-29 | 2022-03-18 | 河南牧原智能科技有限公司 | 用于确定预置角度的方法、检测牲畜体温的方法及产品 |
CN115174885A (zh) * | 2022-06-28 | 2022-10-11 | 深圳数位大数据科技有限公司 | 基于ar终端的线下场景信息采集方法、平台、***及介质 |
Also Published As
Publication number | Publication date |
---|---|
CN113141498B (zh) | 2023-01-06 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN113141498B (zh) | 信息生成方法、装置、计算机设备及存储介质 | |
CN102647449B (zh) | 基于云服务的智能摄影方法、装置及移动终端 | |
CN109064545B (zh) | 一种对房屋进行数据采集和模型生成的方法及装置 | |
US9001226B1 (en) | Capturing and relighting images using multiple devices | |
CN106878687A (zh) | 一种基于多传感器的车载环境识别***及全方位视觉模块 | |
CN106157354B (zh) | 一种三维场景切换方法及*** | |
CN112287928A (zh) | 一种提示方法、装置、电子设备及存储介质 | |
CN110794955B (zh) | 定位跟踪方法、装置、终端设备及计算机可读取存储介质 | |
CN206611521U (zh) | 一种基于多传感器的车载环境识别***及全方位视觉模块 | |
JP2023509137A (ja) | パノラマ3次元画像をキャプチャ及び生成するシステム及び方法 | |
CN109640070A (zh) | 一种立体显示方法、装置、设备及存储介质 | |
CN110858414A (zh) | 图像处理方法、装置、可读存储介质与增强现实*** | |
CN105894584A (zh) | 一种三维沉浸式环境下与现实环境交互的方法和装置 | |
CN109711246A (zh) | 一种动态物体识别方法、计算机装置及可读存储介质 | |
CN110009675A (zh) | 生成视差图的方法、装置、介质及设备 | |
CN106289180A (zh) | 运动轨迹的计算方法及装置、终端 | |
CN112270702A (zh) | 体积测量方法及装置、计算机可读介质和电子设备 | |
CN105892638A (zh) | 一种虚拟现实交互方法、装置和*** | |
CN114299236A (zh) | 倾斜摄影测量空地融合实景建模方法、装置、产品及介质 | |
CN111651052A (zh) | 虚拟沙盘的展示方法、装置、电子设备及存储介质 | |
CN113838193A (zh) | 数据处理方法、装置、计算机设备及存储介质 | |
CN112288881B (zh) | 一种图像展示方法、装置、计算机设备和存储介质 | |
CN114092624A (zh) | 一种基于虚拟技术的环境巡检*** | |
CN106203279A (zh) | 一种增强现实中目标对象的识别方法、装置及移动终端 | |
CN112785678A (zh) | 基于三维模拟的日照分析方法和*** |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |