CN112817454A - 一种信息展示方法、装置、相关设备及存储介质 - Google Patents
一种信息展示方法、装置、相关设备及存储介质 Download PDFInfo
- Publication number
- CN112817454A CN112817454A CN202110143581.4A CN202110143581A CN112817454A CN 112817454 A CN112817454 A CN 112817454A CN 202110143581 A CN202110143581 A CN 202110143581A CN 112817454 A CN112817454 A CN 112817454A
- Authority
- CN
- China
- Prior art keywords
- information
- target
- determining
- pose
- prompt
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 49
- 230000000007 visual effect Effects 0.000 claims abstract description 27
- 230000003190 augmentative effect Effects 0.000 claims abstract description 8
- 238000004590 computer program Methods 0.000 claims description 11
- 230000004044 response Effects 0.000 claims description 3
- 230000008447 perception Effects 0.000 abstract description 4
- 238000010586 diagram Methods 0.000 description 8
- 238000005516 engineering process Methods 0.000 description 6
- 230000008569 process Effects 0.000 description 5
- 230000000694 effects Effects 0.000 description 4
- 230000008901 benefit Effects 0.000 description 3
- 238000004891 communication Methods 0.000 description 3
- 230000008878 coupling Effects 0.000 description 3
- 238000010168 coupling process Methods 0.000 description 3
- 238000005859 coupling reaction Methods 0.000 description 3
- 238000012545 processing Methods 0.000 description 3
- 230000001960 triggered effect Effects 0.000 description 3
- 230000006870 function Effects 0.000 description 2
- 230000003993 interaction Effects 0.000 description 2
- 230000001413 cellular effect Effects 0.000 description 1
- 238000006243 chemical reaction Methods 0.000 description 1
- 230000000295 complement effect Effects 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 239000003550 marker Substances 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 238000011160 research Methods 0.000 description 1
- 238000012216 screening Methods 0.000 description 1
- 238000004088 simulation Methods 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T19/00—Manipulating 3D models or images for computer graphics
- G06T19/006—Mixed reality
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
- G06F2203/01—Indexing scheme relating to G06F3/01
- G06F2203/012—Walk-in-place systems for allowing a user to walk in a virtual environment while constraining him to a given position in the physical environment
Landscapes
- Engineering & Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Computer Graphics (AREA)
- Computer Hardware Design (AREA)
- Software Systems (AREA)
- Human Computer Interaction (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
本公开提供了一种信息展示方法、装置、相关设备及存储介质,该方法包括:获取增强现实AR设备拍摄的现实场景图像;基于所述现实场景图像,确定所述AR设备的位姿信息;基于所述AR设备的位姿信息,确定与所述AR设备相距设定距离范围内的AR对象;确定所述AR对象中,位于所述AR设备的当前拍摄视野之外的目标AR对象;生成所述目标AR对象的提示信息;展示所述目标AR对象的提示信息。本公开实施例能够让用户了解到更多的AR场景信息,使得用户对于周围AR对象的了解不局限于当前视野范围,扩大了用户对于周围AR对象的感知范围,还可以指引用户根据提示前往当前拍摄视野之外的AR对象所在位置,进而提高对用户进行导览的效率。
Description
技术领域
本公开涉及计算机技术领域,具体而言,涉及一种信息展示方法、装置、相关设备及存储介质。
背景技术
随着计算机技术的快速发展,增强现实(Augmented Reality,AR)技术逐渐成熟。AR技术是一种将虚拟信息与真实世界巧妙融合的技术,广泛运用了多媒体、三维建模、实时跟踪及注册、智能交互、传感等多种技术手段,将计算机生成的文字、图像、三维模型、音乐、视频等虚拟信息模拟仿真后,应用到真实世界中,两种信息互为补充,从而实现对真实世界的“增强”。
在基于高精度地图的AR导览应用中,AR设备通过拍摄当前场景图像实现定位,在定位成功后,可以在AR设备中展示的当前场景图像中叠加展示与AR设备的定位位姿匹配的虚拟对象信息,也即AR设备中可以展示位于拍摄视野范围内的现实场景对象和匹配的虚拟对象。
发明内容
本公开实施例至少提供一种信息展示方法、装置、相关设备及存储介质。
第一方面,本公开实施例提供了一种信息展示方法,包括:
获取增强现实AR设备拍摄的现实场景图像;
基于所述现实场景图像,确定所述AR设备的位姿信息;
基于所述AR设备的位姿信息,确定与所述AR设备相距设定距离范围内的AR对象;以及,确定所述AR对象中,位于所述AR设备的当前拍摄视野之外的目标AR对象;
生成所述目标AR对象的提示信息;
展示所述目标AR对象的提示信息。
本公开实施例能够向用户展示位于AR设备当前拍摄视野之外的AR对象的信息,可以让用户了解到视野范围外的AR场景信息,使得用户对于周围AR对象所在方向的了解不局限于当前视野范围,扩大了用户对于周围AR对象的感知范围,提升了导览效果。
一种可选的实施方式中,基于所述AR设备的位姿信息,确定与所述AR设备相距设定距离范围内的AR对象,包括:
基于所述AR设备的位姿信息,以及预先存储的三维场景模型信息,确定与所述AR设备相距设定距离范围内的AR对象;所述三维场景模型信息中包含位于AR场景下的AR对象的位姿信息。
这里,预先存储的三维场景模型信息中的各个AR对象的位姿信息与在真实世界下的位姿信息对齐,因此,可以基于AR设备的位姿信息以及三维场景模型信息,确定出与所述AR设备相距设定距离范围内的各个AR对象。
一种可选的实施方式中,确定所述AR对象中,位于所述AR设备的当前拍摄视野之外的目标AR对象,包括:
基于所述AR设备的位姿信息,确定位于所述AR设备的当前拍摄视野内的AR对象;
确定在与所述AR设备相距设定距离范围内的AR对象中,除位于所述AR设备的当前拍摄视野内的AR对象外的其它AR对象,将所述其它AR对象作为所述目标AR对象。
一种可选的实施方式中,生成所述目标AR对象的提示信息,包括:
根据所述目标AR对象的位姿信息,以及所述AR设备的位姿信息,确定所述目标AR对象与所述AR设备之间的相对位姿信息;
根据所述相对位姿信息,生成所述提示信息。
一种可选的实施方式中,根据所述相对位姿信息,生成所述提示信息,包括:
基于所述目标AR对象的标识信息,以及所述相对位姿信息,生成所述提示信息;所述提示信息中包含所述目标AR对象的标识信息,以及所述目标AR对象相对所述AR设备的相对方向信息和/或相对距离信息。
这样,通过生成包含目标AR对象的标识信息、目标AR对象相对AR设备的相对方向信息和/或相对距离信息的标识信息,使用户能够感知目标AR对象所在的方向和/或距离,为用户提供更加详细的导览信息。
一种可选的实施方式中,所述展示所述目标AR对象的提示信息,包括:
根据所述目标AR对象的位姿信息,以及所述AR设备的位姿信息,确定所述目标AR对象与所述AR设备之间的相对方向信息;
根据所述相对方向信息,确定所述目标AR对象的提示信息在当前AR场景画面中的展示位置信息;
根据确定的展示位置信息,展示所述目标AR对象的提示信息。
这里,根据目标AR对象与AR设备之间的相对方向信息,确定展示目标AR对象的提示信息的展示位置信息,能够使展示的提示信息从展示位置上反映目标AR对象与AR设备之间的相对方向,使用户能够更加直观的感受到目标AR对象所在的方向。
一种可选的实施方式中,展示所述目标AR对象的提示信息之后,还包括:
响应于针对所述提示信息的触发操作,生成到达所述目标AR对象的导航信息;
将所述导航信息展示在所述AR设备的当前AR场景画面中。
这里,在目标AR对象对应的提示信息被触发后,将该目标AR对象作为导航目的地,确定并展示从当前位置到达导航目的地的导航信息,由此实现指引用户前往当前拍摄视野之外的AR对象所在位置,进而提高了导览服务的效率和质量。
第二方面,本公开实施例还提供一种信息展示装置,包括:
获取模块,用于获取增强现实AR设备拍摄的现实场景图像;
第一确定模块,用于基于所述现实场景图像,确定所述AR设备的位姿信息;
第二确定模块,用于基于所述AR设备的位姿信息,确定与所述AR设备相距设定距离范围内的AR对象;以及,确定所述AR对象中,位于所述AR设备的当前拍摄视野之外的目标AR对象;
生成模块,用于生成所述目标AR对象的提示信息;
展示模块,用于展示所述目标AR对象的提示信息。
一种可选的实施方式中,所述第一确定模块具体用于:
基于所述AR设备的位姿信息,以及预先存储的三维场景模型信息,确定与所述AR设备相距设定距离范围内的AR对象;所述三维场景模型信息中包含位于AR场景下的AR对象的位姿信息。
一种可选的实施方式中,所述第二确定模块在确定所述AR对象中,位于所述AR设备的当前拍摄视野之外的目标AR对象时,具体用于:
基于所述AR设备的位姿信息,确定位于所述AR设备的当前拍摄视野内的AR对象;
确定在与所述AR设备相距设定距离范围内的AR对象中,除位于所述AR设备的当前拍摄视野内的AR对象外的其它AR对象,将所述其它AR对象作为所述目标AR对象。
一种可选的实施方式中,所述生成模块在生成所述目标AR对象的提示信息时,具体用于:
根据所述目标AR对象的位姿信息,以及所述AR设备的位姿信息,确定所述目标AR对象与所述AR设备之间的相对位姿信息;
根据所述相对位姿信息,生成所述提示信息。
一种可选的实施方式中,所述生成模块在根据所述相对位姿信息,生成所述提示信息时,具体用于:
基于所述目标AR对象的标识信息,以及所述相对位姿信息,生成所述提示信息;所述提示信息中包含所述目标AR对象的标识信息,以及所述目标AR对象相对所述AR设备的相对方向信息和/或相对距离信息。
一种可选的实施方式中,所述展示模块具体用于:
根据所述目标AR对象的位姿信息,以及所述AR设备的位姿信息,确定所述目标AR对象与所述AR设备之间的相对方向信息;
根据所述相对方向信息,确定所述目标AR对象的提示信息在当前AR场景画面中的展示位置信息;
根据确定的展示位置信息,展示所述目标AR对象的提示信息。
一种可选的实施方式中,所述展示模块还用于:
响应针对所述提示信息的触发操作,生成到达所述目标AR对象的导航信息;
将所述导航信息展示在所述AR设备的当前AR场景画面中。
第三方面,本公开实施例还提供一种计算机设备,包括:处理器、存储器和总线,所述存储器存储有所述处理器可执行的机器可读指令,当计算机设备运行时,所述处理器与所述存储器之间通过总线通信,所述机器可读指令被所述处理器执行时执行上述第一方面,或第一方面中任一种可能的实施方式中的步骤。
第四方面,本公开实施例还提供一种计算机可读存储介质,该计算机可读存储介质上存储有计算机程序,该计算机程序被处理器运行时执行上述第一方面,或第一方面中任一种可能的实施方式中的步骤。
关于上述信息展示装置、计算机设备、及计算机可读存储介质的效果描述参见上述信息展示方法的说明,这里不再赘述。
为使本公开的上述目的、特征和优点能更明显易懂,下文特举较佳实施例,并配合所附附图,作详细说明如下。
附图说明
为了更清楚地说明本公开实施例的技术方案,下面将对实施例中所需要使用的附图作简单地介绍,此处的附图被并入说明书中并构成本说明书中的一部分,这些附图示出了符合本公开的实施例,并与说明书一起用于说明本公开的技术方案。应当理解,以下附图仅示出了本公开的某些实施例,因此不应被看作是对范围的限定,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他相关的附图。
图1示出了本公开实施例所提供的一种信息展示方法的流程图;
图2示出了本公开实施例所提供的信息展示方法中,与AR设备相距设定距离范围内的AR对象的示意图;
图3示出了本公开实施例所提供的信息展示方法中,当前AR场景画面的示意图;
图4示出了本公开实施例所提供的一种信息展示装置的示意图;
图5示出了本公开实施例所提供的一种计算机设备的示意图。
具体实施方式
为使本公开实施例的目的、技术方案和优点更加清楚,下面将结合本公开实施例中附图,对本公开实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本公开一部分实施例,而不是全部的实施例。通常在此处附图中描述和示出的本公开实施例的组件可以以各种不同的配置来布置和设计。因此,以下对在附图中提供的本公开的实施例的详细描述并非旨在限制要求保护的本公开的范围,而是仅仅表示本公开的选定实施例。基于本公开的实施例,本领域技术人员在没有做出创造性劳动的前提下所获得的所有其他实施例,都属于本公开保护的范围。
在将AR技术应用到AR导览中时,AR设备拍摄现实场景图像实现定位,结合定位得到的AR设备的拍摄位姿,以及预先构建的三维场景模型(或称三维场景地图),可以确定与AR设备的拍摄位姿匹配的AR场景信息,进而可以在AR设备中展示该AR场景信息,展示的AR场景信息也即在AR设备的拍摄视野范围内的AR场景对象。
不管是现实场景对象,还是虚拟对象(统称AR对象),都只能在位于AR设备的拍摄视野范围内时才会呈现在AR设备中,若该AR对象不在AR设备的拍摄视野范围内,用户则无法获取到该AR对象的相关信息。这种情况会导致用户的视觉体验不够流畅直观,有时需要在多次移动AR设备的拍摄位姿后才能找到目标AR对象的方向,导览体验不佳。
基于上述研究,本公开实施例提供了一种信息展示方法、装置、相关设备及存储介质,能够将与AR设备相距设定距离范围内,且位于AR设备的当前拍摄视野之外的目标AR对象的提示信息展示在当前AR场景画面中,使用户能够感知到当前拍摄视野之外的AR对象,扩大了用户对于周围AR对象的感知范围,提升了导览效果。
针对以上方案所存在的缺陷,均是发明人在经过实践并仔细研究后得出的结果,因此,上述问题的发现过程以及下文中本公开针对上述问题所提出的解决方案,都应该是发明人在本公开过程中对本公开做出的贡献。
应注意到:相似的标号和字母在下面的附图中表示类似项,因此,一旦某一项在一个附图中被定义,则在随后的附图中不需要对其进行进一步定义和解释。
为便于对本实施例进行理解,首先对本公开实施例所公开的一种信息展示方法进行详细介绍,本公开实施例所提供的信息展示方法的执行主体一般为具有一定计算能力的计算机设备,该计算机设备例如包括:服务器或AR设备或其它处理设备,AR设备可以为用户设备(User Equipment,UE)、移动设备、用户终端、终端、蜂窝电话、无绳电话、个人数字助理(Personal Digital Assistant,PDA)、手持设备、计算设备、车载设备、可穿戴设备等。在一些可能的实现方式中,该信息展示方法可以通过处理器调用存储器中存储的计算机可读指令的方式来实现。
参见图1所示,为本公开实施例提供的信息展示方法的流程图,所述方法包括步骤S101~S104,其中:
S101:获取增强现实AR设备拍摄的现实场景图像。
其中,增强现实AR设备可以部署有摄像头,通过摄像头能够拍摄现实场景对应的现实场景图像。
S102:基于所述现实场景图像,确定所述AR设备的位姿信息。
其中,AR设备的位姿信息可以包括AR设备的位置信息和姿态信息,姿态信息可以用于表征AR设备的朝向。
该步骤中,可以获取AR设备拍摄的现实场景图像,然后根据现实场景图像,对AR设备进行视觉定位,具体地,可以在预先存储的三维场景模型(或称三维场景地图)中,搜索与AR设备拍摄的现实场景图像中的特征点匹配的特征点,再根据匹配出的特征点在三维场景模型中的位姿信息,也即在世界坐标系下的位姿信息,以及对应的特征点在现实场景图像对应的图像坐标系下的位姿信息,结合不同坐标系之间(图像坐标系与相机坐标系、相机坐标系与世界坐标系)的转换关系,即可确定出AR设备在世界坐标系下的位姿信息。
S103:基于所述AR设备的位姿信息,确定与所述AR设备相距设定距离范围内的AR对象;以及,确定所述AR对象中,位于所述AR设备的当前拍摄视野之外的目标AR对象。
在一种实施方式中,可以基于AR设备的位姿信息,以及预先存储的各个AR对象的位姿信息,确定与所述AR设备相距设定距离范围内的AR对象。
在另一种实施方式中,还可以基于AR设备的位姿信息,以及预先存储的三维场景模型信息(或称三维场景地图),确定与所述AR设备相距设定距离范围内的AR对象;所述三维场景模型信息中包含位于AR场景下的AR对象的位姿信息。
这里,预先存储的三维场景模型信息中的各个AR对象的位姿信息与在真实世界下的位姿信息对齐,因此,可以基于AR设备的位姿信息以及三维场景模型信息,确定出与所述AR设备相距设定距离范围内的各个AR对象。
具体地,可以以该AR设备为中心,以设定距离范围对应的最大距离为搜索半径,在预先构建的三维场景模型中进行搜索,得到与所述AR设备相距设定距离范围内的各个AR对象的信息。
其中,AR对象可以是现实场景中真实存在的物理对象,也可以是虚拟对象,比如,在展览馆场景中,AR对象可以是楼梯、入口、出口、洗手间等真实存在的对象,也可以是虚拟展品、虚拟导航牌、虚拟雕塑等虚拟对象。
该步骤中,在确定了与AR设备相距设定距离范围内的AR对象后,可以从中筛选出位于AR设备当前拍摄视野范围之外的目标AR对象,并生成目标AR对象的提示信息。
在一种实施方式中,可以基于AR设备的位姿信息,确定位于AR设备的当前拍摄视野内的AR对象;确定在与AR设备相距设定距离范围内的AR对象中,除位于AR设备的当前拍摄视野内的AR对象外的其它AR对象,将所述其它AR对象作为目标AR对象。
上述实施方式中,首先确定出位于AR设备的当前拍摄视野内的AR对象,然后将位于当前拍摄视野内的AR对象从与AR设备相距设定距离范围内的各个AR对象中筛除,筛除后所剩余的AR对象即为目标AR对象。
示例性的,可以确定与AR设备拍摄的现实场景图像对应的AR对象,其中包括现实场景图像中的真实对象,还可以包括与AR设备的拍摄位姿匹配的、需要叠加在现实场景图像中的虚拟对象,这些对象都会在AR设备展示的AR场景中呈现,都是属于AR设备的拍摄视野范围内的AR对象。在确定出属于AR设备的拍摄视野范围内的AR对象之后,从与所述AR设备相距设定距离范围内的AR对象中,将现实场景图像中包含的AR对象筛除,即可得到位于所述AR设备的当前拍摄视野之外的目标AR对象。
S104:生成所述目标AR对象的提示信息。
在确定目标AR对象之后,可以根据AR设备和目标AR对象的位姿信息,生成目标AR对象的提示信息。目标AR对象的提示信息可以用于指示目标AR对象与AR设备之间的位姿关系。
在一种实施方式中,可以根据所述目标AR对象的位姿信息,以及所述AR设备的位姿信息,确定目标AR对象与AR设备之间的相对位姿信息;之后,可以根据确定出的相对位姿信息,生成所述提示信息。
其中,相对位姿信息可以包括目标AR对象与AR设备之间的距离、目标AR对象相对AR设备所处的方向等信息。在确定目标AR对象与AR设备之间的相对位姿信息之后,根据该相对位姿信息生成的提示信息中,可以包括表征目标AR对象与AR设备之间的相对位姿的信息,比如,提示目标AR对象位于当前AR设备的正前方3米位置处等。
一种可选的实施方式中,根据所述相对位姿信息生成所述提示信息的过程具体可以为:
基于所述目标AR对象的标识信息,以及所述相对位姿信息,生成所述提示信息;所述提示信息中包含所述目标AR对象的标识信息,以及所述目标AR对象相对所述AR设备的相对方向信息和/或相对距离信息。
其中,目标AR对象的标识信息可以包括目标AR对象的名称、标识号、图像标志等;在生成提示信息中可以包括目标AR对象的标识信息,以及所述目标AR对象相对所述AR设备的相对方向信息和/或相对距离信息,其中,相对方向信息可以为目标AR对象相对于AR设备的方向,可以以文字或符号的形式显示,比如箭头或指针;相对距离信息可以为目标AR对象与AR设备之间的距离。
这样,通过生成包含目标AR对象的标识信息、目标AR对象相对AR设备的相对方向信息和/或相对距离信息的标识信息,使用户能够感知目标AR对象所在的方向和/或距离,为用户提供更加详细的导览信息。
S105:展示所述目标AR对象的提示信息。
该步骤中,在生成目标AR对象的提示信息后,可以将目标AR对象的提示信息展示在AR设备的当前AR场景画面中。
这样,可以使位于AR设备的拍摄视野之外的目标AR对象的提示信息显示在当前AR场景画面中,让用户能够通过提示信息了解到拍摄视野之外的AR对象的信息。
一种可选的实施方式中,在展示所述目标AR对象的提示信息时,可以根据所述目标AR对象的位姿信息,以及所述AR设备的位姿信息,确定所述目标AR对象与所述AR设备之间的相对方向信息;根据所述相对方向信息,确定所述目标AR对象的提示信息在当前AR场景画面中的展示位置信息;根据确定的展示位置信息,展示所述目标AR对象的提示信息。
这里,可以根据目标AR对象与AR设备之间的相对方向信息,确定提示信息在当前AR场景画面中的展示位置信息,示例性的,在选择展示位置时,可以使得当前AR场景画面的中心点与展示位置之间的连线方向,与目标AR对象相对AR设备的方向相匹配。比如,若一目标AR对象位于AR设备的正后方,则其提示信息的展示位置可以是当前AR场景画面中的正下方位置。
这样,根据目标AR对象与AR设备之间的相对方向信息,确定展示目标AR对象的提示信息的展示位置信息,能够使得展示的提示信息从展示位置上反映目标AR对象与AR设备之间的相对方向,使用户能够更加直观的感受到目标AR对象所在方向。
一种可选的实施方式中,在展示所述目标AR对象的提示信息后,若用户对展示的任一提示信息对应的目标AR对象感兴趣,可以触发该提示信息,发起导航请求。
此时,可以响应于针对所述提示信息的触发操作,生成到达所述目标AR对象的导航信息;将所述导航信息展示在所述AR设备的当前AR场景画面中。
其中,针对提示信息的触发操作可以是针对提示信息的触控操作,如点击、双击、长按、拖拽等;也可以是针对提示信息的手势操作,如抓取手势;也可以是目标AR对象对应的肢体动作,此时不同的目标AR对象可以对应不同的肢体动作,肢体动作可以通过AR设备或预设位置设置的摄像头获取。
这样,在目标AR对象对应的提示信息被触发后,将该目标AR对象作为导航目的地,确定并展示从当前位置到达导航目的地的导航信息,由此实现指引用户前往当前拍摄视野之外的AR对象所在位置,进而提高了导览服务的效率和质量。
本公开实施例提供的信息展示方法,能够向用户展示位于AR设备当前拍摄视野之外的AR对象的信息,可以让用户了解到视野范围外的AR场景信息,使得用户对于周围AR对象所在方向的了解不局限于当前视野范围,扩大了用户对于周围AR对象的感知范围,提升了导览效果。
参见图2所示,为本公开实施例所提供的信息展示方法中,与AR设备相距设定距离范围内的AR对象的示意图。在图2中,包括AR对象a、AR对象b、AR对象c、AR对象d,以及AR设备e,其中,AR设备e的位姿信息中的朝向为北方,AR对象c位于AR设备的正西方,AR对象d位于AR设备的东南方,AR对象a、AR对象b位于AR设备e的拍摄视野范围(虚线内范围)内,位于AR设备e的拍摄视野范围之外的AR对象c、AR对象d为目标AR设备。
参见图3所示,为本公开实施例所提供的信息展示方法中,当前AR场景画面的示意图。图3中包含AR对象a、AR对象b、AR对象c的提示信息x、AR对象d的提示信息y,位于AR设备正西方的AR设备c的提示信息x位于当前AR场景画面的左侧,位于AR设备东南方的AR设备d的提示信息y位于当前AR场景画面的右下侧。提示信息x与提示信息y中包含标识信息、相对方向信息及相对距离信息。
本领域技术人员可以理解,在具体实施方式的上述方法中,各步骤的撰写顺序并不意味着严格的执行顺序而对实施过程构成任何限定,各步骤的具体执行顺序应当以其功能和可能的内在逻辑确定。
基于同一发明构思,本公开实施例中还提供了与信息展示方法对应的信息展示装置,由于本公开实施例中的装置解决问题的原理与本公开实施例上述信息展示方法相似,因此装置的实施可以参见方法的实施,重复之处不再赘述。
参照图4所示,为本公开实施例提供的一种信息展示装置的示意图,所述信息展示装置400包括:
获取模块410,用于获取增强现实AR设备拍摄的现实场景图像;
第一确定模块420,用于基于所述现实场景图像,确定所述AR设备的位姿信息;
第二确定模块430,用于基于所述AR设备的位姿信息,确定与所述AR设备相距设定距离范围内的AR对象;以及,确定所述AR对象中,位于所述AR设备的当前拍摄视野之外的目标AR对象;
生成模块440,用于生成所述目标AR对象的提示信息;
展示模块450,用于展示所述目标AR对象的提示信息。
本公开实施例通过将与AR设备相距设定距离范围内,且位于AR设备的当前拍摄视野之外的目标AR对象的提示信息展示在当前AR场景画面中,使用户能够感知到当前拍摄视野之外的AR对象,从而使用户快速掌握AR场景中设定距离范围内存在的AR对象,进而提高对用户进行导览的效率。
一种可选的实施方式中,所述第一确定模块420具体用于:
基于所述AR设备的位姿信息,以及预先存储的三维场景模型信息,确定与所述AR设备相距设定距离范围内的AR对象;所述三维场景模型信息中包含位于AR场景下的AR对象的位姿信息。
一种可选的实施方式中,所述第二确定模块430在确定所述AR对象中,位于所述AR设备的当前拍摄视野之外的目标AR对象时,具体用于:
基于所述AR设备的位姿信息,确定位于所述AR设备的当前拍摄视野内的AR对象;
确定在与所述AR设备相距设定距离范围内的AR对象中,除位于所述AR设备的当前拍摄视野内的AR对象外的其它AR对象,将所述其它AR对象作为所述目标AR对象。
一种可选的实施方式中,所述生成模块440在生成所述目标AR对象的提示信息时,具体用于:
根据所述目标AR对象的位姿信息,以及所述AR设备的位姿信息,确定所述目标AR对象与所述AR设备之间的相对位姿信息;
根据所述相对位姿信息,生成所述提示信息。
一种可选的实施方式中,所述生成模块440在根据所述相对位姿信息,生成所述提示信息时,具体用于:
基于所述目标AR对象的标识信息,以及所述相对位姿信息,生成所述提示信息;所述提示信息中包含所述目标AR对象的标识信息,以及所述目标AR对象相对所述AR设备的相对方向信息和/或相对距离信息。
一种可选的实施方式中,所述展示模块450具体用于:
根据所述目标AR对象的位姿信息,以及所述AR设备的位姿信息,确定所述目标AR对象与所述AR设备之间的相对方向信息;
根据所述相对方向信息,确定所述目标AR对象的提示信息在当前AR场景画面中的展示位置信息;
根据确定的展示位置信息,展示所述目标AR对象的提示信息。
一种可选的实施方式中,所述展示模块450还用于:
响应针对所述提示信息的触发操作,生成到达所述目标AR对象的导航信息;
将所述导航信息展示在所述AR设备的当前AR场景画面中。
关于装置中的各模块的处理流程、以及各模块之间的交互流程的描述可以参照上述方法实施例中的相关说明,这里不再详述。
基于同一技术构思,本公开实施例还提供了一种计算机设备。参照图5所示,为本公开实施例提供的计算机设备500的结构示意图,包括处理器501、存储器502、和总线503。其中,存储器502用于存储执行指令,包括内存5021和外部存储器5022;这里的内存5021也称内存储器,用于暂时存放处理器501中的运算数据,以及与硬盘等外部存储器5022交换的数据,处理器501通过内存5021与外部存储器5022进行数据交换,当计算机设备500运行时,处理器501与存储器502之间通过总线503通信,使得处理器501在执行以下指令:
获取增强现实AR设备拍摄的现实场景图像;
基于所述现实场景图像,确定所述AR设备的位姿信息;
基于所述AR设备的位姿信息,确定与所述AR设备相距设定距离范围内的AR对象;以及,确定所述AR对象中,位于所述AR设备的当前拍摄视野之外的目标AR对象;
生成所述目标AR对象的提示信息;
展示所述目标AR对象的提示信息。
一种可能的实施方式中,处理器501执行的指令中,基于所述AR设备的位姿信息,确定与所述AR设备相距设定距离范围内的AR对象,包括:
基于所述AR设备的位姿信息,以及预先存储的三维场景模型信息,确定与所述AR设备相距设定距离范围内的AR对象;所述三维场景模型信息中包含位于AR场景下的AR对象的位姿信息。
一种可能的实施方式中,处理器501执行的指令中,确定所述AR对象中,位于所述AR设备的当前拍摄视野之外的目标AR对象,包括:
基于所述AR设备的位姿信息,确定位于所述AR设备的当前拍摄视野内的AR对象;
确定在与所述AR设备相距设定距离范围内的AR对象中,除位于所述AR设备的当前拍摄视野内的AR对象外的其它AR对象,将所述其它AR对象作为所述目标AR对象。
一种可能的实施方式中,处理器501执行的指令中,生成所述目标AR对象的提示信息,包括:
根据所述目标AR对象的位姿信息,以及所述AR设备的位姿信息,确定所述目标AR对象与所述AR设备之间的相对位姿信息;
根据所述相对位姿信息,生成所述提示信息。
一种可能的实施方式中,处理器501执行的指令中,根据所述相对位姿信息,生成所述提示信息,包括:
基于所述目标AR对象的标识信息,以及所述相对位姿信息,生成所述提示信息;所述提示信息中包含所述目标AR对象的标识信息,以及所述目标AR对象相对所述AR设备的相对方向信息和/或相对距离信息。
一种可能的实施方式中,处理器501执行的指令中,展示所述目标AR对象的提示信息,包括:
根据所述目标AR对象的位姿信息,以及所述AR设备的位姿信息,确定所述目标AR对象与所述AR设备之间的相对方向信息;
根据所述相对方向信息,确定所述目标AR对象的提示信息在当前AR场景画面中的展示位置信息;
根据确定的展示位置信息,展示所述目标AR对象的提示信息。
一种可能的实施方式中,处理器501在展示所述目标AR对象的提示信息之后,还执行:
响应针对所述提示信息的触发操作,生成到达所述目标AR对象的导航信息;
将所述导航信息展示在所述AR设备的当前AR场景画面中。
本公开实施例还提供一种计算机可读存储介质,该计算机可读存储介质上存储有计算机程序,该计算机程序被处理器运行时执行上述方法实施例中所述的信息展示方法的步骤。其中,该存储介质可以是易失性或非易失的计算机可读取存储介质。
本公开实施例所提供的信息展示方法的计算机程序产品,包括存储了程序代码的计算机可读存储介质,所述程序代码包括的指令可用于执行上述方法实施例中所述的信息展示方法的步骤,具体可参见上述方法实施例,在此不再赘述。
本公开实施例还提供一种计算机程序,该计算机程序被处理器执行时实现前述实施例的任意一种方法。该计算机程序产品可以具体通过硬件、软件或其结合的方式实现。在一个可选实施例中,所述计算机程序产品具体体现为计算机存储介质,在另一个可选实施例中,计算机程序产品具体体现为软件产品,例如软件开发包(Software DevelopmentKit,SDK)等等。
所属领域的技术人员可以清楚地了解到,为描述的方便和简洁,上述描述的***和装置的具体工作过程,可以参考前述方法实施例中的对应过程,在此不再赘述。在本公开所提供的几个实施例中,应该理解到,所揭露的***、装置和方法,可以通过其它的方式实现。以上所描述的装置实施例仅仅是示意性的,例如,所述单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,又例如,多个单元或组件可以结合或者可以集成到另一个***,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些通信接口,装置或单元的间接耦合或通信连接,可以是电性,机械或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外,在本公开各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。
所述功能如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个处理器可执行的非易失的计算机可读取存储介质中。基于这样的理解,本公开的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行本公开各个实施例所述方法的全部或部分步骤。而前述的存储介质包括:U盘、移动硬盘、只读存储器(Read-OnlyMemory,ROM)、随机存取存储器(Random Access Memory,RAM)、磁碟或者光盘等各种可以存储程序代码的介质。
最后应说明的是:以上所述实施例,仅为本公开的具体实施方式,用以说明本公开的技术方案,而非对其限制,本公开的保护范围并不局限于此,尽管参照前述实施例对本公开进行了详细的说明,本领域的普通技术人员应当理解:任何熟悉本技术领域的技术人员在本公开揭露的技术范围内,其依然可以对前述实施例所记载的技术方案进行修改或可轻易想到变化,或者对其中部分技术特征进行等同替换;而这些修改、变化或者替换,并不使相应技术方案的本质脱离本公开实施例技术方案的精神和范围,都应涵盖在本公开的保护范围之内。因此,本公开的保护范围应所述以权利要求的保护范围为准。
Claims (10)
1.一种信息展示方法,其特征在于,包括:
获取增强现实AR设备拍摄的现实场景图像;
基于所述现实场景图像,确定所述AR设备的位姿信息;
基于所述AR设备的位姿信息,确定与所述AR设备相距设定距离范围内的AR对象;以及,确定所述AR对象中,位于所述AR设备的当前拍摄视野之外的目标AR对象;
生成所述目标AR对象的提示信息;
展示所述目标AR对象的提示信息。
2.根据权利要求1所述的方法,其特征在于,基于所述AR设备的位姿信息,确定与所述AR设备相距设定距离范围内的AR对象,包括:
基于所述AR设备的位姿信息,以及预先存储的三维场景模型信息,确定与所述AR设备相距设定距离范围内的AR对象;所述三维场景模型信息中包含位于AR场景下的AR对象的位姿信息。
3.根据权利要求1或2所述的方法,其特征在于,确定所述AR对象中,位于所述AR设备的当前拍摄视野之外的目标AR对象,包括:
基于所述AR设备的位姿信息,确定位于所述AR设备的当前拍摄视野内的AR对象;
确定在与所述AR设备相距设定距离范围内的AR对象中,除位于所述AR设备的当前拍摄视野内的AR对象外的其它AR对象,将所述其它AR对象作为所述目标AR对象。
4.根据权利要求1~3任一所述的方法,其特征在于,生成所述目标AR对象的提示信息,包括:
根据所述目标AR对象的位姿信息,以及所述AR设备的位姿信息,确定所述目标AR对象与所述AR设备之间的相对位姿信息;
根据所述相对位姿信息,生成所述提示信息。
5.根据权利要求4所述的方法,其特征在于,根据所述相对位姿信息,生成所述提示信息,包括:
基于所述目标AR对象的标识信息,以及所述相对位姿信息,生成所述提示信息;所述提示信息中包含所述目标AR对象的标识信息,以及所述目标AR对象相对所述AR设备的相对方向信息和/或相对距离信息。
6.根据权利要求1~5任一所述的方法,其特征在于,展示所述目标AR对象的提示信息,包括:
根据所述目标AR对象的位姿信息,以及所述AR设备的位姿信息,确定所述目标AR对象与所述AR设备之间的相对方向信息;
根据所述相对方向信息,确定所述目标AR对象的提示信息在当前AR场景画面中的展示位置信息;
根据确定的展示位置信息,展示所述目标AR对象的提示信息。
7.根据权利要求1~6任一所述的方法,其特征在于,展示所述目标AR对象的提示信息之后,还包括:
响应于针对所述提示信息的触发操作,生成到达所述目标AR对象的导航信息;
将所述导航信息展示在所述AR设备的当前AR场景画面中。
8.一种信息展示装置,其特征在于,包括:
获取模块,用于获取增强现实AR设备拍摄的现实场景图像;
第一确定模块,用于基于所述现实场景图像,确定所述AR设备的位姿信息;
第二确定模块,用于基于所述AR设备的位姿信息,确定与所述AR设备相距设定距离范围内的AR对象;以及,确定所述AR对象中,位于所述AR设备的当前拍摄视野之外的目标AR对象;
生成模块,用于生成所述目标AR对象的提示信息;
展示模块,用于展示所述目标AR对象的提示信息。
9.一种计算机设备,其特征在于,包括:处理器、存储器和总线,所述存储器存储有所述处理器可执行的机器可读指令,当计算机设备运行时,所述处理器与所述存储器之间通过总线通信,所述机器可读指令被所述处理器执行时执行如权利要求1至7任一项所述的信息展示方法的步骤。
10.一种计算机可读存储介质,其特征在于,该计算机可读存储介质上存储有计算机程序,该计算机程序被处理器运行时执行如权利要求1至7任一项所述的信息展示方法的步骤。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110143581.4A CN112817454A (zh) | 2021-02-02 | 2021-02-02 | 一种信息展示方法、装置、相关设备及存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110143581.4A CN112817454A (zh) | 2021-02-02 | 2021-02-02 | 一种信息展示方法、装置、相关设备及存储介质 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN112817454A true CN112817454A (zh) | 2021-05-18 |
Family
ID=75860611
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202110143581.4A Pending CN112817454A (zh) | 2021-02-02 | 2021-02-02 | 一种信息展示方法、装置、相关设备及存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN112817454A (zh) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN113345107A (zh) * | 2021-06-25 | 2021-09-03 | 北京市商汤科技开发有限公司 | 增强现实数据展示方法、装置、电子设备及存储介质 |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN107914713A (zh) * | 2016-10-05 | 2018-04-17 | Lg电子株式会社 | 车辆用显示装置及包括其的车辆 |
CN110716646A (zh) * | 2019-10-15 | 2020-01-21 | 北京市商汤科技开发有限公司 | 一种增强现实数据呈现方法、装置、设备及存储介质 |
CN111694431A (zh) * | 2020-06-09 | 2020-09-22 | 浙江商汤科技开发有限公司 | 一种人物形象生成的方法及装置 |
CN111698646A (zh) * | 2020-06-08 | 2020-09-22 | 浙江商汤科技开发有限公司 | 一种定位方法及装置 |
-
2021
- 2021-02-02 CN CN202110143581.4A patent/CN112817454A/zh active Pending
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN107914713A (zh) * | 2016-10-05 | 2018-04-17 | Lg电子株式会社 | 车辆用显示装置及包括其的车辆 |
CN110716646A (zh) * | 2019-10-15 | 2020-01-21 | 北京市商汤科技开发有限公司 | 一种增强现实数据呈现方法、装置、设备及存储介质 |
CN111698646A (zh) * | 2020-06-08 | 2020-09-22 | 浙江商汤科技开发有限公司 | 一种定位方法及装置 |
CN111694431A (zh) * | 2020-06-09 | 2020-09-22 | 浙江商汤科技开发有限公司 | 一种人物形象生成的方法及装置 |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN113345107A (zh) * | 2021-06-25 | 2021-09-03 | 北京市商汤科技开发有限公司 | 增强现实数据展示方法、装置、电子设备及存储介质 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN111551188B (zh) | 一种导航路线生成的方法及装置 | |
CN111638793B (zh) | 飞行器的展示方法、装置、电子设备及存储介质 | |
CN112148197A (zh) | 增强现实ar交互方法、装置、电子设备及存储介质 | |
JP2022505998A (ja) | 拡張現実データの提示方法、装置、電子機器及び記憶媒体 | |
CN112179331B (zh) | Ar导航的方法、装置、电子设备及存储介质 | |
CN112070906A (zh) | 一种增强现实***及增强现实数据的生成方法、装置 | |
CN111679742A (zh) | 基于ar的交互控制方法、装置、电子设备及存储介质 | |
CN111651047A (zh) | 一种虚拟物体展示方法、装置、电子设备及存储介质 | |
CN111623782A (zh) | 导航路线的展示方法、三维场景模型的生成方法及装置 | |
CN113178006A (zh) | 导航地图生成方法、装置、计算机设备及存储介质 | |
CN112637665B (zh) | 增强现实场景下的展示方法、装置、电子设备及存储介质 | |
CN112991555B (zh) | 数据展示方法、装置、设备以及存储介质 | |
CN112882576B (zh) | Ar交互方法、装置、电子设备及存储介质 | |
CN112348968A (zh) | 增强现实场景下的展示方法、装置、电子设备及存储介质 | |
CN111651056A (zh) | 一种沙盘演示方法、装置、计算机设备及存储介质 | |
CN111653175B (zh) | 一种虚拟沙盘展示方法及装置 | |
CN112598805A (zh) | 一种提示信息展示方法、装置、设备及存储介质 | |
CN114153548A (zh) | 一种展示方法、装置、计算机设备及存储介质 | |
CN112288881B (zh) | 一种图像展示方法、装置、计算机设备和存储介质 | |
CN113989469A (zh) | Ar景点显示方法及装置、电子设备和存储介质 | |
CN112817454A (zh) | 一种信息展示方法、装置、相关设备及存储介质 | |
CN113359983A (zh) | 增强现实数据呈现方法、装置、电子设备及存储介质 | |
CN113178017A (zh) | Ar数据展示方法、装置、电子设备及存储介质 | |
CN111899349A (zh) | 一种模型呈现方法、装置、电子设备及计算机存储介质 | |
CN111650953A (zh) | 飞行器避障处理方法、装置、电子设备及存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
RJ01 | Rejection of invention patent application after publication | ||
RJ01 | Rejection of invention patent application after publication |
Application publication date: 20210518 |