CN111462340B - Vr显示方法、设备及计算机存储介质 - Google Patents

Abstract

本发明公开了一种VR显示方法、设备及计算机存储介质，所述VR显示方法包括：在检测到VR显示指令时，获取预设虚拟视窗的采集范围内各实物的实物信息；获取所述各实物距离用户的第一距离；根据所述实物信息，所述第一距离以及预设的虚拟环境模型，将所述预设虚拟视窗的视窗范围内至少一个实物映射显示至预设虚拟环境中。本发明解决现有技术用户体验VR时，难以和现实环境进行交互，致使用户体验降低的技术难题。

Description

VR显示方法、设备及计算机存储介质

技术领域

本发明涉及虚拟现实技术领域，尤其涉及一种VR显示方法、设备及计算机存储介质。

背景技术

随着VR(Virtual Reality)虚拟现实技术的发展，越来越多的人们开始使用VR，以享受虚拟环境带来的乐趣，而目前用户在体验VR时，整个用户视角都是在虚拟环境中的，很难和现实环境进行交互，若用户体验VR时的体验场地过小时，整个用户视角都是在虚拟环境中致使用户容易磕碰到周边，即现有虚拟现实体验存在容易造成用户受伤等降低用户体验的技术问题。

发明内容

本发明的主要目的在于提供一种VR显示方法、设备及计算机存储介质，旨在解决现有技术用户体验VR时，难以和现实环境进行交互，致使用户体验降低的技术难题。

为实现上述目的，本发明实施例提供一种VR显示方法，所述VR显示方法包括：

在检测到VR显示指令时，获取预设虚拟视窗的采集范围内各实物的实物信息；

获取所述各实物距离用户的第一距离；

根据所述实物信息，所述第一距离以及预设的虚拟环境模型，将所述预设虚拟视窗的视窗范围内至少一个实物映射显示至预设虚拟环境中。

可选地，所述在检测到VR显示指令时，获取预设虚拟视窗的采集范围内各实物的实物信息步骤包括：

在接收到预设VR设备的前置相机的开启指令时，生成VR显示指令；

在检测到VR显示指令时，实时采集预设虚拟视窗的视窗范围内各实物的图像信息；

根据所述图像信息获取各实物的实物模型。

可选地，所述根据所述图像信息获取各实物的实物模型的步骤之前包括：

获取各实物的类型，判断所述预设VR设备对应服务器端是否存在各类型实物的实物模型；

当所述预设VR设备对应服务器端未存在各类型实物的实物模型时，根据预设识别算法对所述未存在实物模型的实物进行特征提取，以生成对应的实物模型。

可选地，所述预设VR设备上设置红外激光灯，所述获取所述各实物距离用户的第一距离步骤包括：

获取所述红外激光灯落在各实物中心点上的像素个数，采集所述像素个数的弧度值，以及所述弧度值对应的弧度误差；

获取所述红外激光灯与所述前置相机之间的第二距离；

根据所述像素个数、所述弧度值、所述弧度误差以及所述第二距离，确定所述各实物距离用户的第一距离。

可选地，所述根据所述图像信息获取各实物的实物模型的步骤包括：

实时获取所述预设虚拟视窗的视窗范围内所述各实物的图像信息构成的每帧数据；

对所述每帧数据进行各实物的实物模型的识别，并获取相应的识别时间；

若所述识别时间大于预设时间时，识别处理所述识别时间大于预设时间对应目标帧数据的顺承下一帧数据。

可选地，所述根据所述图像信息获取各实物的实物模型的步骤包括：

根据所述预设虚拟视窗的视窗范围内各实物的图像信息，判断所述预设虚拟视窗的视窗范围内各实物的位置是否发生变化；

当所述预设虚拟视窗的视窗范围内各实物的位置发生变化时，执行根据所述图像信息获取各实物的实物模型的步骤。

可选地，所述根据所述实物信息，所述第一距离以及预设的虚拟环境模型，将所述预设虚拟视窗的视窗范围内至少一个实物映射显示至预设虚拟环境中的步骤包括：

根据所述实物信息，所述第一距离以及预设的虚拟环境模型，将所述预设虚拟视窗的视窗范围内至少一个实物的实物模型与所述虚拟环境模型进行模型融合，得到融合信息；

刷新渲染显示所述融合信息。

可选地，所述渲染显示所述融合信息的步骤包括：

基于所述融合信息，确定所述至少一个实物在所述预设VR设备的预设画布中的目标显示位置；

若所述目标显示位置上不存在预设显示内容，则渲染显示所述融合信息以使所述至少一个实物显示在所述目标显示位置；

若所述目标显示位置上存在预设显示内容，则渲染显示所述融合信息以使所述至少一个实物显示在更新显示位置，其中，所述更新显示位置不同于所述目标显示位置。

可选地，所述根据所述实物信息，所述第一距离以及预设的虚拟环境模型，将所述预设虚拟视窗的视窗范围内至少一个实物映射显示至预设虚拟环境中的步骤包括：

获取预设的所述预设虚拟视窗的视窗范围内各实物映射显示至预设虚拟环境中的映射比例；

根据所述实物信息，所述第一距离以及所述映射比例，对应更新所述虚拟环境模型，以获取所述各实物在虚拟环境中的空间位置坐标，以将所述预设虚拟视窗的视窗范围内至少一个实物映射显示至预设虚拟环境中。

可选地，所述根据所述实物信息，所述第一距离以及预设的虚拟环境模型，将所述预设虚拟视窗的视窗范围内至少一个实物映射显示至预设虚拟环境中的步骤之后包括：

获取所述虚拟环境模型对应第一活动区间，并获取所述各实物对应的第二活动区间；

确定所述第二活动区间是否在所述第一活动区间范围内，若所述第二活动区间处于所述第一活动区间范围内时，生成预设选择框；

若检测到基于所述预设选择框生成的调整所述第一活动区间的调整指令时，对所述第一活动区间进行调整，以使所述第二活动区间未处于所述第一活动区间内。

本发明还提供一种VR显示设备，所述设备包括：存储器、处理器及存储在所述存储器上并可在所述处理器上运行的VR显示程序，所述VR显示程序被所述处理器执行时实现如上述任一项所述的VR显示方法的步骤。

本发明还提供一种计算机存储介质，所述计算机存储介质上存储有VR显示程序，所述VR显示程序被处理器执行时实现如下步骤：

在检测到VR显示指令时，获取预设虚拟视窗的采集范围内各实物的实物信息；

获取所述各实物距离用户的第一距离；

根据所述实物信息，所述第一距离以及预设的虚拟环境模型，将所述预设虚拟视窗的视窗范围内至少一个实物映射显示至预设虚拟环境中。

可选地，所述在检测到VR显示指令时，获取预设虚拟视窗的采集范围内各实物的实物信息步骤包括：

在接收到预设VR设备的前置相机的开启指令时，生成VR显示指令；

在检测到VR显示指令时，实时采集预设虚拟视窗的视窗范围内各实物的图像信息；

根据所述图像信息获取各实物的实物模型。

可选地，所述根据所述图像信息获取各实物的实物模型的步骤之前包括：

获取各实物的类型，判断所述预设VR设备对应服务器端是否存在各类型实物的实物模型；

当所述预设VR设备对应服务器端未存在各类型实物的实物模型时，根据预设识别算法对所述未存在实物模型的实物进行特征提取，以生成对应的实物模型。

可选地，所述预设VR设备上设置红外激光灯，所述获取所述各实物距离用户的第一距离步骤包括：

获取所述红外激光灯落在各实物中心点上的像素个数，采集所述像素个数的弧度值，以及所述弧度值对应的弧度误差；

获取所述红外激光灯与所述前置相机之间的第二距离；

根据所述像素个数、所述弧度值、所述弧度误差以及所述第二距离，确定所述各实物距离用户的第一距离。

可选地，所述根据所述图像信息获取各实物的实物模型的步骤包括：

实时获取所述预设虚拟视窗的视窗范围内所述各实物的图像信息构成的每帧数据；

对所述每帧数据进行各实物的实物模型的识别，并获取相应的识别时间；

若所述识别时间大于预设时间时，识别处理所述识别时间大于预设时间对应目标帧数据的顺承下一帧数据。

可选地，所述根据所述图像信息获取各实物的实物模型的步骤包括：

根据所述预设虚拟视窗的视窗范围内各实物的图像信息，判断所述预设虚拟视窗的视窗范围内各实物的位置是否发生变化；

当所述预设虚拟视窗的视窗范围内各实物的位置发生变化时，执行根据所述图像信息获取各实物的实物模型的步骤。

可选地，所述根据所述实物信息，所述第一距离以及预设的虚拟环境模型，将所述预设虚拟视窗的视窗范围内至少一个实物映射显示至预设虚拟环境中的步骤包括：

根据所述实物信息，所述第一距离以及预设的虚拟环境模型，将所述预设虚拟视窗的视窗范围内至少一个实物的实物模型与所述虚拟环境模型进行模型融合，得到融合信息；

刷新渲染显示所述融合信息。

可选地，所述渲染显示所述融合信息的步骤包括：

基于所述融合信息，确定所述至少一个实物在所述预设VR设备的预设画布中的目标显示位置；

若所述目标显示位置上不存在预设显示内容，则渲染显示所述融合信息以使所述至少一个实物显示在所述目标显示位置；

若所述目标显示位置上存在预设显示内容，则渲染显示所述融合信息以使所述至少一个实物显示在更新显示位置，其中，所述更新显示位置不同于所述目标显示位置。

可选地，所述根据所述实物信息，所述第一距离以及预设的虚拟环境模型，将所述预设虚拟视窗的视窗范围内至少一个实物映射显示至预设虚拟环境中的步骤包括：

获取预设的所述预设虚拟视窗的视窗范围内各实物映射显示至预设虚拟环境中的映射比例；

根据所述实物信息，所述第一距离以及所述映射比例，对应更新所述虚拟环境模型，以获取所述各实物在虚拟环境中的空间位置坐标，以将所述预设虚拟视窗的视窗范围内至少一个实物映射显示至预设虚拟环境中。

可选地，所述根据所述实物信息，所述第一距离以及预设的虚拟环境模型，将所述预设虚拟视窗的视窗范围内至少一个实物映射显示至预设虚拟环境中的步骤之后包括：

获取所述虚拟环境模型对应第一活动区间，并获取所述各实物对应的第二活动区间；

确定所述第二活动区间是否在所述第一活动区间范围内，若所述第二活动区间处于所述第一活动区间范围内时，生成预设选择框；

若检测到基于所述预设选择框生成的调整所述第一活动区间的调整指令时，对所述第一活动区间进行调整，以使所述第二活动区间未处于所述第一活动区间内。

本发明在检测到VR显示指令时，获取预设虚拟视窗的采集范围内各实物的实物信息；获取所述各实物距离用户的第一距离；根据所述实物信息，所述第一距离以及预设的虚拟环境模型，将所述预设虚拟视窗的视窗范围内至少一个实物映射显示至预设虚拟环境中。在本申请中，在预设VR设备中设置预设虚拟视窗，基于预设虚拟视窗进行现实与虚拟的交互，具体地，在检测到VR显示指令时，获取预设虚拟视窗的采集范围内各实物的实物信息，在获取实物信息后，获取所述各实物距离用户的第一距离；根据所述实物信息，所述第一距离以及预设的虚拟环境模型，将所述预设虚拟视窗的视窗范围内至少一个实物映射显示至预设虚拟环境中，即是本申请实现将视窗范围内各实物的实物信息投射至预设虚拟环境中，致使处于虚拟环境中的用户能够实现在虚拟环境中查看到现实环境的实物状态等，即是用户在体验虚拟现实时，能够及时与现实进行交互以避免磕碰，提升用户体验。

附图说明

图1为本发明VR显示方法第一实施例的流程示意图；

图2为本发明VR显示方法第二实施例中在检测到VR显示指令时，获取预设虚拟视窗的采集范围内各实物的实物信息步骤的细化流程示意图；

图3是本发明实施例方法涉及的硬件运行环境的设备结构示意图；

图4为本发明VR显示方法中的场景示意图；

本发明目的的实现、功能特点及优点将结合实施例，参照附图做进一步说明。

具体实施方式

应当理解，此处所描述的具体实施例仅仅用以解释本发明，并不用于限定本发明。

本发明提供一种VR显示方法，在VR显示方法一实施例中，参照图1，所述VR显示方法包括：

步骤S10，在检测到VR显示指令时，获取预设虚拟视窗的采集范围内各实物的实物信息；

步骤S20，获取所述各实物距离用户的第一距离；

步骤S30，根据所述实物信息，所述第一距离以及预设的虚拟环境模型，将所述预设虚拟视窗的视窗范围内至少一个实物映射显示至预设虚拟环境中。

具体步骤如下：

步骤S10，在检测到VR显示指令时，获取预设虚拟视窗的采集范围内各实物的实物信息；

在本实施例中，在检测到VR显示指令时，获取预设虚拟视窗的采集范围内各实物的实物信息，具体地，VR显示指令包括多种触发方式如：在预设VR设备开启时即自动触发VR显示指令，或者在检测到用户的预设触摸操作时，触发VR显示指令等，在检测到VR显示指令时，可以是基于预设相机或者摄像头获取预设VR设备的预设虚拟视窗的视窗范围内各实物的实物信息，其中，视窗范围内可以定义为是相机能够采集的范围，视窗范围也可以是其他定义类型的范围如某一视角的范围，在此不做具体限定，在本实施例中实物信息指的是现实物体如家具，水果等物体或者实物的颜色，模型以及大小等信息。

具体地，参照图2，所述在检测到VR显示指令时，获取预设虚拟视窗的采集范围内各实物的实物信息步骤包括：

步骤S11，在接收到预设VR设备的前置相机的开启指令时，生成VR显示指令；

VR显示方法应用于VR显示设备中，在该VR显示设备中，设置有预设虚拟视窗，在该预设虚拟视窗处，可以设置有相机特别是前置相机等采集实物信息的摄像工具，具体地，以设置有前置相机为例进行具体说明，本实施例中前置相机可以一直开启以保持录像或者采集照片的状态，其中，该前置相机也可以是处于未开启的状态，当接收到交互指令时，然后再开启，具体地，可以在接收到预设VR设备的前置相机的开启指令时，生成VR显示指令，进而根据交互指令，开启前置相机，其中，需要说明的是，本实施例中前置相机在录像时，可以采用FPS((Frames Per Second，图像领域中的定义，画面每秒传输帧数大于90)方式进行录像，采用FPS方式进行录像的原因在于虚拟环境UI界面刷新的时间限制为1000/60＝16ms，在UI界面刷新的时间内用户不会观察到画面刷新，因而画面每秒传输帧数需要小于16ms，而1000/90＝11ms，这样可以给预留5ms的时间进行其他处理如图像识别分析处理等，以便于用户在虚拟环境中及时流畅的得到前置相机采集并显示在虚拟环境中的视频流(根据前置相机采集的实物信息等生成的)。

步骤S12，在检测到VR显示指令时，实时采集预设虚拟视窗的视窗范围内各实物的图像信息；

在本实施例中，在检测到VR显示指令时，每间隔预设时间段或者实时采集预设虚拟视窗的视窗范围内各实物的图像信息，即是通过前置相机实时录制视窗范围内包括各实物的视频信息。

步骤S13，根据所述图像信息获取各实物的实物模型。

在获取图像信息或者是视频信息后，根据所述图像信息获取各实物的实物模型，具体地，首先根据图像信息获取各个实物的类型，在获取类型后，根据类型在本地资源库或者是云端服务器中获取该实物对应的模型，需要说明的是，获取类型后，根据类型在本地资源库或者是云端服务器中获取该实物对应的模型，对于统一类型不同大小的实物，可以对应对该模型进行大小的调整，在获取实物模型后，本实施例中还采集实物的颜色，采集实物的颜色在于提升用户识别实物的准确性。

所述根据所述图像信息获取各实物的实物模型的步骤包括：

步骤S131，根据所述预设虚拟视窗的视窗范围内各实物的图像信息，判断所述预设虚拟视窗的视窗范围内各实物的位置是否发生变化；

在本实施例中，用户在体验虚拟现实时，由于体验场地的限制，可能发生磕碰等，该可能与用户发生磕碰的物体大部分可能是不动的物体如家具，或者水果等，因而，为了减少交互过程中的计算量，在本实施例中，实时采集所述预设虚拟视窗的视窗范围内各实物的图像信息后，还判断所述预设虚拟视窗的视窗范围内各实物的位置是否发生变化，具体地，通过预设的坐标确定仪器确定所述预设虚拟视窗的视窗范围内各实物的位置是否发生变化。

步骤S132，当所述预设虚拟视窗的视窗范围内各实物的位置发生变化时，执行根据所述图像信息获取各实物的实物模型的步骤。

当所述预设虚拟视窗的视窗范围内各实物的位置发生变化时，执行根据所述图像信息获取各实物的实物模型的步骤，当所述预设虚拟视窗的视窗范围内各实物的位置未发生变化时，不执行根据所述图像信息获取各实物的实物模型的步骤，以节约资源。

步骤S20，获取所述各实物距离用户的第一距离；

获取所述各实物距离用户的第一距离，获取所述各实物距离用户的第一距离包括：从所述各实物中选择参照实物，获取参照实物距离用户的第一距离，再根据参照实物确定其他实物至用户的距离，其中，参照实物距离用户的第一距离的确定方式可以为：在预设VR设备上设置红外仪器(红外仪器的)通过红外仪器的照射光线以及反射光线确定参照实物距离用户的第一距离。

在本实施例中，所述预设VR设备上设置红外激光灯，所述获取所述各实物距离用户的第一距离步骤包括：

步骤S21，获取所述红外激光灯落在各实物中心点上的像素个数，采集所述像素个数的弧度值，以及所述弧度值对应的弧度误差；

步骤S22，获取所述红外激光灯与所述前置相机之间的第二距离；

步骤S23，根据所述像素个数、所述弧度值、所述弧度误差以及所述第二距离，确定所述各实物距离用户的第一距离。

具体地，如图4所示，所述预设VR设备上设置红外激光灯(laser lamp)，根据以下公式D＝H/tanθ计算所述各实物距离用户的第一距离，其中，D即是代表第一距离，等式中H是一个常量，是前置相机(camera)和红外激光灯之间的垂直距离即第二距离，可以直接测量，θ可通过公式θ＝h*m+n计算得到，其中，h是所述红外激光灯落在各实物中心点上的像素个数，m是每个像素的弧度值，n是弧度值对应弧度误差，弧度值，以及所述弧度值对应的弧度误差都是通过测量得到，在得到所述像素个数、所述弧度值、所述弧度误差以及所述第二距离后，根据公式D＝H/tan(h*m+n)计算得到第一距离。

步骤S30，根据所述实物信息，所述第一距离以及预设的虚拟环境模型，将所述预设虚拟视窗的视窗范围内至少一个实物映射显示至预设虚拟环境中。

在本实施例中，在得到第一距离后，根据所述实物信息，所述第一距离以及预设的虚拟环境模型，将所述预设虚拟视窗的视窗范围内至少一个实物映射显示至预设虚拟环境中，即是将现实中的实物通过坐标映射至原有的虚拟环境模型中，实现在预设虚拟环境中显示。

在本实施例中，为了避免可能存在的各实物映射显示至预设虚拟环境中后遮挡虚拟游戏画面的情况，将所述预设虚拟视窗的视窗范围内各实物透明映射或者半透明映射显示至预设虚拟环境中，也即，在本实施例中，在显示之前，对各实物进行预设透明或者半透明处理，另外，为了避免遮挡虚拟游戏画面的情况，还可以将所述视窗范围内各实物映射显示在预设虚拟环境的预设悬浮窗口内，该预设悬浮窗口预先设置在虚拟环境的边框范围内，以避免遮挡游戏画面，另外，在本实施例中，该预设悬浮窗口可以包括显示和隐藏两种状态，只有在用户与现实中的实物的距离小于确定的距离时，才显示，进而提醒用户。

本发明在检测到VR显示指令时，获取预设虚拟视窗的采集范围内各实物的实物信息；获取所述各实物距离用户的第一距离；根据所述实物信息，所述第一距离以及预设的虚拟环境模型，将所述预设虚拟视窗的视窗范围内至少一个实物映射显示至预设虚拟环境中。在本申请中，在预设VR设备中设置预设虚拟视窗，基于预设虚拟视窗进行现实与虚拟的交互，具体地，在检测到VR显示指令时，获取预设虚拟视窗的采集范围内各实物的实物信息，在获取实物信息后，获取所述各实物距离用户的第一距离；根据所述实物信息，所述第一距离以及预设的虚拟环境模型，将所述预设虚拟视窗的视窗范围内至少一个实物映射显示至预设虚拟环境中，即是本申请实现将视窗范围内各实物的实物信息投射至预设虚拟环境中，致使处于虚拟环境中的用户能够实现在虚拟环境中查看到现实环境的实物状态等，即是用户在体验虚拟现实时，能够及时与现实进行交互以避免磕碰，提升用户体验。

进一步地，基于上述实施例，本发明提供VR显示方法的另一实施例，在该实施例中，所述根据所述图像信息获取各实物的实物模型的步骤之前包括：

步骤S01，获取各实物的类型，判断所述预设VR设备对应服务器端是否存在各类型实物的实物模型；

在本实施例中，本地以及服务器端预存的实物模型库中可能有前置相机采集的图像中各个实物的实物模型，另外，本地以及服务器端预存的实物模型库中也有可能未存在前置相机采集的图像中实物的实物模型，而本地以及服务器端预存的实物模型库中，实物模型是根据实物的类型确定的，因而，获取各实物的类型，判断所述预设VR设备对应服务器端是否存在各类型实物的实物模型。

步骤S02，当所述预设VR设备对应服务器端未存在各类型实物的实物模型时，根据预设识别算法对所述未存在实物模型的实物进行特征提取，以生成对应的实物模型。

当所述预设VR设备对应服务器端未存在各类型实物的实物模型时，根据预设识别算法对所述未存在实物模型的实物进行特征提取，以生成对应的实物模型，具体地，根据预设识别算法对所述未存在实物模型的实物进行结构特征如圆形或者方型特征(圆形或者方型特征等多个特征结合等)的提取，以生成对应的实物模型。例如，经过预设识别算法如OpenCV DNN对水果(苹果、橘子、香蕉、橙子等)，家具(桌子、座椅等)，实物(茶杯、水桶等圆柱体)进行实物结构特征提取，以生成对应的实物模型。

在本实施例中，通过获取各实物的类型，判断所述预设VR设备对应服务器端是否存在各类型实物的实物模型；当所述预设VR设备对应服务器端未存在各类型实物的实物模型时，根据预设识别算法对所述未存在实物模型的实物进行特征提取，以生成对应的实物模型。在本实施例中，还生成对应的实物模型，提升实物信息获取的广度。

进一步地，基于上述实施例，本发明提供VR显示方法的另一实施例，在该实施例中，所述根据所述图像信息获取各实物的实物模型的步骤包括：

步骤A1，实时获取所述预设虚拟视窗的视窗范围内所述各实物的图像信息构成的每帧数据；

步骤A2，对所述每帧数据进行各实物的实物模型的识别，并获取相应的识别时间；

步骤A3，若所述识别时间大于预设时间时，识别处理所述识别时间大于预设时间对应目标帧数据的顺承下一帧数据。

在本实施例中，在获取前置相机录像的视频流后，实时获取所述预设虚拟视窗的视窗范围内所述各实物的图像信息构成的每帧数据，在获取每帧数据后，对录像的每帧数据按照FIFO队列进行处理，即对所述每帧数据进行各实物的实物模型的识别，并获取相应的识别时间，若所述识别时间大于预设时间时，识别处理所述识别时间大于预设时间对应目标帧数据的顺承下一帧数据，即识别如果有阻塞，比如上一帧数据的处理时间>5ms，则跳过该帧数据，处理下一帧数据，以保持用户视窗范围内的实物信息和虚拟环境中显示的信息保持映射同步。

在本实施例中，实时获取所述预设虚拟视窗的视窗范围内所述各实物的图像信息构成的每帧数据；对所述每帧数据进行各实物的实物模型的识别，并获取相应的识别时间；若所述识别时间大于预设时间时，识别处理所述识别时间大于预设时间对应目标帧数据的顺承下一帧数据。本实施例中能够有效避免交互阻塞的情况。

进一步地，基于上述实施例，本发明提供VR显示方法的另一实施例，在该实施例中，所述根据所述实物信息，所述第一距离以及预设的虚拟环境模型，将所述预设虚拟视窗的视窗范围内至少一个实物映射显示至预设虚拟环境中的步骤包括：

步骤S31，获取预设的所述预设虚拟视窗的视窗范围内各实物映射显示至预设虚拟环境中的映射比例；

在本实施例中，具体阐述如何实现将视窗范围内各实物映射显示至预设虚拟环境中，即首先获取预设的所述预设虚拟视窗的视窗范围内各实物映射显示至预设虚拟环境中的映射比例，具体地，获取预设的所述预设虚拟视窗的视窗范围内各实物模型映射显示至预设虚拟环境中的映射比例。

步骤S32，根据所述实物信息，所述第一距离以及所述映射比例，对应更新所述虚拟环境模型，以获取所述各实物在虚拟环境中的空间位置坐标，以将所述预设虚拟视窗的视窗范围内至少一个实物映射显示至预设虚拟环境中。

根据所述实物信息，所述第一距离以及所述映射比例，对应更新所述虚拟环境模型，以获取所述各实物在虚拟环境中的空间位置坐标，具体地，虚拟环境模型是已经训练好的将预设虚拟视窗的视窗范围内的实物进行准确投射的模型，因而，只需要更改虚拟环境模型的参数如实物信息，实物信息，以及映射比例等即可实现准确投射，具体地，只需要获取所述实物信息，所述实物信息以及所述映射比例，以获取所述各实物在虚拟环境中的空间位置坐标，即可将所述预设虚拟视窗的视窗范围内至少一个实物映射显示至预设虚拟环境中。

在本实施例中，通过获取预设的所述预设虚拟视窗的视窗范围内各实物映射显示至预设虚拟环境中的映射比例；根据所述实物信息，所述第一距离以及所述映射比例，对应更新所述虚拟环境模型，以获取所述各实物在虚拟环境中的空间位置坐标，以将所述预设虚拟视窗的视窗范围内至少一个实物映射显示至预设虚拟环境中。在本实施例中，实现准确将所述预设虚拟视窗的视窗范围内至少一个实物映射显示至预设虚拟环境中。

进一步地，基于上述实施例，本发明提供VR显示方法的另一实施例，在该实施例中，所述根据所述实物信息，所述第一距离以及预设的虚拟环境模型，将所述预设虚拟视窗的视窗范围内至少一个实物映射显示至预设虚拟环境中的步骤之后包括：

步骤B1，获取所述虚拟环境模型对应第一活动区间，并获取所述各实物对应的第二活动区间；

在本实施例中，虚拟环境模型是对应预存有第一活动区间的，如第一活动区间为距离屏幕中心点长3米，宽2米范围内，获取所述各实物对应的第二活动区间，各实物对应的第二活动区间可以为在距离屏幕中心点正前方2米处，且大小为长50cm，宽70cm，各实物对应的第二活动区间也可以为在距离屏幕中心点正前方2米处，且大小为长50cm，宽70cm。

步骤B2，确定所述第二活动区间是否在所述第一活动区间范围内，若所述第二活动区间处于所述第一活动区间范围内时，生成预设选择框；

确定所述第二活动区间是否在所述第一活动区间范围内，若所述第二活动区间处于所述第一活动区间范围内时，生成预设选择框，本实施例中要在检测到所述第二活动区间处于所述第一活动区间范围内的事件时，响应该检测到所述第二活动区间处于所述第一活动区间范围内的事件以生成预设选择框，需要事先在内置的处理器中设置预设选择框生成的程序段，该程序段表示确定检测到所述第二活动区间处于所述第一活动区间范围内的处理逻辑，该处理逻辑用于检测到所述第二活动区间处于所述第一活动区间范围内的事件时，触发处理器响应，以生成并显示预设选择框。

步骤B3，若检测到基于所述预设选择框生成的调整所述第一活动区间的调整指令时，对所述第一活动区间进行调整，以使所述第二活动区间未处于所述第一活动区间内。

若检测到基于所述预设选择框生成的调整所述第一活动区间的调整指令时(可以用户人为触发或者是***自动触发调整指令)，对所述第一活动区间进行调整，具体地，根据第一活动区间与第二活动区间的位置关联关系进行调整，使所述第二活动区间未处于所述第一活动区间内。

在本实施例中，通过获取所述虚拟环境模型对应第一活动区间，并获取所述各实物对应的第二活动区间；确定所述第二活动区间是否在所述第一活动区间范围内，若所述第二活动区间处于所述第一活动区间范围内时，生成预设选择框；若检测到基于所述预设选择框生成的调整所述第一活动区间的调整指令时，对所述第一活动区间进行调整，以使所述第二活动区间未处于所述第一活动区间内。在本实施例中，提升用户体验。

进一步地，基于上述实施例，本发明提供VR显示方法的另一实施例，在该实施例中，可选地，所述根据所述实物信息，所述第一距离以及预设的虚拟环境模型，将所述预设虚拟视窗的视窗范围内至少一个实物映射显示至预设虚拟环境中的步骤包括：

步骤C1，根据所述实物信息，所述第一距离以及预设的虚拟环境模型，将所述预设虚拟视窗的视窗范围内至少一个实物的实物模型与所述虚拟环境模型进行模型融合，得到融合信息；

在本实施例中，在得到实物信息后，获取实物信息中的实物模型(其中，模型中实物显示大小，以及显示透明度等参数，用户可以自定义调节)，根据第一距离以及预设的虚拟环境模型，将所述预设虚拟视窗的视窗范围内至少一个实物的实物模型与所述虚拟环境模型进行模型融合，具体地，例如，水杯是实物，预先存在于立体场景中，因而，首先获取水杯模型，将水杯模型和数据模型融合后，得到融合信息，需要是说明的是，在本实施例中，还存储有不存在水杯等实物时的虚拟模型对应的待显示虚拟信息。需要说明的是，模型融合的速率与屏幕刷新的速率是相同的或者是保持一致的，

步骤C2，刷新渲染显示所述融合信息。

在得到融合信息后，刷新渲染显示所述融合信息，其中，画面渲染频率和屏幕刷新率保持一致。由于刷新渲染显示所述融合信息，因而，在本实施例中，保证画面可以实时追踪实物的移动状态，实现及时提醒用户当前可能发生碰撞的实物。

其中，所述渲染显示所述融合信息的步骤包括：

步骤D1，基于所述融合信息，确定所述至少一个实物在所述预设VR设备的预设画布中的目标显示位置；

基于所述融合信息，确定所述至少一个实物在所述预设VR设备的预设画布中的目标显示位置，如目标显示位置为a位置。

步骤D2，判断所述目标显示位置是否存在预设显示内容；

判断所述目标显示位置是否存在预设显示内容，具体地，通过将融合信息与未融合时对应的待显示虚拟信息进行比对，判断所述目标显示位置是否存在预设显示内容。

步骤D3，若所述目标显示位置上不存在预设显示内容，则渲染显示所述融合信息以使所述至少一个实物显示在所述目标显示位置；

步骤D4，若所述目标显示位置上存在预设显示内容，则渲染显示所述融合信息以使所述至少一个实物显示在更新显示位置，其中，所述更新显示位置不同于所述目标显示位置。

若所述目标显示位置上不存在预设显示内容，则渲染显示所述融合信息以使所述至少一个实物显示在所述目标显示位置，特别地，则渲染显示所述融合信息中的实物信息以使所述至少一个实物显示在所述目标显示位置，以提醒用户当前存在障碍物等实物。若所述目标显示位置上存在预设显示内容，为避免影响用户的VR体验，如遮挡游戏画面等，则渲染显示所述融合信息以使所述至少一个实物显示在更新显示位置，其中，所述更新显示位置不同于所述目标显示位置，且所述更新显示位置上不存在预设显示内容。在本实施例中，实现在保证不影响用户体验VR的基础上，支持显示实物。

在本实施例中，通过根据所述实物信息，所述第一距离以及预设的虚拟环境模型，将所述预设虚拟视窗的视窗范围内至少一个实物的实物模型与所述虚拟环境模型进行模型融合，得到融合信息；刷新渲染显示所述融合信息。实现及时提醒用户当前可能发生碰撞的实物，提升用户体验。

参照图3，图3是本发明实施例方案涉及的硬件运行环境的设备结构示意图。

本发明实施例VR显示设备可以是PC，也可以是智能手机、平板电脑、便携计算机等终端设备。

如图3所示，该VR显示设备可以包括：处理器1001，例如CPU，存储器1005，通信总线1002。其中，通信总线1002用于实现处理器1001和存储器1005之间的连接通信。存储器1005可以是高速RAM存储器，也可以是稳定的存储器(non-volatile memory)，例如磁盘存储器。存储器1005可选的还可以是独立于前述处理器1001的存储设备。

可选地，该VR显示设备还可以包括目标用户接口、网络接口、摄像头、RF(RadioFrequency，射频)电路，传感器、音频电路、WiFi模块等等。目标用户接口可以包括显示屏(Display)、输入单元比如键盘(Keyboard)，可选目标用户接口还可以包括标准的有线接口、无线接口。网络接口可选的可以包括标准的有线接口、无线接口(如WI-FI接口)。

本领域技术人员可以理解，图3中示出的VR显示设备结构并不构成对VR显示设备的限定，可以包括比图示更多或更少的部件，或者组合某些部件，或者不同的部件布置。

如图3所示，作为一种计算机存储介质的存储器1005中可以包括操作***、网络通信模块以及VR显示程序。操作***是管理和控制VR显示设备硬件和软件资源的程序，支持VR显示程序以及其它软件和/或程序的运行。网络通信模块用于实现存储器1005内部各组件之间的通信，以及与VR显示设备中其它硬件和软件之间通信。

在图3所示的VR显示设备中，处理器1001用于执行存储器1005中存储的VR显示程序，实现上述任一项所述的VR显示方法的步骤。

本发明VR显示设备具体实施方式与上述VR显示方法各实施例基本相同，在此不再赘述。

此外，本发明还提供了一种计算机存储介质，所述计算机存储介质存储有一个或者一个以上程序，所述一个或者一个以上程序还可被一个或者一个以上的处理器执行以用于实现上述VR显示方法各实施例的步骤。

本发明设备及计算机存储介质的具体实施方式的拓展内容与上述VR显示方法各实施例基本相同，在此不做赘述。

需要说明的是，在本文中，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者装置不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者装置所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括该要素的过程、方法、物品或者装置中还存在另外的相同要素。

上述本发明实施例序号仅仅为了描述，不代表实施例的优劣。

通过以上的实施方式的描述，本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现，当然也可以通过硬件，但很多情况下前者是更佳的实施方式。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质(如ROM/RAM、磁碟、光盘)中，包括若干指令用以使得一台终端(可以是手机，计算机，服务器，空调器，或者网络设备等)执行本发明各个实施例所述的方法。

上面结合附图对本发明的实施例进行了描述，但是本发明并不局限于上述的具体实施方式，上述的具体实施方式仅仅是示意性的，而不是限制性的，本领域的普通技术人员在本发明的启示下，在不脱离本发明宗旨和权利要求所保护的范围情况下，还可做出很多形式，这些均属于本发明的保护之内。

Claims (11)

1.一种VR显示方法，其特征在于，所述VR显示方法包括：

在检测到VR显示指令时，实时采集预设虚拟视窗的视窗范围内各实物的图像信息；

根据所述图像信息获取各实物的实物模型；

实时获取所述预设虚拟视窗的视窗范围内所述各实物的图像信息构成的每帧数据；

对所述每帧数据进行各实物的实物模型的识别，并获取相应的识别时间；

若所述识别时间大于预设时间时，识别处理所述识别时间大于预设时间对应目标帧数据的顺承下一帧数据；

获取所述各实物距离用户的第一距离；

根据所述实物信息，所述第一距离以及预设的虚拟环境模型，将所述预设虚拟视窗的视窗范围内至少一个实物映射显示至预设虚拟环境中。

2.如权利要求1所述的VR显示方法，其特征在于，所述在检测到VR显示指令时，获取预设虚拟视窗的采集范围内各实物的实物信息步骤包括：

在接收到预设VR设备的前置相机的开启指令时，生成VR显示指令。

3.如权利要求2所述的VR显示方法，其特征在于，所述根据所述图像信息获取各实物的实物模型的步骤之前包括：

获取各实物的类型，判断所述预设VR设备对应服务器端是否存在各类型实物的实物模型；

当所述预设VR设备对应服务器端未存在各类型实物的实物模型时，根据预设识别算法对所述未存在实物模型的实物进行特征提取，以生成对应的实物模型。

4.如权利要求2所述的VR显示方法，其特征在于，所述预设VR设备上设置红外激光灯，所述获取所述各实物距离用户的第一距离步骤包括：

获取所述红外激光灯落在各实物中心点上的像素个数，采集所述像素个数的弧度值，以及所述弧度值对应的弧度误差；

获取所述红外激光灯与所述前置相机之间的第二距离；

根据所述像素个数、所述弧度值、所述弧度误差以及所述第二距离，确定所述各实物距离用户的第一距离。

5.如权利要求2所述的VR显示方法，其特征在于，所述根据所述图像信息获取各实物的实物模型的步骤包括：

根据所述预设虚拟视窗的视窗范围内各实物的图像信息，判断所述预设虚拟视窗的视窗范围内各实物的位置是否发生变化；

当所述预设虚拟视窗的视窗范围内各实物的位置发生变化时，执行根据所述图像信息获取各实物的实物模型的步骤。

6.如权利要求2所述的VR显示方法，其特征在于，所述根据所述实物信息，所述第一距离以及预设的虚拟环境模型，将所述预设虚拟视窗的视窗范围内至少一个实物映射显示至预设虚拟环境中的步骤包括：

根据所述实物信息，所述第一距离以及预设的虚拟环境模型，将所述预设虚拟视窗的视窗范围内至少一个实物的实物模型与所述虚拟环境模型进行模型融合，得到融合信息；

刷新渲染显示所述融合信息。

7.如权利要求6所述的VR显示方法，其特征在于，所述渲染显示所述融合信息的步骤包括：

基于所述融合信息，确定所述至少一个实物在所述预设VR设备的预设画布中的目标显示位置；

判断所述目标显示位置是否存在预设显示内容；

若所述目标显示位置上不存在预设显示内容，则渲染显示所述融合信息以使所述至少一个实物显示在所述目标显示位置；

若所述目标显示位置上存在预设显示内容，则渲染显示所述融合信息以使所述至少一个实物显示在更新显示位置，其中，所述更新显示位置不同于所述目标显示位置。

8.如权利要求1-7任一项所述的VR显示方法，其特征在于，所述根据所述实物信息，所述第一距离以及预设的虚拟环境模型，将所述预设虚拟视窗的视窗范围内至少一个实物映射显示至预设虚拟环境中的步骤包括：

获取预设的所述预设虚拟视窗的视窗范围内各实物映射显示至预设虚拟环境中的映射比例；

根据所述实物信息，所述第一距离以及所述映射比例，对应更新所述虚拟环境模型，以获取所述各实物在虚拟环境中的空间位置坐标，以将所述预设虚拟视窗的视窗范围内至少一个实物映射显示至预设虚拟环境中。

9.如权利要求1所述的VR显示方法，其特征在于，所述根据所述实物信息，所述第一距离以及预设的虚拟环境模型，将所述预设虚拟视窗的视窗范围内至少一个实物映射显示至预设虚拟环境中的步骤之后包括：

获取所述虚拟环境模型对应第一活动区间，并获取所述各实物对应的第二活动区间；

确定所述第二活动区间是否在所述第一活动区间范围内，若所述第二活动区间处于所述第一活动区间范围内时，生成预设选择框；

若检测到基于所述预设选择框生成的调整所述第一活动区间的调整指令时，对所述第一活动区间进行调整，以使所述第二活动区间未处于所述第一活动区间内。

10.一种VR显示设备，其特征在于，所述设备包括：存储器、处理器及存储在所述存储器上并可在所述处理器上运行的VR显示程序，所述VR显示程序被所述处理器执行时实现如权利要求1至9中任一项所述的VR显示方法的步骤。

11.一种计算机存储介质，其特征在于，所述计算机存储介质上存储有VR显示程序，所述VR显示程序被处理器执行时实现如权利要求1至10中任一项所述的VR显示方法的步骤。