CN106095235A - 基于虚拟现实的控制方法和装置 - Google Patents
基于虚拟现实的控制方法和装置 Download PDFInfo
- Publication number
- CN106095235A CN106095235A CN201610399197.XA CN201610399197A CN106095235A CN 106095235 A CN106095235 A CN 106095235A CN 201610399197 A CN201610399197 A CN 201610399197A CN 106095235 A CN106095235 A CN 106095235A
- Authority
- CN
- China
- Prior art keywords
- terminal
- virtual
- virtual reality
- control
- information
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T19/00—Manipulating 3D models or images for computer graphics
- G06T19/006—Mixed reality
Landscapes
- Engineering & Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Computer Graphics (AREA)
- Computer Hardware Design (AREA)
- Software Systems (AREA)
- Human Computer Interaction (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
本发明公开了一种基于虚拟现实的控制方法和装置。其中,该方法包括:在虚拟现实场景中显示虚拟终端;在虚拟现实场景中接收操作信息,其中,操作信息用于指示在物理终端上检测到的操作;以及对虚拟终端执行操作信息指示的操作。本发明解决了相关技术通过操作头盔显示器控制虚拟现实场景中的控制对象,导致控制效率较低的技术问题。
Description
技术领域
本发明涉及计算机领域,具体而言,涉及一种基于虚拟现实的控制方法和装置。
背景技术
虚拟现实(Virtual Reality,简称为VR)是利用电脑模拟产生一个三度空间的虚拟世界,以提供给用户关于视觉、听觉、触觉等感官的模拟,让用户如同身临其境一般,可以及时、没有限制的观察三度空间内的事物。目前,头盔显示器作为虚拟现实技术的一种常用设备,在屏蔽现实世界的同时,可以提供高分辨率、大视场角的虚拟场景,并带有立体声耳机,可以使人产生强烈的沉浸感。为了实现与虚拟现实的交互,相关技术通常通过操作头盔显示器控制虚拟现实场景中的控制对象,比如,利用头盔显示器的重力和位置感应功能,通过操作头盔显示器移动使得虚拟现实场景中所显示的画面进行切换。然而,上述通过操作头盔显示器控制虚拟现实场景中的控制对象不仅会造成用户因频繁移动所佩戴的头盔显示器所带来的不舒适感觉,而且头盔显示器操作较为不方便,严重降低了对虚拟现实场景中的控制对象的控制效率。
针对上述的问题,目前尚未提出有效的解决方案。
发明内容
本发明实施例提供了一种基于虚拟现实的控制方法和装置,以至少解决相关技术通过操作头盔显示器控制虚拟现实场景中的控制对象,导致控制效率较低的技术问题。
根据本发明实施例的一个方面,提供了一种基于虚拟现实的控制方法,包括:在虚拟现实场景中显示虚拟终端;在虚拟现实场景中接收操作信息,其中,操作信息用于指示在物理终端上检测到的操作;以及对虚拟终端执行操作信息指示的操作。
根据本发明实施例的另一方面,还提供了一种基于虚拟现实的控制装置,包括:显示单元,在虚拟现实场景中显示虚拟终端;接收单元,用于在虚拟现实场景中接收操作信息,其中,操作信息用于指示在物理终端上检测到的操作;以及执行单元,用于对虚拟终端执行操作信息指示的操作。
在本发明实施例中,通过在虚拟现实场景中显示虚拟终端,按照在物理终端上检测到的操作对应的操作信息对虚拟终端执行相应操作,达到了利用物理终端控制虚拟现实场景的目的,从而实现了提高对虚拟现实场景中的控制对象的控制效率的技术效果,进而解决了相关技术通过操作头盔显示器控制虚拟现实场景中的控制对象,导致控制效率较低的技术问题。
附图说明
此处所说明的附图用来提供对本发明的进一步理解,构成本申请的一部分,本发明的示意性实施例及其说明用于解释本发明,并不构成对本发明的不当限定。在附图中:
图1是根据本发明实施例的基于虚拟现实的控制方法的硬件环境的示意图;
图2是根据本发明实施例的一种可选的基于虚拟现实的控制方法的流程图;
图3是根据本发明优选实施例的基于虚拟现实的控制方法的流程图;
图4是根据本发明优选实施例的游戏虚拟现实场景的示意图;
图5是根据本发明优选实施例的视频播放虚拟现实场景的示意图;
图6是根据本发明优选实施例的视频切换虚拟现实场景的示意图;
图7是根据本发明优选实施例的基于虚拟现实的控制方法的硬件架构的示意图;
图8是根据本发明实施例的一种可选的基于虚拟现实的控制装置的示意图;
图9是根据本发明实施例的另一种可选的基于虚拟现实的控制装置的示意图;
图10是根据本发明实施例的再一种可选的基于虚拟现实的控制装置的示意图;
图11是根据本发明实施例的又一种可选的基于虚拟现实的控制装置的示意图;以及
图12是根据本发明实施例的一种终端的结构框图。
具体实施方式
为了使本技术领域的人员更好地理解本发明方案,下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分的实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都应当属于本发明保护的范围。
需要说明的是,本发明的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象,而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换,以便这里描述的本发明的实施例能够以除了在这里图示或描述的那些以外的顺序实施。此外,术语“包括”和“具有”以及他们的任何变形,意图在于覆盖不排他的包含,例如,包含了一系列步骤或单元的过程、方法、***、产品或设备不必限于清楚地列出的那些步骤或单元,而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。
首先,在对本发明实施例进行描述的过程中出现的部分名词或者术语适用于如下解释:
虚拟现实(Virtual Reality,简称为VR),是综合利用计算机图形***和各种现实及控制等接口设备,在计算机上生成的、可交互的三维环境中提供沉浸感觉的技术。其中,计算机生成的、可交互的三维环境称为虚拟环境。虚拟现实技术是一种可以创建和体验虚拟世界的计算机仿真***的技术,它利用计算机生成一种模拟环境,利用多源信息融合的交互式三维动态视景和实体行为的***仿真使用户沉浸到该环境中。
实施例1
根据本发明实施例,提供了一种基于虚拟现实的控制方法的方法实施例。
可选地,在本实施例中,上述基于虚拟现实的控制方法可以应用于如图1所示的由服务器102和终端104所构成的硬件环境中。如图1所示,服务器102通过网络与终端104进行连接,上述网络包括但不限于:广域网、城域网或局域网,终端104并不限定于PC、手机、平板电脑等。本发明实施例的基于虚拟现实的控制方法可以由服务器102来执行,也可以由终端104来执行,还可以是由服务器102和终端104共同执行。其中,终端104执行本发明实施例的基于虚拟现实的控制方法也可以是由安装在其上的客户端来执行。
图2是根据本发明实施例的一种可选的基于虚拟现实的控制方法的流程图,如图2所示,该方法可以包括以下步骤:
步骤S202,在虚拟现实场景中显示虚拟终端;
步骤S204,在虚拟现实场景中接收操作信息,其中,操作信息用于指示在物理终端上检测到的操作;
步骤S206,对虚拟终端执行操作信息指示的操作。
需要说明的是,上述步骤可以由能够呈现虚拟现实场景的显示设备执行,比如,头盔显示器、光阀眼睛等。通过上述步骤S202至步骤S206,通过在虚拟现实场景中显示虚拟终端,按照在物理终端上检测到的操作对应的操作信息对虚拟终端执行相应操作,达到了利用物理终端控制虚拟现实场景的目的,进而解决了相关技术通过操作头盔显示器控制虚拟现实场景中的控制对象,导致控制效率较低的技术问题,实现了提高对虚拟现实场景中的控制对象的控制效率的技术效果。
在步骤S202提供的技术方案中,虚拟现实场景可以为能够呈现虚拟现实场景的显示设备所显示的场景,其中,该显示设备可以为头盔显示器、光阀眼睛等。虚拟终端可以为虚拟现实场景中显示的虚拟图像,虚拟现实场景中显示的虚拟终端可以是任意形式,比如智能手机、平板电脑等。本发明实施例对虚拟现实场景中显示的虚拟终端的形态不做具体限定,其中,虚拟终端的形态可以包括但并不限于虚拟终端的形状、尺寸等信息。本发明实施例对虚拟终端在虚拟现实场景中的显示位置也不做具体限定,其可以是任意位置。
作为一种可选的实施例,步骤S202在虚拟现实场景中显示的虚拟终端可以包括以下步骤:
步骤S2022,通过摄像头获取物理终端的属性信息,其中,属性信息包括以下至少之一:尺寸,方向,位置。
在步骤S2022提供的技术方案中,摄像头可以为能够呈现虚拟现实场景的显示设备中的摄像头,本发明实施例对摄像头在能够呈现虚拟现实场景的显示设备中的位置不做具体限定。能够呈现虚拟现实场景的显示设备利用摄像头可以采集并获取到真实场景中的物理终端的属性信息,其中,物理终端可以为能够对虚拟现实场景及其中显示的虚拟终端所控制的对象进行控制的终端设备,物理终端可以是任意形态,比如智能手机、平板电脑等。物理终端的属性信息可以包括但并不限于以下至少之一:尺寸,方向,位置,其中,尺寸可以用于描述物理终端的形状、大小等信息;方向可以用于描述物理终端当前摆放状态,比如横向、竖向、倾斜等;位置可以用于描述物理终端当前所处的位置信息,比如,靠左、靠右等。需要说明的是,物理终端的属性信息还可以包括其他信息,此处不再一一举例。
步骤S2024,根据属性信息在虚拟现实场景中显示虚拟终端,其中,虚拟终端的属性信息与物理终端的属性信息相匹配。
在步骤S2024提供的技术方案中,通过摄像头获取到物理终端的属性信息之后,能够呈现虚拟现实场景的显示设备可以在呈现虚拟现实场景中的同时,在虚拟现实场景中显示虚拟终端,其中,现实场景中显示的虚拟终端的属性信息与通过摄像头获取到的物理终端的属性信息相匹配。可选地,虚拟终端的属性信息与物理终端的属性信息相匹配可以包括:虚拟终端的属性信息与物理终端的属性信息相同,或者,虚拟终端的属性信息与物理终端的属性信息相似。需要说明的是,虚拟终端的属性信息与物理终端的属性信息相匹配可以是虚拟终端的尺寸、方向、位置等信息均与物理终端的尺寸、方向、位置等信息相同或者相似。
该可选实施例利用摄像头获取物理终端的属性信息,目的是在虚拟现实场景中显示与物理终端的属性信息相匹配的虚拟终端,进而达到提高虚拟现实场景中显示的虚拟终端的真实性的效果。
需要说明的是,物理终端作为能够对虚拟现实场景及其中显示的虚拟终端所控制的对象进行控制的终端设备,可以安装有预定的应用,该应用可以与能够呈现虚拟现实场景的显示设备建立通信连接,包括有线连接、无线连接。物理终端可以利用应用与显示设备之间的通信连接与显示设备进行数据交互,比如,将在物理终端上检测到的操作对应的操作信息发送至显示设备,或者,将对虚拟终端执行操作后的响应信息发送至物理终端等。还需要说明的是,显示设备所呈现的虚拟现实场景可以为物理终端上安装的应用的场景。
在步骤S204提供的技术方案中,在物理终端上检测到操作时,物理终端上安装的应用可以获取检测到的操作对应的操作信息,并将获取到的操作信息利用应用与显示设备之间的通信连接将其发送至显示设备中,以实现在虚拟现实场景中接收操作信息。
作为一种可选的实施例,虚拟现实场景中接收到的操作信息可以包括以下至少之一:
在物理终端的屏幕中检测到的触摸操作的信息,需要说明的是,物理终端可以为具备触控显示屏幕的终端设备,用户可以在物理终端的触控显示屏幕上执行触摸操作,其中,触摸操作可以包括但并不限于单击,双击,手势,滑动等。
物理终端的加速度信息。需要说明的是,物理终端可以具备速度感应功能,用户可以通过摇晃等方式改变物理终端的加速度,物理终端的加速度信息可以用于指示用户对物理终端执行的操作,比如摇晃。
物理终端的旋转信息。需要说明的是,物理终端还可以具有重力感应功能,用户可以对物理终端执行旋转操作,旋转操作所对应的旋转信息可以用于指示在物理终端上检测到的旋转操作。
需要说明的是,本发明实施例中在虚拟现实场景中接收到的操作信息还可以包括其他信息,此处不再一一举例说明。
本发明实施例通过将物理终端上检测到的操作对应的操作信息发送至虚拟现实场景中,进而使得在虚拟终端上执行与物理终端上检测到的操作相匹配的操作,以实现利用物理终端控制虚拟现实场景中的虚拟终端,进而达到控制虚拟终端所控制的对象的目的。
在步骤S206提供的技术方案中,在虚拟现实场景中接收到操作信息之后,能够呈现虚拟现实场景的显示设备可以根据接收到的操作信息对虚拟终端执行操作信息所指示的操作。比如,当操作信息为在物理终端的屏幕中检测到的触摸操作的信息时,相应地,能够呈现虚拟现实场景的显示设备可以在虚拟终端的屏幕上执行触摸操作,包括单击、双击、手势、滑动等。当操作信息为物理终端的加速度信息时,相应地,能够呈现虚拟现实场景的显示设备可以在虚拟终端上执行摇晃操作。当操作信息为物理终端的旋转信息时,相应地,能够呈现虚拟现实场景的显示设备可以在虚拟终端上执行旋转操作。
本发明实施例在虚拟现实场景中通过对虚拟终端执行操作信息所指示的操作,能够将真实场景中对物理终端执行的操作对应到虚拟现实场景中对虚拟终端执行的操作,进而能够实现利用物理终端控制虚拟现实场景中的虚拟终端,进而控制虚拟现实场景中虚拟终端所控制的对象的目的。本发明实施例在物理终端上执行控制操作,更加符合用户操作习惯,比较简便,且效率较高,进而能够达到提高对虚拟现实场景中虚拟终端所控制的对象的控制效率。
作为一种可选的实施例,步骤S206对虚拟终端执行操作信息指示的操作可以包括:步骤S2062,对虚拟现实场景中虚拟终端控制的对象进行与操作匹配的控制。
需要说明的是,虚拟现实场景中虚拟终端所控制的对象可以为虚拟现实场景中显示的对象,本发明实施例对虚拟现实场景中虚拟终端所控制的对象不做具体限定,虚拟终端所控制的对象可以包括但并不限于以下对象:文本信息、音频、视频或者游戏的画面、画面中的某个具体对象,比如游戏角色、游戏装备等。
该可选实施例在虚拟现实场景中设置虚拟终端可以控制某一个或者多个对象,然后将物理终端与虚拟终端进行同步,也即将在物理终端上执行的操作对应到虚拟终端上执行的操作,能够实现利用物理终端控制虚拟现实场景中虚拟终端所控制的对象的目的,利用对物理终端执行操作的简便性可以提高对虚拟现实场景中的对象的控制效率。
作为一种可选的实施例,对虚拟现实场景中虚拟终端控制的对象进行与操作匹配的控制可以包括以下至少之一:
第一,对虚拟场景中的画面进行第一控制,其中,第一控制包括以下至少之一:切换,播放,暂停,快进,快退,关闭,删除。需要说明的是,虚拟现实场景中虚拟终端控制的对象可以为画面,该画面可以为游戏画面,也可以为视频画面,还可以为其他类型的画面,本发明实施例对其不做具体限定。第一控制可以为利用在物理终端上执行的操作对虚拟场景中的画面进行的控制,可以包括但并不限于:画面的切换、播放、暂停、快进、快退、关闭、删除等。需要说明的是,对虚拟场景中的画面进行的第一控制还可以包括其他内容,此处不再一一举例说明。
第二,对虚拟场景中的画面中的操作对象进行第二控制。需要说明的是,虚拟现实场景中虚拟终端控制的对象可以为画面中的操作对象,本发明实施例对虚拟场景中的画面中的操作对象的类型不做具体限定,比如,游戏或者游戏中的角色、装备等;视频中的人物、字幕等。第二控制可以为利用在物理终端上执行的操作对虚拟场景中的画面中的操作对象进行的控制,比如,设置游戏中的移动、攻击、躲闪等动作的属性信息;设置游戏中的角色的属性信息,包括名称、等级、技能等信息;设置游戏中的装备的属性信息,包括装备的名称、攻击力等级等;设置视频中字幕的弹出方式等。需要说明的是,对虚拟场景中的画面中的操作对象进行的第二控制还可以包括其他内容,此处不再一一举例说明。
第三,对虚拟场景中的音频进行第三控制,其中,第三控制包括以下至少之一:切换,播放,暂停,快进,快退,关闭,删除,音量调整。需要说明的是,虚拟现实场景中虚拟终端控制的对象可以为音频,该音频可以为歌曲、有声读物等音频,本发明实施例对其不做具体限定。第三控制可以为利用在物理终端上执行的操作对虚拟场景中的音频进行的控制,可以包括但并不限于:音频的切换、播放、暂停、快进、快退、关闭、删除、音量调整等。需要说明的是,对虚拟场景中的音频进行的第三控制还可以包括其他内容,此处不再一一举例说明。
第四,对虚拟场景中的文本信息进行第四控制,其中,第四控制包括以下至少之一:显示,关闭,删除,编辑。需要说明的是,虚拟现实场景中虚拟终端控制的对象可以为文本信息,比如文本提示信息、文本通知消息等。第四控制可以为利用在物理终端上执行的操作对虚拟场景中的文本信息进行的控制,可以包括但并不限于:文本信息的显示,关闭,删除,编辑等,比如,编辑文本信息的内容、设置文本信息的显示方式等。需要说明的是,对虚拟场景中的文本信息进行的第四控制还可以包括其他内容,此处不再一一举例说明。
需要说明的是,对虚拟现实场景中虚拟终端控制的对象进行与操作匹配的控制不仅限于上述四种控制,其还可以包括其他控制,此处不再一一举例说明。该可选实施例通过对虚拟场景中的虚拟终端所控制的对象,包括画面、画面中的操作对象、音频、文本信息等,进行相应的控制,能够增强虚拟场景的可操控性,进而增强虚拟场景的视觉效果和听觉效果。而且利用真实场景中的物理终端对虚拟场景中虚拟终端所控制的对象进行控制,比较简便,符合用户操作习惯,能够达到提高对虚拟场景中的音频的控制效率的效果。
作为一种可选的实施例,在步骤S206对虚拟终端执行操作信息指示的操作之后,该可选实施例还可以包括:步骤S208,将操作响应信息发送给物理终端。
需要说明的是,利用物理终端上检测到的操作所对应的操作信息对虚拟现实场景中虚拟终端所控制的对象执行相应操作后,能够呈现虚拟现实场景的显示设备可以将执行操作后用于指示操作结果的响应信息反馈给物理终端,其中,需要说明的是,响应信息中可以携带有对虚拟现实场景中虚拟终端设备所控制的对象执行控制操作后得到的结果信息,比如,当虚拟现实场景中虚拟终端设备所控制的对象为视频画面时,对视频画面执行的控制操作为播放操作,则响应信息可以用于指示视频画面开始播放或者正在播放。再比如,当虚拟现实场景中虚拟终端设备所控制的对象为音频时,对音频执行的控制操作为音量调整,比如调高音量,则响应信息可以用于指示音频调高的音量值。
此处还需要说明的是,响应信息中还可以包括其他信息,比如对虚拟现实场景中虚拟终端所控制的对象执行控制操作的时间、执行控制操作的次数等信息,此处不再一一举例说明。该可选实施例在对虚拟现实场景中虚拟终端所控制的对象执行控制操作后,通过向物理终端反馈所执行的控制操作的响应信息,不仅可以增加物理终端与显示设备之间的交互性,还可以及时地通知物理终端控制操作的结果信息,从而避免用户频繁地在物理终端上执行重复操作导致降低对虚拟现实场景中虚拟终端所控制的对象的控制效率的问题,达到了提高对虚拟现实场景中虚拟终端所控制的对象的控制效率的效果。
作为一种可选的实施例,响应信息可以用于指示物理终端震动。需要说明的是,该可选实施例通过设置响应信息指示物理终端震动,能够保证在用户因佩戴头盔显示设备无法确认物理终端接收到的响应信息所指示的结果信息时,通过感知震动来确认控制操作所对应的结果信息,能够便于用户及时获取控制操作所对应的结果信息,进而达到增强用户使用体验的效果。
本发明还提供了一种优选实施例,图3是根据本发明优选实施例的基于虚拟现实的控制方法的流程图,如图3所示,该优选实施例可以包括以下步骤:
步骤S301,虚拟现实***追踪物理终端的属性信息。需要说明的是,虚拟现实***可以为安装在本发明实施例中的显示设备中的操作***。物理终端可以为智能手机、平板电脑等。物理终端的属性信息可以包括尺寸、位置、方向等信息。
步骤S302,在虚拟现实场景中显示属性信息与物理终端的属性信息相匹配的虚拟终端。
步骤S303,物理终端运行用于远程控制虚拟现实场景中虚拟终端所控制的对象的应用,该应用可以安装在物理终端上。
步骤S304,物理终端中的应用可以获取用户输入,用户输入可以为在物理终端上检测到的操作,可以包括但并不限于在屏幕上的触摸操作、旋转操作等。
步骤S305,物理终端可以将检测到的用户输入发送至虚拟现实***。物理终端中的应用可以通过有线或者无线(比如蓝牙、WIFI)与虚拟现实***建立通信连接,物理终端利用该通信连接可以将检测到的用户输入发送至虚拟现实***。
步骤S306,虚拟终端显示虚拟的用户界面,在该虚拟的用户界面可以用于指示在虚拟现实场景执行控制操作。如图4所示,以虚拟现实场景中的游戏场景为例,图4中标号01代表的区域为游戏画面,该01代表的区域内可以显示任意类型的电脑或者***,图4中标号02代表的区域为虚拟终端显示的虚拟的用户界面,图4中显示的虚拟的用户界面可以与当前的游戏相对应,用户界面中可以显示有虚拟的供用户操作的触控按钮。在该实施例中,用户通过利用物理终端的触控操作功能可以在虚拟现实场景中控制非虚拟现实类的游戏。
步骤S307,根据在物理终端上检测到的用户输入,虚拟现实***可以对虚拟现实场景中虚拟终端所控制的对象执行相应的控制操作。例如,以虚拟现实场景中的视频播放场景为例,如图5所示,图5中的标号03代表的区域为视频画面,在该视频画面中正在播放第一视频。图5中的标号04代表的区域为虚拟终端显示的虚拟的用户界面,在该用户界面中显示有第二视频,用户可以该用户界面中对第二视频执行控制操作,比如在用户界面中执行点击、滑动等操作,通过该控制操作可以实现在标号03代表的区域内的视频画面由第一视频切换为第二视频,如图6所示,而且,在图6中,标号04代表的区域内的用户界面切换为对第二视频进行控制操作的操作界面,比如图6所示的用户界面中显示有视频播放按钮和静音按钮。
步骤S308,虚拟现实***向物理终端发送控制操作的响应信息,其中,该响应信息可以指示用户在真实场景中感知虚拟现实场景反馈的响应信息。
图7是根据本发明优选实施例的基于虚拟现实的控制方法的硬件架构的示意图,如图7所示,摄像头可以获取真实场景中物理终端的属性信息,包括尺寸,位置,方向等;然后通过属性信息追踪***将摄像头获取到的物理终端的属性信息发送至虚拟现实***中,虚拟现实***可以利用接收到的物理终端的属性信息控制显示设备(比如头盔显示器)在虚拟现实场景中显示属性信息与物理终端的属性信息相匹配的虚拟终端。物理终端可以利用自身安装的应用获取用户输入,可以包括在物理终端的屏幕中检测到的触摸操作,比如单击,双击,手势,滑动,或者,物理终端的旋转操作或者摇晃操作等。物理终端可以将检测到的用户输入发送至虚拟现实***,虚拟现实***可以根据接收到的用户输入控制显示设备在虚拟现实场景中显示与用户输入类型相对应的用户界面,在该用户界面中可以显示用于对虚拟现实场景中的虚拟终端所控制的对象进行控制操作的触控按钮等。
本发明实施例的基于虚拟现实的控制方法通过在虚拟现实场景中显示虚拟终端,按照在物理终端上检测到的操作对应的操作信息对虚拟终端执行相应操作,达到了利用物理终端控制虚拟现实场景的目的,进而解决了相关技术通过操作头盔显示器控制虚拟现实场景中的控制对象,导致控制效率较低的技术问题,实现了提高对虚拟现实场景中的控制对象的控制效率,提高用户使用体验,使得虚拟现实场景更加接近真实场景的技术效果。
需要说明的是,对于前述的各方法实施例,为了简单描述,故将其都表述为一系列的动作组合,但是本领域技术人员应该知悉,本发明并不受所描述的动作顺序的限制,因为依据本发明,某些步骤可以采用其他顺序或者同时进行。其次,本领域技术人员也应该知悉,说明书中所描述的实施例均属于优选实施例,所涉及的动作和模块并不一定是本发明所必须的。
通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到根据上述实施例的方法可借助软件加必需的通用硬件平台的方式来实现,当然也可以通过硬件,但很多情况下前者是更佳的实施方式。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质(如ROM/RAM、磁碟、光盘)中,包括若干指令用以使得一台终端设备(可以是手机,计算机,服务器,或者网络设备等)执行本发明各个实施例所述的方法。
实施例2
根据本发明实施例,还提供了一种用于实施上述基于虚拟现实的控制方法的基于虚拟现实的控制装置。图8是根据本发明实施例的一种可选的基于虚拟现实的控制装置的示意图,如图8所示,该装置可以包括:
显示单元22,在虚拟现实场景中显示虚拟终端;接收单元24,用于在虚拟现实场景中接收操作信息,其中,操作信息用于指示在物理终端上检测到的操作;以及执行单元26,用于对虚拟终端执行操作信息指示的操作。
需要说明的是,该实施例中的显示单元22可以用于执行本申请实施例1中的步骤S202,该实施例中的接收单元24,可以用于执行本申请实施例1中的步骤S204,该实施例中的执行单元26可以用于执行本申请实施例1中的步骤S206。
在显示单元22中,虚拟现实场景可以为能够呈现虚拟现实场景的显示设备所显示的场景,其中,该显示设备可以为头盔显示器、光阀眼睛等。虚拟终端可以为虚拟现实场景中显示的虚拟图像,虚拟现实场景中显示的虚拟终端可以是任意形式,比如智能手机、平板电脑等。本发明实施例对虚拟现实场景中显示的虚拟终端的形态不做具体限定,其中,虚拟终端的形态可以包括但并不限于虚拟终端的形状、尺寸等信息。本发明实施例对虚拟终端在虚拟现实场景中的显示位置也不做具体限定,其可以是任意位置。
作为一种可选的实施例,图9是根据本发明实施例的又一种可选的基于虚拟现实的控制装置的示意图,如图9所示,显示单元22可以包括:获取模块222,用于通过摄像头获取物理终端的属性信息,其中,属性信息可以包括以下至少之一:尺寸,方向,位置;显示模块224,用于根据属性信息在虚拟现实场景中显示虚拟终端,其中,虚拟终端的属性信息与物理终端的属性信息相匹配。
在获取模块222中,摄像头可以为能够呈现虚拟现实场景的显示设备中的摄像头,本发明实施例对摄像头在能够呈现虚拟现实场景的显示设备中的位置不做具体限定。能够呈现虚拟现实场景的显示设备利用摄像头可以采集并获取到真实场景中的物理终端的属性信息,其中,物理终端可以为能够对虚拟现实场景及其中显示的虚拟终端所控制的对象进行控制的终端设备,物理终端可以是任意形态,比如智能手机、平板电脑等。物理终端的属性信息可以包括但并不限于以下至少之一:尺寸,方向,位置,其中,尺寸可以用于描述物理终端的形状、大小等信息;方向可以用于描述物理终端当前摆放状态,比如横向、竖向、倾斜等;位置可以用于描述物理终端当前所处的位置信息,比如,靠左、靠右等。需要说明的是,物理终端的属性信息还可以包括其他信息,此处不再一一举例。
在显示模块224中,通过摄像头获取到物理终端的属性信息之后,能够呈现虚拟现实场景的显示设备可以在呈现虚拟现实场景中的同时,在虚拟现实场景中显示虚拟终端,其中,现实场景中显示的虚拟终端的属性信息与通过摄像头获取到的物理终端的属性信息相匹配。可选地,虚拟终端的属性信息与物理终端的属性信息相匹配可以包括:虚拟终端的属性信息与物理终端的属性信息相同,或者,虚拟终端的属性信息与物理终端的属性信息相似。需要说明的是,虚拟终端的属性信息与物理终端的属性信息相匹配可以是虚拟终端的尺寸、方向、位置等信息均与物理终端的尺寸、方向、位置等信息相同或者相似。
该可选实施例利用摄像头获取物理终端的属性信息,目的是在虚拟现实场景中显示与物理终端的属性信息相匹配的虚拟终端,进而达到提高虚拟现实场景中显示的虚拟终端的真实性的效果。
需要说明的是,物理终端作为能够对虚拟现实场景及其中显示的虚拟终端所控制的对象进行控制的终端设备,可以安装有预定的应用,该应用可以与能够呈现虚拟现实场景的显示设备建立通信连接,包括有线连接、无线连接。物理终端可以利用应用与显示设备之间的通信连接与显示设备进行数据交互,比如,将在物理终端上检测到的操作对应的操作信息发送至显示设备,或者,将对虚拟终端执行操作后的响应信息发送至物理终端等。还需要说明的是,显示设备所呈现的虚拟现实场景可以为物理终端上安装的应用的场景。
在接收单元24中,在物理终端上检测到操作时,物理终端上安装的应用可以获取检测到的操作对应的操作信息,并将获取到的操作信息利用应用与显示设备之间的通信连接将其发送至显示设备中,以实现在虚拟现实场景中接收操作信息。
作为一种可选的实施例,接收单元24在虚拟现实场景中接收到的操作信息可以包括以下至少之一:
在物理终端的屏幕中检测到的触摸操作的信息,需要说明的是,物理终端可以为具备触控显示屏幕的终端设备,用户可以在物理终端的触控显示屏幕上执行触摸操作,其中,触摸操作可以包括但并不限于单击,双击,手势,滑动等。
物理终端的加速度信息。需要说明的是,物理终端可以具备速度感应功能,用户可以通过摇晃等方式改变物理终端的加速度,物理终端的加速度信息可以用于指示用户对物理终端执行的操作,比如摇晃。
物理终端的旋转信息。需要说明的是,物理终端还可以具有重力感应功能,用户可以对物理终端执行旋转操作,旋转操作所对应的旋转信息可以用于指示在物理终端上检测到的旋转操作。
需要说明的是,本发明实施例中在虚拟现实场景中接收到的操作信息还可以包括其他信息,此处不再一一举例说明。
本发明实施例通过将物理终端上检测到的操作对应的操作信息发送至虚拟现实场景中,进而使得在虚拟终端上执行与物理终端上检测到的操作相匹配的操作,以实现利用物理终端控制虚拟现实场景中的虚拟终端,进而达到控制虚拟终端所控制的对象的目的。
在执行单元26中,在虚拟现实场景中接收到操作信息之后,能够呈现虚拟现实场景的显示设备可以根据接收到的操作信息对虚拟终端执行操作信息所指示的操作。比如,当操作信息为在物理终端的屏幕中检测到的触摸操作的信息时,相应地,能够呈现虚拟现实场景的显示设备可以在虚拟终端的屏幕上执行触摸操作,包括单击、双击、手势、滑动等。当操作信息为物理终端的加速度信息时,相应地,能够呈现虚拟现实场景的显示设备可以在虚拟终端上执行摇晃操作。当操作信息为物理终端的旋转信息时,相应地,能够呈现虚拟现实场景的显示设备可以在虚拟终端上执行旋转操作。
本发明实施例在虚拟现实场景中通过对虚拟终端执行操作信息所指示的操作,能够将真实场景中对物理终端执行的操作对应到虚拟现实场景中对虚拟终端执行的操作,进而能够实现利用物理终端控制虚拟现实场景中的虚拟终端,进而控制虚拟现实场景中虚拟终端所控制的对象的目的。本发明实施例在物理终端上执行控制操作,更加符合用户操作习惯,比较简便,且效率较高,进而能够达到提高对虚拟现实场景中虚拟终端所控制的对象的控制效率。
通过上述模块,可以解决了相关技术通过操作头盔显示器控制虚拟现实场景中的控制对象,导致控制效率较低的技术问题,进而达到提高对虚拟现实场景中虚拟终端所控制的对象的控制效率的技术效果。
作为一种可选的实施例,图10是根据本发明实施例的另一种可选的基于虚拟现实的控制装置的示意图,如图10所示,执行单元26可以包括:控制模块262,用于对虚拟现实场景中虚拟终端控制的对象进行与操作匹配的控制。
需要说明的是,虚拟现实场景中虚拟终端所控制的对象可以为虚拟现实场景中显示的对象,本发明实施例对虚拟现实场景中虚拟终端所控制的对象不做具体限定,虚拟终端所控制的对象可以包括但并不限于以下对象:文本信息、音频、视频或者游戏的画面、画面中的某个具体对象,比如游戏角色、游戏装备等。
该可选实施例在虚拟现实场景中设置虚拟终端可以控制某一个或者多个对象,然后将物理终端与虚拟终端进行同步,也即将在物理终端上执行的操作对应到虚拟终端上执行的操作,能够实现利用物理终端控制虚拟现实场景中虚拟终端所控制的对象的目的,利用对物理终端执行操作的简便性可以提高对虚拟现实场景中的对象的控制效率。
作为一种可选的实施例,控制模块262对虚拟现实场景中虚拟终端控制的对象进行与操作匹配的控制可以包括以下至少之一:
第一,对虚拟场景中的画面进行第一控制,其中,第一控制包括以下至少之一:切换,播放,暂停,快进,快退,关闭,删除。需要说明的是,虚拟现实场景中虚拟终端控制的对象可以为画面,该画面可以为游戏画面,也可以为视频画面,还可以为其他类型的画面,本发明实施例对其不做具体限定。第一控制可以为利用在物理终端上执行的操作对虚拟场景中的画面进行的控制,可以包括但并不限于:画面的切换、播放、暂停、快进、快退、关闭、删除等。需要说明的是,对虚拟场景中的画面进行的第一控制还可以包括其他内容,此处不再一一举例说明。
第二,对虚拟场景中的画面中的操作对象进行第二控制。需要说明的是,虚拟现实场景中虚拟终端控制的对象可以为画面中的操作对象,本发明实施例对虚拟场景中的画面中的操作对象的类型不做具体限定,比如,游戏或者游戏中的角色、装备等;视频中的人物、字幕等。第二控制可以为利用在物理终端上执行的操作对虚拟场景中的画面中的操作对象进行的控制,比如,设置游戏中的移动、攻击、躲闪等动作的属性信息;设置游戏中的角色的属性信息,包括名称、等级、技能等信息;设置游戏中的装备的属性信息,包括装备的名称、攻击力等级等;设置视频中字幕的弹出方式等。需要说明的是,对虚拟场景中的画面中的操作对象进行的第二控制还可以包括其他内容,此处不再一一举例说明。
第三,对虚拟场景中的音频进行第三控制,其中,第三控制包括以下至少之一:切换,播放,暂停,快进,快退,关闭,删除,音量调整。需要说明的是,虚拟现实场景中虚拟终端控制的对象可以为音频,该音频可以为歌曲、有声读物等音频,本发明实施例对其不做具体限定。第三控制可以为利用在物理终端上执行的操作对虚拟场景中的音频进行的控制,可以包括但并不限于:音频的切换、播放、暂停、快进、快退、关闭、删除、音量调整等。需要说明的是,对虚拟场景中的音频进行的第三控制还可以包括其他内容,此处不再一一举例说明。
第四,对虚拟场景中的文本信息进行第四控制,其中,第四控制包括以下至少之一:显示,关闭,删除,编辑。需要说明的是,虚拟现实场景中虚拟终端控制的对象可以为文本信息,比如文本提示信息、文本通知消息等。第四控制可以为利用在物理终端上执行的操作对虚拟场景中的文本信息进行的控制,可以包括但并不限于:文本信息的显示,关闭,删除,编辑等,比如,编辑文本信息的内容、设置文本信息的显示方式等。需要说明的是,对虚拟场景中的文本信息进行的第四控制还可以包括其他内容,此处不再一一举例说明。
需要说明的是,对虚拟现实场景中虚拟终端控制的对象进行与操作匹配的控制不仅限于上述四种控制,其还可以包括其他控制,此处不再一一举例说明。该可选实施例通过对虚拟场景中的虚拟终端所控制的对象,包括画面、画面中的操作对象、音频、文本信息等,进行相应的控制,能够增强虚拟场景的可操控性,进而增强虚拟场景的视觉效果和听觉效果。而且利用真实场景中的物理终端对虚拟场景中虚拟终端所控制的对象进行控制,比较简便,符合用户操作习惯,能够达到提高对虚拟场景中的音频的控制效率的效果。
作为一种可选的实施例,图11是根据本发明实施例的再一种可选的基于虚拟现实的控制装置的示意图,如图11所示,该可选实施例还可以包括:发送单元28,用于在对虚拟终端执行操作信息指示的操作之后,将操作响应信息发送给物理终端。
需要说明的是,在发送单元28中,利用物理终端上检测到的操作所对应的操作信息对虚拟现实场景中虚拟终端所控制的对象执行相应操作后,能够呈现虚拟现实场景的显示设备可以将执行操作后用于指示操作结果的响应信息反馈给物理终端,其中,需要说明的是,响应信息中可以携带有对虚拟现实场景中虚拟终端设备所控制的对象执行控制操作后得到的结果信息,比如,当虚拟现实场景中虚拟终端设备所控制的对象为视频画面时,对视频画面执行的控制操作为播放操作,则响应信息可以用于指示视频画面开始播放或者正在播放。再比如,当虚拟现实场景中虚拟终端设备所控制的对象为音频时,对音频执行的控制操作为音量调整,比如调高音量,则响应信息可以用于指示音频调高的音量值。
此处还需要说明的是,响应信息中还可以包括其他信息,比如对虚拟现实场景中虚拟终端所控制的对象执行控制操作的时间、执行控制操作的次数等信息,此处不再一一举例说明。该可选实施例在对虚拟现实场景中虚拟终端所控制的对象执行控制操作后,通过向物理终端反馈所执行的控制操作的响应信息,不仅可以增加物理终端与显示设备之间的交互性,还可以及时地通知物理终端控制操作的结果信息,从而避免用户频繁地在物理终端上执行重复操作导致降低对虚拟现实场景中虚拟终端所控制的对象的控制效率的问题,达到了提高对虚拟现实场景中虚拟终端所控制的对象的控制效率的效果。
作为一种可选的实施例,响应信息可以用于指示物理终端震动。需要说明的是,该可选实施例通过设置响应信息指示物理终端震动,能够保证在用户因佩戴头盔显示设备无法确认物理终端接收到的响应信息所指示的结果信息时,通过感知震动来确认控制操作所对应的结果信息,能够便于用户及时获取控制操作所对应的结果信息,进而达到增强用户使用体验的效果。
此处需要说明的是,上述模块与对应的步骤所实现的示例和应用场景相同,但不限于上述实施例1所公开的内容。需要说明的是,上述模块作为装置的一部分可以运行在如图1所示的硬件环境中,可以通过软件实现,也可以通过硬件实现,其中,硬件环境包括网络环境。
实施例3
根据本发明实施例,还提供了一种用于实施上述基于虚拟现实的控制方法的服务器或终端。
图12是根据本发明实施例的一种终端的结构框图,如图12所示,该终端可以包括:一个或多个(图中仅示出一个)处理器201、存储器203、以及传输装置205(如上述实施例中的发送装置),如图12所示,该终端还可以包括输入输出设备207。
其中,存储器203可用于存储软件程序以及模块,如本发明实施例中的基于虚拟现实的控制方法和装置对应的程序指令/模块,处理器201通过运行存储在存储器203内的软件程序以及模块,从而执行各种功能应用以及数据处理,即实现上述的基于虚拟现实的控制方法。存储器203可包括高速随机存储器,还可以包括非易失性存储器,如一个或者多个磁性存储装置、闪存、或者其他非易失性固态存储器。在一些实例中,存储器203可进一步包括相对于处理器201远程设置的存储器,这些远程存储器可以通过网络连接至终端。上述网络的实例包括但不限于互联网、企业内部网、局域网、移动通信网及其组合。
上述的传输装置205用于经由一个网络接收或者发送数据,还可以用于处理器与存储器之间的数据传输。上述的网络具体实例可包括有线网络及无线网络。在一个实例中,传输装置205包括一个网络适配器(Network Interface Controller,NIC),其可通过网线与其他网络设备与路由器相连从而可与互联网或局域网进行通讯。在一个实例中,传输装置205为射频(Radio Frequency,RF)模块,其用于通过无线方式与互联网进行通讯。
其中,具体地,存储器203用于存储应用程序。
处理器201可以通过传输装置205调用存储器203存储的应用程序,以执行下述步骤:在虚拟现实场景中显示虚拟终端;在虚拟现实场景中接收操作信息,其中,操作信息用于指示在物理终端上检测到的操作;以及对虚拟终端执行操作信息指示的操作。
处理器201还用于执行下述步骤:对虚拟现实场景中虚拟终端控制的对象进行与操作匹配的控制。
处理器201还用于执行下述步骤:对虚拟场景中的画面进行第一控制,其中,第一控制包括以下至少之一:切换,播放,暂停,快进,快退,关闭,删除;对虚拟场景中的画面中的操作对象进行第二控制;对虚拟场景中的音频进行第三控制,其中,第三控制包括以下至少之一:切换,播放,暂停,快进,快退,关闭,删除,音量调整;对虚拟场景中的文本信息进行第四控制,其中,第四控制包括以下至少之一:显示,关闭,删除,编辑。
处理器201还用于执行下述步骤:在对虚拟终端执行操作信息指示的操作之后,将操作响应信息发送给物理终端。
处理器201还用于执行下述步骤:通过摄像头获取物理终端的属性信息,其中,属性信息包括以下至少之一:尺寸,方向,位置;根据属性信息在虚拟现实场景中显示虚拟终端,其中,虚拟终端的属性信息与物理终端的属性信息相匹配。
采用本发明实施例,提供了一种基于虚拟现实的控制方案。通过在虚拟现实场景中显示虚拟终端,按照在物理终端上检测到的操作对应的操作信息对虚拟终端执行相应操作,达到了利用物理终端控制虚拟现实场景的目的,进而解决了相关技术通过操作头盔显示器控制虚拟现实场景中的控制对象,导致控制效率较低的技术问题,实现了提高对虚拟现实场景中的控制对象的控制效率的技术效果。
可选地,本实施例中的具体示例可以参考上述实施例1和实施例2中所描述的示例,本实施例在此不再赘述。
本领域普通技术人员可以理解,图12所示的结构仅为示意,终端可以是智能手机(如Android手机、iOS手机等)、平板电脑、掌上电脑以及移动互联网设备(Mobile InternetDevices,MID)、PAD等终端设备。图12其并不对上述电子装置的结构造成限定。例如,终端还可包括比图12中所示更多或者更少的组件(如网络接口、显示装置等),或者具有与图12所示不同的配置。
本领域普通技术人员可以理解上述实施例的各种方法中的全部或部分步骤是可以通过程序来指令终端设备相关的硬件来完成,该程序可以存储于一计算机可读存储介质中,存储介质可以包括:闪存盘、只读存储器(Read-Only Memory,ROM)、随机存取器(RandomAccess Memory,RAM)、磁盘或光盘等。
实施例4
本发明的实施例还提供了一种存储介质。可选地,在本实施例中,上述存储介质可以用于执行基于虚拟现实的控制方法的程序代码。
可选地,在本实施例中,上述存储介质可以位于上述实施例所示的网络中的多个网络设备中的至少一个网络设备上。
可选地,在本实施例中,存储介质被设置为存储用于执行以下步骤的程序代码:
S1,在虚拟现实场景中显示虚拟终端;
S2,在虚拟现实场景中接收操作信息,其中,操作信息用于指示在物理终端上检测到的操作;
S3,对虚拟终端执行操作信息指示的操作。
可选地,存储介质还被设置为存储用于执行以下步骤的程序代码:对虚拟现实场景中虚拟终端控制的对象进行与操作匹配的控制。
可选地,存储介质还被设置为存储用于执行以下步骤的程序代码:对虚拟场景中的画面进行第一控制,其中,第一控制包括以下至少之一:切换,播放,暂停,快进,快退,关闭,删除;对虚拟场景中的画面中的操作对象进行第二控制;对虚拟场景中的音频进行第三控制,其中,第三控制包括以下至少之一:切换,播放,暂停,快进,快退,关闭,删除,音量调整;对虚拟场景中的文本信息进行第四控制,其中,第四控制包括以下至少之一:显示,关闭,删除,编辑。
可选地,存储介质还被设置为存储用于执行以下步骤的程序代码:在对虚拟终端执行操作信息指示的操作之后,将操作响应信息发送给物理终端。
可选地,存储介质还被设置为存储用于执行以下步骤的程序代码:通过摄像头获取物理终端的属性信息,其中,属性信息包括以下至少之一:尺寸,方向,位置;根据属性信息在虚拟现实场景中显示虚拟终端,其中,虚拟终端的属性信息与物理终端的属性信息相匹配。
可选地,本实施例中的具体示例可以参考上述实施例1和实施例2中所描述的示例,本实施例在此不再赘述。
可选地,在本实施例中,上述存储介质可以包括但不限于:U盘、只读存储器(ROM,Read-Only Memory)、随机存取存储器(RAM,Random Access Memory)、移动硬盘、磁碟或者光盘等各种可以存储程序代码的介质。
上述本发明实施例序号仅仅为了描述,不代表实施例的优劣。
上述实施例中的集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在上述计算机可读取的存储介质中。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来,该计算机软件产品存储在存储介质中,包括若干指令用以使得一台或多台计算机设备(可为个人计算机、服务器或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。
在本发明的上述实施例中,对各个实施例的描述都各有侧重,某个实施例中没有详述的部分,可以参见其他实施例的相关描述。
在本申请所提供的几个实施例中,应该理解到,所揭露的客户端,可通过其它的方式实现。其中,以上所描述的装置实施例仅仅是示意性的,例如所述单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个单元或组件可以结合或者可以集成到另一个***,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口,单元或模块的间接耦合或通信连接,可以是电性或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外,在本发明各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。
以上所述仅是本发明的优选实施方式,应当指出,对于本技术领域的普通技术人员来说,在不脱离本发明原理的前提下,还可以做出若干改进和润饰,这些改进和润饰也应视为本发明的保护范围。
Claims (18)
1.一种基于虚拟现实的控制方法,其特征在于,包括:
在虚拟现实场景中显示虚拟终端;
在所述虚拟现实场景中接收操作信息,其中,所述操作信息用于指示在物理终端上检测到的操作;以及
对所述虚拟终端执行所述操作信息指示的所述操作。
2.根据权利要求1所述的方法,其特征在于,对所述虚拟终端执行所述操作信息指示的所述操作包括:
对所述虚拟现实场景中所述虚拟终端控制的对象进行与所述操作匹配的控制。
3.根据权利要求2所述的方法,其特征在于,对所述虚拟现实场景中所述虚拟终端控制的对象进行与所述操作匹配的控制包括以下至少之一:
对所述虚拟场景中的画面进行第一控制,其中,所述第一控制包括以下至少之一:切换,播放,暂停,快进,快退,关闭,删除;
对所述虚拟场景中的画面中的操作对象进行第二控制;
对所述虚拟场景中的音频进行第三控制,其中,所述第三控制包括以下至少之一:切换,播放,暂停,快进,快退,关闭,删除,音量调整;
对所述虚拟场景中的文本信息进行第四控制,其中,所述第四控制包括以下至少之一:显示,关闭,删除,编辑。
4.根据权利要求1所述的方法,其特征在于,所述操作信息包括以下至少之一:
在所述物理终端的屏幕中检测到的触摸操作的信息,其中,所述触摸操作包括以下至少之一:单击,双击,手势,滑动;
所述物理终端的加速度信息;
所述物理终端的旋转信息。
5.根据权利要求1所述的方法,其特征在于,在对所述虚拟终端执行所述操作信息指示的所述操作之后,还包括:
将操作响应信息发送给所述物理终端。
6.根据权利要求5所述的方法,其特征在于,所述响应信息用于指示所述物理终端震动。
7.根据权利要求1所述的方法,其特征在于,所述虚拟终端的属性信息与所述物理终端的属性信息相匹配,其中,所述属性信息包括以下至少之一:尺寸,方向,位置。
8.根据权利要求1所述的方法,其特征在于,在虚拟现实场景中显示虚拟终端包括:
通过摄像头获取所述物理终端的属性信息,其中,所述属性信息包括以下至少之一:尺寸,方向,位置;
根据所述属性信息在所述虚拟现实场景中显示所述虚拟终端,其中,所述虚拟终端的属性信息与所述物理终端的属性信息相匹配。
9.根据权利要求7或8所述的方法,其特征在于,所述虚拟终端的属性信息与所述物理终端的属性信息相同。
10.一种基于虚拟现实的控制装置,其特征在于,包括:
显示单元,在虚拟现实场景中显示虚拟终端;
接收单元,用于在所述虚拟现实场景中接收操作信息,其中,所述操作信息用于指示在物理终端上检测到的操作;以及
执行单元,用于对所述虚拟终端执行所述操作信息指示的所述操作。
11.根据权利要求10所述的装置,其特征在于,所述执行单元包括:
控制模块,用于对所述虚拟现实场景中所述虚拟终端控制的对象进行与所述操作匹配的控制。
12.根据权利要求11所述的装置,其特征在于,所述控制模块对所述虚拟现实场景中所述虚拟终端控制的对象进行与所述操作匹配的控制包括以下至少之一:
对所述虚拟场景中的画面进行第一控制,其中,所述第一控制包括以下至少之一:切换,播放,暂停,快进,快退,关闭,删除;
对所述虚拟场景中的画面中的操作对象进行第二控制;
对所述虚拟场景中的音频进行第三控制,其中,所述第三控制包括以下至少之一:切换,播放,暂停,快进,快退,关闭,删除,音量调整;
对所述虚拟场景中的文本信息进行第四控制,其中,所述第四控制包括以下至少之一:显示,关闭,删除,编辑。
13.根据权利要求10所述的装置,其特征在于,所述操作信息包括以下至少之一:
在所述物理终端的屏幕中检测到的触摸操作的信息,其中,所述触摸操作包括以下至少之一:单击,双击,手势,滑动;
所述物理终端的加速度信息;
所述物理终端的旋转信息。
14.根据权利要求10所述的装置,其特征在于,还包括:
发送单元,用于在对所述虚拟终端执行所述操作信息指示的所述操作之后,将操作响应信息发送给所述物理终端。
15.根据权利要求14所述的装置,其特征在于,所述响应信息用于指示所述物理终端震动。
16.根据权利要求10所述的装置,其特征在于,所述虚拟终端的属性信息与所述物理终端的属性信息相匹配,其中,所述属性信息包括以下至少之一:尺寸,方向,位置。
17.根据权利要求10所述的装置,其特征在于,所述显示单元包括:
获取模块,用于通过摄像头获取所述物理终端的属性信息,其中,所述属性信息包括以下至少之一:尺寸,方向,位置;
显示模块,用于根据所述属性信息在所述虚拟现实场景中显示所述虚拟终端,其中,所述虚拟终端的属性信息与所述物理终端的属性信息相匹配。
18.根据权利要求16或17所述的装置,其特征在于,所述虚拟终端的属性信息与所述物理终端的属性信息相同。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201610399197.XA CN106095235B (zh) | 2016-06-07 | 2016-06-07 | 基于虚拟现实的控制方法和装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201610399197.XA CN106095235B (zh) | 2016-06-07 | 2016-06-07 | 基于虚拟现实的控制方法和装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN106095235A true CN106095235A (zh) | 2016-11-09 |
CN106095235B CN106095235B (zh) | 2018-05-08 |
Family
ID=57228080
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201610399197.XA Active CN106095235B (zh) | 2016-06-07 | 2016-06-07 | 基于虚拟现实的控制方法和装置 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN106095235B (zh) |
Cited By (24)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106534684A (zh) * | 2016-11-15 | 2017-03-22 | 极翼机器人(上海)有限公司 | 一种终端控制***及其操作方法 |
CN106792094A (zh) * | 2016-12-23 | 2017-05-31 | 歌尔科技有限公司 | Vr设备播放视频的方法和vr设备 |
CN106896920A (zh) * | 2017-03-01 | 2017-06-27 | 网易(杭州)网络有限公司 | 虚拟现实***、虚拟现实设备、虚拟现实控制装置及方法 |
CN106970738A (zh) * | 2017-02-16 | 2017-07-21 | 全球能源互联网研究院 | 一种与电力设备相对应的虚拟操作界面的交互方法和装置 |
CN107122096A (zh) * | 2017-04-06 | 2017-09-01 | 青岛海信移动通信技术股份有限公司 | 基于vr显示的终端触摸控制方法及终端 |
CN107229393A (zh) * | 2017-06-02 | 2017-10-03 | 三星电子(中国)研发中心 | 虚拟现实场景的实时编辑方法、装置、***及客户端 |
CN107274492A (zh) * | 2017-06-20 | 2017-10-20 | 郑州云海信息技术有限公司 | 一种数据处理方法及设备 |
CN107479701A (zh) * | 2017-07-28 | 2017-12-15 | 深圳市瑞立视多媒体科技有限公司 | 虚拟现实交互方法、装置及*** |
WO2018107913A1 (zh) * | 2016-12-12 | 2018-06-21 | 中兴通讯股份有限公司 | 媒体信息的处理方法、装置及*** |
CN108196771A (zh) * | 2018-01-02 | 2018-06-22 | 联想(北京)有限公司 | 虚拟对象操作方法及电子设备 |
CN108874118A (zh) * | 2017-05-12 | 2018-11-23 | 翔升(上海)电子技术有限公司 | 一种在vr设备中处理图像的方法和装置 |
CN109284042A (zh) * | 2018-10-24 | 2019-01-29 | 深圳市领点科技有限公司 | 一种基于操作功能的vr使用监督方法和装置 |
CN109324748A (zh) * | 2018-09-05 | 2019-02-12 | 联想(北京)有限公司 | 一种设备控制的方法、电子设备及存储介质 |
WO2019061798A1 (zh) * | 2017-09-27 | 2019-04-04 | 歌尔科技有限公司 | 显示控制方法、***和虚拟现实设备 |
CN109752951A (zh) * | 2017-11-03 | 2019-05-14 | 腾讯科技(深圳)有限公司 | 控制***的处理方法、装置、存储介质和电子装置 |
WO2019095250A1 (zh) * | 2017-11-17 | 2019-05-23 | 腾讯科技(深圳)有限公司 | Vr场景下的角色模拟方法和终端设备 |
CN110448902A (zh) * | 2019-07-02 | 2019-11-15 | 重庆爱奇艺智能科技有限公司 | 对外部设备进行虚拟化映射与控制的方法、装置与*** |
CN110495166A (zh) * | 2017-12-15 | 2019-11-22 | 斯纳普公司 | 球形视频编辑 |
CN111340962A (zh) * | 2020-02-24 | 2020-06-26 | 维沃移动通信有限公司 | 控制方法、电子设备及存储介质 |
US10897530B2 (en) | 2017-06-06 | 2021-01-19 | Goertek Inc. | Input method, device and system |
CN112527174A (zh) * | 2019-09-19 | 2021-03-19 | 华为技术有限公司 | 一种信息处理方法及电子设备 |
WO2021052488A1 (zh) * | 2019-09-19 | 2021-03-25 | 华为技术有限公司 | 一种信息处理方法及电子设备 |
WO2021164711A1 (zh) * | 2020-02-19 | 2021-08-26 | Oppo广东移动通信有限公司 | 移动设备、用于视觉增强***的交互方法以及存储介质 |
WO2022017119A1 (en) * | 2020-07-21 | 2022-01-27 | International Business Machines Corporation | Mobile device based vr control |
Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103207760A (zh) * | 2013-04-07 | 2013-07-17 | 福州瑞芯微电子有限公司 | 手持移动终端操控电子设备的方法与*** |
CN103530149A (zh) * | 2013-09-27 | 2014-01-22 | 深圳市同洲电子股份有限公司 | 一种游戏手柄模拟配置文件的配置方法及终端 |
JP2014192838A (ja) * | 2013-03-28 | 2014-10-06 | Saitama Univ | 携帯端末向けarジェスチャユーザインタフェースシステム |
CN104123009A (zh) * | 2014-08-15 | 2014-10-29 | 重庆巨蟹数码影像有限公司 | 一种利用手持通信设备触屏对虚拟现实展示端的控制*** |
US20140320414A1 (en) * | 2005-10-21 | 2014-10-30 | Apple Inc. | Three-dimensional imaging and display system |
CN104238738A (zh) * | 2013-06-07 | 2014-12-24 | 索尼电脑娱乐美国公司 | 在头戴式***内产生增强虚拟现实场景的***和方法 |
CN105094228A (zh) * | 2010-08-13 | 2015-11-25 | Lg电子株式会社 | 移动终端、显示装置及其控制方法 |
CN105320262A (zh) * | 2014-06-08 | 2016-02-10 | 朱金彪 | 操作虚拟世界里的电脑和手机的方法、装置以及使用其的眼镜 |
-
2016
- 2016-06-07 CN CN201610399197.XA patent/CN106095235B/zh active Active
Patent Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20140320414A1 (en) * | 2005-10-21 | 2014-10-30 | Apple Inc. | Three-dimensional imaging and display system |
CN105094228A (zh) * | 2010-08-13 | 2015-11-25 | Lg电子株式会社 | 移动终端、显示装置及其控制方法 |
JP2014192838A (ja) * | 2013-03-28 | 2014-10-06 | Saitama Univ | 携帯端末向けarジェスチャユーザインタフェースシステム |
CN103207760A (zh) * | 2013-04-07 | 2013-07-17 | 福州瑞芯微电子有限公司 | 手持移动终端操控电子设备的方法与*** |
CN104238738A (zh) * | 2013-06-07 | 2014-12-24 | 索尼电脑娱乐美国公司 | 在头戴式***内产生增强虚拟现实场景的***和方法 |
CN103530149A (zh) * | 2013-09-27 | 2014-01-22 | 深圳市同洲电子股份有限公司 | 一种游戏手柄模拟配置文件的配置方法及终端 |
CN105320262A (zh) * | 2014-06-08 | 2016-02-10 | 朱金彪 | 操作虚拟世界里的电脑和手机的方法、装置以及使用其的眼镜 |
CN104123009A (zh) * | 2014-08-15 | 2014-10-29 | 重庆巨蟹数码影像有限公司 | 一种利用手持通信设备触屏对虚拟现实展示端的控制*** |
Cited By (38)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106534684A (zh) * | 2016-11-15 | 2017-03-22 | 极翼机器人(上海)有限公司 | 一种终端控制***及其操作方法 |
CN108616751A (zh) * | 2016-12-12 | 2018-10-02 | 上海交通大学 | 媒体信息的处理方法、装置及*** |
US10911823B2 (en) | 2016-12-12 | 2021-02-02 | Zte Corporation | Media information processing method, apparatus and system |
WO2018107913A1 (zh) * | 2016-12-12 | 2018-06-21 | 中兴通讯股份有限公司 | 媒体信息的处理方法、装置及*** |
CN106792094A (zh) * | 2016-12-23 | 2017-05-31 | 歌尔科技有限公司 | Vr设备播放视频的方法和vr设备 |
CN106970738A (zh) * | 2017-02-16 | 2017-07-21 | 全球能源互联网研究院 | 一种与电力设备相对应的虚拟操作界面的交互方法和装置 |
CN106896920A (zh) * | 2017-03-01 | 2017-06-27 | 网易(杭州)网络有限公司 | 虚拟现实***、虚拟现实设备、虚拟现实控制装置及方法 |
CN106896920B (zh) * | 2017-03-01 | 2020-09-25 | 网易(杭州)网络有限公司 | 虚拟现实***、虚拟现实设备、虚拟现实控制装置及方法 |
CN107122096A (zh) * | 2017-04-06 | 2017-09-01 | 青岛海信移动通信技术股份有限公司 | 基于vr显示的终端触摸控制方法及终端 |
CN108874118A (zh) * | 2017-05-12 | 2018-11-23 | 翔升(上海)电子技术有限公司 | 一种在vr设备中处理图像的方法和装置 |
CN107229393A (zh) * | 2017-06-02 | 2017-10-03 | 三星电子(中国)研发中心 | 虚拟现实场景的实时编辑方法、装置、***及客户端 |
US10897530B2 (en) | 2017-06-06 | 2021-01-19 | Goertek Inc. | Input method, device and system |
CN107274492A (zh) * | 2017-06-20 | 2017-10-20 | 郑州云海信息技术有限公司 | 一种数据处理方法及设备 |
CN107479701A (zh) * | 2017-07-28 | 2017-12-15 | 深圳市瑞立视多媒体科技有限公司 | 虚拟现实交互方法、装置及*** |
CN107479701B (zh) * | 2017-07-28 | 2020-10-02 | 深圳市瑞立视多媒体科技有限公司 | 虚拟现实交互方法、装置及*** |
WO2019061798A1 (zh) * | 2017-09-27 | 2019-04-04 | 歌尔科技有限公司 | 显示控制方法、***和虚拟现实设备 |
US11275239B2 (en) | 2017-11-03 | 2022-03-15 | Tencent Technology (Shenzhen) Company Limited | Method and apparatus for operating control system, storage medium, and electronic apparatus |
CN109752951B (zh) * | 2017-11-03 | 2022-02-08 | 腾讯科技(深圳)有限公司 | 控制***的处理方法、装置、存储介质和电子装置 |
CN109752951A (zh) * | 2017-11-03 | 2019-05-14 | 腾讯科技(深圳)有限公司 | 控制***的处理方法、装置、存储介质和电子装置 |
WO2019095250A1 (zh) * | 2017-11-17 | 2019-05-23 | 腾讯科技(深圳)有限公司 | Vr场景下的角色模拟方法和终端设备 |
US10953336B2 (en) | 2017-11-17 | 2021-03-23 | Tencent Technology (Shenzhen) Company Limited | Role simulation method and terminal apparatus in VR scene |
US11037601B2 (en) | 2017-12-15 | 2021-06-15 | Snap Inc. | Spherical video editing |
CN110495166A (zh) * | 2017-12-15 | 2019-11-22 | 斯纳普公司 | 球形视频编辑 |
US11380362B2 (en) | 2017-12-15 | 2022-07-05 | Snap Inc. | Spherical video editing |
CN108196771A (zh) * | 2018-01-02 | 2018-06-22 | 联想(北京)有限公司 | 虚拟对象操作方法及电子设备 |
CN109324748B (zh) * | 2018-09-05 | 2021-12-24 | 联想(北京)有限公司 | 一种设备控制的方法、电子设备及存储介质 |
CN109324748A (zh) * | 2018-09-05 | 2019-02-12 | 联想(北京)有限公司 | 一种设备控制的方法、电子设备及存储介质 |
CN109284042A (zh) * | 2018-10-24 | 2019-01-29 | 深圳市领点科技有限公司 | 一种基于操作功能的vr使用监督方法和装置 |
CN110448902A (zh) * | 2019-07-02 | 2019-11-15 | 重庆爱奇艺智能科技有限公司 | 对外部设备进行虚拟化映射与控制的方法、装置与*** |
WO2021052488A1 (zh) * | 2019-09-19 | 2021-03-25 | 华为技术有限公司 | 一种信息处理方法及电子设备 |
CN112527174A (zh) * | 2019-09-19 | 2021-03-19 | 华为技术有限公司 | 一种信息处理方法及电子设备 |
WO2021164711A1 (zh) * | 2020-02-19 | 2021-08-26 | Oppo广东移动通信有限公司 | 移动设备、用于视觉增强***的交互方法以及存储介质 |
CN115004133A (zh) * | 2020-02-19 | 2022-09-02 | Oppo广东移动通信有限公司 | 移动设备、用于视觉增强***的交互方法以及存储介质 |
CN111340962A (zh) * | 2020-02-24 | 2020-06-26 | 维沃移动通信有限公司 | 控制方法、电子设备及存储介质 |
CN111340962B (zh) * | 2020-02-24 | 2023-08-15 | 维沃移动通信有限公司 | 控制方法、电子设备及存储介质 |
WO2022017119A1 (en) * | 2020-07-21 | 2022-01-27 | International Business Machines Corporation | Mobile device based vr control |
GB2611994A (en) * | 2020-07-21 | 2023-04-19 | Ibm | Mobile device based VR control |
US11393171B2 (en) | 2020-07-21 | 2022-07-19 | International Business Machines Corporation | Mobile device based VR content control |
Also Published As
Publication number | Publication date |
---|---|
CN106095235B (zh) | 2018-05-08 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN106095235B (zh) | 基于虚拟现实的控制方法和装置 | |
CN105915766B (zh) | 基于虚拟现实的控制方法和装置 | |
KR102590690B1 (ko) | 다중-사용자 플랫폼을 통해 해설 콘텐츠와 게임플레이 콘텐츠를 통합하기 | |
US9715279B2 (en) | Haptic devices and methods for providing haptic effects via audio tracks | |
CN108635853A (zh) | 对象的控制方法和装置、存储介质、电子装置 | |
CN106445156A (zh) | 一种基于虚拟现实的智能家居控制的方法、装置以及终端 | |
CN107277242A (zh) | 一种屏幕显示信息的处理方法、显示方法和显示*** | |
CN111324253B (zh) | 虚拟物品交互方法、装置、计算机设备及存储介质 | |
CN110399064A (zh) | 显示界面的切换方法和装置、存储介质及电子装置 | |
CN108553891A (zh) | 对象瞄准方法和装置、存储介质及电子装置 | |
CN103324488B (zh) | 一种特效信息获取方法及装置 | |
CN105635519A (zh) | 视频处理方法、装置及*** | |
CN108710458A (zh) | 一种分屏控制方法和终端设备 | |
CN107995482A (zh) | 视频文件的处理方法和装置 | |
CN101908095A (zh) | 一种场景互动展示方法 | |
CN106657286A (zh) | 一种数据交互的方法及一种虚拟现实终端、一种无人机 | |
CN106572417A (zh) | 音效控制方法和装置 | |
CN110711388B (zh) | 虚拟对象控制方法、装置及存储介质 | |
CN108924534A (zh) | 全景图像的展示方法、客户端、服务器及存储介质 | |
CN107172136A (zh) | 体素数据的同步方法和装置 | |
CN108553885A (zh) | 虚拟场景中的动画播放方法和装置及存储介质、电子装置 | |
CN106850577A (zh) | 数据交互的方法和装置、第一虚拟现实终端、会议服务器 | |
CN104469513A (zh) | 一种显示方法及电子设备 | |
CN115150555B (zh) | 视频录制方法、装置、设备及介质 | |
CN107070784A (zh) | 一种基于WebGL和VR技术的3D即时通讯*** |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |