CN106708074A - 基于vr眼镜控制无人机的方法及装置 - Google Patents

基于vr眼镜控制无人机的方法及装置 Download PDF

Info

Publication number
CN106708074A
CN106708074A CN201611112772.XA CN201611112772A CN106708074A CN 106708074 A CN106708074 A CN 106708074A CN 201611112772 A CN201611112772 A CN 201611112772A CN 106708074 A CN106708074 A CN 106708074A
Authority
CN
China
Prior art keywords
unmanned plane
control
glasses
rotation
eyeglass
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201611112772.XA
Other languages
English (en)
Other versions
CN106708074B (zh
Inventor
刘均
宋朝忠
杨伟
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shenzhen Launch Technology Co Ltd
Original Assignee
Shenzhen Launch Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shenzhen Launch Technology Co Ltd filed Critical Shenzhen Launch Technology Co Ltd
Priority to CN201611112772.XA priority Critical patent/CN106708074B/zh
Priority to PCT/CN2017/071894 priority patent/WO2018103188A1/zh
Publication of CN106708074A publication Critical patent/CN106708074A/zh
Application granted granted Critical
Publication of CN106708074B publication Critical patent/CN106708074B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G05—CONTROLLING; REGULATING
    • G05D—SYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00—Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
    • G05D1/0094—Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots involving pointing a payload, e.g. camera, weapon, sensor, towards a fixed or moving target
    • G—PHYSICS
    • G05—CONTROLLING; REGULATING
    • G05D—SYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00—Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
    • G05D1/10—Simultaneous control of position or course in three dimensions
    • G05D1/101—Simultaneous control of position or course in three dimensions specially adapted for aircraft
    • G—PHYSICS
    • G05—CONTROLLING; REGULATING
    • G05D—SYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00—Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
    • G05D1/08—Control of attitude, i.e. control of roll, pitch, or yaw
    • G05D1/0808—Control of attitude, i.e. control of roll, pitch, or yaw specially adapted for aircraft

Landscapes

  • Engineering & Computer Science (AREA)
  • Aviation & Aerospace Engineering (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Remote Sensing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Automation & Control Theory (AREA)
  • User Interface Of Digital Computer (AREA)
  • Toys (AREA)

Abstract

本发明公开了一种基于VR眼镜控制无人机的方法，所述VR眼镜设有运动感应组件，所述无人机设有摄像头，且VR眼镜与无人机无线连接，该方法包括：在接收到无人机发送的由所述摄像头拍摄的图像数据后，转化为VR眼镜可播放的VR视频源并在VR眼镜上播放；通过运动感应组件检测VR眼镜佩戴者的头部及肢体动作，并生成相应的运动数据；将该运动数据转换成无人机可识别的控制指令并发送至所述无人机，以控制所述无人机执行相应的控制操作。本发明还公开了一种基于VR眼镜控制无人机的装置。本发明解决了现有技术中只能通过手柄操纵杆来控制无人机，无法根据用户的视角来控制无人机的技术问题，提高了用户的视觉交互体验。

Description

基于VR眼镜控制无人机的方法及装置
技术领域
本发明涉及无人机控制技术领域，尤其涉及一种基于VR眼镜控制无人机的方法及装置。
背景技术
VR(Virtual Reality，虚拟现实)技术是一种可以创建和体验虚拟世界的计算机仿真***，它利用计算机生成一种模拟环境，是一种多源信息融合的交互式的三维动态视景和实体行为的***仿真，使用户沉浸到该模拟环境中。
目前，无人机在人们生活中的应用越来越广泛，无人机玩家也越来越多，现有的无人机一般都是通过手柄操控杆或者遥控器来实现一定的遥控操作，遥控操作与传统的遥控玩具飞机并无太大差异，可玩性不强，且无视觉上的交互。例如，在采用无人机进行航拍时，用户只能通过地面终端查看到无人机发送的航拍视频，然后通过无人机手柄操控杆来调节无人机的拍摄方向或者拍摄位置，即无法根据用户的视角来控制无人机的拍摄方向或者拍摄位置，给用户带来的视觉交互体验并不高。
发明内容
本发明的主要目的在于提出一种基于VR眼镜控制无人机的方法及装置，旨在解决现有技术中只能通过手柄操纵杆来控制无人机，无法根据用户的视角来控制无人机的技术问题，提高用户的视觉交互体验。
为实现上述目的，本发明提供一种基于VR眼镜控制无人机的方法，所述VR眼镜设有运动感应组件，所述无人机设有摄像头，且VR眼镜与无人机无线连接，所述基于VR眼镜控制无人机的方法包括：
在接收到无人机发送的由所述摄像头拍摄的图像数据后，将接收到的图像数据转化为所述VR眼镜可播放的VR视频源，并在所述VR眼镜上进行播放；
通过所述运动感应组件检测VR眼镜佩戴者的头部及肢体动作，并生成相应的运动数据；
将生成的运动数据转换成所述无人机可识别的控制指令，并将所述控制指令发送至所述无人机，以控制所述无人机执行相应的控制操作。
优选地，通过所述运动感应组件检测VR眼镜佩戴者的头部及肢体动作，并生成相应的运动数据包括：
当所述运动感应组件检测到VR眼镜佩戴者的头部发生旋转时，则获取VR眼镜佩戴者头部的旋转方向及旋转角度，并生成相应的旋转数据；
当所述运动感应组件检测到VR眼镜佩戴者的肢体发生移动时，则获取VR眼镜佩戴者肢体的移动方向及移动距离，并生成相应的移动数据。
优选地，所述将生成的运动数据转换成所述无人机可识别的控制指令，并将所述控制指令发送至所述无人机，以控制所述无人机执行相应的控制操作的步骤包括：
将所述旋转数据转换成无人机可识别的旋转控制指令，并发送至所述无人机，以控制所述无人机或无人机对应的摄像头执行相应的旋转操作，其中，所述无人机或无人机对应摄像头的旋转方向及旋转角度与所述VR眼镜佩戴者头部的旋转方向及旋转角度相同。
优选地，所述将生成的运动数据转换成所述无人机可识别的控制指令，并将所述控制指令发送至所述无人机，以控制所述无人机执行相应的控制操作的步骤还包括：
将所述移动数据转换成无人机可识别的移动控制指令，并发送至所述无人机，以控制所述无人机执行相应的移动操作，其中，所述无人机的移动方向与所述VR眼镜佩戴者肢体的移动方向相同，所述无人机的移动距离与所述VR眼镜佩戴者肢体的移动距离相同或成比例关系。
优选地，所述运动感应组件包括陀螺仪与三轴运动传感器；
则所述通过运动感应组件检测VR眼镜佩戴者的头部及肢体动作包括：
当所述陀螺仪检测到VR眼镜佩戴者的头部发生旋转时，则获取所述VR眼镜佩戴者头部的旋转方向及旋转角度，当所述三轴运动传感器检测到VR眼镜佩戴者的肢体发生移动时，则获取所述VR眼镜佩戴者肢体的移动方向与移动距离。
此外，为实现上述目的，本发明还提供一种基于VR眼镜控制无人机的装置，所述VR眼镜设有运动感应组件，所述无人机设有摄像头，且VR眼镜与无人机无线连接，所述基于VR眼镜控制无人机的装置包括：
接收模块，用于在接收到无人机发送的由所述摄像头拍摄的图像数据后，将接收到的图像数据转化为所述VR眼镜可播放的VR视频源，并在所述VR眼镜上进行播放；
检测模块，用于通过所述运动感应组件检测VR眼镜佩戴者的头部及肢体动作，并生成相应的运动数据；
控制模块，用于将生成的运动数据转换成所述无人机可识别的控制指令，并将所述控制指令发送至所述无人机，以控制所述无人机执行相应的控制操作。
优选地，所述检测模块用于：
当所述运动感应组件检测到VR眼镜佩戴者的头部发生旋转时，则获取VR眼镜佩戴者头部的旋转方向及旋转角度，并生成相应的旋转数据；当所述运动感应组件检测到VR眼镜佩戴者的肢体发生移动时，则获取VR眼镜佩戴者肢体的移动方向及移动距离，并生成相应的移动数据。
优选地，所述控制模块包括：
第一控制单元，用于将所述旋转数据转换成无人机可识别的旋转控制指令，并发送至所述无人机，以控制所述无人机或无人机对应的摄像头执行相应的旋转操作，其中，所述无人机或无人机对应摄像头的旋转方向及旋转角度与所述VR眼镜佩戴者头部的旋转方向及旋转角度相同。
优选地，所述控制模块还包括：
第二控制单元，用于将所述移动数据转换成无人机可识别的移动控制指令，并发送至所述无人机，以控制所述无人机执行相应的移动操作，其中，所述无人机的移动方向与所述VR眼镜佩戴者肢体的移动方向相同，所述无人机的移动距离与所述VR眼镜佩戴者肢体的移动距离相同或成比例关系。
优选地，所述运动感应组件包括陀螺仪与三轴运动传感器；
则所述检测模块用于：
当所述陀螺仪检测到VR眼镜佩戴者的头部发生旋转时，则获取所述VR眼镜佩戴者头部的旋转方向及旋转角度；当所述三轴运动传感器检测到VR眼镜佩戴者的肢体发生移动时，则获取所述VR眼镜佩戴者肢体的移动方向与移动距离。
本发明所提供的基于VR眼镜控制无人机的方法及装置，通过所述运动感应组件检测所述VR眼镜佩戴者的旋转或者移动行为，然后控制无人机执行相同的旋转或者移动操作，使得所述无人机对应摄像头的拍摄视角与所述VR眼镜佩戴者的观影视角保持一致，解决了现有技术中只能通过手柄操纵杆来控制无人机，无法根据用户的视角来控制无人机的技术问题，提高了用户的视觉交互体验。
附图说明
图1为本发明基于VR眼镜控制无人机的方法第一实施例的流程示意图；
图2为本发明中VR眼镜与无人机的连接架构示意图；
图3为本发明基于VR眼镜控制无人机的方法第二实施例的流程示意图；
图4为本发明基于VR眼镜控制无人机的装置第一实施例的模块示意图；
图5为本发明基于VR眼镜控制无人机的装置第二实施例的模块示意图。
本发明目的的实现、功能特点及优点将结合实施例，参照附图做进一步说明。
具体实施方式
以下结合说明书附图对本发明的优选实施例进行说明，应当理解，此处所描述的优选实施例仅用于说明和解释本发明，并不用于限定本发明，并且在不冲突的情况下，本发明中的实施例及实施例中的特征可以相互组合。
本发明提供一种基于VR眼镜控制无人机的方法，该方法主要用于通过VR眼镜来控制无人机的飞行，所述VR眼镜设有运动感应组件，所述无人机设有摄像头，且所述VR眼镜与无人机无线连接。
参照图1，图1为本发明基于VR眼镜控制无人机的方法第一实施例的流程示意图，本实施例中，所述基于VR眼镜控制无人机的方法包括：
步骤S10，在接收到无人机发送的由所述摄像头拍摄的图像数据后，将接收到的图像数据转化为所述VR眼镜可播放的VR视频源，并在所述VR眼镜上进行播放。
本实施例中，所述无人机上安装有摄像头，所述摄像头可以采用全景摄像头，以拍摄到适合VR眼镜播放的3D图像。所述无人机通过无线连接的方式与VR眼镜进行连接，当所述无人机在启动后，所述摄像头便随即开始拍摄图像，并将拍摄到的图像数据通过无人机发送装置实时发送至VR眼镜。当所述VR眼镜在接收到无人机发送的图像数据后，将接收到的图像数据转化为所述VR眼镜可播放的VR视频源，并在所述VR眼镜上进行播放。
步骤S20，通过所述运动感应组件检测VR眼镜佩戴者的头部及肢体动作，并生成相应的运动数据。
本实施例中，所述VR眼镜上设有运动感应组件，通过该运动感应组件可以检测到VR眼镜佩戴者的头部及肢体动作，例如摇头、低头、转向等头部动作以及前进后退等肢体动作。并在检测到VR眼镜佩戴者的头部及肢体发生移动后，生成相应的运动数据。
其中，当VR眼镜佩戴者在观看播放的所述VR视频源时，可以根据个人兴趣或喜好转换视角。例如，VR眼镜佩戴者在观看无人机对应摄像头拍摄的图像时，可以随意改变视角，如通过旋转头部、向前移动肢体等来获取新的图像。上述运动感应组件实时监测VR眼镜佩戴者的头部及肢体动作，然后生成相应的运动数据。
步骤S30，将生成的运动数据转换成所述无人机可识别的控制指令，并将所述控制指令发送至所述无人机，以控制所述无人机执行相应的控制操作。
本实施例中，将生成的运动数据转换成所述无人机可识别的控制指令，该控制指令的类型与无人机原有的手柄操纵杆或遥控设备所发送的控制指令的类型相一致。然后将转换后的所述控制指令发送至所述无人机，所述无人机在接收到该控制指令后读取该控制指令并执行相应的控制操作。
可以理解的是，本实施例中，可以预先通过无人机手柄操纵杆或者遥控设备来控制无人机飞行到用户理想的景物上方，然后便可以将无人机的控制权限分配给所述VR眼镜，使得所述VR眼镜能够控制所述无人机。
具体的，使所述VR眼镜的观影视角与所述无人机对应摄像头的拍摄视角保持一致，且使所述VR眼镜与所述无人机保持联动状态，即当所述VR眼镜佩戴者的头部发生转动时，所述无人机对应摄像头的拍摄视角也会随着发生转动，当所述VR眼镜佩戴者的身体发生移动时，所述无人机对应摄像头的拍摄视角也会随着发生移动。
为了更好的理解本发明，参照图2，图2为本发明中VR眼镜与无人机的连接架构示意图，在图2中，所述无人机1上安装有摄像头2，所述VR眼镜4上安装有运动感应组件3，所述无人机1与所述VR眼镜4进行无线连接。
本实施例所述的基于VR眼镜控制无人机的方法，可以通过所述运动感应组件检测所述VR眼镜佩戴者的旋转或者移动行为，然后控制无人机执行相同的旋转或者移动操作，使得所述无人机对应摄像头的拍摄视角与所述VR眼镜佩戴者的观影视角保持一致，解决了现有技术中只能通过手柄操纵杆来控制无人机，无法根据用户的视角来控制无人机的技术问题，提高了用户的视觉交互体验。
进一步地，基于上述图1所述的实施例，本实施例中，上述步骤S20所述的通过所述运动感应组件检测VR眼镜佩戴者的头部及肢体动作，并生成相应的运动数据包括：
当所述运动感应组件检测到VR眼镜佩戴者的头部发生旋转时，则获取VR眼镜佩戴者头部的旋转方向及旋转角度，并生成相应的旋转数据；当所述运动感应组件检测到VR眼镜佩戴者的肢体发生移动时，则获取VR眼镜佩戴者肢体的移动方向与移动距离，并生成相应的移动数据。
其中，所述运动感应组件包括陀螺仪与三轴运动传感器，则所述通过运动感应组件检测VR眼镜佩戴者的头部及肢体动作包括：
当所述陀螺仪检测到VR眼镜佩戴者的头部发生旋转时，则获取所述VR眼镜佩戴者头部的旋转方向及旋转角度，当所述三轴运动传感器检测到VR眼镜佩戴者的肢体发生移动时，则获取所述VR眼镜佩戴者肢体的移动方向与移动距离。
其中，所述陀螺仪可检测到VR眼镜佩戴者的头部向左或者向右旋转、以及低头或者抬头的动作，并且可同时检测到旋转的角度或者是幅度；所述三轴运动传感器可检测到VR眼镜佩戴者肢体向前后左右的移动，并且也可同时检测到移动的距离。
本实施例所述的基于VR眼镜控制无人机的方法，通过所述运动感应组件来检测VR眼镜佩戴者头部的旋转方向及旋转角度以及肢体的移动方向与移动距离，并生成相应的运动数据，以此来根据生成的运动数据控制无人机执行相同的旋转操作或者移动操作，使得所述无人机对应摄像头的拍摄视角与所述VR眼镜佩戴者的观影视角能够保持一致。
进一步地，参照图3，图3为本发明基于VR眼镜控制无人机的方法第二实施例的流程示意图，基于上述实施例，本实施例中，上述步骤S30所述的将生成的运动数据转换成所述无人机可识别的控制指令，并将所述控制指令发送至所述无人机，以控制所述无人机执行相应的控制操作包括：
步骤S31，将所述旋转数据转换成无人机可识别的旋转控制指令，并发送至所述无人机，以控制所述无人机或无人机对应的摄像头执行相应的旋转操作，其中，所述无人机或无人机对应摄像头的旋转方向及旋转角度与所述VR眼镜佩戴者头部的旋转方向及旋转角度相同。
其中，当所述运动感应组件检测到VR眼镜佩戴者的头部发生旋转时，则获取VR眼镜佩戴者头部的旋转方向及旋转角度，并生成相应的旋转数据，然后将所述旋转数据转换成无人机可识别的旋转控制指令，并发送至所述无人机，以控制所述无人机或无人机对应的摄像头执行相应的旋转操作。
其中，所述无人机或无人机对应摄像头的旋转方向及旋转角度与所述VR眼镜佩戴者头部的旋转方向及旋转角度相同。
例如，当所述运动感应组件检测到VR眼镜佩戴者的头部向右旋转90°后，则向所述无人机发送控制指令，控制所述无人机或无人机对应的摄像头向右旋转90°。其中，可以是保持无人机静止，将所述无人机对应摄像头的拍摄角度向右旋转90°，也可以是保持所述无人机对应摄像头的拍摄角度不变，将所述无人机向右旋转90°。
进一步地，上述步骤S30所述的将生成的运动数据转换成所述无人机可识别的控制指令，并将所述控制指令发送至所述无人机，以控制所述无人机执行相应的控制操作还包括：
步骤S32，将所述移动数据转换成无人机可识别的移动控制指令，并发送至所述无人机，以控制所述无人机执行相应的移动操作，其中，所述无人机的移动方向与所述VR眼镜佩戴者肢体的移动方向相同，所述无人机的移动距离与所述VR眼镜佩戴者肢体的移动距离相同或成比例关系。
其中，当所述运动感应组件检测到VR眼镜佩戴者的肢体发生移动时，则获取VR眼镜佩戴者肢体的移动方向及移动距离，并生成相应的移动数据，然后将所述移动数据转换成无人机可识别的移动控制指令，并发送至所述无人机，以控制所述无人机执行相应的移动操作。
其中，所述无人机的移动方向与所述VR眼镜佩戴者肢体的移动方向相同，所述无人机的移动距离与所述VR眼镜佩戴者肢体的移动距离相同或成比例关系。
例如，当所述运动感应组件检测到VR眼镜佩戴者的肢体向正北方向移动了1米，则向所述无人机发送控制指令，控制所述无人机向正北方向移动1米。其中，所述无人机的移动距离与所述VR眼镜佩戴者肢体的移动距离也可以成比例关系，如当所述比例为1:2时，则所述VR眼镜佩戴者的肢体移动1米时，所述无人机同时移动2米。
本实施例所述的基于VR眼镜控制无人机的方法，通过将生成的所述移动数据转换成无人机可识别的控制指令本发送至所述无人机，能够实现根据VR眼镜佩戴者的旋转或移动来控制无人机的旋转或者移动，且使所述无人机对应摄像头的拍摄视角与所述VR眼镜佩戴者的观影视角保持一致，提高了用户的视觉交互体验。
本发明还提供一种基于VR眼镜控制无人机的装置，该装置可为VR眼镜的一部分，所述VR眼镜设有运动感应组件，所述无人机设有摄像头，且所述VR眼镜与无人机无线连接。
参照图4，图4为本发明基于VR眼镜控制无人机的装置第一实施例的模块示意图，本实施例中，所述基于VR眼镜控制无人机的装置100包括：
接收模块10，用于在接收到无人机发送的由所述摄像头拍摄的图像数据后，将接收到的图像数据转化为所述VR眼镜可播放的VR视频源，并在所述VR眼镜上进行播放。
本实施例中，所述无人机上安装有摄像头，所述摄像头可以采用全景摄像头，以拍摄到适合VR眼镜播放的3D图像。所述无人机通过无线连接的方式与VR眼镜进行连接，当所述无人机在启动后，所述摄像头便随即开始拍摄图像，并将拍摄到的图像数据通过无人机发送装置实时发送至VR眼镜。当所述VR眼镜在接收到无人机发送的图像数据后，将接收到的图像数据转化为所述VR眼镜可播放的VR视频源，并在所述VR眼镜上进行播放。
检测模块20，用于通过所述运动感应组件检测VR眼镜佩戴者的头部及肢体动作，并生成相应的运动数据。
本实施例中，所述VR眼镜上设有运动感应组件，通过该运动感应组件可以检测到VR眼镜佩戴者的头部及肢体动作，例如摇头、低头、转向等头部动作以及前进后退等肢体动作。并在检测到VR眼镜佩戴者的头部及肢体发生移动后，生成相应的运动数据。
其中，当VR眼镜佩戴者在观看播放的所述VR视频源时，可以根据个人兴趣或喜好转换视角。例如，VR眼镜佩戴者在观看无人机对应摄像头拍摄的图像时，可以随意改变视角，如通过旋转头部、向前移动肢体等来获取新的图像。上述运动感应组件实时监测VR眼镜佩戴者的头部及肢体动作，然后生成相应的运动数据。
控制模块30，用于将生成的运动数据转换成所述无人机可识别的控制指令，并将所述控制指令发送至所述无人机，以控制所述无人机执行相应的控制操作。
本实施例中，将生成的运动数据转换成所述无人机可识别的控制指令，该控制指令的类型与无人机原有的手柄操纵杆或遥控设备所发送的控制指令的类型相一致。然后将转换后的所述控制指令发送至所述无人机，所述无人机在接收到该控制指令后读取该控制指令并执行相应的控制操作。
可以理解的是，本实施例中，可以预先通过无人机手柄操纵杆或者遥控设备来控制无人机飞行到用户理想的景物上方，然后便可以将无人机的控制权限分配给所述VR眼镜，使得所述VR眼镜能够控制所述无人机。
具体的，使所述VR眼镜的观影视角与所述无人机对应摄像头的拍摄视角保持一致，且使所述VR眼镜与所述无人机保持联动状态，即当所述VR眼镜佩戴者的头部发生转动时，所述无人机对应摄像头的拍摄视角也会随着发生转动，当所述VR眼镜佩戴者的身体发生移动时，所述无人机对应摄像头的拍摄视角也会随着发生移动。
为了更好的理解本发明，参照图2，图2为本发明中VR眼镜与无人机的连接架构示意图，在图2中，所述无人机1上安装有摄像头2，所述VR眼镜4上安装有运动感应组件3，所述无人机1与所述VR眼镜4进行无线连接。
本实施例所述的基于VR眼镜控制无人机的装置，可以通过所述运动感应组件检测所述VR眼镜佩戴者的旋转或者移动行为，然后控制无人机执行相同的旋转或者移动操作，使得所述无人机对应摄像头的拍摄视角与所述VR眼镜佩戴者的观影视角保持一致，解决了现有技术中只能通过手柄操纵杆来控制无人机，无法根据用户的视角来控制无人机的技术问题，提高了用户的视觉交互体验。
进一步地，基于上述图4所述的实施例，本实施例中，上述检测模块20用于：
当所述运动感应组件检测到VR眼镜佩戴者的头部发生旋转时，则获取VR眼镜佩戴者头部的旋转方向及旋转角度，并生成相应的旋转数据；当所述运动感应组件检测到VR眼镜佩戴者的肢体发生移动时，则获取VR眼镜佩戴者肢体的移动方向与移动距离，并生成相应的移动数据。
其中，所述运动感应组件包括陀螺仪与三轴运动传感器，则所述通过运动感应组件检测VR眼镜佩戴者的头部及肢体动作包括：
当所述陀螺仪检测到VR眼镜佩戴者的头部发生旋转时，则获取所述VR眼镜佩戴者头部的旋转方向及旋转角度，当所述三轴运动传感器检测到VR眼镜佩戴者的肢体发生移动时，则获取所述VR眼镜佩戴者肢体的移动方向与移动距离。
其中，所述陀螺仪可检测到VR眼镜佩戴者的头部向左或者向右旋转、以及低头或者抬头的动作，并且可同时检测到旋转的角度或者是幅度；所述三轴运动传感器可检测到VR眼镜佩戴者肢体向前后左右的移动，并且也可同时检测到移动的距离。
本实施例所述的基于VR眼镜控制无人机的装置，通过所述运动感应组件来检测VR眼镜佩戴者头部的旋转方向及旋转角度以及肢体的移动方向与移动距离，并生成相应的运动数据，以此来根据生成的运动数据控制无人机执行相同的旋转操作或者移动操作，使得所述无人机对应摄像头的拍摄视角与所述VR眼镜佩戴者的观影视角能够保持一致。
进一步地，参照图5，图5为本发明基于VR眼镜控制无人机的装置第二实施例的模块示意图，基于上述实施例，本实施例中，上述控制模块30包括：
第一控制单元31，用于将所述旋转数据转换成无人机可识别的旋转控制指令，并发送至所述无人机，以控制所述无人机或无人机对应的摄像头执行相应的旋转操作，其中，所述无人机或无人机对应摄像头的旋转方向及旋转角度与所述VR眼镜佩戴者头部的旋转方向及旋转角度相同。
其中，当所述运动感应组件检测到VR眼镜佩戴者的头部发生旋转时，则获取VR眼镜佩戴者头部的旋转方向及旋转角度，并生成相应的旋转数据，然后将所述旋转数据转换成无人机可识别的旋转控制指令，并发送至所述无人机，以控制所述无人机或无人机对应的摄像头执行相应的旋转操作。
其中，所述无人机或无人机对应摄像头的旋转方向及旋转角度与所述VR眼镜佩戴者头部的旋转方向及旋转角度相同。
例如，当所述运动感应组件检测到VR眼镜佩戴者的头部向右旋转90°后，则向所述无人机发送控制指令，控制所述无人机或无人机对应的摄像头向右旋转90°。其中，可以是保持无人机静止，将所述无人机对应摄像头的拍摄角度向右旋转90°，也可以是保持所述无人机对应摄像头的拍摄角度不变，将所述无人机向右旋转90°。
进一步地，上述控制模块30还包括：
第二控制单元32，用于将所述移动数据转换成无人机可识别的移动控制指令，并发送至所述无人机，以控制所述无人机执行相应的移动操作，其中，所述无人机的移动方向与所述VR眼镜佩戴者肢体的移动方向相同，所述无人机的移动距离与所述VR眼镜佩戴者肢体的移动距离相同或成比例关系。
其中，当所述运动感应组件检测到VR眼镜佩戴者的肢体发生移动时，则获取VR眼镜佩戴者肢体的移动方向及移动距离，并生成相应的移动数据，然后将所述移动数据转换成无人机可识别的移动控制指令，并发送至所述无人机，以控制所述无人机执行相应的移动操作。
其中，所述无人机的移动方向与所述VR眼镜佩戴者肢体的移动方向相同，所述无人机的移动距离与所述VR眼镜佩戴者肢体的移动距离相同或成比例关系。
例如，当所述运动感应组件检测到VR眼镜佩戴者的肢体向正北方向移动了1米，则向所述无人机发送控制指令，控制所述无人机向正北方向移动1米。其中，所述无人机的移动距离与所述VR眼镜佩戴者肢体的移动距离也可以成比例关系，如当所述比例为1:2时，则所述VR眼镜佩戴者的肢体移动1米时，所述无人机同时移动2米。
本实施例所述的基于VR眼镜控制无人机的装置，通过将生成的所述移动数据转换成无人机可识别的控制指令本发送至所述无人机，能够实现根据VR眼镜佩戴者的旋转或移动来控制无人机的旋转或者移动，且使所述无人机对应摄像头的拍摄视角与所述VR眼镜佩戴者的观影视角保持一致，提高了用户的视觉交互体验。
需要说明的是，在本文中，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者装置不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者装置所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括该要素的过程、方法、物品或者装置中还存在另外的相同要素。
上述本发明实施例序号仅仅为了描述，不代表实施例的优劣。
通过以上的实施方式的描述，本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现，当然也可以通过硬件，但很多情况下前者是更佳的实施方式。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中，包括若干指令用以使得一台终端设备执行本发明各个实施例所述的方法。
以上仅为本发明的优选实施例，并非因此限制本发明的专利范围，凡是利用本发明说明书及附图内容所作的等效结构或等效流程变换，或直接或间接运用在其他相关的技术领域，均同理包括在本发明的专利保护范围内。

Claims (10)

1.一种基于VR眼镜控制无人机的方法，其特征在于，所述VR眼镜设有运动感应组件，所述无人机设有摄像头，且VR眼镜与无人机无线连接，所述基于VR眼镜控制无人机的方法包括：
在接收到无人机发送的由所述摄像头拍摄的图像数据后，将接收到的图像数据转化为所述VR眼镜可播放的VR视频源，并在所述VR眼镜上进行播放；
通过所述运动感应组件检测VR眼镜佩戴者的头部及肢体动作，并生成相应的运动数据；
将生成的运动数据转换成所述无人机可识别的控制指令，并将所述控制指令发送至所述无人机，以控制所述无人机执行相应的控制操作。
2.如权利要求1所述的基于VR眼镜控制无人机的方法，其特征在于，通过所述运动感应组件检测VR眼镜佩戴者的头部及肢体动作，并生成相应的运动数据包括：
当所述运动感应组件检测到VR眼镜佩戴者的头部发生旋转时，则获取VR眼镜佩戴者头部的旋转方向及旋转角度，并生成相应的旋转数据；
当所述运动感应组件检测到VR眼镜佩戴者的肢体发生移动时，则获取VR眼镜佩戴者肢体的移动方向及移动距离，并生成相应的移动数据。
3.如权利要求2所述的基于VR眼镜控制无人机的方法，其特征在于，所述将生成的运动数据转换成所述无人机可识别的控制指令，并将所述控制指令发送至所述无人机，以控制所述无人机执行相应的控制操作的步骤包括：
将所述旋转数据转换成无人机可识别的旋转控制指令，并发送至所述无人机，以控制所述无人机或无人机对应的摄像头执行相应的旋转操作，其中，所述无人机或无人机对应摄像头的旋转方向及旋转角度与所述VR眼镜佩戴者头部的旋转方向及旋转角度相同。
4.如权利要求3所述的基于VR眼镜控制无人机的方法，其特征在于，所述将生成的运动数据转换成所述无人机可识别的控制指令，并将所述控制指令发送至所述无人机，以控制所述无人机执行相应的控制操作的步骤还包括：
将所述移动数据转换成无人机可识别的移动控制指令，并发送至所述无人机，以控制所述无人机执行相应的移动操作，其中，所述无人机的移动方向与所述VR眼镜佩戴者肢体的移动方向相同，所述无人机的移动距离与所述VR眼镜佩戴者肢体的移动距离相同或成比例关系。
5.如权利要求1-4任意一项所述的基于VR眼镜控制无人机的方法，其特征在于，所述运动感应组件包括陀螺仪与三轴运动传感器；
则所述通过运动感应组件检测VR眼镜佩戴者的头部及肢体动作包括：
当所述陀螺仪检测到VR眼镜佩戴者的头部发生旋转时，则获取所述VR眼镜佩戴者头部的旋转方向及旋转角度，当所述三轴运动传感器检测到VR眼镜佩戴者的肢体发生移动时，则获取所述VR眼镜佩戴者肢体的移动方向与移动距离。
6.一种基于VR眼镜控制无人机的装置，其特征在于，所述VR眼镜设有运动感应组件，所述无人机设有摄像头，且VR眼镜与无人机无线连接，所述基于VR眼镜控制无人机的装置包括：
接收模块，用于在接收到无人机发送的由所述摄像头拍摄的图像数据后，将接收到的图像数据转化为所述VR眼镜可播放的VR视频源，并在所述VR眼镜上进行播放；
检测模块，用于通过所述运动感应组件检测VR眼镜佩戴者的头部及肢体动作，并生成相应的运动数据；
控制模块，用于将生成的运动数据转换成所述无人机可识别的控制指令，并将所述控制指令发送至所述无人机，以控制所述无人机执行相应的控制操作。
7.如权利要求6所述的基于VR眼镜控制无人机的装置，其特征在于，所述检测模块用于：
当所述运动感应组件检测到VR眼镜佩戴者的头部发生旋转时，则获取VR眼镜佩戴者头部的旋转方向及旋转角度，并生成相应的旋转数据；当所述运动感应组件检测到VR眼镜佩戴者的肢体发生移动时，则获取VR眼镜佩戴者肢体的移动方向及移动距离，并生成相应的移动数据。
8.如权利要求7所述的基于VR眼镜控制无人机的装置，其特征在于，所述控制模块包括：
第一控制单元，用于将所述旋转数据转换成无人机可识别的旋转控制指令，并发送至所述无人机，以控制所述无人机或无人机对应的摄像头执行相应的旋转操作，其中，所述无人机或无人机对应摄像头的旋转方向及旋转角度与所述VR眼镜佩戴者头部的旋转方向及旋转角度相同。
9.如权利要求8所述的基于VR眼镜控制无人机的装置，其特征在于，所述控制模块还包括：
第二控制单元，用于将所述移动数据转换成无人机可识别的移动控制指令，并发送至所述无人机，以控制所述无人机执行相应的移动操作，其中，所述无人机的移动方向与所述VR眼镜佩戴者肢体的移动方向相同，所述无人机的移动距离与所述VR眼镜佩戴者肢体的移动距离相同或成比例关系。
10.如权利要求6-9任意一项所述的基于VR眼镜控制无人机的装置，其特征在于，所述运动感应组件包括陀螺仪与三轴运动传感器；
则所述检测模块用于：
当所述陀螺仪检测到VR眼镜佩戴者的头部发生旋转时，则获取所述VR眼镜佩戴者头部的旋转方向及旋转角度；当所述三轴运动传感器检测到VR眼镜佩戴者的肢体发生移动时，则获取所述VR眼镜佩戴者肢体的移动方向与移动距离。
CN201611112772.XA 2016-12-06 2016-12-06 基于vr眼镜控制无人机的方法及装置 Active CN106708074B (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN201611112772.XA CN106708074B (zh) 2016-12-06 2016-12-06 基于vr眼镜控制无人机的方法及装置
PCT/CN2017/071894 WO2018103188A1 (zh) 2016-12-06 2017-01-20 基于vr眼镜控制无人机的方法及装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201611112772.XA CN106708074B (zh) 2016-12-06 2016-12-06 基于vr眼镜控制无人机的方法及装置

Publications (2)

Publication Number Publication Date
CN106708074A true CN106708074A (zh) 2017-05-24
CN106708074B CN106708074B (zh) 2020-10-30

Family

ID=58937618

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201611112772.XA Active CN106708074B (zh) 2016-12-06 2016-12-06 基于vr眼镜控制无人机的方法及装置

Country Status (2)

Country Link
CN (1) CN106708074B (zh)
WO (1) WO2018103188A1 (zh)

Cited By (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108700887A (zh) * 2017-11-15 2018-10-23 深圳市大疆创新科技有限公司 数据处理方法和设备
CN108873931A (zh) * 2018-06-05 2018-11-23 北京理工雷科电子信息技术有限公司 一种基于主观与客观结合的无人机视觉防撞方法
CN109292103A (zh) * 2018-07-27 2019-02-01 北京臻迪科技股份有限公司 云台调整方法、装置、无人机及云台调整***
CN109963137A (zh) * 2019-04-01 2019-07-02 赵福涛 一种全新的交互***及方法
CN110337098A (zh) * 2019-07-05 2019-10-15 视联动力信息技术股份有限公司 一种通信连接的建立方法及装置
CN111314616A (zh) * 2020-03-16 2020-06-19 维沃移动通信有限公司 图像获取方法、电子设备、介质及可穿戴设备
CN111857337A (zh) * 2020-07-10 2020-10-30 成都天翼空间科技有限公司 一种vr头控的切换方法
CN112822392A (zh) * 2020-12-25 2021-05-18 维沃移动通信有限公司 一种控制摄像模组旋转的方法及装置
CN112887616A (zh) * 2021-01-27 2021-06-01 维沃移动通信有限公司 拍摄方法和电子设备
CN112997508A (zh) * 2019-12-30 2021-06-18 深圳市大疆创新科技有限公司 视频处理方法、装置、控制终端、***及存储介质
CN113212777A (zh) * 2021-06-17 2021-08-06 广东汇天航空航天科技有限公司 载人飞行器体感控制方法、***及相关设备
CN113608623A (zh) * 2021-08-27 2021-11-05 江西佳铭特实业有限公司 一种基于人脸识别的车用vr设备
CN114137995A (zh) * 2021-11-24 2022-03-04 广东电网有限责任公司 一种无人机控制***及其控制方法
CN114339189A (zh) * 2021-12-31 2022-04-12 绿城科技产业服务集团有限公司 沉浸式漫游实景vr呈现方法
CN114803858A (zh) * 2022-06-24 2022-07-29 杭州未名信科科技有限公司 智能塔机体感控制***及智能塔机体感控制方法
CN115412722A (zh) * 2022-08-16 2022-11-29 中国检验认证集团河北有限公司 无人水尺观测***、方法及装置
CN115436377A (zh) * 2021-06-04 2022-12-06 同方威视技术股份有限公司 机器人及其控制装置和方法、车辆底盘检测***和方法
CN115938186A (zh) * 2022-11-24 2023-04-07 武汉未来幻影科技有限公司 一种vr驾驶模拟器空间坐标调节方法及***

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111031292A (zh) * 2019-12-26 2020-04-17 北京中煤矿山工程有限公司 一种基于vr技术的煤矿安全生产实时监测***
CN111897417A (zh) * 2020-06-29 2020-11-06 北京农业信息技术研究中心 一种远程在线互动装置及使用方法
CN112653883A (zh) * 2020-11-30 2021-04-13 江苏奇趣智能科技有限公司 一种基于vr的全景实训装置
CN113851024A (zh) * 2021-10-26 2021-12-28 东北大学秦皇岛分校 基于vr的四旋翼无人机遥控器训练方法及***
CN114089784B (zh) * 2021-11-23 2023-03-24 广东工业大学 一种基于mr眼镜的无人机控制方法及***

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105222761A (zh) * 2015-10-29 2016-01-06 哈尔滨工业大学 借助虚拟现实及双目视觉技术实现的第一人称沉浸式无人机驾驶***及驾驶方法
CN105739525A (zh) * 2016-02-14 2016-07-06 普宙飞行器科技（深圳）有限公司 一种配合体感操作实现虚拟飞行的***
CN105763790A (zh) * 2014-11-26 2016-07-13 鹦鹉股份有限公司 用于以沉浸模式来驾驶无人机的视频***
US20160330405A1 (en) * 2013-09-27 2016-11-10 Intel Corporation Ambulatory system to communicate visual projections
CN106125747A (zh) * 2016-07-13 2016-11-16 国网福建省电力有限公司 基于vr交互的无人机机载第一视角随动吊舱***
CN205692054U (zh) * 2016-06-22 2016-11-16 国网江西省电力公司南昌供电分公司 一种头部运动监测的无线巡线机
CN106131530A (zh) * 2016-08-26 2016-11-16 万象三维视觉科技（北京）有限公司 一种裸眼3d虚拟现实展示***及其展示方法

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103426282A (zh) * 2013-07-31 2013-12-04 深圳市大疆创新科技有限公司 遥控方法及终端
CN105334864B (zh) * 2015-11-24 2018-12-07 杨珊珊 一种用于控制无人机的智能眼镜及控制方法

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20160330405A1 (en) * 2013-09-27 2016-11-10 Intel Corporation Ambulatory system to communicate visual projections
CN105763790A (zh) * 2014-11-26 2016-07-13 鹦鹉股份有限公司 用于以沉浸模式来驾驶无人机的视频***
CN105222761A (zh) * 2015-10-29 2016-01-06 哈尔滨工业大学 借助虚拟现实及双目视觉技术实现的第一人称沉浸式无人机驾驶***及驾驶方法
CN105739525A (zh) * 2016-02-14 2016-07-06 普宙飞行器科技（深圳）有限公司 一种配合体感操作实现虚拟飞行的***
CN205692054U (zh) * 2016-06-22 2016-11-16 国网江西省电力公司南昌供电分公司 一种头部运动监测的无线巡线机
CN106125747A (zh) * 2016-07-13 2016-11-16 国网福建省电力有限公司 基于vr交互的无人机机载第一视角随动吊舱***
CN106131530A (zh) * 2016-08-26 2016-11-16 万象三维视觉科技（北京）有限公司 一种裸眼3d虚拟现实展示***及其展示方法

Cited By (24)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2019095139A1 (zh) * 2017-11-15 2019-05-23 深圳市大疆创新科技有限公司 数据处理方法和设备
CN108700887A (zh) * 2017-11-15 2018-10-23 深圳市大疆创新科技有限公司 数据处理方法和设备
CN108873931A (zh) * 2018-06-05 2018-11-23 北京理工雷科电子信息技术有限公司 一种基于主观与客观结合的无人机视觉防撞方法
CN109292103A (zh) * 2018-07-27 2019-02-01 北京臻迪科技股份有限公司 云台调整方法、装置、无人机及云台调整***
CN109963137A (zh) * 2019-04-01 2019-07-02 赵福涛 一种全新的交互***及方法
CN110337098A (zh) * 2019-07-05 2019-10-15 视联动力信息技术股份有限公司 一种通信连接的建立方法及装置
CN110337098B (zh) * 2019-07-05 2023-04-07 视联动力信息技术股份有限公司 一种通信连接的建立方法及装置
CN112997508A (zh) * 2019-12-30 2021-06-18 深圳市大疆创新科技有限公司 视频处理方法、装置、控制终端、***及存储介质
CN112997508B (zh) * 2019-12-30 2024-03-15 深圳市大疆创新科技有限公司 视频处理方法、装置、控制终端、***及存储介质
WO2021134375A1 (zh) * 2019-12-30 2021-07-08 深圳市大疆创新科技有限公司 视频处理方法、装置、控制终端、***及存储介质
CN111314616A (zh) * 2020-03-16 2020-06-19 维沃移动通信有限公司 图像获取方法、电子设备、介质及可穿戴设备
CN111857337A (zh) * 2020-07-10 2020-10-30 成都天翼空间科技有限公司 一种vr头控的切换方法
CN112822392A (zh) * 2020-12-25 2021-05-18 维沃移动通信有限公司 一种控制摄像模组旋转的方法及装置
CN112822392B (zh) * 2020-12-25 2022-12-13 维沃移动通信有限公司 一种控制摄像模组旋转的方法及装置
CN112887616A (zh) * 2021-01-27 2021-06-01 维沃移动通信有限公司 拍摄方法和电子设备
CN115436377A (zh) * 2021-06-04 2022-12-06 同方威视技术股份有限公司 机器人及其控制装置和方法、车辆底盘检测***和方法
CN113212777A (zh) * 2021-06-17 2021-08-06 广东汇天航空航天科技有限公司 载人飞行器体感控制方法、***及相关设备
CN113608623A (zh) * 2021-08-27 2021-11-05 江西佳铭特实业有限公司 一种基于人脸识别的车用vr设备
CN113608623B (zh) * 2021-08-27 2023-09-26 江西佳铭特实业有限公司 一种基于人脸识别的车用vr设备
CN114137995A (zh) * 2021-11-24 2022-03-04 广东电网有限责任公司 一种无人机控制***及其控制方法
CN114339189A (zh) * 2021-12-31 2022-04-12 绿城科技产业服务集团有限公司 沉浸式漫游实景vr呈现方法
CN114803858A (zh) * 2022-06-24 2022-07-29 杭州未名信科科技有限公司 智能塔机体感控制***及智能塔机体感控制方法
CN115412722A (zh) * 2022-08-16 2022-11-29 中国检验认证集团河北有限公司 无人水尺观测***、方法及装置
CN115938186A (zh) * 2022-11-24 2023-04-07 武汉未来幻影科技有限公司 一种vr驾驶模拟器空间坐标调节方法及***

Also Published As

Publication number Publication date
WO2018103188A1 (zh) 2018-06-14
CN106708074B (zh) 2020-10-30

Similar Documents

Publication Publication Date Title
CN106708074A (zh) 基于vr眼镜控制无人机的方法及装置
CN109478340B (zh) 模拟***、处理方法以及信息存储介质
CN106664401B (zh) 用于在与内容交互时向用户提供反馈的***和方法
US20180373413A1 (en) Information processing method and apparatus, and program for executing the information processing method on computer
KR101748401B1 (ko) 가상현실 어트랙션 제어 방법 및 시스템
US20170178411A1 (en) Mobile tele-immersive gameplay
CN105704501A (zh) 一种基于无人机全景视频的虚拟现实直播***
TWI786700B (zh) 利用第二螢幕裝置掃描３ｄ物件以***虛擬環境中
US20180225517A1 (en) Skeleton detection and tracking via client-server communication
US20030227453A1 (en) Method, system and computer program product for automatically creating an animated 3-D scenario from human position and path data
KR101713772B1 (ko) 사전 시각화 영상 생성 장치 및 방법
CN109471842B (zh) 一种图像文件格式及生成方法及装置及应用
CN104759095A (zh) 一种虚拟现实头戴显示***
CN105222761A (zh) 借助虚拟现实及双目视觉技术实现的第一人称沉浸式无人机驾驶***及驾驶方法
US20180196506A1 (en) Information processing method and apparatus, information processing system, and program for executing the information processing method on computer
CN106227231A (zh) 无人机的控制方法、体感交互装置以及无人机
KR101131093B1 (ko) 지리정보를 이용한 4ｄ 기반의 비행선 체험 시뮬레이션 시스템 및 방법
CN106710362A (zh) 使用虚拟现实设备进行的飞行训练方法
CN106178551B (zh) 一种基于多通道交互的实时渲染互动影院***及方法
CN107071389A (zh) 航拍方法、装置和无人机
CN110969905A (zh) 混合现实的远程教学互动、教具互动***及其互动方法
CN110249281A (zh) 位置处理装置、飞行体、位置处理***、飞行***、位置处理方法、飞行控制方法、程序以及记录介质
US20220351472A1 (en) Remote camera augmented reality system
CN105847682A (zh) 全景图像的拍摄方法、装置及***
CN203899120U (zh) 真实感的遥控体验游戏***

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant