CN105068649A - 基于虚拟现实头盔的双目手势识别装置及方法 - Google Patents

Abstract

本发明公开了一种基于虚拟现实头盔的双目手势识别方法，包括步骤：S1、通过左眼摄像头和右眼摄像头，分别采集用户的手势信息，并将采集到的手势信息发送给数据处理模块；S2、数据处理模块通过对所述手势信息进行三维重建，生成用户的手势三维信息，并发送给显示屏；S3、显示屏获取手势三维信息，并进行同步实时显示。本发明还提供了一种基于虚拟现实头盔的双目手势识别装置，其使用左眼摄像头及右眼摄像头对用户的操作手势进行采集，通过对采集的信息进行图形及数据处理后获取用户的手势三维信息，并对应在显示屏上进行同步实时显示，以实现用户的手势操作与显示器的显示操作同步一致，从而为用户提供直观、精准的操作体验。本发明与传统技术相比，具有直观性好、准确度高和体验感强等优点。

Description

基于虚拟现实头盔的双目手势识别装置及方法

技术领域：

本发明涉及虚拟现实头盔，具体涉及的是一种基于虚拟现实头盔的双目手势识别装置及方法。

背景技术：

虚拟现实头盔，也叫头盔式显示器，是最早的虚拟现实显示器，其利用头盔显示器将人对外界的视觉、听觉封闭，引导用户产生一种身在虚拟环境中的感觉。其显示原理是左右眼屏幕分别显示左右眼的图像，人眼获取这种带有差异的信息后在脑海中产生立体感。头盔显示器作为虚拟现实的显示设备，具有小巧和封闭性强的特点，在军事训练，虚拟驾驶，虚拟城市以及游戏等项目中具有广泛的应用。

目前利用虚拟现实头盔在进行上述应用时，通常需要借助遥控器或者手柄进行操作，其普遍存在操作直观性较差、准确度不高的问题，用户的体验感不强。

发明内容：

为此，本发明的目的在于提供一种直观性好、准确度高、体验感强的基于虚拟现实头盔的双目手势识别装置及方法。

为实现上述目的，本发明主要采用如下技术方案：

一种基于虚拟现实头盔的双目手势识别装置，包括虚拟现实头盔，所述虚拟现实头盔中设置有：

一左眼摄像头和一右眼摄像头，分别用于采集用户的手势信息；

一数据处理模块，分别与所述左眼摄像头及右眼摄像头通讯连接，用于获取左眼摄像头和右眼摄像头采集的手势信息，并对所述手势信息进行三维重建，生成用户的手势三维信息；

一显示屏，与所述数据处理模块通讯连接，用于获取所述手势三维信息，并进行同步实时显示。

优选地，所述数据处理模块还用于对所述手势信息进行分析处理，提取并获取用户的手部位置信息。

优选地，所述左眼摄像头用于采集用户手势的左侧图像信息；右眼摄像头用于采集用户的手势右侧图像信息。

优选地，所述手势信息包括滑动、点击和抓握信息。

另外，本发明还提供了一种基于虚拟现实头盔的双目手势识别方法，包括步骤：

S1、通过左眼摄像头和右眼摄像头，分别采集用户的手势信息，并将采集到的手势信息发送给数据处理模块；

S2、数据处理模块通过对所述手势信息进行三维重建，生成用户的手势三维信息，并发送给显示屏；

S3、显示屏获取手势三维信息，并进行同步实时显示。

优选地，步骤S1具体包括：

通过左眼摄像头用采集用户左侧手势图像信息；

以及通过右眼摄像头采集用户右侧手势图像信息。

优选地，步骤S2具体包括：

数据处理模块通过对获取的手势信息进行分析处理，从中提取并获取用户的手部位置信息，然后对所述手势信息进行三维重建，生成用户的手势三维信息。

本发明使用左眼摄像头及右眼摄像头对用户的操作手势进行采集，通过对采集的信息进行图形及数据处理后获取用户的手势三维信息，并对应在显示屏上进行同步实时显示，以实现用户的手势操作与显示器的显示操作同步一致，从而为用户提供直观、精准的操作体验。本发明与传统技术相比，具有直观性好、准确度高和体验感强等优点。

附图说明：

图1为本发明虚拟现实头盔的立体示意图；

图2为本发明通过虚拟现实头盔进行手势识别的流程图。

具体实施方式：

为阐述本发明的思想及目的，下面将结合附图和具体实施例对本发明做进一步的说明。

本实施例提供的是一种直观性好、准确度高、体验感强的虚拟现实头盔，利用该虚拟现实头盔可实现双目手势识别，其通过左右两个摄像头采集用户的手势动作，对其进行三维重建，生成用户的手势三维信息，从而与显示屏对应同步显示操作。

请参见图1所示，图1为本发明虚拟现实头盔的立体示意图。本发明虚拟现实头盔，该头盔包括有左眼摄像头1、右眼摄像头2、头盔后壳体4以及头盔前壳体3。

左眼摄像头1、右眼摄像头2安装在前壳体3中，且对应设置于前壳体3的左右两侧。

头盔后壳体4内还安装有数据处理模块和显示屏。

其中左眼摄像头1和右眼摄像头2分别与数据处理模块通讯连接，当用户的在左眼摄像头1及右眼摄像头2的前方做手势动作时，右眼摄像头2会对应采集一张图形信息（右侧手势信息）；同时左眼摄像头1也会采集到一张图形信息（左侧手势信息）。

这里所述的手势动作可以是各种不同的动作，其包括但不限于滑动、点击、抓握等动作。

数据处理模块与所述左眼摄像头及右眼摄像头通讯连接，同时还与显示屏通讯连接，该数据处理模块用于获取左眼摄像头和右眼摄像头采集的手势信息，并对所述手势信息进行三维重建，生成用户的手势三维信息，以及将获取的手势三维信息，同步实时显示在显示屏上。

本发明还提供了一种基于虚拟现实头盔的双目手势识别方法，下面将结合附图2和具体实施例作进一步的说明。

如图2所示，图2为本发明通过虚拟现实头盔进行手势识别的流程图。本发明基于虚拟现实头盔的双目手势识别方法，具体包括步骤如下：

S1、通过左眼摄像头和右眼摄像头，分别采集用户的手势信息，并将采集到的手势信息发送给数据处理模块；

其中通过左眼摄像头用采集用户左侧手势图像信息；通过右眼摄像头采集用户右侧手势图像信息。

这里采集到的左侧手势图像信息和右侧手势图像信息只是手势动作的一个片面信息，这个信息只能显示出平面的效果，而难以进行准确定位。

S2、数据处理模块通过对所述手势信息进行三维重建，生成用户的手势三维信息，并发送给显示屏；

数据处理模块通过对获取的手势信息进行分析处理，从中提取并获取用户的手部位置信息，然后对所述手势信息进行三维重建，生成用户的手势三维信息。

由于获取的左右两个图形信息为平面的信息，通过数据处理模块将二者进行结合，提取二者的位置关系数据，然后通过三维算法进行计算获取用户的三维信息，即进行三维重建。

S3、显示屏获取手势三维信息，并进行同步实时显示。

针对用户使用虚拟现实头盔进行玩游戏或者体验虚拟社区，通过遥控器或者手柄等方式来操作，存在直观感觉差、体验不好的现象，本发明进行了改进，其实现了虚拟现实头盔玩游戏或者体验虚拟社区的过程中，无需借助遥控器或者手柄的操作，其仅需要用户通过手势操作即可实现在头盔显示屏中对应显示，使用户的操作更加直观，体验感更强。

以上是对本发明所提供的基于虚拟现实头盔的双目手势识别装置及方法进行了详细的介绍，本文中应用了具体个例对本发明的结构原理及实施方式进行了阐述，以上实施例只是用于帮助理解本发明的方法及其核心思想；同时，对于本领域的一般技术人员，依据本发明的思想，在具体实施方式及应用范围上均会有改变之处，综上所述，本说明书内容不应理解为对本发明的限制。

Claims (7)

1.一种基于虚拟现实头盔的双目手势识别装置，包括虚拟现实头盔，其特征在于，所述虚拟现实头盔中设置有：

一左眼摄像头和一右眼摄像头，分别用于采集用户的手势信息；

一数据处理模块，分别与所述左眼摄像头及右眼摄像头通讯连接，用于获取左眼摄像头和右眼摄像头采集的手势信息，并对所述手势信息进行三维重建，生成用户的手势三维信息；

一显示屏，与所述数据处理模块通讯连接，用于获取所述手势三维信息，并进行同步实时显示。

2.如权利要求1所述的基于虚拟现实头盔的双目手势识别装置，其特征在于，所述数据处理模块还用于对所述手势信息进行分析处理，提取并获取用户的手部位置信息。

3.如权利要求2所述的基于虚拟现实头盔的双目手势识别装置，其特征在于，所述左眼摄像头用于采集用户手势的左侧图像信息；右眼摄像头用于采集用户的手势右侧图像信息。

4.如权利要求3所述的基于虚拟现实头盔的双目手势识别装置，其特征在于，所述手势信息包括滑动、点击和抓握信息。

5.一种基于虚拟现实头盔的双目手势识别方法，其特征在于，包括步骤：

S1、通过左眼摄像头和右眼摄像头，分别采集用户的手势信息，并将采集到的手势信息发送给数据处理模块；

S2、数据处理模块通过对所述手势信息进行三维重建，生成用户的手势三维信息，并发送给显示屏；

S3、显示屏获取手势三维信息，并进行同步实时显示。

6.如权利要求5所述的基于虚拟现实头盔的双目手势识别装置，其特征在于，步骤S1具体包括：

通过左眼摄像头用采集用户左侧手势图像信息；

以及通过右眼摄像头采集用户右侧手势图像信息。

7.如权利要求5所述的基于虚拟现实头盔的双目手势识别装置，其特征在于，步骤S2具体包括：

数据处理模块通过对获取的手势信息进行分析处理，从中提取并获取用户的手部位置信息，然后对所述手势信息进行三维重建，生成用户的手势三维信息。