CN109214301A - 基于人脸识别和手势识别的控制方法及装置 - Google Patents

Abstract

本发明实施例提供一种基于人脸识别和手势识别的控制方法及装置。该方法包括：采集包括人脸信息和手势信息的图像，识别图像中的人脸信息和手势信息；获取与所识别出的人脸信息相对应的预设操作集合；执行预设操作集合中与所识别出的手势信息相匹配的操作。本发明实施例的方法，通过人脸信息和手势信息的双重匹配，提高了安全性。

Description

基于人脸识别和手势识别的控制方法及装置

技术领域

本发明实施例涉及图像处理技术领域，尤其涉及一种基于人脸识别和手势识别的控制方法及装置。

背景技术

随着智能终端及图像处理技术的不断发展，各种基于人脸识别的应用得到了广泛的使用，为人们的生活带来了极大的便利。

现有基于人脸识别的相关应用中，可以基于人的脸部特征，对采集的图像先判断其是否存在人脸，如果存在人脸，则进一步的从图像中获取人脸的位置、大小和主要面部器官的位置信息。然后，可以依据这些信息，进一步提取人脸图像中所蕴涵的身份特征，并将所提取的身份特征与预设的人脸身份特征进行对比，若相同，则执行后续操作，例如，解锁、支付、签名等。

现有仅基于人脸识别进行的解锁、支付、签名等操作，易受照片和视频等的干扰，安全性较低。

发明内容

本发明实施例提供一种基于人脸识别和手势识别的控制方法及装置，用以解决现有仅基于人脸识别进行操作安全性低的问题。

第一方面，本发明实施例提供一种基于人脸识别和手势识别的控制方法，包括：

采集包括人脸信息和手势信息的图像，识别图像中的人脸信息和手势信息；

获取与所识别出的人脸信息相对应的预设操作集合；

执行预设操作集合中与所识别出的手势信息相匹配的操作。

在一种可能的实现方式中，执行预设操作集合中与所识别出的手势信息相匹配的操作包括：

若预设操作集合包括手势信息与操作的对应关系，则将所识别出的手势信息与预设操作集合中的手势信息进行匹配；

执行预设操作集合中与所识别出的手势信息相匹配的操作。

在一种可能的实现方式中，执行预设操作集合中与所识别出的手势信息相匹配的操作包括：

若预设操作集合包括手势信息、表情信息与操作三者之间的对应关系，则识别所采集的图像中的表情信息；

执行预设操作集合中与所识别出的手势信息和表情信息相匹配的操作。

在一种可能的实现方式中，执行预设操作集合中与所采集的手势信息相匹配的操作包括：

若预设操作集合包括手势信息、场景信息与操作三者之间的对应关系，则获取对应的场景信息，场景信息包括时间信息、位置信息、天气信息中的至少一种；

执行预设操作集合中与所识别出的手势信息以及所获取的场景信息相匹配的操作。

在一种可能的实现方式中，手势信息包括静态手势信息和/或动态手势信息。

在一种可能的实现方式中，在获取与所识别出的人脸信息相对应的预设操作集合之前，还包括：

接收用户输入的信息，根据信息设置与用户相对应的预设操作集合。

第二方面，本发明实施例提供一种基于人脸识别和手势识别的控制装置，包括：

采集模块，用于采集包括人脸信息和手势信息的图像，识别图像中的人脸信息和手势信息；

获取模块，用于获取与所识别出的人脸信息相对应的预设操作集合；

执行模块，用于执行预设操作集合中与所识别出的手势信息相匹配的操作。

在一种可能的实现方式中，执行模块具体用于，

若预设操作集合包括手势信息与操作的对应关系，则将所识别出的手势信息与预设操作集合中的手势信息进行匹配；

执行预设操作集合中与所识别出的手势信息相匹配的操作。

在一种可能的实现方式中，执行模块具体用于，

若预设操作集合包括手势信息、表情信息与操作三者之间的对应关系，则识别所采集的图像中的表情信息；

执行预设操作集合中与所识别出的手势信息和表情信息相匹配的操作。

在一种可能的实现方式中，执行模块具体用于，

若预设操作集合包括手势信息、场景信息与操作三者之间的对应关系，则获取对应的场景信息，场景信息包括时间信息、位置信息、天气信息中的至少一种；

执行预设操作集合中与所识别出的手势信息以及所获取的场景信息相匹配的操作。

在一种可能的实现方式中，手势信息包括静态手势信息和/或动态手势信息。

在一种可能的实现方式中，所述装置还包括：

接收模块，用于在获取与所识别出的人脸信息相对应的预设操作集合之前，接收用户输入的信息，根据信息设置与用户相对应的预设操作集合。

第三方面，本发明实施例提供一种电子设备，包括：

存储器；

处理器；以及

计算机程序；

其中，所述计算机程序存储在所述存储器中，并被配置为由所述处理器执行以实现如第一方面任一项所述的方法。

第四方面，本发明实施例提供一种计算机可读存储介质，其上存储有计算机程序，所述计算机程序被处理器执行以实现如第一方面任一项所述的方法。

本发明实施例提供的基于人脸识别和手势识别的控制方法及装置，通过采集包括人脸信息和手势信息的图像，识别图像中的人脸信息和手势信息；获取与所识别出的人脸信息相对应的预设操作集合；执行预设操作集合中与所识别出的手势信息相匹配的操作，相较于仅基于人脸识别执行操作的方法，不仅提高了执行操作的趣味性，而且提高了执行操作的安全性。

附图说明

此处的附图被并入说明书中并构成本说明书的一部分，示出了符合本发明的实施例，并与说明书一起用于解释本发明的原理。

图1为本发明提供的基于人脸识别和手势识别的控制方法一实施例的流程图；

图2A为本发明实施例中使用的表情的示意图；

图2B为本发明实施例中使用的手势的示意图；

图3为本发明提供的基于人脸识别和手势识别的控制装置一实施例的结构示意图；

图4为本发明提供的电子设备一实施例的结构示意图。

通过上述附图，已示出本发明明确的实施例，后文中将有更详细的描述。这些附图和文字描述并不是为了通过任何方式限制本发明构思的范围，而是通过参考特定实施例为本领域技术人员说明本发明的概念。

具体实施方式

这里将详细地对示例性实施例进行说明，其示例表示在附图中。下面的描述涉及附图时，除非另有表示，不同附图中的相同数字表示相同或相似的要素。以下示例性实施例中所描述的实施方式并不代表与本发明相一致的所有实施方式。相反，它们仅是与如所附权利要求书中所详述的、本发明的一些方面相一致的装置和方法的例子。

本发明的说明书和权利要求书中的术语“包括”和“具有”以及它们任何变形，意图在于覆盖不排他的包含。例如包含了一系列步骤或单元的过程、方法、***、产品或设备没有限定于已列出的步骤或单元，而是可选地还包括没有列出的步骤或单元，或可选地还包括对于这些过程、方法、产品或设备固有的其它步骤或单元。

本发明中的“第一”和“第二”只起标识作用，而不能理解为指示或暗示顺序关系、相对重要性或者隐含指明所指示的技术特征的数量。“多个”是指两个或两个以上。“和/或”，描述关联对象的关联关系，表示可以存在三种关系，例如，A和/或B，可以表示：单独存在A，同时存在A和B，单独存在B这三种情况。字符“/”一般表示前后关联对象是一种“或”的关系。

本发明的说明书中通篇提到的“一个实施例”或“一实施例”意味着与实施例有关的特定特征、结构或特性包括在本申请的至少一个实施例中。因此，在整个说明书各处出现的“在一个实施例中”或“在一实施例中”未必一定指相同的实施例。需要说明的是，在不冲突的情况下，本发明中的实施例及实施例中的特征可以相互组合。

图1为本发明提供的基于人脸识别和手势识别的控制方法一实施例的流程图。本实施例的执行主体可以为终端设备，包括但不限于智能手机、门禁装置、快递签收装置、自动贩卖机等。如图1所示，本实施例提供的方法可以包括：

步骤S101、采集包括人脸信息和手势信息的图像，识别图像中的人脸信息和手势信息。

可选的，可以通过终端设备自带的摄像模块采集图像，例如通过手机的摄像头进行采集；也可以通过与设备经有线和/或无线方式连接的摄像装置进行采集，例如门禁装置通过USB外接的摄像头进行采集。

本实施例中采集到的包括人脸信息和手势信息的图像可以是图片，也可以是视频。可选的，手势可以位于人脸预设范围内，也可以与人脸接触，但是不能影响对于图像中人脸信息的识别。若手势遮挡了重要面部特征，影响了对于人脸信息的识别，可以提醒用户重新进行采集。

可选的，可以采用人脸识别算法识别图像中的人脸信息，例如可以采用基于几何特征的方法、基于模板的方法和基于模型的方法等，本实施例对于所采用的具体人脸识别算法不做限制。通过对所采集到的图像中的人脸信息的识别可以识别出用户的身份信息。

进一步的，可以采用手势识别算法识别出图像中的手势信息，本实施例对于所采用的具体手势识别算法不做限制。只需采集一次图像，便可识别出人脸信息和手势信息，提高了效率。

需要说明的是，对于图像中的人脸信息和手势信息的识别，可以由终端设备完成，也可以由网络侧设备完成。依托网络侧设备强大的运算能力，可以提高识别的速度和精度。若由网络侧设备进行识别，还需要将采集到的图像数据发送至网络侧，然后接受网络侧设备根据图像数据识别出的结果信息。

手势是一种自然、直观的交互手段。本实施例中的手势可以包括静态手势和/动态手势。其中，静态手势指在单个时间点上手的空间姿态，如手的形状、方向和身体的相对位置等；动态手势则是由一段时间内的手的一系列姿态组成，相比静态手势增加了时间信息和动作特征，如手的姿态变化和运动轨迹。若需要获得动态手势信息，需要采集视频数据进行分析。

步骤S102、获取与所识别出的人脸信息相对应的预设操作集合。

根据识别出的人脸信息，确定与之相匹配的预设操作集合。

可选的，在获取与所识别出的人脸信息相对应的预设操作集合之前，还可以包括：

接收用户输入的信息，根据信息设置与用户相对应的预设操作集合。

用户可以根据自己的使用习惯以及喜好等，对预设操作集合进行设置。以快递签收***为例，对于确认签收和拒绝签收这两个操作来说，用户A和用户B可以根据自己的使用习惯以及喜好在注册时设置两个操作对应的手势、表情等，例如用户A可以设置微笑表情加大拇指表示确认签收，设置闭眼表情加食指表示拒绝签收，形成与用户A相对应的预设操作集合；用户B可以设置调皮表情加握拳表示确认签收，设置难过表情加食指表示拒绝签收，形成与用户B相对应的预设操作集合。用户可以设置多样的操作方式，不仅提高了趣味性，而且由于只有用户本人知道自己的设置，提高了安全性。

步骤S103、执行预设操作集合中与所识别出的手势信息相匹配的操作。

可选的，若预设操作集合包括手势信息与操作的对应关系，则将所识别出的手势信息与预设操作集合中的手势信息进行匹配；

执行预设操作集合中与所识别出的手势信息相匹配的操作。

表1

用户	手势信息	操作
			用户A	手势1	拒绝签收
用户A	手势2	确认签收
			用户B	手势4	拒绝签收
用户B	手势3	确认签收

图2A为本发明实施例中使用的表情的示意图。如图2A所示，示出了3种表情：表情1、表情2和表情3。图2B为本发明实施例中使用的手势的示意图。如图2B所示，示出了4种手势：手势1、手势2、手势3和手势4。

表1为包括了手势信息和操作的对应关系的预设操作集合。若对所采集的图像进行识别，识别出人脸信息为用户A，手势信息为手势2，则执行确认签收的操作。

可选的，若预设操作集合包括手势信息、表情信息与操作三者之间的对应关系，则识别所采集的图像中的表情信息；

执行预设操作集合中与所识别出的手势信息和表情信息相匹配的操作。

表2

用户	手势信息	表情信息	操作
				用户A	手势1	表情2	拒绝签收
用户A	手势2	表情3	确认签收
				用户B	手势4	表情1	拒绝签收
用户B	手势3	表情3	确认签收

表2为包括了手势信息、表情信息和操作的对应关系的预设操作集合。若对所采集的图像进行识别，识别出人脸信息为用户A，手势信息为手势2，则进一步对图像中的表情信息进行识别，若识别出图像中所包含的表情信息为表情3，则执行确认签收的操作。

可选的，若预设操作集合包括手势信息、场景信息与操作三者之间的对应关系，则获取对应的场景信息，场景信息包括时间信息、位置信息、天气信息中的至少一种。

执行预设操作集合中与所识别出的手势信息以及所获取的场景信息相匹配的操作。

可以仅选取场景信息中的一种信息，例如选取时间信息，用户可以针对不同时间段进行不同的设置，以手机解锁为例，可以对白天和晚上设置不同的解锁手势；若仅选取位置信息，则可以针对不同的地点进行不同的设置，仍以手机解锁为例，可以对工作场所和生活场所设置不同的解锁表情、手势等；若仅选取天气信息，则可以针对不同的天气状况进行不同的设置，仍以手机解锁为例，可以对大雨天气和晴朗天气设置不同的解锁手势。场景信息中的各种信息也可以组合使用，形成多种不同的组合形式，本实施例对此不一一列举。可以理解的是，时间信息可以从终端设备的时钟中获取，位置信息可以从终端设备的GPS***中获取，天气信息可以从终端设备中的第三方应用软件获取。

本实施例提供的基于人脸识别和手势识别的控制方法，通过采集包括人脸信息和手势信息的图像，识别图像中的人脸信息和手势信息；获取与所识别出的人脸信息相对应的预设操作集合；执行预设操作集合中与所识别出的手势信息相匹配的操作，相较于仅基于人脸识别执行操作的方法，不仅提高了执行操作的趣味性，而且提高了执行操作的安全性。

在上述实施例的基础上，下面通过几个具体的应用示例来对本发明提供的基于人脸识别和手势识别的控制方法进行进一步的详细说明。

例如，将本发明提供的基于人脸识别和手势识别的控制方法应用于智能门锁，可以提高安全性。现有仅基于人脸识别的智能门锁，用户相当于将钥匙挂在了脸上，非法分子可以通过社交平台获取用户的面部图片信息或者视频信息，实现开锁。甚至挟持用户，轻松完成开锁。而采用本发明实施例提供的方法，由于非法分子并不清楚用户设置的开锁手势，因此无法通过图片信息和视频信息实现开锁。即便是非法分子挟持了用户，用户也可以采用预先设置的特殊手势保护自己。如用户可以设置手势2对应正常开锁操作，可以设置手势3对应的操作为开锁的同时进行报警。因此，即便是用户在被挟持的状态下，也可以通过一个手势实现对自己的保护。

例如，将本发明提供的基于人脸识别和手势识别的控制方法应用于智能手机解锁，可以提高趣味性。用户可以针对不同时间段、不同地点、不同天气状况设置不同的解锁手势、表情组合，可以提高了智能手机解锁的趣味性。

本发明实施例还提供一种基于人脸识别和手势识别的控制装置，请参见图3所示，本发明实施例仅以图3为例进行说明，并不表示本发明仅限于此。图3为本发明提供的基于人脸识别和手势识别的控制装置一实施例的结构示意图。本实施例提供的基于人脸识别和手势识别的控制装置可以为终端设备，也可以为用于终端设备中的部件。如图3所示，本实施例提供的基于人脸识别和手势识别的控制装置30可以包括：采集模块301、获取模块302和执行模块303。

采集模块301，用于采集包括人脸信息和手势信息的图像，识别图像中的人脸信息和手势信息；

获取模块302，用于获取与所识别出的人脸信息相对应的预设操作集合；

执行模块303，用于执行预设操作集合中与所识别出的手势信息相匹配的操作。

本实施例的装置，可以用于执行图1所示方法实施例的技术方案，其实现原理和技术效果类似，此处不再赘述。

可选的，执行模块303具体可以用于，

若预设操作集合包括手势信息与操作的对应关系，则将所识别出的手势信息与预设操作集合中的手势信息进行匹配；

执行预设操作集合中与所识别出的手势信息相匹配的操作。

可选的，执行模块303具体可以用于，

若预设操作集合包括手势信息、表情信息与操作三者之间的对应关系，则识别所采集的图像中的表情信息；

执行预设操作集合中与所识别出的手势信息和表情信息相匹配的操作。

可选的，执行模块303具体可以用于，

若预设操作集合包括手势信息、场景信息与操作三者之间的对应关系，则获取对应的场景信息，场景信息包括时间信息、位置信息、天气信息中的至少一种；

执行预设操作集合中与所识别出的手势信息以及所获取的场景信息相匹配的操作。

可选的，手势信息包括静态手势信息和/或动态手势信息。

可选的，所述装置30还可以包括：

接收模块，用于在获取与所识别出的人脸信息相对应的预设操作集合之前，接收用户输入的信息，根据信息设置与用户相对应的预设操作集合。

本发明实施例还提供一种电子设备，请参见图4所示，本发明实施例仅以图4为例进行说明，并不表示本发明仅限于此。图4为本发明提供的电子设备一实施例的结构示意图。该电子设备可以是移动电话、自动贩卖机、快递签收设备、门禁装置、计算机、数字广播终端、消息收发设备、游戏控制台、平板设备、医疗设备、健身设备、个人数字助理等。如图4所示，本实施例提供的电子设备可以包括以下一个或多个组件：处理组件401，存储器402，电源组件404，多媒体组件406，音频组件403，输入/输出(I/O)接口408，传感器组件407，以及通信组件405。

处理组件401通常控制电子设备的整体操作，诸如与显示，电话呼叫，数据通信，相机操作和记录操作相关联的操作。处理组件401可以包括一个或多个处理器4011来执行指令，以完成上述的方法的全部或部分步骤。此外，处理组件401可以包括一个或多个模块，便于处理组件401和其他组件之间的交互。例如，处理组件401可以包括多媒体模块，以方便多媒体组件406和处理组件401之间的交互。

存储器402被配置为存储各种类型的数据以支持在电子设备的操作。这些数据的示例包括用于在电子设备上操作的任何应用程序或方法的指令，联系人数据，电话簿数据，消息，图片，视频等。存储器402可以由任何类型的易失性或非易失性存储设备或者它们的组合实现，如静态随机存取存储器(SRAM)，电可擦除可编程只读存储器(EEPROM)，可擦除可编程只读存储器(EPROM)，可编程只读存储器(PROM)，只读存储器(ROM)，磁存储器，快闪存储器，磁盘或光盘。本实施例中，存储器402中存储有计算机程序，该计算机程序可以由处理器4011执行，以实现上述任一方法实施例的技术方案。

电源组件404为电子设备的各种组件提供电力。电源组件404可以包括电源管理***，一个或多个电源，及其他与为电子设备生成、管理和分配电力相关联的组件。

多媒体组件406包括在所述电子设备和用户之间的提供一个输出接口的屏幕。在一些实施例中，屏幕可以包括液晶显示器(LCD)和触摸面板(TP)。如果屏幕包括触摸面板，屏幕可以被实现为触摸屏，以接收来自用户的输入信号。触摸面板包括一个或多个触摸传感器以感测触摸、滑动和触摸面板上的手势。所述触摸传感器可以不仅感测触摸或滑动动作的边界，而且还检测与所述触摸或滑动操作相关的持续时间和压力。在一些实施例中，多媒体组件406包括一个前置摄像头和/或后置摄像头。当电子设备处于操作模式，如拍摄模式或视频模式时，前置摄像头和/或后置摄像头可以接收外部的多媒体数据。每个前置摄像头和后置摄像头可以是一个固定的光学透镜***或具有焦距和光学变焦能力。

音频组件403被配置为输出和/或输入音频信号。例如，音频组件403包括一个麦克风(MIC)，当电子设备处于操作模式，如呼叫模式、记录模式和语音识别模式时，麦克风被配置为接收外部音频信号。所接收的音频信号可以被进一步存储在存储器402或经由通信组件405发送。本实施例中，可以通过麦克风采集用户对电子设备进行语音控制的语音信号，然后经由通信组件405发送至云端服务器。在一些实施例中，音频组件403还包括一个扬声器，用于输出音频信号。本实施例中，可以通过扬声器播放对用户的提示信息。

I/O接口408为处理组件401和***接口模块之间提供接口，上述***接口模块可以是键盘，点击轮，按钮等。这些按钮可包括但不限于：主页按钮、音量按钮、启动按钮和锁定按钮。

传感器组件407包括一个或多个传感器，用于为电子设备提供各个方面的状态评估。例如，传感器组件407可以检测到电子设备的打开/关闭状态，组件的相对定位，例如所述组件为电子设备的显示器和小键盘，传感器组件407还可以检测电子设备或电子设备一个组件的位置改变，用户与电子设备接触的存在或不存在，电子设备方位或加速/减速和电子设备的温度变化。传感器组件407可以包括接近传感器，被配置用来在没有任何的物理接触时检测附近物体的存在。传感器组件407还可以包括光传感器，如CMOS或CCD图像传感器，用于在成像应用中使用。在一些实施例中，该传感器组件407还可以包括加速度传感器，陀螺仪传感器，磁传感器，压力传感器或温度传感器。

通信组件405被配置为便于电子设备和其他设备之间有线或无线方式的通信。本实施例中通信组件405用于实现电子设备和云端服务器之间的交互。电子设备可以接入基于通信标准的无线网络，如WiFi，2G、3G或4G，或它们的组合。在一个示例性实施例中，通信组件405经由广播信道接收来自外部广播管理***的广播信号或广播相关信息。在一个示例性实施例中，所述通信组件405还包括近场通信(NFC)模块，以促进短程通信。例如，在NFC模块可基于射频识别(RFID)技术，红外数据协会(IrDA)技术，超宽带(UWB)技术，蓝牙(BT)技术和其他技术来实现。

在示例性实施例中，电子设备可以被一个或多个应用专用集成电路(ASIC)、数字信号处理器(DSP)、数字信号处理设备(DSPD)、可编程逻辑器件(PLD)、现场可编程门阵列(FPGA)、控制器、微控制器、微处理器或其他电子元件实现，用于执行上述方法。

在示例性实施例中，还提供了一种包括指令的非临时性计算机可读存储介质，例如包括指令的存储器402，上述指令可由电子设备的处理器4011执行以完成上述方法。例如，所述非临时性计算机可读存储介质可以是ROM、随机存取存储器(RAM)、CD-ROM、磁带、软盘和光数据存储设备等。

本实施例提供的电子设备可用于执行上述任一方法实施例的技术方案，其实现原理和技术效果类似，此处不再赘述。

本发明实施例还提供一种计算机可读存储介质，其上存储有计算机程序，计算机程序被处理器执行时可以实现上述任一方法实施例提供的基于人脸识别和手势识别的控制方法。本实施例中的计算机可读存储介质可以是计算机能够存取的任何可用介质，或者是包含一个或多个可用介质集成的服务器、数据中心等数据存储设备，可用介质可以是磁性介质，(例如，软盘、硬盘、磁带)、光介质(例如，DVD)、或者半导体介质(例如SSD)等。

最后应说明的是：以上各实施例仅用以说明本发明的技术方案，而非对其限制；尽管参照前述各实施例对本发明进行了详细的说明，本领域的普通技术人员应当理解：其依然可以对前述各实施例所记载的技术方案进行修改，或者对其中部分或者全部技术特征进行等同替换；而这些修改或者替换，并不使相应技术方案的本质脱离本发明各实施例技术方案的范围。

Claims (14)

1.一种基于人脸识别和手势识别的控制方法，其特征在于，包括：

采集包括人脸信息和手势信息的图像，识别所述图像中的人脸信息和手势信息；

获取与所识别出的人脸信息相对应的预设操作集合；

执行所述预设操作集合中与所识别出的手势信息相匹配的操作。

2.根据权利要求1所述的方法，其特征在于，所述执行所述预设操作集合中与所识别出的手势信息相匹配的操作包括：

若所述预设操作集合包括手势信息与操作的对应关系，则将所识别出的手势信息与所述预设操作集合中的手势信息进行匹配；

执行所述预设操作集合中与所识别出的手势信息相匹配的操作。

3.根据权利要求1所述的方法，其特征在于，所述执行所述预设操作集合中与所识别出的手势信息相匹配的操作包括：

若所述预设操作集合包括手势信息、表情信息与操作三者之间的对应关系，则识别所采集的图像中的表情信息；

执行所述预设操作集合中与所识别出的手势信息和表情信息相匹配的操作。

4.根据权利要求1所述的方法，其特征在于，所述执行所述预设操作集合中与所采集的手势信息相匹配的操作包括：

若所述预设操作集合包括手势信息、场景信息与操作三者之间的对应关系，则获取对应的场景信息，所述场景信息包括时间信息、位置信息、天气信息中的至少一种；

执行所述预设操作集合中与所识别出的手势信息以及所获取的场景信息相匹配的操作。

5.根据权利要求1-4任一项所述的方法，其特征在于，所述手势信息包括静态手势信息和/或动态手势信息。

6.根据权利要求1-4任一项所述的方法，其特征在于，在所述获取与所识别出的人脸信息相对应的预设操作集合之前，还包括：

接收用户输入的信息，根据所述信息设置与所述用户相对应的预设操作集合。

7.一种基于人脸识别和手势识别的控制装置，其特征在于，包括：

采集模块，用于采集包括人脸信息和手势信息的图像，识别所述图像中的人脸信息和手势信息；

获取模块，用于获取与所识别出的人脸信息相对应的预设操作集合；

执行模块，用于执行所述预设操作集合中与所识别出的手势信息相匹配的操作。

8.根据权利要求7所述的装置，其特征在于，所述执行模块具体用于，

若所述预设操作集合包括手势信息与操作的对应关系，则将所识别出的手势信息与所述预设操作集合中的手势信息进行匹配；

执行所述预设操作集合中与所识别出的手势信息相匹配的操作。

9.根据权利要求7所述的装置，其特征在于，所述执行模块具体用于，

若所述预设操作集合包括手势信息、表情信息与操作三者之间的对应关系，则识别所采集的图像中的表情信息；

执行所述预设操作集合中与所识别出的手势信息和表情信息相匹配的操作。

10.根据权利要求7所述的装置，其特征在于，所述执行模块具体用于，

若所述预设操作集合包括手势信息、场景信息与操作三者之间的对应关系，则获取对应的场景信息，所述场景信息包括时间信息、位置信息、天气信息中的至少一种；

执行所述预设操作集合中与所识别出的手势信息以及所获取的场景信息相匹配的操作。

11.根据权利要求7-10任一项所述的装置，其特征在于，所述手势信息包括静态手势信息和/或动态手势信息。

12.根据权利要求7-10任一项所述的装置，其特征在于，所述装置还包括：

接收模块，用于在所述获取与所识别出的人脸信息相对应的预设操作集合之前，接收用户输入的信息，根据所述信息设置与所述用户相对应的预设操作集合。

13.一种电子设备，其特征在于，包括：

存储器；

处理器；以及

计算机程序；

其中，所述计算机程序存储在所述存储器中，并被配置为由所述处理器执行以实现如权利要求1-6任一项所述的方法。

14.一种计算机可读存储介质，其特征在于，其上存储有计算机程序，所述计算机程序被处理器执行以实现如权利要求1-6任一项所述的方法。