CN104615252B - 控制方法、控制装置、穿戴式电子设备及电子设备 - Google Patents

Abstract

本发明公开一种电子设备的控制方法，包括：检测到数据输出单元输出多媒体数据的情况下，获取图像采集单元采集到的电子设备使用者的面部图像；判断是否满足预设条件，该预设条件包括电子设备使用者的面部图像满足第一预设条件；基于判断结果，调整数据输出单元的输出参数或者调整多媒体数据的输出状态。本发明公开了一种新的控制电子设备运行过程的方式，并且相较于现有的按键控制方法，具备操作控制更加便捷的优势。本发明还公开了相应的控制装置，以及具有该控制装置的穿戴式电子设备和电子设备。

Description

控制方法、控制装置、穿戴式电子设备及电子设备

技术领域

本发明属于电子设备控制技术领域，尤其涉及一种控制方法、控制装置、穿戴式电子设备及电子设备。

背景技术

目前的电子设备能够提供丰富的功能，如播放多媒体信息(音频信息和视频信息)。用户可以通过电子设备上的按键(物理按键或者是触控单元显示的虚拟按键)控制电子设备的运行。对于一些具有语音控制功能的电子设备，用户也可以通过语音进行控制。

但是，目前针对电子设备的控制方式仍然较为单一，如何进一步丰富电子设备的控制方式，是本领域技术人员亟待解决的问题。

发明内容

有鉴于此，本发明的目的在于提供一种应用于电子设备的控制方法及控制装置，提供新的控制电子设备的方式。同时，本发明还公开了穿戴式电子设备及电子设备。

为实现上述目的，本发明提供如下技术方案：

本发明公开一种控制方法，应用于电子设备，所述电子设备包括数据输出单元和图像采集单元，所述控制方法包括：

检测到所述数据输出单元输出多媒体数据的情况下，获取所述图像采集单元采集到的电子设备使用者的面部图像；

判断是否满足预设条件，所述预设条件包括所述电子设备使用者的面部图像满足第一预设条件；

基于判断结果，调整所述数据输出单元的输出参数或者调整所述多媒体数据的输出状态。

优选的，所述电子设备还包括音频采集单元，在检测到所述数据输出单元输出多媒体数据的情况下，还包括：获取所述音频采集单元采集到的音频信息；所述判断是否满足预设条件，包括：判断所述电子设备使用者的面部图像是否满足第一预设条件，及判断所述音频信息是否满足第二预设条件。

优选的，判断所述电子设备使用者的面部图像是否满足第一预设条件，包括：提取相差预设时间间隔的两帧面部图像的表情特征；当所述两帧面部图像的表情特征之间的差值大于阈值时，确定所述电子设备使用者的面部图像满足第一预设条件。

优选的，判断所述电子设备使用者的面部图像是否满足第一预设条件，包括：提取所述面部图像的表情特征；将提取出的表情特征与预存的第一类表情样本模型进行匹配，获得置信度；在获得的置信度高于预设阈值的情况下，确定所述电子设备使用者的面部图像满足第一预设条件。

优选的，判断所述音频信息是否满足第二预设条件，包括：对所述音频信息进行检测，提取所述音频信息中的语音信息；分析所述语音信息，获取所述语音信息包含的词汇；在所述词汇包含特定词汇的情况下，确定所述音频信息满足第二预设条件。

优选的，判断所述音频信息是否满足第二预设条件，包括：对所述音频信息进行检测，提取所述音频信息中的语音信息；提取所述语音信息的声纹特征；比对所述语音信息的声纹特征和所述电子设备使用者的声纹特征；在比对结果表明所述语音信息的声纹特征与所述电子设备使用者的声纹特征匹配的情况下，确定所述音频信息满足第二预设条件。

优选的，所述数据输出单元包括音频输出单元和显示单元；所述调整所述数据输出单元的输出参数包括：在所述音频输出单元输出音频数据的情况下，降低所述音频输出单元的输出音量。

优选的，所述数据输出单元包括音频输出单元和显示单元；所述调整所述多媒体数据的输出状态包括：暂停播放所述多媒体数据。

优选的，在调整所述数据输出单元的输出参数之后，还包括：在预设时刻，如果不满足所述预设条件，则恢复所述数据输出单元的输出参数；

在调整所述多媒体数据的输出状态之后，还包括：在预设时刻，如果不满足所述预设条件，则恢复所述多媒体数据的输出状态。

本发明还公开一种控制装置，应用于电子设备，所述电子设备包括数据输出单元和图像采集单元，所述控制装置包括：

图像获取单元，用于在检测到所述数据输出单元输出多媒体数据的情况下，获取所述图像采集单元采集到的电子设备使用者的面部图像；

判断单元，用于判断是否满足预设条件，所述预设条件包括所述电子设备使用者的面部图像满足第一预设条件；

第一控制单元，用于基于判断结果，调整所述数据输出单元的输出参数或者调整所述多媒体数据的输出状态。

优选的，所述电子设备还包括音频采集单元，所述控制装置还包括音频获取单元，所述音频获取单元用于在检测到所述数据输出单元输出多媒体数据的情况下，获取所述音频采集单元采集到的音频信息；所述判断单元包括第一判断子单元和第二判断子单元，所述第一判断子单元用于判断所述电子设备使用者的面部图像是否满足第一预设条件，所述第二判断子单元用于判断所述音频信息是否满足第二预设条件。

优选的，所述第一判断子单元包括：第一表情特征提取模块，用于提取相差预设时间间隔的两帧面部图像的表情特征；第一处理模块，用于当所述两帧面部图像的表情特征之间的差值大于阈值时，确定所述电子设备使用者的面部图像满足第一预设条件。

优选的，所述第一判断子单元包括：第二表情特征提取模块，用于提取所述面部图像的表情特征；表情特征匹配模块，用于将提取出的表情特征与预存的第一类表情样本模型进行匹配，获得置信度；第二处理模块，用于在获得的置信度高于预设阈值的情况下，确定所述电子设备使用者的面部图像满足第二预设条件。

优选的，所述第二判断子单元包括：语音信息提取模块，用于对所述音频信息进行检测，提取所述音频信息中的语音信息；语音分析模块，用于分析所述语音信息，获取所述语音信息包含的词汇；第三处理模块，用于在所述词汇包含特定词汇的情况下，确定所述音频信息满足第二预设条件。

优选的，所述第二判断子单元包括：语音信息提取模块，用于对所述音频信息进行检测，提取所述音频信息中的语音信息；声纹特征提取模块，用于提取所述语音信息的声纹特征；比对模块，用于比对所述语音信息的声纹特征和所述电子设备使用者的声纹特征；第四处理模块，用于在比对结果表明所述语音信息的声纹特征与所述电子设备使用者的声纹特征匹配的情况下，确定所述音频信息满足第二预设条件。

优选的，所述数据输出单元包括音频输出单元和显示单元；所述第一控制单元包括第一控制模块，所述第一控制模块用于在所述音频输出单元输出音频数据的情况下，降低所述音频输出单元的输出音量。

优选的，所述数据输出单元包括音频输出单元和显示单元；所述第一控制单元包括第二控制模块，所述第二控制模块用于暂停播放所述多媒体数据。

优选的，还包括第二控制单元；在调整所述数据输出单元的输出参数后的预设时刻，如果不满足所述预设条件，则恢复所述数据输出单元的输出参数；在调整所述多媒体数据的输出状态之后的预设时刻，如果不满足所述预设条件，则恢复所述多媒体数据的输出状态。

本发明还公开一种穿戴式电子设备，包括一支架，所述支架用于维持所述穿戴式电子设备与电子设备使用者头部的相对位置关系，所述穿戴式电子设备还包括镜片模块、音频输出单元、音频采集单元、图像采集单元，以及上述任意一种控制装置。

本发明还公开一种电子设备，所述电子设备包括音频输出单元、显示单元、音频采集单元、图像采集单元，以及上述任意一种控制装置。

由此可见，本发明的有益效果为：本发明公开的电子设备的控制方法，在电子设备的数据输出单元输出多媒体数据的情况下，获取电子设备使用者的面部图像作为控制电子设备运行过程的一个依据，当确定满足预设条件时，调整电子设备中的数据输出单元的输出参数或者是调整多媒体数据的输出状态，提供了一种新的控制电子设备运行过程的方式。并且，本发明公开的电子设备的控制方法，相较于现有的按键控制方式，具有操作控制更加便捷的优势。

附图说明

为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据提供的附图获得其他的附图。

图1为本发明公开的电子设备的一种控制方法的流程图；

图2为本发明公开的一种判断电子设备使用者的面部图像是否满足第一预设条件的流程图；

图3为本发明公开的另一种判断电子设备使用者的面部图像是否满足第一预设条件的流程图；

图4为本发明公开的一种判断音频信息是否满足第二预设条件的流程图；

图5为本发明公开的另一种判断音频信息是否满足第二预设条件的流程图；

图6为本发明公开的一种智能眼镜的结构示意图；

图7为本发明公开的电子设备的一种控制装置的结构示意图；

图8为本发明公开的电子设备的另一种控制装置的结构示意图。

具体实施方式

下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。

本发明公开一种应用于电子设备的控制方法，相较于现有技术提供新的控制电子设备的方式。

参见图1，图1为本发明公开的电子设备的一种控制方法的流程图。该电子设备包括数据输出单元和图像采集单元，并且该电子设备能够播放多媒体数据，可以为手机、平板电脑、穿戴式电子设备。该控制方法包括：

步骤S11：检测到数据输出单元输出多媒体数据的情况下，获取图像采集单元采集到的电子设备使用者的面部图像。

电子设备中设置有图像采集单元，该图像采集单元被配置为能够检测电子设备的使用者的面部图像。例如：图像采集单元设置于电子设备的主体上，通过调整电子设备的放置位置，使得电子设备中的图像采集单元处于电子设备使用者的前方，从而能够对电子设备使用者的面部进行图像采集；或者，图像采集单元设置于远离电子设备主体的位置，并且该位置使得用户在使用电子设备过程中，图像采集单元处于电子设备使用者的前方，从而能够对电子设备使用者的面部进行图像采集。比如，在智能眼镜的镜架上设置安装支架，该安装支架向用户面部的前方延伸设置，智能眼镜的图像采集单元安装在安装支架的端部，当用户佩戴智能眼镜时，图像采集单元即位于用户面部的前方，能够对智能眼镜使用者的面部进行图像采集，如图6所示。

电子设备的数据输出单元可以为音频输出单元，可以为显示单元，当然也可以为音频输出单元和显示单元。另外，多媒体数据可以为音频数据或者视频数据(包括被绑定的图像数据和音频数据)。在电子设备开启状态，当检测到数据输出单元输出多媒体数据后，即开始获取图像采集单元采集到的面部图像。

步骤S12：判断是否满足预设条件。

该预设条件至少包括该电子设备使用者的面部图像满足第一预设条件。在确定电子设备的数据输出单元输出多媒体数据的情况下，获取电子设备使用者的面部图像，并将电子设备的使用者的面部图像作为控制电子设备运行过程的依据。

步骤S13：基于判断结果，调整数据输出单元的输出参数或者调整多媒体数据的输出状态。

当确定满足预设条件时，就调整电子设备中数据输出单元的输出参数，或者调整多媒体数据的输出状态，也就是调整电子设备的运行状态。

本发明公开的电子设备的控制方法，在电子设备的数据输出单元输出多媒体数据的情况下，获取电子设备使用者的面部图像作为控制电子设备运行过程的一个依据，当确定满足预设条件时，调整电子设备中的数据输出单元的输出参数或者是调整多媒体数据的输出状态，提供了一种新的控制电子设备运行过程的方式。并且，本发明公开的电子设备的控制方法，相较于现有的按键控制方式，具有操作控制更加便捷的优势。

实施中，判断是否满足预设条件，可以配置为：判断电子设备使用者的面部图像是否满足第一预设条件。相应的，在确定电子设备使用者的面部图像满足第一条件的情况下，就可以调整数据输出单元的输出参数或者调整多媒体数据的输出状态。

其中，判断电子设备使用者的面部图像是否满足第一预设条件，可以采用多种方式。下面分别结合图2和图3进行说明。

参见图2，图2为本发明公开的一种判断电子设备使用者的面部图像是否满足第一预设条件的流程图。包括：

步骤S21：提取相差预设时间间隔的两帧面部图像的表情特征。

人的面部表情主要体现在眉毛、眼镜、鼻子和嘴巴的变化以及这些变化之间的相互联系。面部图像的表情特征能够表征人的面部表情。当人的面部表情发生变化时，面部图像包含的表情特征也会发生较大的变化。

实施中，在图像采集单元采集的面部图像中提取两帧面部图像，这两帧面部图像可以为连续的两帧面部图像，也可以为相差若干帧的两帧面部图像。之后，提取这两帧面部图像的表情特征。这里需要说明的是，人脸表情识别已经是较为成熟的技术，本申请中提取面部图像的表情特征可以采用现有的表情特征提取算法。

步骤S22：当两帧面部图像的表情特征之间的差值大于阈值时，确定电子设备使用者的面部图像满足第一预设条件。

如果两帧面部图像的表情特征出现较大变化，表明用户的表情出现较大变化，此时确定电子设备使用者的面部表情满足第一预设条件。

本发明图2所示的方法，将第一预设条件配置为：电子设备使用者的两帧面部图像的表情特征之间的差值大于阈值，也就是将第一预设条件配置为：电子设备使用者的表情出现较大变化。具体实施中，在电子设备的图像采集单元采集的面部图像中，获取相差预设时间间隔的两帧面部图像，之后提取这两帧面部图像的表情特征，如果这两帧面部图像的表情特征之间的差值大于阈值，就确定电子设备使用者的面部图像满足第一预设条件。

参见图3，图3为本发明公开的另一种判断电子设备使用者的面部图像是否满足第一预设条件的流程图。包括：

步骤S31：提取面部图像的表情特征。

在确定电子设备的数据输出单元输出多媒体数据的情况下，获取图像采集单元采集到的电子设备使用者的面部图像，并提取面部图像的表情特征。

步骤S32：将提取出的表情特征与预存的第一类表情样本模型进行匹配，获得置信度。

电子设备预存有第一类表情样本模型。实施中，采集电子设备使用者的大量面部图像，在这些面部图像中选取出特定的表情图像(如惊讶表情图像、大笑表情图像、生气表情图像)，将选取出的表情图像作为正样本、将其他表情图像作为负样本进行训练，获得第一类表情样本模型。第一类表情样本模型的实质也是表情特征。

步骤S33：在获得的置信度高于预设阈值的情况下，确定电子设备使用者的面部图像满足第一预设条件。

将从电子设备使用者的面部图像中提取出的表情特征与第一类表情样本模型进行匹配，如果两者之间的置信度高于预设阈值，则确定电子设备使用者的面部表情满足第一预设条件。这里需要说明的，表情特征与第一类表情样本模型之间的置信度越高，说明两者的相似度越高。

本发明图3所示的方法，将第一预设条件配置为：电子设备使用者的面部图像的表情特征与第一类表情样本模型的置信度高于预设阈值，也就是将第一预设条件配置为：电子设备使用者的面部呈现出特定的表情。具体实施中，在电子设备的图像采集单元采集的面部图像中，获取一帧面部图像，之后提取该帧面部图像的表情特征，并将提取出的表情特征与第一类表情样本模型进行匹配，如果两者之间的置信度高于预设阈值，就确定电子设备使用者的面部图像满足第一预设条件。

本发明公开的控制方法，在判断是否满足预设条件被配置为判断电子设备使用者的面部图像是否满足第一预设条件的情况下，可以基于图2或图3所示的方式确定电子设备使用者的面部图像是否满足第一预设条件。在用户使用电子设备的过程中，如果电子设备的数据输出单元正在输出多媒体数据，则用户可以通过自己的表情控制电子设备执行调整数据输出单元的输出参数的操作，或者是控制电子设备执行调整多媒体数据的数据输出单元的操作。

需要说明的是，用户可以通过有意调整自己的面部表情来控制电子设备的运行过程。另外，电子设备还可以基于用户在发生某些事件时无意识的面部表情来调整自身的运行过程。

在电子设备的数据输出单元输出多媒体数据的过程中，用户的表情通常处于较为平静的状态，如果发生了其他需要用户处理的事件，用户的表情会发生变化，基于本发明公开的方法，电子设备可以自动调整数据输出单元的输出参数或者调整多媒体数据的输出状态。

例如：电子设备通过耳机播放音乐，用户在听音乐过程中的面部表情一直处于较为平静的状态。当有人要跟用户对话，用户做出应答时其面部表情会发生变化，电子设备检测到用户的表情变化后，降低音量或者暂停播放音乐，从而方便用户与他人对话，而不需要用户摘下耳机，或者是手动调整音量。

实施中，如果电子设备还设置有音频采集单元，则在检测到数据输出单元输出多媒体数据的情况下，还可以进一步设置控制装置获取音频采集单元采集到的音频信息的操作。

相应的，判断是否满足预设条件，可以配置为：判断电子设备使用者的面部图像是否满足第一预设条件，及判断音频采集单元采集到的音频信息是否满足第二预设条件。只有在电子设备使用者的面部图像满足第一预设条件，且音频采集单元采集到的音频信息满足第二预设条件的情况下，才确定当前满足预设条件，执行后续调整数据输出单元的输出参数或者调整多媒体数据的输出状态的操作。在这种情况下，可以降低电子设备进行误操作的概率。

这里需要说明的是，在具体实施中，不限定两个判断操作的执行顺序。

例如：首先判断电子设备使用者的面部图像是否满足第一预设条件，在确定满足第一预设条件的情况下，再执行判断音频采集单元采集到的音频信息是否满足第二预设条件的操作。例如：首先判断音频采集单元采集到的音频信息是否满足第二预设条件，在确定满足第二预设条件的情况下，再执行判断电子设备使用者的面部图像是否满足第一预设条件的操作。例如：采用多线程技术，由一个线程执行判断电子设备使用者的面部图像是否满足第一预设条件的操作，由另一线程执行判断音频采集单元采集到的音频信息是否满足第二预设条件的操作，之后结合两个线程的处理结果确定是否执行后续调整数据输出单元的输出参数或者调整多媒体数据的输出状态的操作。

关于判断电子设备使用者的面部图像是否满足第一预设条件的具体处理过程，在前文已经论述，这里不再进行赘述。下面结合图4和图5对判断音频信息是否满足第二预设条件的过程进行说明。

参见图4，图4为本发明公开的一种判断音频信息是否满足第二预设条件的流程图。包括：

步骤S41：对音频信息进行检测，提取音频信息中的语音信息。

电子设备的音频采集单元采集到的音频信息包含了背景噪音信息和语音信息。由于背景噪音信息为无用信息，因此要对音频采集单元采集到的音频信息进行检测，提取出音频信息中的语音信息，以便减小后续提取词汇的数据处理量。

步骤S42：分析语音信息，获取语音信息包含的词汇。

步骤S43：在词汇包含特定词汇的情况下，确定音频信息满足第二预设条件。

利用现有的语音分析算法对步骤S41中提取出的语音信息进行分析，以获取语音信息中包含的词汇。之后将获取到的词汇与预存的特定词汇进行比对，如果步骤S42中获取到的词汇包含了特定词汇，就确定音频信息满足第二预设条件。

实施中，电子设备预存的特定词汇可以根据用户的语言习惯进行配置。例如可以将特定词汇配置为；“啊”、“嗯”、“什么”等。

本发明图4所示的方法，将第二预设条件配置为：音频采集单元采集到的音频信息包含特定词汇。具体实施中，在电子设备的音频采集单元采集到的音频信息中，提取出语音信息并进行分析，获取语音信息中包含的词汇，如果获取到的词汇包含特定词汇，就确定电子设备的音频采集单元采集到的音频信息满足第二预设条件。

参见图5，图5为本发明公开的另一种判断音频信息是否满足第二预设条件的流程图。包括：

步骤S51：对音频信息进行检测，提取音频信息中的语音信息。

步骤S52：提取语音信息的声纹特征。

人类语言的产生是人体语言中枢与发音器官之间一个复杂的生理物理过程。人在讲话时使用的发声器官(舌、牙齿、喉头、鼻腔)在尺寸和形态方面存在差异，这些器官的微小差异会导致发声气流的改变，造成音质、因素的差别。而且，人发声的习惯也有快有慢，用力有大有小，造成音强和音长的差别。因此，任意两个人的声纹都有差异，声纹具有身份识别的作用。

步骤S53：比对语音信息的声纹特征和电子设备使用者的声纹特征。

步骤S54：在比对结果表明语音信息的声纹特征与电子设备使用者的声纹特征匹配的情况下，确定音频信息满足第二预设条件。

在提取出音频信息中的语音信息后，提取该语音信息的声纹特征，通过比较该声纹特征与电子设备使用者的声纹特征，就可以确定电子设备使用者是否在说话，当两者匹配的情况下，确定音频信息满足第二预设条件。

本发明图5所示的方法，将第二预设条件配置为：音频采集单元采集到的音频信息中语音信息的声纹特征与电子设备使用者的声纹特征匹配，也就是将第二预设条件配置为：音频采集单元采集到的音频信息包含了电子设备使用者发出的语音信息。

本发明公开的控制方法，在判断是否满足预设条件被配置为判断电子设备使用者的面部图像是否满足第一预设条件，及判断音频采集单元采集到的音频信息是否满足第二预设条件的情况下，可以基于图2或图3所示的方式确定电子设备使用者的面部图像是否第一预设条件，基于图4或图5所示的方式确定音频采集单元采集到的音频信息是否满足第二预设条件。在用户使用电子设备的过程中，如果电子设备的数据输出单元正在输出多媒体数据，则用户可以通过自己的表情与语音控制电子设备执行调整数据输出单元的输出参数的操作，或者是控制电子设备执行调整多媒体数据的数据输出单元的操作。

需要说明的是，用户可以通过有意调整自己的面部表情和语音来控制电子设备的运行过程。另外，电子设备还可以基于用户在发生某些事件时无意识的面部表情和发声来调整自身的运行过程。

在电子设备的数据输出单元输出多媒体数据的过程中，用户的表情通常处于较为平静的状态，并且用户通常保持安静，如果发生了其他需要用户处理的事件，用户的表情会发生变化，并且用户也会发出声音。基于本发明公开的方法，电子设备可以自动调整数据输出单元的输出参数或者调整多媒体数据的输出状态。

例如：电子设备通过耳机播放音乐，用户在听音乐过程中的面部表情一直处于较为平静的状态，也不会发出声音。当有人要跟用户对话，用户做出应答时其面部表情会发生变化，电子设备检测到用户的表情变化和语音后，降低音量或者暂停播放音乐，从而方便用户与他人对话，而不需要用户摘下耳机，或者是手动调整音量。

需要说明的，本发明公开的控制方法，在确定电子设备的数据输出单元输出多媒体数据的情况下，判断是否满足预设条件的操作是按照预设时间间隔多次执行的。

另外，在电子设备的数据输出单元包括音频输出单元和显示单元的情况下，如果音频输出单元在输出音频数据，则调整数据输出单元的输出参数可以为：降低音频输出单元的输出音量。

在电子设备的数据输出单元包括音频输出单元和显示单元的情况下，调整多媒体数据的输出状态可以为：暂停播放多媒体数据。

这里结合实例进行说明。

电子设备仅仅播放音频文件时，出于降低电子设备耗电量的考虑，通常只有音频输出单元在输出音频信息，如果确定需要调整数据输出单元的输出参数，则可降低音频输出单元的音量。

电子设备在播放视频文件时，电子设备的音频输出单元在输出音频信息，同时显示单元在显示图像，如果确定需要调整数据输出单元的输出参数，则降低音频输出单元的音量。

当然，无论电子设备在播放视频文件，还是仅在播放音频文件，在确定满足预设条件之后，还可以调整多媒体数据的输出状态，具体的，暂停播放多媒体数据。

另外，调整数据输出单元的输出参数，以及调整多媒体数据的输出状态的具体方案不限于上述方式。调整数据输出单元的输出参数还可以配置为：控制显示单元黑屏。当用户不想其他人看到显示单元显示的内容时，可以通过自己的表情或者通过自己的表情和语音控制电子设备快速黑屏。

作为一种优选方案，在调整数据输出单元的输出参数之后，还包括：在预设时刻，如果不满足预设条件，则恢复数据输出单元的输出参数。

以在满足预设条件的情况下降低音频输出单元的音量为例，在执行降低音频输出单元的音量的操作后，如果在预设时间之后，不再满足预设条件，则恢复音频输出单元的音量。

作为一种优选方案，在调整多媒体数据的输出状态之后，还包括：在预设时刻，如果不满足预设条件，则恢复多媒体数据的输出状态。

以在满足预设条件的情况下暂停播放多媒体数据为例，在执行暂停播放多媒体数据的操作后，如果在预设时间之后，不再满足预设条件，则继续播放多媒体数据。

本发明上述公开了应用于电子设备的控制方法，相应的，本发明还公开应用于电子设备的控制装置。

参见图7，图7为本发明公开的电子设备的一种控制装置的结构示意图。该电子设备包括数据输出单元和图像采集单元，并且该电子设备能够播放多媒体数据，可以为手机、平板电脑、穿戴式电子设备。该控制装置包括：图像获取单元100、判断单元200和第一控制单元300。

其中：

图像获取单元10，用于在检测到数据输出单元输出多媒体数据的情况下，获取图像采集单元采集到的电子设备使用者的面部图像。电子设备中设置有图像采集单元，该图像采集单元被配置为能够检测电子设备的使用者的面部图像。图像采集单元的具体安装形式请参见前文描述。

判断单元20，用于判断是否满足预设条件，该预设条件包括电子设备使用者的面部图像满足第一预设条件。在确定电子设备的数据输出单元输出多媒体数据的情况下，获取电子设备使用者的面部图像，并将电子设备的使用者的面部图像作为控制电子设备运行过程的依据。

第一控制单元30，用于基于判断结果，调整数据输出单元的输出参数或者调整多媒体数据的输出状态。当确定判断单元20满足预设条件时，第一控制单元30就调整电子设备中数据输出单元的输出参数，或者调整多媒体数据的输出状态，也就是调整电子设备的运行状态。

本发明公开的电子设备的控制装置，在电子设备的数据输出单元输出多媒体数据的情况下，获取电子设备使用者的面部图像作为控制电子设备运行过程的一个依据，当确定满足预设条件时，调整电子设备中的数据输出单元的输出参数或者是调整多媒体数据的输出状态，提供了一种新的控制电子设备运行过程的方式。并且，本发明公开的电子设备的控制装置，相较于现有的按键控制方式，具有操作控制更加便捷的优势。

实施中，判断是否满足预设条件，可以配置为：判断电子设备使用者的面部图像是否满足第一预设条件。相应的，判断单元20仅包括第一判断子单元，该第一判断子单元用于判断电子设备使用者的面部图像是否满足第一预设条件，在第一判断子单元确定电子设备使用者的面部图像满足第一条件的情况下，就确定满足预设条件，可以调整数据输出单元的输出参数或者调整多媒体数据的输出状态。

在电子设备还设置有音频采集单元的情况下，控制装置进一步设置音频获取单元40，并且判断是否满足预设条件配置为：判断电子设备使用者的面部图像是否满足第一预设条件，及判断音频采集单元采集到的音频信息是否满足第二预设条件。相应的，判断单元20包括第一判断子单元21和第二判断子单元22，控制装置的结构可以参见图8所示。

其中：

图像获取单元10，用于在检测到数据输出单元输出多媒体数据的情况下，获取图像采集单元采集到的电子设备使用者的面部图像。

音频获取单元40，用于在检测到数据输出单元输出多媒体数据的情况下，获取音频采集单元采集到的音频信息。

判断单元20包括第一判断子单元21和第二判断子单元22。第一判断子单元21用于判断图像获取单元10获取到的电子设备使用者的面部图像是否满足第一预设条件，第二判断子单元22用于判断音频获取单元40获取到的音频信息是否满足第二预设条件。当第一判断子单元21和第二判断子单元22的判断结果均为是时，判断单元20确定满足预设条件。

第一控制单元30，用于基于判断单元20的判断结果，调整数据输出单元的输出参数或者调整多媒体数据的输出状态。当判断单元20确定满足预设条件时，第一控制单元30就调整电子设备中数据输出单元的输出参数，或者调整多媒体数据的输出状态，也就是调整电子设备的运行状态。

本发明图8所示的控制装置，只有在电子设备使用者的面部图像是否满足第一预设条件，且音频信息是否满足第二预设条件时，第一控制单元才执行调整数据输出单元的输出参数或者调整多媒体数据的输出状态的操作，可以降低电子设备误操作的概率。

作为一种实施方式，第一判断子单元包括第一表情特征提取模块和第一处理模块。

其中：

第一表情特征提取模块与图像获取单元连接，用于提取相差预设时间间隔的两帧面部图像的表情特征。第一处理模块与第一表情特征提取模块连接，用于当两帧面部图像的表情特征之间的差值大于阈值时，确定电子设备使用者的面部图像满足第一预设条件。

作为另一种实施方式，第一判断子单元包括第二表情特征提取模块、表情特征匹配模块和第二处理模块。

其中：

第二表情特征提取模块与图像获取单元连接，用于提取面部图像的表情特征。表情特征匹配模块与第二表情特征提取模块连接，用于将第二表情特征提取模块提取出的表情特征与预存的第一类表情样本模型进行匹配，获得置信度。第二处理模块与表情特征匹配模块连接，用于在表情特征匹配模块获得的置信度高于预设阈值的情况下，确定电子设备使用者的面部图像满足第二预设条件。

在实施中，第二判断子单元可以采用如下结构。第二判断子单元包括语音信息提取模块、语音分析模块和第三处理模块。

其中：

语音信息提取模块与音频获取单元连接，用于对音频信息进行检测，提取音频信息中的语音信息。语音分析模块与语音提取模块连接，用于分析语音提取模块提取出的语音信息，获取语音信息包含的词汇。第三处理模块与语音分析模块连接，用于在语音分析模块获取的词汇包含特定词汇的情况下，确定音频信息满足第二预设条件。

另外，第二判断子单元还可以采用如下结构。第二判断子单元包括语音信息提取模块、声纹特征提取模块、比对模块和第四处理模块。

其中：

语音信息提取模块与音频获取单元连接，用于对音频信息进行检测，提取音频信息中的语音信息。声纹特征提取模块与语音提取模块连接，用于提取前述语音信息的声纹特征。比对模块与声纹特征提取模块连接，用于比对语音信息的声纹特征和电子设备使用者的声纹特征。第四处理模块与比对模块连接，用于在比对结果表明语音信息的声纹特征与电子设备使用者的声纹特征匹配的情况下，确定音频信息满足第二预设条件。

在电子设备的数据输出单元包括音频输出单元和显示单元的情况下，作为一种优选实施方式，第一控制单元包括第一控制模块，第一控制模块用于在音频输出单元输出音频数据的情况下，降低音频输出单元的输出音量。

在电子设备的数据输出单元包括音频输出单元和显示单元的情况下，作为一种优选实施方式，第一控制单元包括第二控制模块，第二控制模块用于暂停播放多媒体数据。

在图7和图8所示控制装置的基础上，还可以进一步设置第二控制单元。在第一控制单元调整数据输出单元的输出参数后的预设时刻，如果不满足预设条件，则第二控制单元恢复数据输出单元的输出参数；在第一控制单元调整多媒体数据的输出状态之后的预设时刻，如果不满足预设条件，则第二控制单元恢复多媒体数据的输出状态。

本发明还公开一种穿戴式电子设备，包括一支架，该支架用于维持穿戴式电子设备与电子设备使用者头部的相对位置关系，该穿戴式电子设备还包括镜片模块、音频输出单元、音频采集单元、图像采集单元，以及本发明上述公开的任意一种控制装置。图6示出了穿戴式电子设备的一种结构。本发明公开的穿戴式电子设备将使用者的面部图像作为一个控制依据，提供了新的控制方式。

另外，本发明还公开一种电子设备，该电子设备包括音频输出单元、显示单元、音频采集单元、图像采集单元，以及本发明上述公开的任意一种控制装置。本发明公开的电子设备将使用者的面部图像作为一个控制依据，提供了新的控制方式。

最后，还需要说明的是，在本文中，诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来，而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。

本说明书中各个实施例采用递进的方式描述，每个实施例重点说明的都是与其他实施例的不同之处，各个实施例之间相同相似部分互相参见即可。对于实施例公开的装置而言，由于其与实施例公开的方法相对应，所以描述的比较简单，相关之处参见方法部分说明即可。

对所公开的实施例的上述说明，使本领域专业技术人员能够实现或使用本发明。对这些实施例的多种修改对本领域的专业技术人员来说将是显而易见的，本文中所定义的一般原理可以在不脱离本发明的精神或范围的情况下，在其它实施例中实现。因此，本发明将不会被限制于本文所示的这些实施例，而是要符合与本文所公开的原理和新颖特点相一致的最宽的范围。

Claims (14)

1.一种控制方法，应用于电子设备，所述电子设备包括数据输出单元和图像采集单元，所述数据输出单元包括音频输出单元，其特征在于，所述控制方法包括：

检测到所述数据输出单元输出多媒体数据的情况下，获取所述图像采集单元采集到的电子设备使用者的面部图像；

判断是否满足预设条件，所述预设条件包括所述电子设备使用者的面部图像满足第一预设条件；其中，所述满足预设条件表明在电子设备的数据输出单元输出多媒体数据的过程中发生需要用户处理的事件；

基于判断结果，调整所述数据输出单元的输出参数或者调整所述多媒体数据的输出状态，其中，所述调整所述数据输出单元的输出参数包括：在所述音频输出单元输出音频数据的情况下，降低所述音频输出单元的输出音量；所述调整所述多媒体数据的输出状态包括：暂停播放所述多媒体数据；

其中，所述电子设备还包括音频采集单元，在检测到所述数据输出单元输出多媒体数据的情况下，还包括：获取所述音频采集单元采集到的音频信息；

所述判断是否满足预设条件，包括：判断所述电子设备使用者的面部图像是否满足第一预设条件，及判断所述音频信息是否满足第二预设条件。

2.根据权利要求1所述的控制方法，其特征在于，判断所述电子设备使用者的面部图像是否满足第一预设条件，包括：

提取相差预设时间间隔的两帧面部图像的表情特征；

当所述两帧面部图像的表情特征之间的差值大于阈值时，确定所述电子设备使用者的面部图像满足第一预设条件。

3.根据权利要求1所述的控制方法，其特征在于，判断所述电子设备使用者的面部图像是否满足第一预设条件，包括：

提取所述面部图像的表情特征；

将提取出的表情特征与预存的第一类表情样本模型进行匹配，获得置信度；

在获得的置信度高于预设阈值的情况下，确定所述电子设备使用者的面部图像满足第一预设条件。

4.根据权利要求2或3所述的控制方法，其特征在于，判断所述音频信息是否满足第二预设条件，包括：

对所述音频信息进行检测，提取所述音频信息中的语音信息；

分析所述语音信息，获取所述语音信息包含的词汇；

在所述词汇包含特定词汇的情况下，确定所述音频信息满足第二预设条件。

5.根据权利要求2或3所述的控制方法，其特征在于，判断所述音频信息是否满足第二预设条件，包括：

对所述音频信息进行检测，提取所述音频信息中的语音信息；

提取所述语音信息的声纹特征；

比对所述语音信息的声纹特征和所述电子设备使用者的声纹特征；

在比对结果表明所述语音信息的声纹特征与所述电子设备使用者的声纹特征匹配的情况下，确定所述音频信息满足第二预设条件。

6.根据权利要求1所述的控制方法，其特征在于，

在调整所述数据输出单元的输出参数之后，还包括：在预设时刻，如果不满足所述预设条件，则恢复所述数据输出单元的输出参数；

在调整所述多媒体数据的输出状态之后，还包括：在预设时刻，如果不满足所述预设条件，则恢复所述多媒体数据的输出状态。

7.一种控制装置，应用于电子设备，所述电子设备包括数据输出单元和图像采集单元，所述数据输出单元包括音频输出单元，其特征在于，所述控制装置包括：

图像获取单元，用于在检测到所述数据输出单元输出多媒体数据的情况下，获取所述图像采集单元采集到的电子设备使用者的面部图像；

判断单元，用于判断是否满足预设条件，所述预设条件包括所述电子设备使用者的面部图像满足第一预设条件；其中，所述满足预设条件表明在电子设备的数据输出单元输出多媒体数据的过程中发生需要用户处理的事件；

第一控制单元，用于基于判断结果，调整所述数据输出单元的输出参数或者调整所述多媒体数据的输出状态，其中，所述第一控制单元包括第一控制模块和第二控制模块，所述第一控制模块用于在所述音频输出单元输出音频数据的情况下，降低所述音频输出单元的输出音量，所述第二控制模块用于暂停播放所述多媒体数据；

其中，所述电子设备还包括音频采集单元，

所述控制装置还包括音频获取单元，所述音频获取单元用于在检测到所述数据输出单元输出多媒体数据的情况下，获取所述音频采集单元采集到的音频信息；

所述判断单元包括第一判断子单元和第二判断子单元，所述第一判断子单元用于判断所述电子设备使用者的面部图像是否满足第一预设条件，所述第二判断子单元用于判断所述音频信息是否满足第二预设条件。

8.根据权利要求7所述的控制装置，其特征在于，所述第一判断子单元包括：

第一表情特征提取模块，用于提取相差预设时间间隔的两帧面部图像的表情特征；

第一处理模块，用于当所述两帧面部图像的表情特征之间的差值大于阈值时，确定所述电子设备使用者的面部图像满足第一预设条件。

9.根据权利要求7所述的控制装置，其特征在于，所述第一判断子单元包括：

第二表情特征提取模块，用于提取所述面部图像的表情特征；

表情特征匹配模块，用于将提取出的表情特征与预存的第一类表情样本模型进行匹配，获得置信度；

第二处理模块，用于在获得的置信度高于预设阈值的情况下，确定所述电子设备使用者的面部图像满足第二预设条件。

10.根据权利要求8或9所述的控制装置，其特征在于，所述第二判断子单元包括：

语音信息提取模块，用于对所述音频信息进行检测，提取所述音频信息中的语音信息；

语音分析模块，用于分析所述语音信息，获取所述语音信息包含的词汇；

第三处理模块，用于在所述词汇包含特定词汇的情况下，确定所述音频信息满足第二预设条件。

11.根据权利要求8或9所述的控制装置，其特征在于，所述第二判断子单元包括：

语音信息提取模块，用于对所述音频信息进行检测，提取所述音频信息中的语音信息；

声纹特征提取模块，用于提取所述语音信息的声纹特征；

比对模块，用于比对所述语音信息的声纹特征和所述电子设备使用者的声纹特征；

第四处理模块，用于在比对结果表明所述语音信息的声纹特征与所述电子设备使用者的声纹特征匹配的情况下，确定所述音频信息满足第二预设条件。

12.根据权利要求7所述的控制装置，其特征在于，还包括第二控制单元；

在调整所述数据输出单元的输出参数后的预设时刻，如果不满足所述预设条件，则恢复所述数据输出单元的输出参数；

在调整所述多媒体数据的输出状态之后的预设时刻，如果不满足所述预设条件，则恢复所述多媒体数据的输出状态。

13.一种穿戴式电子设备，包括一支架，所述支架用于维持所述穿戴式电子设备与电子设备使用者头部的相对位置关系，所述穿戴式电子设备还包括镜片模块、音频输出单元、音频采集单元和图像采集单元，其特征在于，所述穿戴式电子设备还包括如权利要求7至12中任一项所述的控制装置。

14.一种电子设备，所述电子设备包括音频输出单元、显示单元、音频采集单元和图像采集单元，其特征在于，所述电子设备还包括如权利要求7至12中任一项所述的控制装置。