CN108259769A - 图像处理方法、装置、存储介质及电子设备 - Google Patents

Abstract

本申请公开了一种图像处理方法、装置、存储介质及电子设备。该图像处理方法包括：接收图像获取指令；响应于图像获取指令，按照缓存先后顺序从缓存序列中获取所缓存的图像帧，其中，图像帧中至少包括一个可识别的人脸；判断所获取的当前图像帧中所有人物的眼睛区域是否满足预设条件；若是，则停止获取图像帧；若否，则继续获取图像帧，直到所获取的图像帧中，每一人物都对应有至少一帧眼睛区域满足预设条件的图像帧。本方案通过确定实时获取的图像帧中眼睛区域是否满足条件，来动态调整需获取的图像帧的数量，提升了图像帧获取的灵活性；同时，可在一定程度上减少抓帧时间，提高了成像速度。

Description

图像处理方法、装置、存储介质及电子设备

技术领域

本申请属于图像技术领域，尤其涉及一种图像处理方法、装置、存储介质及电子设备。

背景技术

拍照又称为摄影、照相，一般指通过物体所反射的光线使感光介质曝光的过程，通常使用机械照相机或者数码照相机。随着智能电子设备的普及、功能的多样化，使用智能电子设备拍照记录生活的点滴变得愈加流行。

在进入电子设备相机的拍摄预览界面后，电子设备可以采集图像并显示在界面上供用户预览。电子设备采集到的图像可以被存储到缓存序列中，即该缓存序列中存储有多帧图像。在相关技术中，当需要对采集到的图像进行一定的处理时，电子设备可以从缓存序列中获取最近采集到的多帧图像。然而，这种图像获取方式抓帧时间较长，导致电子设备的成像速度较慢。

发明内容

本申请实施例提供一种图像处理方法、装置、存储介质及电子设备，可以提升图像拍摄质量。

本申请实施例提供一种图像处理方法，应用于电子设备，包括：

接收图像获取指令；

响应于所述图像获取指令，按照缓存先后顺序从缓存序列中获取所缓存的图像帧，其中，图像帧中至少包括一个可识别的人脸；

判断所获取的当前图像帧中所有人物的眼睛区域是否满足预设条件；

若是，则停止获取图像帧；

若否，则继续获取图像帧，直到所获取的图像帧中，每一人物都对应有至少一帧眼睛区域满足预设条件的图像帧。

本申请实施例提供一种图像处理装置，应用于电子设备，包括：

接收模块，用于接收图像获取指令；

响应模块，用于响应于所述图像获取指令，按照缓存先后顺序从缓存序列中获取所缓存的图像帧，其中，图像帧中至少包括一个可识别的人脸；

判断模块，用于判断所获取的当前图像帧中所有人物的眼睛区域是否满足预设条件；

控制模块，用于在所述判断模块判定为是时，控制所述响应模块停止获取图像帧；

所述响应模块，用于在所述判断模块判定为否时，继续获取图像帧，直到所获取的图像帧中，每一人物都对应有至少一帧眼睛区域满足预设条件的图像帧。

本申请实施例提供一种存储介质，其上存储有计算机程序，当所述计算机程序在计算机上执行时，使得所述计算机执行本申请实施例提供的图像处理方法中的步骤。

本申请实施例还提供一种电子设备，包括存储器，处理器，所述处理器通过调用所述存储器中存储的计算机程序，用于执行本申请实施例提供的图像处理方法中的步骤。

本申请实施例中，通过接收图像获取指令；响应于图像获取指令，按照缓存先后顺序从缓存序列中获取所缓存的图像帧，其中，图像帧中至少包括一个可识别的人脸；判断所获取的当前图像帧中所有人物的眼睛区域是否满足预设条件；若是，则停止获取图像帧；若否，则继续获取图像帧，直到所获取的图像帧中，每一人物都对应有至少一帧眼睛区域满足预设条件的图像帧。本方案通过确定实时获取的图像帧中眼睛区域是否满足条件，来动态调整需获取的图像帧的数量，提升了图像帧获取的灵活性；同时，可在一定程度上减少抓帧时间，提高了成像速度。

附图说明

下面结合附图，通过对本发明的具体实施方式详细描述，将使本发明的技术方案及其有益效果显而易见。

图1是本申请实施例提供的图像处理方法的流程示意图。

图2是本申请实施例提供的图像处理方法的另一流程示意图。

图3是本申请实施例提供的图像处理方法的一应用实例示意图。

图4是本申请实施例提供的图像处理装置的结构示意图。

图5是本申请实施例提供的图像处理装置的另一结构示意图。

图6是本申请实施例提供的图像处理装置的又一结构示意图。

图7是本申请实施例提供的电子设备的结构示意图。

图8是本申请实施例提供的电子设备的图像处理电路的结构示意图。

具体实施方式

请参照图式，其中相同的组件符号代表相同的组件，本发明的原理是以实施在一适当的运算环境中来举例说明。以下的说明是基于所例示的本发明具体实施例，其不应被视为限制本发明未在此详述的其它具体实施例。

可以理解的是，本申请实施例的执行主体可以是诸如智能手机或平板电脑等的电子设备。

请参阅图1，图1是本申请实施例提供的图像处理方法的流程示意图，流程可以包括：

101接收图像获取指令。

用户经常需要使用电子设备相机进行拍摄。在进入电子设备相机的拍摄预览界面后，电子设备可以通过其内置的图像传感器采集图像并显示在界面上供用户预览。然而在图像采集过程中，由于用户习惯，眼睛容易受到外界环境因素(如光照)影响，在光照过强的情况下容易眨眼或闭眼。尤其在多人合影时，由于站位的关系还需进行位置调整、移动等，容易因人脸晃动导致人脸图像不稳定，晃动越严重、晃动人数越多，将导致图像的稳定性越差。基于这些因素，在相关技术中，采用获取多针图像合成一所有人眼都较大的图像。然而，如果一开始抓取到的第一帧图像中所有人眼都比较大，那么便没有必要再往后继续抓取图像了，如果继续抓取则会造成资源的浪费。因此，采用这抓取多帧图像的方式，一方面容易导致抓帧时间较长，降低成像速度；另一方面容易造成电子设备资源的浪费。

其中，该图像获取指令可以是在开启电子设备摄像头后，用户通过按压电子设备上的物理快门键所触发的；另外，该图像获取指令还可以是在开启电子设备摄像头后，用户通过触摸电子设备显示界面上的虚拟快门控件所触发的，对此不做具体限定。

102、响应于该图像获取指令，按照缓存先后顺序从缓存序列中获取所缓存的图像帧，其中，图像帧中至少包括一个可识别的人脸。

在一些实施方式中，缓存序列中的图像帧可以是通过电子设备内部设置的图像传感器，实时采集并缓存到临时存储器中而得到的。在接收到图像获取指令之后，电子设备可响应该指令从缓存序列中抓取对应的图像帧。

在具体实施过程中，可以按照从先到后的缓存顺序从该缓存序列中依次抓取所缓存图像帧，以保证所抓取图像的连续性。其中，抓取速度可以根据电子设备相机的快门参数而确定。所获取的图像帧中可以包括一个或多个人物，且至少包括一个可识别人脸，以便后续的图像处理操作。

103、判断所获取的当前图像帧中所有人物的眼睛区域是否满足预设条件；若是，执行步骤105，若否，执行步骤104。

具体地，每当获取一帧缓存序列中的图像帧时，对当前图像帧中人物的眼睛区域进行相关的检测、判断处理，以确定该当前图像帧中的所有眼睛区域是否满足预设条件。

在一些实施例中，可以将当前图像帧中各人物的人脸图像，与各个人物对应的标准状态的人脸图像进行比较，以判断当前图像帧中各人物的眼睛区域是否满足预设条件。也即，步骤“判断所获取的当前图像帧中所有人物的眼睛区域是否满足预设条件”，可以包括以下流程：

从所获取的当前图像帧中提取人脸图像；

根据人脸图像从预设数据库中匹配目标样本人脸图像；

将人脸图像、与目标样本人脸图像进行比较，得到比较结果；

根据比较结果，判断当前图像帧中所有人物的眼睛区域是否满足预设条件。

具体地，由于直接获取的原始图像由于受到各种条件的限制和随机干扰，往往不能直接使用，可以对该当前图像帧进行预处理，如灰度校正、噪声过滤等预处理操作。然后，可基于图像识别算法，对预处理后的当前图像帧进行图像特征的提取，以从中提取颜色特征、纹理特征、形状特征、以及空间位置关系特征等等。从而将当前图像帧从高纬降到低维，以得到最能反映图像本质的低维样本特征。有基于此，从当前图像帧中检测、识别到人脸特征，如眼睛、鼻子、嘴巴等五官特征，从而确定出其中包括的人脸图像，并从中提取所识别到的一个或多个人脸图像。

实际应用中，需要先构建包括该图像帧中所有人物人脸的数据库。也即，需要预先采集当前图像帧中所有人物的人脸图像信息，以得到每个人物的样本人脸图像，并将所得到的样本人脸图像添加到数据库中，以构建预设数据库。这样，便可以从该预设数据中选取与所提取到的人脸图像匹配的样本人脸图像。通过将人脸图像、与匹配到的样本人脸图像进行比较，判断当前图像帧中所有人物的眼睛区域是否满足预设条件。

在一些实施例中，步骤“根据人脸图像从预设数据库中匹配对应的样本人脸图像”，可以包括以下流程：

对人脸图像进行识别，得到人脸识别结果；

根据人脸识别结果，从预设数据库中获取与人脸图像匹配的目标样本人脸图像。

具体地，可以对所提取到的人脸图像进行识别，根据识别结构确定每一人脸图像对应的人物身份。进而从预设数据库中获取与该人物身份对应的样本人脸图像，以作为目标样本人脸图像。

实际应用中，由于人脸存在有表情的变化，而不同表情下眼睛的大小是不尽相同的。因此，为了提升比较结果的准确性，可以预设数据库中存储同一人物的多个不同表情的样本人脸图像，以便从中匹配到最合适的目标样本人脸图像。

也即，在一些实施例中，预设数据库中可以包括：多个样本人脸图像集合；样本人脸图像集合中可以包括：同一人脸的多个不同表情的样本人脸图像。那么，步骤“根据人脸识别结果，从预设数据库中获取与人脸图像匹配的目标样本人脸图像”，可以包括以下流程：

根据人脸识别结果，从预设数据库中确定出与该人脸图像匹配的目标样本人脸图像集合；

识别该人脸图像的表情；

根据该表情从目标样本人脸图像集合中选取目标样本人脸图像。

具体地，可以在构建预设数据库时，采集每一人物不同表情下的人脸图像，以得到同一人物的多张样本人脸图像，并将该多张样本人脸图像以集合的形式存储到数据库。

另外，在构建预设数据库时，还可以采集同一人物不同角度的人脸图像，如正视角度的人脸图像、左斜视角度的人脸图像、右斜视角度的人脸图像等等，以进一步提升比较结果的准确性。

具体实施时，将人脸图像与目标样本人脸图像比较时，由于图像的大小、角度可能存在差异，导致无法直接比较。因此，可以利用仿射变换算法，将人脸图像调整为与目标样本人脸图像一样的大小，以便于后续的图像比较操作。也即，在一些实施例中，步骤“将该人脸图像、与目标样本人脸图像进行比较，以得到比较结果”，可以包括以下流程：

将该人脸图像与目标样本人脸图像对齐；

计算对齐后的人脸图像中眼睛区域的第一开合度、以及目标样本人脸图像中眼睛区域的第二开合度；

比较第一开合度和第二开合度，以确定第一开合度小于第二开合度，得到比较结果。

具体的，利用仿射变换算法，将人脸图像与目标样本人脸图像对齐，以将人脸图像与目标样本人脸图像调整为相同的大小和角度，以便两者的直接比较。

在计算对齐后的人脸图像中眼睛区域的第一开合度时，可以先获取眼睛区域中上眼睑与下眼睑之间的睑裂值，具体可以为上眼睑下眼睑在垂直于水平方向上的最大距离。然后，基于获取的睑裂值计算第一开合度。在一些实施方式中，可以直接将睑裂值作为开合度。

同样的，第二开合度可参考上述第一开合度的计算方法，对此不再赘述。最后，比较第一开合度与第二开合度的大小即可。

则步骤“根据比较结果，判断当前图像帧中所有人物的眼睛区域是否满足预设条件”，可以包括以下流程：

若比较结果包括第一开合度小于第二开合度，则判定当前图像帧中所有人物的眼睛区域不满足预设条件；

若比较结果不包括第一开合度小于第二开合度，则判定当前图像帧中所有人物的眼睛区域满足预设条件。

具体的，比较结果包括第一开合度小于第二开合度，也即当前图像帧中存在有人的眼睛大小，没有达到预设数据库中对应的眼睛大小，因此判定为不满足条件。比较结果不包括第一开合度小于第二开合度，也即图像帧中所有人脸的眼睛大小都达到了预设数据库中对应的眼睛大小，因此判定为满足条件。

104、判断所获取的图像帧中，是否每一人物都对应有至少一帧眼睛区域满足所述预设条件的图像帧；若是，执行步骤105，若否，执行步骤102。

具体的，在当前图像帧中存在有人的眼睛大小，没有达到预设数据库中对应的眼睛大小时，检测所获取到的所有图像帧中，是否所有人都对应有眼睛大小达到了预设数据库中眼睛大小的图像帧。

105、停止继续获取图像帧。

具体的，当所获取的当前图像帧中所有人物的眼睛区域都满足预设条件时，可以认为图像帧中所有人物的眼睛都比较大。此时，可以停止继续从缓存序列中获取图像帧，以此来缩短抓帧时间，从而提升成像速度。

另外，当所获取的图像帧中，每一人物都对应有至少一帧眼睛区域满足所述预设条件的图像帧时，可以认为所抓取到的图像帧中，每个人物都对应有眼睛较大的图像了。此时，可以停止继续从缓存序列中获取图像帧，以此来缩短抓帧时间，从而提升成像速度。

由上可知，本申请实施例中所提供的图像处理方法，通过接收图像获取指令；响应于图像获取指令，按照缓存先后顺序从缓存序列中获取所缓存的图像帧，其中，图像帧中至少包括一个可识别的人脸；判断所获取的当前图像帧中所有人物的眼睛区域是否满足预设条件；若是，则停止获取图像帧；若否，则继续获取图像帧，直到所获取的图像帧中，每一人物都对应有至少一帧眼睛区域满足预设条件的图像帧。本方案通过确定实时获取的图像帧中眼睛区域是否满足条件，来动态调整需获取的图像帧的数量，提升了图像帧获取的灵活性；同时，可在一定程度上减少抓帧时间，提高了成像速度。

请参阅图2，图2为本申请实施例提供的图像处理方法的另一流程示意图，流程可以包括：

201、电子设备接收接收图像获取指令。

在一些实施方式中，该图像获取指令可以是在开启电子设备摄像头后，用户通过按压电子设备上的物理快门键所触发的。

在一些实施方式中，该图像获取指令还可以是在开启电子设备摄像头后，用户通过触摸电子设备显示界面上的虚拟快门控件所触发的。

202、电子设备响应于该图像获取指令，按照缓存先后顺序从缓存序列中获取所缓存的图像帧，其中，图像帧中至少包括一个可识别的人脸。

具体的，在接收到图像获取指令之后，电子设备可响应该指令从缓存序列中抓取对应的图像帧。

在具体实施过程中，可以按照从先到后的缓存顺序从该缓存序列中依次抓取所缓存图像帧，以保证所抓取图像的连续性。其中，抓取速度可以根据电子设备相机的快门参数而确定。所获取的图像帧中可以包括一个或多个人物，且至少包括一个可识别人脸，以便后续的图像处理操作。

203、电子设备从所获取的当前图像帧中提取人脸图像。

具体地，由于直接获取的原始图像由于受到各种条件的限制和随机干扰，往往不能直接使用，可以对该当前图像帧进行预处理，如灰度校正、噪声过滤等预处理操作。然后，可基于图像识别算法，对预处理后的当前图像帧进行图像特征的提取，以从中提取颜色特征、纹理特征、形状特征、以及空间位置关系特征等等。从而将当前图像帧从高纬降到低维，以得到最能反映图像本质的低维样本特征。有基于此，从当前图像帧中检测、识别到人脸特征，如眼睛、鼻子、嘴巴等五官特征，从而确定出其中包括的人脸图像，并从中提取所识别到的一个或多个人脸图像。

204、电子设备对人脸图像进行识别，得到人脸识别结果。

具体地，可以对所提取到的人脸图像进行识别，根据识别结构确定每一人脸图像对应的人物身份。进而从预设数据库中获取与该人物身份对应的样本人脸图像，以作为目标样本人脸图像。

205、电子设备根据人脸识别结果，从预设数据库中获取与人脸图像匹配的目标样本人脸图像。

本申请实施例中，需要先构建包括该图像帧中所有人物人脸的数据库。也即，需要预先采集当前图像帧中所有人物的人脸图像信息，以得到每个人物的样本人脸图像，并将所得到的样本人脸图像添加到数据库中，以构建预设数据库。这样，便可以从该预设数据中选取与所提取到的人脸图像匹配的样本人脸图像。通过将人脸图像、与匹配到的样本人脸图像进行比较，判断当前图像帧中所有人物的眼睛区域是否满足预设条件。

实际应用中，由于人脸存在有表情的变化，而不同表情下眼睛的大小是不尽相同的。因此，为了提升比较结果的准确性，可以预设数据库中存储同一人物的多个不同表情的样本人脸图像，以便从中匹配到最合适的目标样本人脸图像。具体地，可以在构建预设数据库时，采集每一人物不同表情下的人脸图像，以得到同一人物的多张样本人脸图像，并将该多张样本人脸图像以集合的形式存储到数据库。

也即，在一些实施例中，预设数据库中可以包括：多个样本人脸图像集合；样本人脸图像集合中可以包括：同一人脸的多个不同表情的样本人脸图像。那么，可以根据人脸识别结果，从预设数据库中确定出与该人脸图像匹配的目标样本人脸图像集合，然后识别该人脸图像的表情，再根据该表情从目标样本人脸图像集合中选取目标样本人脸图像。

比如，若识别到该人脸图像的表情为无表情脸，则从预设数据库中该人物对应的目标样本人脸图像集合中，提取无表情样本人脸图像，以作为目标样本人脸图像；又比如，若识别到该人脸图像的表情为大笑，则从预设数据库中该人物对应的目标样本人脸图像集合中，提取大笑表情的样本人脸图像，以作为目标样本人脸图像。

206、电子设备将该人脸图像、与目标样本人脸图像进行比较，以得到比较结果。

具体实施时，将人脸图像与目标样本人脸图像比较时，由于图像的大小、角度可能存在差异，导致无法直接比较。因此，可以利用仿射变换算法，将人脸图像调整为与目标样本人脸图像对齐，以将人脸图像与目标样本人脸图像调整为相同的大小和角度，以便两者的直接比较。

207、电子设备根据比较结果，判断当前图像帧中所有人物的眼睛区域是否满足预设条件；若是，执行步骤211，若否，执行步骤208。

在一些实施方式中，可以计算对齐后的人脸图像中眼睛区域的第一开合度、以及目标样本人脸图像中眼睛区域的第二开合度，然后比较第一开合度和第二开合度，以确定第一开合度小于第二开合度，得到比较结果。

具体的，在计算对齐后的人脸图像中眼睛区域的第一开合度时，可以先获取眼睛区域中上眼睑与下眼睑之间的睑裂值，具体可以为上眼睑下眼睑在垂直于水平方向上的最大距离。然后，基于获取的睑裂值计算第一开合度。在一些实施方式中，可以直接将睑裂值作为开合度。

同样的，第二开合度可参考上述第一开合度的计算方法，对此不再赘述。最后，比较第一开合度与第二开合度的大小即可。

另外，在一种实施方式中，电子设备可以通过如下方式来检测图像中的眼睛大小。比如，电子设备可以先通过人脸和人眼识别技术，识别出图像中的眼部区域，再获取该眼部区域在整张图像中所占的面积比例。该面积比例大，则可以认为用户的眼睛睁得较大。该面积比例小，则可以认为用户的眼睛睁得较小。又如，电子设备可以计算图像中的人眼在竖直方向上所占的像素点的个数，该个数的大小可以用于表示人眼的大小。

208、电子设备判断所获取的图像帧中，是否每一人物都对应有至少一帧眼睛区域满足所述预设条件的图像帧；若是，执行步骤211，若否，执行步骤209。

具体的，在当前图像帧中存在有人的眼睛大小，没有达到预设数据库中对应的眼睛大小时，检测所获取到的所有图像帧中，是否所有人都对应有眼睛大小达到了预设数据库中眼睛大小的图像帧。

209、电子设备统计所获取到图像帧的帧数。

具体的，可以设置一个累加器，每当接收图像获取指令后，从缓存序列中获取一帧图像帧，便累加一次，以统计所获取到图像帧的帧数。当接收到下一个图像获取指令时，将所记录的数据清楚，并重新开始计数。

210、电子设备判断该帧数是否达到预设阈值；若是，执行步骤211，若否，执行步骤202。

具体的，该预设阈值可以是产品生产厂商所设定的按一次快门所对应抓取图像的帧数，比如，该帧数可以为4帧、6帧、8帧等等。

可以理解的是，上述统计所获取到图像帧的帧数不可超过该预设阈值。

211、电子设备停止获取图像帧。

具体的，当所获取的当前图像帧中所有人物的眼睛区域都满足预设条件时，可以认为图像帧中所有人物的眼睛都比较大。此时，可以停止继续从缓存序列中获取图像帧，以此来缩短抓帧时间，从而提升成像速度。

另外，当所获取的图像帧中，每一人物都对应有至少一帧眼睛区域满足所述预设条件的图像帧时，可以认为所抓取到的图像帧中，每个人物都对应有眼睛较大的图像了。此时，可以停止继续从缓存序列中获取图像帧，以此来缩短抓帧时间，从而提升成像速度。

另外，当统计所获取到图像帧的帧数达到所设定的上限值时，强制停止继续从缓存序列中获取图像帧。

比如，以智能手机为例，在进入相机的预览界面后，每隔30毫秒至60毫秒采集一帧图像，并将采集到的图像保存到缓存队列。该缓存队列可以为定长队列，例如该缓存队列可以保存手机最新采集到的15帧图像。

参考图3，用户A打开手机摄像头准备为甲、乙、丙三人拍摄合照，此时手机可以检测到用户A通过拍照按钮触发的拍照指令，并可根据该拍照指令每隔一定时间从缓存序列中抓取一帧图像。若手机对所抓取的第一帧图像中甲、乙和丙的眼睛大小进行检测，并分别与手机相册中预先存储的甲、乙、丙各自的样本人脸图像进行比较，以确定第一帧图像中甲、乙和丙的眼睛大小程度是否达到各自对应样本人脸图像中的眼睛的大小程度。

假设甲、乙和丙三人对应的样本人脸图像中人眼大小数值分别为：75、80、82。若第一帧图像中，甲的眼睛大小数值为80、乙的眼睛大小数值为80、丙的眼睛大小数值为84，则明显第一帧图像中所有人物的眼睛大小都较大，此时可停止从缓存序列中抓取图像，并将第一帧图像直接输出到相册中作为照片。

若若第一帧图像中，甲的眼睛大小数值为70、乙的眼睛大小数值为80、丙的眼睛大小数值为84，则可以得到甲的眼睛大小程度没有达到样本人脸图像中的眼睛大小程度，而乙和丙的眼睛大小程度都达到了样本人脸图像中眼睛大小程度。因此，需继续从缓存序列中获取图像，直到抓取到的图像中甲的眼睛大小程度达到样本人脸图像中眼睛大小程度时，停止从缓存序列中抓取图像。

实际应用中，在抓帧完毕之后，需要对所抓取的图像帧进行处理，以得到所有人物眼睛都是比较大的图像。在一些实施例中，以所获取的图像帧为多人图像为例，则在停止获取图像帧之后，还可以包括以下流程：

若所获取的图像帧数为多帧，则从所获取的多帧图像帧中确定出基础图像，所述基础图像中至少包含一个符合上述预设条件的人脸图像；

从基础图像中确定出不符合预设条件的待替换人脸图像；

从基础图像外的其它待处理图像中，确定出符合预设条件的目标人脸图像，目标人脸图像与待替换人脸图像为相同人物的人脸图像；

在基础图像中，将待替换人脸图像替换为目标人脸图像，得到经过图像替换处理的基础图像；

对经过图像替换处理的基础图像进行图像降噪处理并输出。

具体的，所述基础图像中至少包含一个符合上述预设条件的人脸图像，也即所确定出的基础图像中至少有一个人物的眼睛较大。在确定好基础图像之后，从基础图像中确定出不符合预设条件的待替换人脸图像(即眼睛较小的待替换人脸图像)，并从所抓取的剩余图像帧中提取出符合预设条件的目标人脸图像(即眼睛较大的待替换人脸图像)。然后，将待替换人脸图像替换为目标人脸图像，也即将剩余图像帧中眼睛较大的人脸图像替换基础图像中的眼睛较小的人脸图像，以得到所有人物的眼睛都较大的图像。最后，再对该图像进行降噪处理，并输出到电子设备的相册中成为照片。

由上可知，本申请方案中通过确定实时获取的图像帧中眼睛区域是否满足条件，来动态调整需获取的图像帧的数量，提升了图像帧获取的灵活性；同时，可在一定程度上减少抓帧时间，提高了成像速度。

请参阅图4，图4为本申请实施例提供的图像处理装置的结构示意图。图像处理装置300可以包括：接收模块31，响应模块32，判断模块33，控制模块304。其中：

接收模块31，用于接收图像获取指令；

响应模块32，用于响应于所述图像获取指令，按照缓存先后顺序从缓存序列中获取所缓存的图像帧，其中，图像帧中至少包括一个可识别的人脸；

判断模块33，用于判断所获取的当前图像帧中所有人物的眼睛区域是否满足预设条件；

控制模块34，用于在所述判断模块33判定为是时，控制所述响应模块32停止获取图像帧；

响应模块32，还用于在所述判断模块33判定为否时，继续获取图像帧，直到所获取的图像帧中，每一人物都对应有至少一帧眼睛区域满足预设条件的图像帧。

在一种实施方式中，判断模块33可以进一步用于：

从所获取的当前图像帧中提取人脸图像；

根据该人脸图像从预设数据库中匹配目标样本人脸图像；

将该人脸图像、与该目标样本人脸图像进行比较，得到比较结果；

根据该比较结果，判断该当前图像帧中所有人物的眼睛区域是否满足预设条件。

在一种实施方式中，判断模块33可以进一步用于：

对该人脸图像进行识别，得到人脸识别结果；

根据该人脸识别结果，从预设数据库中获取与该人脸图像匹配的目标样本人脸图像。

在一种实施方式中，该预设数据库中包括：多个样本人脸图像集合；该样本人脸图像集合中包括：同一人脸的多个不同表情的样本人脸图像。判断模块33可以进一步用于：

根据人脸识别结果，从预设数据库中确定出与该人脸图像匹配的目标样本人脸图像集合；

识别该人脸图像的表情；

根据该表情从该目标样本人脸图像集合中选取目标样本人脸图像。

在一种实施方式中，判断模块33可以进一步用于：

将该人脸图像与该目标样本人脸图像对齐；

计算对齐后的人脸图像中眼睛区域的第一开合度、以及目标样本人脸图像中眼睛区域的第二开合度；

比较第一开合度和第二开合度，以确定第一开合度小于第二开合度，得到比较结果。

在一种实施方式中，判断模块33可以进一步用于：

若比较结果包括第一开合度小于第二开合度，则判定当前图像帧中所有人物的眼睛区域不满足预设条件；

若比较结果不包括第一开合度小于第二开合度，则判定当前图像帧中所有人物的眼睛区域满足预设条件。

在一种实施方式中，参考图5，图像处理装置300还可以包括：

统计模块35，用于统计所获取到图像帧的帧数；

确定模块36，用于确定该帧数是否达到预设阈值；

控制模块34，进一步用于在确定模块确定为是时，控制响应模块32停止继续获取图像帧。

在一种实施方式中，所获取的图像帧为多人图像；参考图6，图像处理装置300还可以包括：处理模块37。其中，处理模块37可以用于：

在停止获取图像帧之后，若所获取的图像帧数为多帧，则从所获取的多帧图像帧中确定出基础图像，该基础图像中至少包含一个符合该预设条件的人脸图像；

从该基础图像中确定出不符合该预设条件的待替换人脸图像；

从该基础图像外的其它待处理图像中，确定出符合该预设条件的目标人脸图像，该目标人脸图像与该待替换人脸图像为相同人物的人脸图像；

在该基础图像中，将该待替换人脸图像替换为该目标图像，得到经过图像替换处理的基础图像；

对该经过图像替换处理的基础图像进行图像降噪处理并输出。

本申请实施例中所提供的图像处理装置，通过接收图像获取指令；响应于图像获取指令，按照缓存先后顺序从缓存序列中获取所缓存的图像帧，其中，图像帧中至少包括一个可识别的人脸；判断所获取的当前图像帧中所有人物的眼睛区域是否满足预设条件；若是，则停止获取图像帧；若否，则继续获取图像帧，直到所获取的图像帧中，每一人物都对应有至少一帧眼睛区域满足预设条件的图像帧。本方案通过确定实时获取的图像帧中眼睛区域是否满足条件，来动态调整需获取的图像帧的数量，提升了图像帧获取的灵活性；同时，可在一定程度上减少抓帧时间，提高了成像速度。

本申请实施例提供一种计算机可读的存储介质，其上存储有计算机程序，当该计算机程序在计算机上执行时，使得该计算机执行如本实施例提供的图像处理方法中的步骤。

本申请实施例还提供一种电子设备，包括存储器，处理器，该处理器通过调用该存储器中存储的计算机程序，用于执行本实施例提供的图像处理方法中的步骤。

例如，上述电子设备可以是诸如平板电脑或者智能手机等电子设备。请参阅图7，图7为本申请实施例提供的电子设备的结构示意图。

该电子设备400可以包括传感器401、存储器402、处理器403等部件。本领域技术人员可以理解，图7中示出的电子设备结构并不构成对电子设备的限定，可以包括比图示更多或更少的部件，或者组合某些部件，或者不同的部件布置。

传感器401可以包括陀螺仪传感器(例如三轴陀螺仪传感器)、加速度传感器等传感器。

存储器402可用于存储应用程序和数据。存储器402存储的应用程序中包含有可执行代码。应用程序可以组成各种功能模块。处理器403通过运行存储在存储器402的应用程序，从而执行各种功能应用以及数据处理。

处理器403是电子设备的控制中心，利用各种接口和线路连接整个电子设备的各个部分，通过运行或执行存储在存储器402内的应用程序，以及调用存储在存储器402内的数据，执行电子设备的各种功能和处理数据，从而对电子设备进行整体监控。

在本实施例中，电子设备中的处理器403会按照如下的指令，将一个或一个以上的应用程序的进程对应的可执行代码加载到存储器402中，并由处理器403来运行存储在存储器402中的应用程序，从而实现步骤：

接收图像获取指令；

响应于该图像获取指令，按照缓存先后顺序从缓存序列中获取所缓存的图像帧，其中，图像帧中至少包括一个可识别的人脸；

判断所获取的当前图像帧中所有人物的眼睛区域是否满足预设条件；

若是，则停止获取图像帧；

若否，则继续获取图像帧，直到所获取的图像帧中，每一人物都对应有至少一帧眼睛区域满足该预设条件的图像帧。

如图8所示，图像处理电路包括图像信号处理器540和控制逻辑器550。成像设备510捕捉的图像数据首先由图像信号处理器540处理，图像信号处理器540对图像数据进行分析以捕捉可用于确定和/或成像设备510的一个或多个控制参数的图像统计信息。成像设备510可包括具有一个或多个透镜511和图像传感器512的照相机。图像传感器512可包括色彩滤镜阵列(如Bayer滤镜)，图像传感器512可获取用图像传感器512的每个成像像素捕捉的光强度和波长信息，并提供可由图像信号处理器540处理的一组原始图像数据。传感器520可基于传感器520接口类型把原始图像数据提供给图像信号处理器540。传感器520接口可以利用SMIA(Standard Mobile Imaging Architecture，标准移动成像架构)接口、其它串行或并行照相机接口或上述接口的组合。

图像信号处理器540按多种格式逐个像素地处理原始图像数据。例如，每个图像像素可具有8、10、12或14比特的位深度，图像信号处理器540可对原始图像数据进行一个或多个图像处理操作、收集关于图像数据的统计信息。其中，图像处理操作可按相同或不同的位深度精度进行。

图像信号处理器540还可从图像存储器530接收像素数据。例如，从传感器520接口将原始像素数据发送给图像存储器530，图像存储器530中的原始像素数据再提供给图像信号处理器540以供处理。图像存储器530可为存储器装置的一部分、存储设备、或电子设备内的独立的专用存储器，并可包括DMA(Direct Memory Access，直接直接存储器存取)特征。

当接收到来自传感器520接口或来自图像存储器530的原始图像数据时，图像信号处理器540可进行一个或多个图像处理操作，如时域滤波。处理后的图像数据可发送给图像存储器530，以便在被显示之前进行另外的处理。图像信号处理器540从图像存储器530接收处理数据，并对该处理数据进行原始域中以及RGB和YCbCr颜色空间中的图像数据处理。处理后的图像数据可输出给显示器570，以供用户观看和/或由图形引擎或GPU(GraphicsProcessing Unit，图形处理器)进一步处理。此外，图像信号处理器540的输出还可发送给图像存储器530，且显示器570可从图像存储器530读取图像数据。在一种实施方式中，图像存储器530可被配置为实现一个或多个帧缓冲器。此外，图像信号处理器540的输出可发送给编码器/解码器560，以便编码/解码图像数据。编码的图像数据可被保存，并在显示于显示器570设备上之前解压缩。编码器/解码器560可由CPU或GPU或协处理器实现。

图像信号处理器540确定的统计数据可发送给控制逻辑器550。例如，统计数据可包括自动曝光、自动白平衡、自动聚焦、闪烁检测、黑电平补偿、透镜511阴影校正等图像传感器512统计信息。控制逻辑器550可包括执行一个或多个例程(如固件)的处理器和/或微控制器，一个或多个例程可根据接收的统计数据，确定成像设备510的控制参数以及的控制参数。例如，控制参数可包括传感器520控制参数(例如增益、曝光控制的积分时间)、照相机闪光控制参数、透镜511控制参数(例如聚焦或变焦用焦距)、或这些参数的组合。ISP控制参数可包括用于自动白平衡和颜色调整(例如，在RGB处理期间)的增益水平和色彩校正矩阵，以及透镜511阴影校正参数。

以下为运用图8中图像处理技术实现本实施例提供的图像的处理方法的步骤：

接收图像获取指令；

响应于该图像获取指令，按照缓存先后顺序从缓存序列中获取所缓存的图像帧，其中，图像帧中至少包括一个可识别的人脸；

判断所获取的当前图像帧中所有人物的眼睛区域是否满足预设条件；

若是，则停止获取图像帧；

若否，则继续获取图像帧，直到所获取的图像帧中，每一人物都对应有至少一帧眼睛区域满足该预设条件的图像帧。

在一种实施方式中，电子设备在执行判断所获取的当前图像帧中所有人物的眼睛区域是否满足预设条件的步骤时，具体可以包括：

从所获取的当前图像帧中提取人脸图像；

根据该人脸图像从预设数据库中匹配目标样本人脸图像；

将该人脸图像、与该目标样本人脸图像进行比较，得到比较结果；

根据该比较结果，判断该当前图像帧中所有人物的眼睛区域是否满足预设条件。

在一种实施方式中，电子设备在执行根据该人脸图像从预设数据库中匹配对应的样本人脸图像的步骤时，具体可以包括：

对该人脸图像进行识别，得到人脸识别结果；

根据该人脸识别结果，从预设数据库中获取与该人脸图像匹配的目标样本人脸图像。

在一种实施方式中，预设数据库中包括：多个样本人脸图像集合；样本人脸图像集合中包括：同一人脸的多个不同表情的样本人脸图像。则电子设备在执行根据该人脸识别结果，从预设数据库中获取与该人脸图像匹配的目标样本人脸图像的步骤时，具体可以包括：

根据人脸识别结果，从预设数据库中确定出与该人脸图像匹配的目标样本人脸图像集合；

识别该人脸图像的表情；

根据该表情从该目标样本人脸图像集合中选取目标样本人脸图像。

在一种实施方式中，电子设备在执行将该人脸图像、与该目标样本人脸图像进行比较，以得到比较结果的步骤时，具体可以包括：

将该人脸图像与该目标样本人脸图像对齐；

计算对齐后的人脸图像中眼睛区域的第一开合度、以及目标样本人脸图像中眼睛区域的第二开合度；

比较第一开合度和第二开合度，以确定第一开合度小于第二开合度，得到比较结果。

在一种实施方式中，电子设备在执行根据该比较结果，判断该当前图像帧中所有人物的眼睛区域是否满足预设条件的步骤时，具体可以：

若比较结果包括第一开合度小于第二开合度，则判定当前图像帧中所有人物的眼睛区域不满足预设条件；

若比较结果不包括第一开合度小于第二开合度，则判定当前图像帧中所有人物的眼睛区域满足预设条件。

在一种实施方式中，在判定所获取的当前图像帧中所有人物的眼睛区域不满足预设条件之后，电子设备还可以执行以下步骤：

统计所获取到图像帧的帧数；

判断该帧数是否达到预设阈值；

若是，则停止继续获取图像帧。

在一种实施方式中，所获取的图像帧为多人图像；在停止获取图像帧之后，电子设备还可以执行以下步骤：

若所获取的图像帧数为多帧，则从所获取的多帧图像帧中确定出基础图像，该基础图像中至少包含一个符合该预设条件的人脸图像；

从该基础图像中确定出不符合该预设条件的待替换人脸图像；

从该基础图像外的其它待处理图像中，确定出符合该预设条件的目标人脸图像，该目标人脸图像与该待替换人脸图像为相同人物的人脸图像；

在该基础图像中，将该待替换人脸图像替换为该目标图像，得到经过图像替换处理的基础图像；

对该经过图像替换处理的基础图像进行图像降噪处理并输出。

在上述实施例中，对各个实施例的描述都各有侧重，某个实施例中没有详述的部分，可以参见上文针对图像处理方法的详细描述，此处不再赘述。

本申请实施例提供的该图像处理装置与上文实施例中的图像处理方法属于同一构思，在该图像处理装置上可以运行该图像处理方法实施例中提供的任一方法，其具体实现过程详见该图像处理方法实施例，此处不再赘述。

需要说明的是，对本申请实施例该图像处理方法而言，本领域普通技术人员可以理解实现本申请实施例该图像处理方法的全部或部分流程，是可以通过计算机程序来控制相关的硬件来完成，该计算机程序可存储于一计算机可读取存储介质中，如存储在存储器中，并被至少一个处理器执行，在执行过程中可包括如该图像处理方法的实施例的流程。其中，该的存储介质可为磁碟、光盘、只读存储器(ROM，Read Only Memory)、随机存取记忆体(RAM，Random Access Memory)等。

对本申请实施例的该图像处理装置而言，其各功能模块可以集成在一个处理芯片中，也可以是各个模块单独物理存在，也可以两个或两个以上模块集成在一个模块中。上述集成的模块既可以采用硬件的形式实现，也可以采用软件功能模块的形式实现。所述集成的模块如果以软件功能模块的形式实现并作为独立的产品销售或使用时，也可以存储在一个计算机可读取存储介质中，该存储介质譬如为只读存储器，磁盘或光盘等。

以上对本申请实施例所提供的一种图像处理方法、装置、存储介质以及电子设备进行了详细介绍，本文中应用了具体个例对本发明的原理及实施方式进行了阐述，以上实施例的说明只是用于帮助理解本发明的方法及其核心思想；同时，对于本领域的技术人员，依据本发明的思想，在具体实施方式及应用范围上均会有改变之处，综上所述，本说明书内容不应理解为对本发明的限制。

Claims (11)

1.一种图像处理方法，应用于电子设备，其特征在于，包括：

接收图像获取指令；

响应于所述图像获取指令，按照缓存先后顺序从缓存序列中获取所缓存的图像帧，其中，图像帧中至少包括一个可识别的人脸；

判断所获取的当前图像帧中所有人物的眼睛区域是否满足预设条件；

若是，则停止获取图像帧；

若否，则继续获取图像帧，直到所获取的图像帧中，每一人物都对应有至少一帧眼睛区域满足所述预设条件的图像帧。

2.根据权利要求1所述的图像处理方法，其特征在于，所述判断所获取的当前图像帧中所有人物的眼睛区域是否满足预设条件，包括：

从所获取的当前图像帧中提取人脸图像；

根据所述人脸图像从预设数据库中匹配目标样本人脸图像；

将所述人脸图像、与所述目标样本人脸图像进行比较，得到比较结果；

根据所述比较结果，判断所述当前图像帧中所有人物的眼睛区域是否满足预设条件。

3.根据权利要求2所述的图像处理方法，其特征在于，所述根据所述人脸图像从预设数据库中匹配对应的样本人脸图像，包括：

对所述人脸图像进行识别，得到人脸识别结果；

根据所述人脸识别结果，从预设数据库中获取与所述人脸图像匹配的目标样本人脸图像。

4.根据权利要求3所述的图像处理方法，其特征在于，所述预设数据库中包括：多个样本人脸图像集合；所述样本人脸图像集合中包括：同一人脸的多个不同表情的样本人脸图像；

所述根据所述人脸识别结果，从预设数据库中获取与所述人脸图像匹配的目标样本人脸图像，包括：

根据人脸识别结果，从预设数据库中确定出与所述人脸图像匹配的目标样本人脸图像集合；

识别所述人脸图像的表情；

根据所述表情从所述目标样本人脸图像集合中选取目标样本人脸图像。

5.根据权利要求2所述的图像处理方法，其特征在于，所述将所述人脸图像、与所述目标样本人脸图像进行比较，以得到比较结果，包括：

将所述人脸图像与所述目标样本人脸图像对齐；

计算对齐后的人脸图像中眼睛区域的第一开合度、以及目标样本人脸图像中眼睛区域的第二开合度；

比较第一开合度和第二开合度，以确定第一开合度小于第二开合度，得到比较结果。

6.根据权利要求5所述的图像处理方法，其特征在于，所述根据所述比较结果，判断所述当前图像帧中所有人物的眼睛区域是否满足预设条件，包括：

若比较结果包括第一开合度小于第二开合度，则判定当前图像帧中所有人物的眼睛区域不满足预设条件；

若比较结果不包括第一开合度小于第二开合度，则判定当前图像帧中所有人物的眼睛区域满足预设条件。

7.根据权利要求1所述的图像处理方法，其特征在于，在判定所获取的当前图像帧中所有人物的眼睛区域不满足预设条件之后，还包括：

统计所获取到图像帧的帧数；

判断所述帧数是否达到预设阈值；

若是，则停止继续获取图像帧。

8.根据权利要求1-7任一项所述的图像处理方法，其特征在于，所获取的图像帧为多人图像；在停止获取图像帧之后，还包括：

若所获取的图像帧数为多帧，则从所获取的多帧图像帧中确定出基础图像，所述基础图像中至少包含一个符合所述预设条件的人脸图像；

从所述基础图像中确定出不符合所述预设条件的待替换人脸图像；

从所述基础图像外的其它待处理图像中，确定出符合所述预设条件的目标人脸图像，所述目标人脸图像与所述待替换人脸图像为相同人物的人脸图像；

在所述基础图像中，将所述待替换人脸图像替换为所述目标人脸图像，得到经过图像替换处理的基础图像；

对所述经过图像替换处理的基础图像进行图像降噪处理并输出。

9.一种图像处理装置，应用于电子设备，其特征在于，包括：

接收模块，用于接收图像获取指令；

响应模块，用于响应于所述图像获取指令，按照缓存先后顺序从缓存序列中获取所缓存的图像帧，其中，图像帧中至少包括一个可识别的人脸；

判断模块，用于判断所获取的当前图像帧中所有人物的眼睛区域是否满足预设条件；

控制模块，用于在所述判断模块判定为是时，控制所述响应模块停止获取图像帧；

所述响应模块，用于在所述判断模块判定为否时，继续获取图像帧，直到所获取的图像帧中，每一人物都对应有至少一帧眼睛区域满足预设条件的图像帧。

10.一种存储介质，其上存储有计算机程序，其特征在于，当所述计算机程序在计算机上执行时，使得所述计算机执行如权利要求1-8中任一项所述的方法。

11.一种电子设备，包括存储器，处理器，其特征在于，所述处理器通过调用所述存储器中存储的计算机程序，用于执行如权利要求1-8中任一项所述的方法。