CN110378840A - 图像处理方法及装置 - Google Patents

Abstract

本申请提供一种图像处理方法及装置，应用于图像处理领域。从多张图像中选取一张基准图像，并确定出该基准图像中的目标人员。获取该目标人员在所述多张图像中眼部区域的得分，确定出最高得分的眼部区域，其中，该得分与眼部区域眼睛的张开程度成正相关。将该基准图像中目标人员的眼部区域替换为该最高得分对应的眼部区域。如此，通过选取该目标人员最高得分的眼部区域对基准图像中该目标人员的眼部区域进行替换，使得该基准图像中目标人员的眼部区域呈现最佳的成像效果。

Description

图像处理方法及装置

技术领域

本申请涉及图像处理领域，具体而言，涉及一种图像处理方法及装置。

背景技术

多人合照的过程中，大家常常会遇到这种情况，在拍摄人员按下快门的一瞬间，每个人的动作不统一导致拍摄的照片中有的人睁着眼睛有的人闭着眼睛。随着合照的人数增加，这种现象会显得愈发明显。

为了避免这种情况，目前常用的做法是连续拍摄多张图像，然后通过相应的算法从多张图像中选取其中的最佳图像用以保留。然而该方式中选取的最佳图像并不能保证每个都处于睁眼状态。

另外一种方式就是，通过Photoshop等图像处理软件，将睁开的眼睛区域合成到图像中对应的闭眼区域中。该方式操作繁琐，且不够智能。

发明内容

为了克服现有技术中的至少一个不足，本申请的目的之一在于提供一种图像处理方法，应用于数据处理设备，所述方法包括：

在多张图像中确定出一张图像作为基准图像；

从所述基准图像中确定出目标人员，其中，所述多张图像中的至少两张图像包括该目标人员；

获取所述目标人员的眼部区域在每张所述图像中的得分，所述得分与所述眼部区域的张开程度成正相关；

获取所述得分中的最高得分，将所述基准图像中该目标人员的眼部区域替换为所述最高得分对应的眼部区域。

可选地，所述在多张图像中确定出一张图像作为基准图像的步骤包括：

响应用户目标选取操作，从所述多张图像中确定出所述基准图像。

可选地，所述获取所述目标人员的眼部区域在每张所述图像中的得分的步骤包括：

获取所述目标人员的眼部区域的眼睛在每张所述图像中的宽度和高度；

根据所述宽度和高度，通过预设评分标准获得所述得分。

可选地，所述预设评分标准还包括所述眼部区域中眼睛的明亮度。

可选地，所述目标人员为多个拍摄人员之一，所述多张图像为所述多个拍摄人员的多张连续拍摄图像，所述在多张图像中确定出一张图像作为基准图像的步骤包括：

获取每张所述拍摄图像的总分，所述总分为每张所述拍摄图像中的所述多个拍摄人员的眼部区域的得分之和；

获取所述总分中的最高总分，将所述最高总分对应的拍摄图像作为所述基准图像。

可选地，所述目标人员为目标拍摄人员，所述从所述基准图像中确定出目标人员的步骤包括：

从所述多个拍摄人员中依次确定出所述目标拍摄人员。

可选地，所述数据处理设备配置有分数记录表，所述分数记录表记录有每个所述拍摄人员眼睛的得分情况，所述获取所述得分中的最高得分的步骤包括：

通过所述分数记录表获取所述目标拍摄人员的眼部区域的最高得分。

可选地，所述得分情况为每个所述拍摄人员最高得分的眼部区域对应的所属图像以及在所属图像中的位置。

可选地，所述方法还包括：

根据所述基准图像中该目标人员的眼部区域的得分，判断所述基准图像中该目标人员的眼部区域中的眼睛状态；

若所述眼睛状态为一只眼睛为睁眼，另外一只眼睛为闭眼，则不对所述基准图像中该目标人员的眼部区域的闭眼进行替换。

本申请实施例的另一目的在于提供一种图像处理装置，应用于数据处理设备，所述图像处理装置包括基准图像确定模块、目标人员确定模块、得分获取模块和替换模块；

所述基准图像确定模块用于在多张图像中确定出一张图像作为基准图像；

所述目标人员确定模块用于从所述基准图像中确定出目标人员，其中，所述多张图像中的至少两张图像包括该目标人员；

所述得分获取模块用于获取所述目标人员的眼部区域在每张所述图像中的得分，所述得分与所述眼部区域的张开程度成正相关；

所述替换模块用于获取所述得分中的最高得分，将所述基准图像中该目标人员的眼部区域替换为所述最高得分对应的眼部区域。

相对于现有技术而言，本申请具有以下有益效果：

本申请实施例提供一种图像处理方法及装置，应用于图像处理领域。从多张图像中选取一张基准图像，并确定出该基准图像中的目标人员。获取该目标人员在所述多张图像中眼部区域的得分，确定出其中的最高得分，其中，该得分与眼部区域眼睛的张开程度成正相关。将该基准图像中目标人员的眼部区域替换为该最高得分对应的眼部区域。如此，通过选取该目标人员最高得分的眼部区域对基准图像中该目标人员的眼部区域进行替换，使得该基准图像中目标人员的眼部区域呈现最佳的成像效果。

附图说明

为了更清楚地说明本申请实施例的技术方案，下面将对实施例中所需要使用的附图作简单地介绍，应当理解，以下附图仅示出了本申请的某些实施例，因此不应被看作是对范围的限定，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他相关的附图。

图1为本申请实施例提供的数据处理设备的结构示意图；

图2为本申请实施例提供的图像处理方法的步骤流程图；

图3为本申请实施例提供的眼部区域评分标准示意图；

图4为本申请实施例提供的数据处理装置的结构示意图。

图标：100-数据处理设备；120-存储器；110-图像处理装置；130-处理器；1101-基准图像确定模块；1102-目标人员确定模块；1103-得分获取模块；1104-替换模块。

具体实施方式

为使本申请实施例的目的、技术方案和优点更加清楚，下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本申请一部分实施例，而不是全部的实施例。通常在此处附图中描述和示出的本申请实施例的组件可以以各种不同的配置来布置和设计。

因此，以下对在附图中提供的本申请的实施例的详细描述并非旨在限制要求保护的本申请的范围，而是仅仅表示本申请的选定实施例。基于本申请中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本申请保护的范围。

应注意到：相似的标号和字母在下面的附图中表示类似项，因此，一旦某一项在一个附图中被定义，则在随后的附图中不需要对其进行进一步定义和解释。

请参照图1，图1为本申请实施例提供所数据处理设备100的硬件结构图。所述数据处理设备100包括图像处理装置110、存储器120和处理器130。

所述存储器120和处理器130以及其他各元件相互之间直接或间接地电性连接，以实现数据的传输或交互。例如，这些元件相互之间可通过一条或多条通讯总线或信号线实现电性连接。所述图像处理装置110包括至少一个可以软件或固件(firmware)的形式存储于所述存储器120中或固化在所述数据处理设备100的操作***(operating system，OS)中的软件功能模块。所述处理器130用于执行所述存储器120中存储的可执行模块，例如所述图像处理装置110所包括的软件功能模块及计算机程序等。

请参照图2，图2为应用于图1所示的图像处理方法的步骤流程图，以下将对所述方法包括各个步骤进行详细阐述。

步骤S100，在多张图像中确定出一张图像作为基准图像。

步骤S200，从所述基准图像中确定出目标人员，其中，所述多张图像中的至少两张图像包括该目标人员。

步骤S300，获取所述目标人员的眼部区域在每张所述图像中的得分，所述得分与所述眼部区域的张开程度成正相关。

在一种可能的实施方式中，该数据处理设备通过网络或者通过本地存储介质获取多张图像。该数据处理设备100响应用户的图像选取操作，从所述多张图像中确定出该基准图像。

该数据处理设备100响应用户的目标选取操作，从所述基准图像中确定确定出目标人员，其中，所述多张图像中至少两张图像包括该目标人员。

例如，在一种可能的示例中，该数据处理设备100提供一显示界面，该显示界面可以是，但不限于触控屏。该数据处理设备100在该显示界面显示该基准图像，响应用户在该显示界面中的目标选取操作，根据用户的在该显示界面中的选取位置，确定出该目标人员。

该数据处理设备100获取该目标人员在该基准图像中眼部区域的得分，并获取该目标人员的特征信息；通过该目标人员的特征信息，从其他图像中确定出包含该目标人员的图像，并获取该目标人员在其他图像中的眼部区域的得分，以及该目标人员在该基准图像中眼部区域的得分。

在另一种可能的实施方式中，所述目标人员为目标拍摄人员，是多个拍摄人员之一，所述多张图像为多个拍摄人员的多张连续拍摄图像。该数据处理设备100响应用户的图像选取操作，从所述多张图像中确定出该基准图像。该数据处理设备100响应用户的目标选取操作，从所述基准图像中确定出目标人员。

例如，在一种可能的示例中，该数据处理设备100提供一显示界面，该显示界面可以是，但不限于触控屏。该数据处理设备100在该显示界面显示该基准图像，响应用户在该显示界面中的目标选取操作，根据用户的在该显示界面中的选取位置，确定出目标拍摄人员。

该数据处理设备100获取该目标拍摄人员在该基准图像中眼部区域的得分，并获取该目标拍摄人员的特征信息；通过该目标拍摄人员的特征信息，从其他图像中确定出包含该目标拍摄人员的图像，并获取该目标拍摄人员在其他图像中的眼部区域的得分，以及该慕白哦人员在该基准图像中眼部区域的得分。

如此，通过用户人为的选取基准图像以及目标拍摄人员，使得用户基于自身的审美角度选取需要替换双眼的目标拍摄人员，得到的图像更加符合用户审美的成像效果。并且，通过用户参与选取基准图像以及目标拍摄人员，减少了数据处理设备100的运算量。

在另一种可能的实施方式中，所述目标人员为目标拍摄人员，是多个拍摄人员之一，所述多张图像为所述多个拍摄人员的多张连续拍摄图像。

该数据处理设备100获取每张所述拍摄图像的总分，其中，该总分为每张所述图像中所述多个拍摄人员眼部区域的得分之和。该数据处理设备100获取所述总分中的最高总分，将所述最高总分对应的图像作为基准图像，将所述基准图像中的拍摄人员依次作为目标拍摄人员。

如此，通过选取总分最高的图像作为基准图像，减少了后续需要替换双眼的目标人员，进而减少了数据处理设备100的计算量，提高了处理速度。

步骤S300，获取所述得分中的最高得分，将所述基准图像中该目标人员的眼部区域替换为所述最高得分对应的眼部区域。

在一种可能的实施方式中，该数据处理设备100获取该目标人员的特征信息，通过该目标人员的特征信息识别出其他图像中的目标人员，并获取该目标人员在其他图像以及所述基准图像中眼部区域的得分；获取所述得分中的最高得分。

该数据处理设备100截取所述最高得分对应的眼部区域，用以替换所述基准图像中该目标人员的眼部区域。其中，所述替换方式可以是，但不限于泊松融合算法。

在另一种可能的实施方式中，该目标人员为目标拍摄人员，是多个拍摄人员之一，所述多张图像为所述多个拍摄人员的多张连续拍摄图像。该数据处理设备100配置有分数记录表。在选取最高总分的拍摄图像作为基准图像的过程中，将各个拍摄人员的眼部区域在每张所述拍摄图像中的得分情况记录到该分数记录表中。

在一种可能的实施方式中，所述得分情况为每个拍摄人员的眼部区域在每张所述拍摄图像中的得分以及在每张所述图像中的位置信息。

在另一种可能的实施方式中，所述得分情况为每个拍摄人员最高得分的眼部区域的所属图像以及在所属图像中的位置信息。

该数据处理设备100查找该分数记录表，获得该目标拍摄人员最高得分的眼部区域的所属图像以及在所属图像中的位置。如此，避免该数据处理设备100在查找目标拍摄人员最高得分的眼部区域时，再次统计分析该目标拍摄人员在每张所述图像中的得分，减少了该数据处理设备100的运算量。

该数据处理设备100根据最高得分的眼部区域的所属图像以及在所属图像中的位置，截取该目标拍摄人员最高得分的眼部区域，用以替换所述基准图像中该目标拍摄人员的眼部区域。其中，所述替换方式可以是，但不限于泊松融合算法。

如此，通过最高得分的眼部区域替换该目标图像中该目标人员的眼部区域，使得该基准图像达到最佳的成像效果。

请参照图3，在一种可能的实施方式中，该数据处理设备100获取该目标人员眼部区域的眼睛的高度和宽度，计算所述高度和宽度的比值；基于预设的评分标准，根据所述比值获得该目标人员眼部区域的眼睛得分。其中，所述比值越大得分越高。

在另一种可能的实施方式中，眼睛的感官体验不仅取决于眼睛的张开程度，还与眼睛的明亮度相关。该数据处理设备100将眼部区域眼睛的张开程度以及眼部区域眼睛的明亮度一起作为衡量眼睛的成像效果优劣的评分标准。其中，针对所述明亮度，该数据处理设备100获取眼部区域眼睛的图像梯度之和，该梯度之和越小，则说明眼睛的明亮度越低。

可选地，该数据处理设备100根据所述基准图像中该目标人员的眼部区域的得分，判断所述基准图像中该目标人员的眼部区域中的眼睛状态。

若所述眼部区域的得分中，其中一只眼睛的眼部区域的得分低于预设得分阈值，则所述眼睛状态为一只眼睛为睁眼，另外一只眼睛为闭眼。该数据处理设备100保留该眼睛状态，不对所述基准图像中该目标人员的眼部区域的闭眼进行替换。

如此，避免误判该目标人员照相时的特殊表情，提高了用户体验。

请参照图4，本申请实施例还提供一种图像处理装置110，该图像处理装置110包括至少一个可以以软件形式存储在存储介质中的功能模块。从功能上划分该图像处理装置110包括基准图像确定模块1101、目标人员确定模块1102、得分获取模块1103和替换模块1104。

该基准图像确定模块1101用于在多张图像中确定出一张图像作为基准图像。

在本实施例中，该基准图像确定模块1101用于执行图2中的步骤S100，关于该基准图像确定模块1101的详细描述可以参考步骤S100的详细描述。

该目标人员确定模块1102用于从所述基准图像中确定出目标人员，其中，所述多张图像中的至少两张图像包括该目标人员。

在本实施例中，该目标人员确定模块1102用于执行图2中的步骤S200，关于该目标人员确定模块1102的详细描述可以参考步骤S200的详细描述。

该得分获取模块1103用于获取所述目标人员的眼部区域在每张所述图像中的得分，所述得分与所述眼部区域的张开程度成正相关。

在本实施例中，该得分获取模块1103用于执行图2中的步骤S300，关于该得分获取模块1103的详细描述可以参考步骤S300的详细描述。

该替换模块1104用于获取所述得分中的最高得分，将所述基准图像中该目标人员的眼部区域替换为所述最高得分对应的眼部区域。

在本实施例中，该替换模块1104用于执行图2中的步骤S300，关于该替换模块1104的详细描述可以参考步骤S300的详细描述。

综上所述，本申请实施例提供一种图像处理方法及装置，应用于图像处理领域。从多张图像中选取一张基准图像，并确定出该基准图像中的目标人员。获取该目标人员在所述多张图像中眼部区域的得分，确定出其中的最高得分，其中，该得分与眼部区域眼睛的张开程度成正相关。将该基准图像中目标人员的眼部区域替换为该最高得分对应的眼部区域。如此，通过选取该目标人员最高得分的眼部区域对基准图像中该目标人员的眼部区域进行替换，使得该基准图像中目标人员的眼部区域呈现最佳的成像效果。

在本申请所提供的实施例中，应该理解到，所揭露的装置和方法，也可以通过其它的方式实现。以上所描述的装置实施例仅仅是示意性的，例如，附图中的流程图和框图显示了根据本申请的多个实施例的装置、方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上，流程图或框图中的每个方框可以代表一个模块、程序段或代码的一部分，所述模块、程序段或代码的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。也应当注意，在有些作为替换的实现方式中，方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如，两个连续的方框实际上可以基本并行地执行，它们有时也可以按相反的顺序执行，这依所涉及的功能而定。也要注意的是，框图和/或流程图中的每个方框、以及框图和/或流程图中的方框的组合，可以用执行规定的功能或动作的专用的基于硬件的***来实现，或者可以用专用硬件与计算机指令的组合来实现。

另外，在本申请各个实施例中的各功能模块可以集成在一起形成一个独立的部分，也可以是各个模块单独存在，也可以两个或两个以上模块集成形成一个独立的部分。

所述功能如果以软件功能模块的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读取存储介质中。基于这样的理解，本申请的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行本申请各个实施例所述方法的全部或部分步骤。而前述的存储介质包括：U盘、移动硬盘、只读存储器(ROM，Read-Only Memory)、随机存取存储器(RAM，Random Access Memory)、磁碟或者光盘等各种可以存储程序代码的介质。

需要说明的是，在本文中，诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来，而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。

以上所述，仅为本申请的各种实施方式，但本申请的保护范围并不局限于此，任何熟悉本技术领域的技术人员在本申请揭露的技术范围内，可轻易想到变化或替换，都应涵盖在本申请的保护范围之内。因此，本申请的保护范围应所述以权利要求的保护范围为准。

Claims (10)

1.一种图像处理方法，其特征在于，应用于数据处理设备，所述方法包括：

在多张图像中确定出一张图像作为基准图像；

从所述基准图像中确定出目标人员，其中，所述多张图像中的至少两张图像包括该目标人员；

获取所述目标人员的眼部区域在每张所述图像中的得分，所述得分与所述眼部区域的张开程度成正相关；

获取所述得分中的最高得分，将所述基准图像中该目标人员的眼部区域替换为所述最高得分对应的眼部区域。

2.根据权利要求1所述的图像处理方法，其特征在于，所述在多张图像中确定出一张图像作为基准图像的步骤包括：

响应用户目标选取操作，从所述多张图像中确定出所述基准图像。

3.根据权利要求1所述的图像处理方法，其特征在于，所述获取所述目标人员的眼部区域在每张所述图像中的得分的步骤包括：

获取所述目标人员的眼部区域的眼睛在每张所述图像中的宽度和高度；

根据所述宽度和高度，通过预设评分标准获得所述得分。

4.根据权利要求3所述的图像处理方法，其特征在，所述预设评分标准还包括所述眼部区域中眼睛的明亮度。

5.根据权利要求1所述的图像处理方法，其特征在于，所述目标人员为多个拍摄人员之一，所述多张图像为所述多个拍摄人员的多张连续拍摄图像，所述在多张图像中确定出一张图像作为基准图像的步骤包括：

获取每张所述拍摄图像的总分，所述总分为每张所述拍摄图像中的所述多个拍摄人员的眼部区域的得分之和；

获取所述总分中的最高总分，将所述最高总分对应的拍摄图像作为所述基准图像。

6.根据权利要求5所述的图像处理方法，其特诊在于，所述目标人员为目标拍摄人员，所述从所述基准图像中确定出目标人员的步骤包括：

从所述多个拍摄人员中依次确定出所述目标拍摄人员。

7.根据权利要求6所述的图像处理方法，其特征在于，所述数据处理设备配置有分数记录表，所述分数记录表记录有每个所述拍摄人员眼睛的得分情况，所述获取所述得分中的最高得分的步骤包括：

通过所述分数记录表获取所述目标拍摄人员的眼部区域的最高得分。

8.根据权利要求7所述的图像处理方法，其特征在于，所述得分情况为每个所述拍摄人员最高得分的眼部区域对应的所属图像以及在所属图像中的位置。

9.根据权利要求1所述的图像处理方法，其特征在于，所述方法还包括：

根据所述基准图像中该目标人员的眼部区域的得分，判断所述基准图像中该目标人员的眼部区域中的眼睛状态；

若所述眼睛状态为一只眼睛为睁眼，另外一只眼睛为闭眼，则不对所述基准图像中该目标人员的眼部区域的闭眼进行替换。

10.一种图像处理装置，其特征在于，应用于数据处理设备，所述图像处理装置包括基准图像确定模块、目标人员确定模块、得分获取模块和替换模块；

所述基准图像确定模块用于在多张图像中确定出一张图像作为基准图像；

所述目标人员确定模块用于从所述基准图像中确定出目标人员，其中，所述多张图像中的至少两张图像包括该目标人员；

所述得分获取模块用于获取所述目标人员的眼部区域在每张所述图像中的得分，所述得分与所述眼部区域的张开程度成正相关；

所述替换模块用于获取所述得分中的最高得分，将所述基准图像中该目标人员的眼部区域替换为所述最高得分对应的眼部区域。