CN101894117A

CN101894117A - 基于人脸的图像管理***和方法

Info

Publication number: CN101894117A
Application number: CN2009102030674A
Authority: CN
Inventors: 刘童
Original assignee: Ricoh Co Ltd
Current assignee: Ricoh Co Ltd
Priority date: 2009-05-19
Filing date: 2009-05-19
Publication date: 2010-11-24

Abstract

本发明提供了一种图像管理方法和使用这种方法的***。所述方法包括：从图像存储器中读取图像文件；检测所述图像文件中的人脸图案区域；提取所检测到的人脸图案区域；将所提取的人脸图案区域组合成一个人脸组合图标文件；以及在所组合成的图标和所检测的图像文件之间建立链接。

Description

基于人脸的图像管理***和方法

技术领域：

本发明涉及一种用于在电子设备特别是小屏幕的电子设备上有效的浏览或者搜索图像的方法和***，具体而言，本发明涉及一种基于人脸图案的图像管理***和方法。

背景技术

随着数字技术的广泛应用，尤其是图像数字技术的应用，人们越来越习惯于在各种数码产品上存储、浏览和处理其上所存储的数字图像。这些数码产品包括数码相机、移动电话或者PDA这样的便携式设备。

当用户试图浏览或是搜索存储在上述便携式电子***中的图像时，常见的情况是许多图像需要同时显示给用户，以便用户选择进行哪种操作，例如打开或者删除一些特定的图像。传统的解决方法是把整个图像缩小到类似图标大小的缩小版本进行显示，这种方法的视觉效果比较差，尤其是在像数码相机、移动电话或者PDA这样屏幕很小的电子设备上。原因在于缩小整个图像之后，细节信息也被压缩导致用户很难理解图像的内容，甚至都无法区分不同的图像。显然这种情况会降低浏览和搜索图像的效率，给用户带来不便。

发明内容

本发明的提出就是为了解决现有技术中存在的上述不便，为此，本发明提供了一个有效的基于人脸图标的方法，它可以在保证显示图像的数量的同时取得更好的视觉效果。

基于此，本发明的发明人发现，在许多时候，图像中有多少人、他们各是谁是用户最关心的，在这种情况下，人脸区域就足够代表图像了，而不需要缩小整个图像。因此，当许多图像需要同时显示时，一个更好的方式是只显示脸部区域给用户。这种策略可以实现资源的重新分配，从而忽略无关紧要的信息，把有限的资源分配给更重要的信息。同时，这也起到了强调人脸区域的作用，方便用户把注意力集中到他们关心的部分。

基于以上认识，本发明提供了一种管理数码相机、移动电话或者PDA这样的移动设备上的图像的方法和***。

根据本发明的一个方面，提供了一种图像管理方法。所述图像管理方法包括：从图像存储器中读取图像文件；检测所述图像文件中的人脸图案区域；提取所检测到的人脸图案区域；将所提取的人脸图案区域组合成一个人脸组合图标文件；以及在所组合成的图标和所检测的图像文件之间建立链接。

根据本发明的一个实施例，所述检测所述图像文件中的人脸图案区域包括输出图像文件中的人脸图案的数量和位置。

根据本发明的另一个实施例，在所述提取所检测到的人脸图案区域之后，将人脸图案区域放缩到需要的尺寸以便进行后续的组合处理。

根据本发明的另一个实施例，所述将所提取的人脸图案区域组合成一个图标文件的步骤包括将所有的人脸图案区域合成为一个文件。

根据本发明的另一个实施例，所述在所组合成的图标和所检测的图像文件之间建立链接的步骤包括利用图像文件的文件名和人脸组合图标文件的文件名的相似性来实现建立逻辑链接。

根据本发明的另一个实施例，所述在所组合成的图标和所检测的图像文件之间建立链接的步骤包括使用图像文件的元数据来嵌入人脸图标文件的信息来建立物理链接。

根据本发明的另一个实施例，所述在所组合成的图标和所检测的图像文件之间建立链接的步骤包括通过建立数据库来存储图像文件和人脸组合图标文件的关联信息来建立数据库链接。

根据本发明的另一个实施例，所述方法还包括：根据电子设备的屏幕大小，对包括每个人脸组合图标文件的显示位置和大小进行规划。

根据本发明的另一个实施例，所述方法还包括：根据所规划的人脸组合图标文件的尺寸来调整人脸组合图标的大小。

根据本发明的另一个实施例，所述调整人脸组合图标的大小基于屏幕参数、需要同时显示的人脸组合图标的数量、以及人脸组合图标的宽高比例范围，其中所述屏幕参数包括高度、宽度和分辨率等。

根据本发明的另一个实施例，所述方法还包括：在所规划的显示位置显示调整后的人脸组合图标

根据本发明的另一个实施例，所述方法还包括：跟踪所建立的链接，以便找到每个图像文件的人脸组合图标；

根据本发明的另一个方面，提供了一种图像管理***。所述图像管理***包括：图像读取模块，用于从图像存储器中读取图像文件；人脸图案区域检测模块，用于检测所述图像文件中的人脸图案区域；人脸图案区域提取模块，用于提取所检测到的人脸图案区域；图标组合模块，用于将所提取的人脸图案区域组合成一个人脸组合图标文件；以及链接建立模块，用于在所组合成的人脸组合图标文件和所检测的图像文件之间建立链接。

根据本发明的一个实施例，所述人脸图案区域检测模块还用于输出图像文件中的人脸图案的数量和位置。

根据本发明的另一个实施例，所述人脸图案区域提取模块还包括放缩模块，用于将所提取的人脸图案区域放缩到需要的尺寸以便进行后续的组合处理。

根据本发明的另一个实施例，所述图标组合模块用于将从一个图像文件中所提取的所有的人脸图案区域合成为一个图标文件。

根据本发明的另一个实施例，所述链接建立模块可以在在所组合成的人脸组合图标和所检测的图像文件之间建立的链接包括：利用图像文件的文件名和人脸组合图标文件的文件名的相似性来实现建立逻辑链接、使用图像文件的元数据来嵌入人脸图标文件的信息来建立物理链接、或者通过建立数据库来存储图像文件和人脸组合图标文件的关联信息来建立数据库链接。

根据本发明的另一个实施例，所述图像管理***还包括空间管理模块，用于根据电子设备的屏幕大小，对包括每个人脸组合图标文件的显示位置和大小进行规划。

根据本发明的另一个实施例，所述放缩模块基于屏幕参数、需要同时显示的人脸组合图标的数量、以及人脸组合图标的宽高比例范围来调整人脸组合图标的大小，其中所述屏幕参数包括高度、宽度和分辨率等。

根据本发明的另一个实施例，所述图像管理***还包括显示模块，用于在所规划的显示位置显示调整后的人脸组合图标

根据本发明的另一个实施例，所述图像管理***还包括链接跟踪模块，用于跟踪所建立的链接，以便找到每个图像文件的人脸组合图标。

根据本发明，用户能够显著提高浏览和搜索图像的效率，为用户带来极大的便利性。

附图说明

图1所示的是根据本发明的图像管理***的方框图。

图2所示的是根据本发明的图像管理方法的流程图。

图3所示的是根据本发明的图像管理方法的基于人脸组合图标的显示过程流程图。

图4A-4C所示的是采用本发明的图像管理方法生成只包含一个人脸的人脸组合图标文件的一个实例。

图5A-5B所示的是采用本发明的图像管理方法生成包含多张人脸的人脸组合图标文件的一个实例。

图6A-6B所示的是用于比较采用传统浏览和搜索方式所产生的界面和采用本发明的实施例的浏览和搜索界面的效果的截屏图。

具体实施方式

以下，将参照附图来详细说明本发明的具体实施例。

图1所示的是根据本发明的图像管理***10的一个是实施例的示意性方框图。图像读取模块101，用于从图像存储介质130中读取图像文件。人脸图案区域检测模块102，用于检测所述图像文件中的人脸图案区域。人脸图案区域提取模块103，用于提取所检测到的人脸图案区域。图标组合模块104，用于将所提取的人脸图案区域组合成一个人脸组合图标文件。链接建立模块105，用于在所组合成的人脸组合图标文件和所检测的图像文件之间建立链接。此外，空间管理模块用于用户在显示装置140上显示图像和对图像进行操作时用于对所生成的图标进行空间管理。用户界面120则用于用户进行相关的操作，例如选择、发送、删除或存储。

图2所示的是根据本发明的图像管理方法的流程图。在该流程图中，主要图释了图像中人脸图标的形成过程以及链接建立过程。

参见图2，首先，在步骤S201中，图像管理***的图像读取模块101从图像存储介质130中读取图像文件I。接着，在步骤S202中，人脸图案区域检测模块102检测所述图像文件I，并在步骤S203中判断所述图像文件I中是否存在人脸图案区域。人脸检测是一项相对成熟的技术，有许多算法可供选择，例如采用Haar特征结合AdaBoost分类器的方法。如果不存在人脸图案区域，则不对图像I进行任何本发明所采用的任何处理。如果存在人脸图案区域，则在步骤S204中，人脸图案区域提取模块103从图像I提取所检测到的人脸图案区域Fi。此外，在该步骤，可以将所提取到的人脸图案区域放缩到需要的尺寸以便进行后续的组合处理。图像放缩也是一项成熟的技术，因此对于原图像和人脸图标图像的放缩有许多算法可供选择，一个简单的方法是双线性插值算法，它可以在低端的硬件环境中实现。

随后，在步骤S205中，图标组合模块104将所提取的所有人脸图案区域Fi组合成一个人脸组合图标文件F并存储该图标文件。如果人脸的个数为一，通过缩小对应的人脸部分就可以得到图像的人脸图标；否则所有的人脸区域将被合并组成一个图标文件。如果人脸的个数为多个，则可有两种可能的合并策略：一种是类似图5A-5B那样，在单一视图中平铺所有人脸，这样做的优点是效率比较高，因为用户可以同时看到出现在图像中的所有面孔，缺点是由于空间的限制每张脸都很小，从而影响了视觉效果；另一种合并策略是生成所有脸的多帧动画图像，这样在任意时刻都只显示一张脸，与前一种方案相反，这样做的优点是能够获得更好的视觉效果，缺点是效率比较低。由于这两种策略的优缺点彼此互补，所以用户可以根据需要选择出适合自己的策略。

最后，在步骤S206中，链接建立模块105在所组合成的人脸组合图标文件F和被检测的图像文件I之间建立链接，并一个存储装置(未示出)中存储这种链接关系。这种链接的方式可以是逻辑的、物理的或者基于数据库的：逻辑链接的含义是指图像和它的人脸图标存在内在联系，例如“文件名链接”就是一种逻辑链接，它按照一定的规则，从图像文件名生成相似的人脸图标文件名，这种文件名的相似性就构成了一种逻辑链接，比如一幅文件名为party·jpg的图像对应的人脸图标文件名是party_fi.jpg；物理链接代表链接的实体客观存在于物理介质上，例如可以将像文件名称或者物理地址这些关于人脸图标的信息嵌入图像文件的文件头或者元数据之中；另外，***还可以通过生成专门保存图像与它们的人脸图标之间关联信息的数据库来建立图像与人脸图标的链接，一个简单的例子是一张表，每项含有两个元素，一个是图像的信息，如文件名或者物理地址，另一个是人脸图标的信息。无论采用哪种形式，链接给出了一种索引机制，使得在需要显示时可以通过它找到图像的人脸图标文件。

图3所示的是基于本发明的图像管理方法的人脸组合图标的显示过程流程图。具体应用操作过程为，在步骤S301中，当用户通过诸如数码相机、移动电话或者PDA的输入输出装置(例如小键盘或计算机的键盘、鼠标等)输入指令而需要对相应的数码装置的存储介质130中的图像数据进行操作时，处理器110对该指令进行处理。接着，在步骤S302中，利用链接建立模块105所建立的链接关系搜索与图像I对应的图标。随后，在步骤S303中，处理器110判断所搜索到的图标是否存在有人脸的图标。如果存在有人脸的图标F，则在步骤S304中，空间管理模块106根据电子设备的屏幕大小，对包括每个人脸组合图标文件的显示位置和大小进行规划。具体而言，所述空间管理模块利用其内所包含的放缩模块，基于显示装置的屏幕参数、需要同时显示的人脸组合图标F的数量、以及人脸组合图标F的宽高比例范围来调整人脸组合图标的大小，以便获得经过缩放后的图标Fs。所述屏幕参数包括高度、宽度和分辨率等。最后，在步骤S305中，以经过缩放后的图标Fs作为对应图像I显示在显示装置140上。另外，如果一些图像I没有对应的人脸图标，则空间管理模块106内的放缩模块在步骤S306中直接将图像I缩放为图标Is。随后，在步骤S307中以缩放的图标Is作为对应的图像I显示在显示装置140上。

图4A-4C所示的是采用本发明的图像管理方法生成只包含一个人脸的人脸组合图标文件的一个实例。其中，4A是原始图像、4B是从4A中提取到的人脸区域，4C是生成的人脸图标

图5A-5B所示的是采用本发明的图像管理方法生成包含多张人脸的人脸组合图标文件的一个实例。其中5A是原始图像，5B是对应的采用平铺方式生成的人脸图标的视图。

图6A-6B所示的是用于比较采用传统浏览和搜索方式所产生的界面和采用本发明的实施例的浏览和搜索界面的效果的截屏图。其中6A是传统的界面，6B是本发明的界面。

本领域的普通技术人员应当了解的是，根据设计要求和其它因素，只要在附后的权利要求及其等效条款规定的范围内，就可以进行各种修改、组合、次级组合和变更。

Claims

1.一种图像管理方法，包括：

从图像存储器中读取图像文件；

检测所述图像文件中的人脸图案区域；

提取所检测到的人脸图案区域；

将所提取的人脸图案区域组合成一个人脸组合图标文件；

在所组合成的图标和所检测的图像文件之间建立链接。

2.如权利要求1所述的图像管理方法，其中所述检测所述图像文件中的人脸图案区域包括输出图像文件中的人脸图案的数量和位置。

3.如权利要求1所述的图像管理方法，其还包括：在所述提取所检测到的人脸图案区域之后，将人脸图案区域放缩到需要的尺寸以便进行后续的组合处理。

4.如权利要求1所述的图像管理方法，其中所述将所提取的人脸图案区域组合成一个图标文件的步骤包括将所有的人脸图案区域合成为一个文件。

5.如权利要求1所述的图像管理方法，其中所述在所组合成的图标和所检测的图像文件之间建立链接的步骤包括利用图像文件的文件名和人脸组合图标文件的文件名的相似性来实现建立逻辑链接。

6.如权利要求1所述的图像管理方法，其中所述在所组合成的图标和所检测的图像文件之间建立链接的步骤包括使用图像文件的元数据来嵌入人脸图标文件的信息来建立物理链接。

7.如权利要求1所述的图像管理方法，其中所述在所组合成的图标和所检测的图像文件之间建立链接的步骤包括通过建立数据库来存储图像文件和人脸组合图标文件的关联信息来建立数据库链接。

8.如权利要求1所述的图像管理方法，其还包括：根据电子设备的屏幕大小，对包括每个人脸组合图标文件的显示位置和大小进行规划。

9.如权利要求8所述的图像管理方法，其还包括：根据所规划的人脸组合图标文件的尺寸来调整人脸组合图标的大小。

10.如权利要求9所述的图像管理方法，其中所述调整人脸组合图标的大小基于屏幕参数、需要同时显示的人脸组合图标的数量、以及人脸组合图标的宽高比例范围，其中所述屏幕参数包括高度、宽度和分辨率等。

11.如权利要求10所述的图像管理方法，其还包括：在所规划的显示位置显示调整后的人脸组合图标

12.如权利要求1所述的图像管理方法，其还包括：跟踪所建立的链接，以便找到每个图像文件的人脸组合图标；

13.一种图像管理***，包括：

图像读取模块，用于从图像存储器中读取图像文件；

人脸图案区域检测模块，用于检测所述图像文件中的人脸图案区域；

人脸图案区域提取模块，用于提取所检测到的人脸图案区域；

图标组合模块，用于将所提取的人脸图案区域组合成一个人脸组合图标文件；

链接建立模块，用于在所组合成的人脸组合图标文件和所检测的图像文件之间建立链接。

14.如权利要求13所述的图像管理***，其中所述人脸图案区域检测模块还用于输出图像文件中的人脸图案的数量和位置。

15.如权利要求13所述的图像管理***，其还包括：所述人脸图案区域提取模块还包括放缩模块，用于将所提取的人脸图案区域放缩到需要的尺寸以便进行后续的组合处理。

16.如权利要求13所述的图像管理***，其中所述图标组合模块用于将从一个图像文件中所提取的所有的人脸图案区域合成为一个图标文件。

17.如权利要求13所述的图像管理***，其中所述链接建立模块可以在在所组合成的人脸组合图标和所检测的图像文件之间建立的链接包括：利用图像文件的文件名和人脸组合图标文件的文件名的相似性来实现建立逻辑链接、使用图像文件的元数据来嵌入人脸图标文件的信息来建立物理链接、或者通过建立数据库来存储图像文件和人脸组合图标文件的关联信息来建立数据库链接。

18.如权利要求13所述的图像管理***，其还包括空间管理模块，用于根据电子设备的屏幕大小，对包括每个人脸组合图标文件的显示位置和大小进行规划。

19.如权利要求18所述的图像管理***，其中所述空间管理模块也包括放缩模块，所述放缩模块基于屏幕参数、需要同时显示的人脸组合图标的数量、以及人脸组合图标的宽高比例范围来调整人脸组合图标的大小，其中所述屏幕参数包括高度、宽度和分辨率等。

20.如权利要求19所述的图像管理***，其还包括显示模块，用于在所规划的显示位置显示调整后的人脸组合图标

21.如权利要求13所述的图像管理***，其还包括链接跟踪模块，用于跟踪所建立的链接，以便找到每个图像文件的人脸组合图标。