CN105740379A - 一种照片分类管理方法和装置 - Google Patents

Abstract

本发明涉及一种照片分类管理方法和装置，所述方法包括：对照片进行人脸扫描，提取照片中的人脸信息；将提取的人脸信息与预存储的人脸识别数据库进行匹配，识别所提取的人脸信息对应的人物；提取所述照片中与所识别出的人物相关联的人物关联信息；利用所述人物关联信息识别另外的照片中的人物；按照所识别出的人物对照片进行分类管理。本发明能够提高照片当中人物的识别率，更准确有效地对照片进行分类管理。

Description

一种照片分类管理方法和装置

技术领域

本发明涉及照片的分类管理，更具体地涉及一种照片分类管理方法和装置。

背景技术

随着数码设备的普及，拍摄照片越来越容易，产生的照片数量越来越大。但现今没有一个有效的照片分类管理方法，从保存的照片当中快速地找到目标照片非常费时费力。公开号为CN104331509A的中国专利申请给出了一种照管理方法及装置。但是该实现方案过分依赖人脸识别来进行人物甄别，产生很多无法识别的照片，甄别效率不高。

专利申请CN104331509A中，第一层分类依照照片拍照时间、地点等信息进行分类，然后通过人脸识别技术获得人物分类，作为第二层分类，以树形结构管理照片。但是，该方案的问题是，如果照片当中存在无法通过人脸识别甄别的人物(如背影，遮挡等)，照片将不被识别。这样会漏掉很多应该进行分类的照片。

因此，如何更有效、快速地对照片进行分类管理，是一个有待解决的问题。

发明内容

鉴于此，本发明的一个目的是提供一种照片分类管理方法和装置，以基本上消除因现有技术的局限性和缺点而造成的一个或更多个问题。

为了实现本发明的目的，在本发明的一方面，提供了一种照片分类管理方法，该方法包括以下步骤：

对照片进行人脸扫描，提取照片中的人脸信息；

将提取的人脸信息与预存储的人脸识别数据库进行匹配，识别所提取的人脸信息对应的人物；

提取所述照片中与所识别出的人物相关联的人物关联信息；

利用所述人物关联信息识别另外的照片中的人物；

按照所识别出的人物对照片进行分类管理。

进一步地，所述人物关联信息可包括以下信息中的至少一种：所述人物的衣着颜色、衣着样式、持有物、佩戴物；其中，利用所述人物关联信息识别另外的照片中的人物的步骤包括：根据待识别照片与已识别照片中相同关联信息的关联度和/或关联信息的数量，对识别结果进行可信度判断，当可信度达到一定数值时，确定识别结果为真。

进一步地，所述方法还可包括以下步骤：获取照片中的拍摄时间和/或拍摄地点信息，按照所提取的时间和/或拍摄地点信息对照片进行分类管理。

进一步地，所述方法还可包括以下步骤：获取照片中的人脸信息、拍摄设备信息以及分辨率信息，根据分辨率信息确定该照片是否由所述拍摄设备的自拍摄像头拍摄的，在结果为是的情况下，基于所获取的人脸信息对人物数据库进行标识。

进一步地，在对照片进行人脸扫描的步骤前，所述方法还可包括：对照片进行人物检测分析，判断是否有人物信息；若有，则将所述照片归为人物类。

在本发明的另一方面，本发明还提供一种照片分类管理装置，其包括：

第一识别单元，其将提取的人脸信息与预存储的人脸识别数据库进行匹配，识别所提取的人脸信息对应的人物；

关联信息提取单元，其提取所述照片中与所识别出的人物相关联的人物关联信息；

第二识别单元，其利用所述人物关联信息识别另外的照片中的人物；

分类管理单元，其按照所识别出的人物对照片进行分类管理。

进一步地，所述第二识别单元可根据待识别照片与已识别照片中相同关联信息的关联度和/或关联信息的数量，对识别结果进行可信度判断，当可信度达到一定数值时，确定识别结果为真。

进一步地，所述装置还可包括：第一获取单元，其获取照片中的拍摄时间和/或拍摄地点信息，按照所提取的时间和/或拍摄地点信息对照片进行分类管理。

进一步地，所述装置还可包括：第二获取单元，其获取照片中的人脸信息、拍摄设备信息以及分辨率信息，根据分辨率信息确定该照片是否由所述拍摄设备的自拍摄像头拍摄的，在结果为是的情况下，基于所获取的人脸信息对人物数据库进行标识。

进一步地，所述装置还可包括：人物检测单元，其对每一照片进行人物检测分析，判断是否有人物信息；若有，则将所述照片归为人物类。

本发明的附加优点、目的，以及特征将在下面的描述中将部分地加以阐述，且将对于本领域普通技术人员在研究下文后部分地变得明显，或者可以根据本发明的实践而获知。本发明的目的和其它优点可以通过在书面说明及其权利要求书以及附图中具体指出的结构实现到并获得。

本领域技术人员将会理解的是，能够用本发明实现的目的和优点不限于以上具体所述，并且根据以下详细说明将更清楚地理解本发明能够实现的上述和其他目的。

附图说明

参照以下附图，将更好地理解本发明的许多方面。附图中：

图1为本发明一实施例中照片分类管理方法的流程图；

图2为本发明实施例中利用已识别照片的人物关联信息识别另外的照片中的人物的示意图；

图3为本发明另一实施例中照片分类管理方法发流程图；以及

图4为本发明一实施例中照片分类管理装置的示意性框图。

具体实施方式

下面，对本发明的优选实施方式进行详细说明。这些优选实施方式的示例在附图中进行了例示。附图中所示和根据附图描述的本发明的实施方式仅仅是示例性的，并且本发明的技术精神及其主要操作不限于这些实施方式。

在此，还需要说明的是，为了避免因不必要的细节而模糊了本发明，在附图中仅仅示出了与根据本发明的方案密切相关的结构和/或处理步骤，而省略了与本发明关系不大的其他细节。

在本发明实施例中，对于难以识别人脸的人像照片(如人物背影照片、侧脸找票或难以识别的夸张表情的照片等)，可以借助于容易识别的照片中所识别出的人像的辅助信息来协助对难以识别的照片中人像的识别。

图1示出了本发明实施例的照片分类管理方法的示意性流程图。该方法例如可以由相应的照片管理装置(如计算机、平板电脑、诸如手机之类的移动通信终端、机顶盒等，但并不限于此，还可以是其他能够拍摄、显示或播放图片的装置)来执行。如图1所示，该实施例的照片分类管理方法包括如下步骤S110-S190：

步骤S110，对照片进行人脸扫描，提取照片中的人脸信息。

在该步骤中，对存储在照片管理设备中的照片进行人脸扫描，并提取照片中的人脸信息。

当照片中出现多张人脸的时候，可提取所有人脸信息。

可选地，在该步骤S110之前，还可以包括初步将照片分为人物照片和景物照片的步骤，即可对每一照片进行人物检测分析(例如检测是否存在人的轮廓)，判断是否有人物信息；若有，则将照片归为人物类；否则将照片归为非人物类或景物类。

步骤S130，将提取的人脸信息与预存储的人脸识别数据库进行匹配，识别所提取的人脸信息对应的人物。

在本步骤中，是将提取的人脸特征信息与人脸识别数据库进行匹配，以确定照片中人物的身份，即识别该人物。

在进行人脸识别时，相同人脸的出现频率越高，该人物的确定性越高。

当照片当中存在多个人的情况下，取得每个人的关联信息，并且使用该关联信息处理其他照片。

步骤S150，提取能够识别的照片中与所识别出的人物相关联的人物关联信息。

该人物关联信息例如可以是以下中的至少一项：所识别出的人物的衣着颜色、衣着样式、持有物、佩戴物等。持有物例如可以是持有的手机、书籍、伞等等，佩戴物例如可以是手表、胸针、领结、帽子等等，以上仅为举例，本发明并不限于此。

步骤S170，利用人物关联信息识别另外的照片中的人物。

在步骤S150中提取出所识别的人物的关联信息之后，步骤S170中便可以借助于该人物关联信息来识别另外的照片中的人物。

本实施例中，另外的照片优选地可以是难以通过人脸识别出的照片，例如背面照、侧身照等，当然也可以是普通照片而不管其是否难于识别。

如图2所示，图2中的(a)表示已识别的人物照片，(b)表示待识别的人物照片，图中的A、B、C、D、E表示人物的关联信息，图中可见，两张照片具有相同的人物关联信息A，基于该相同的关联信息，可以对人物进行识别。

具体地，该步骤可根据待识别照片与已识别照片中相同关联信息的关联度和/或关联信息的数量，对识别结果进行可信度判断，当可信度达到一定数值时，确定识别结果为真，即识别出人物。

步骤S190，按照所识别出的人物对所有识别出的照片进行分类管理。

例如，可以在照片的文件名中体现所识别出的人的名字，或者可以将这些信息添加在照片标签中。

基于上述步骤，可以更有效和更准确地对难以识别的人像照片进行人像识别，从而能够更准确地对照片进行管理，大大提高了照片识别率，克服了现有技术中难以识别侧脸或背影人像等的问题。

照片附带信息(如照片标签所携带的信息)中一般还包括拍摄设备信息以及分辨率信息。鉴于当前手持式拍摄设备(如手机、Pad等)均拥有前后两个摄像头，并且前置摄像头一般用于自拍，其分辨率一般低于后置摄像头，因此，可以通过从照片附带信息当中获得拍摄设备信息来确定不同照片是否由同一拍摄设备拍摄，并且根据同一拍摄设备的照片的分辨率的不同，辅助判定照片是否为通过自拍方式获得的，由于分辨率小的照片一般为拍摄设备拥有者的自拍照，因此可将自拍照片中出现率最高的人物确定为拍摄设备的主人，由此可以对人物数据库进行标识，即标识出哪些数据是拍摄设备的主人的。对于自拍照片中出现的其他自拍人像，可以确定为主人亲近的人。通过这样对数据库进行标识，在下次进行人脸识别时，可按照设定的优先级优先识别是否为主人或亲人的照片。

因此，在本发明实施例中，还可包括如下步骤(图中未示出)：获取照片中的人脸信息、拍摄设备信息以及分辨率信息，根据分辨率信息确定该照片是否由所述拍摄设备的自拍摄像头拍摄的，在结果为是的情况下，基于所获取的人脸信息对人物数据库进行标识。

对数据库进行标识的该步骤可以在步骤S110之后的任意步骤之前或之后进行。

在基于人脸识别以及人物关联信息识别进行了照片识别后，就能够容易得按照所识别出的人物对照片进行分类管理了。

本发明还可以结合照片的拍摄时间和/或拍摄地点等信息来更精确地对照片进行管理。下面将结合具体示例对本发明实施方式进行描述。图3为本发明实施例中的另一示意性流程图。如图3所示，该方法包括：

步骤S107，获取照片中的拍摄时间和/或拍摄地点信息，按照所提取的时间和/或拍摄地点信息对照片进行分类管理。

例如，从照片的附带信息中获得照片拍摄时间和/或拍摄地点信息，可以按照时间和/或地点信息对照片进行初步分类。

步骤S109，对照片进行人物检测分析，判断是否有人物信息；若有，则将照片归为人物类。

对经初步分类的照片进行人物检测分析，例如检测照片中是否有人的轮廓，如果有，则将照片归为人物类照片。否则，将照片归类为费人物类照片或景物类照片。

步骤S110，对照片进行人脸扫描，提取照片中的人脸信息。

在该步骤中，对人物类照片进行人脸扫描，并提取照片中的人脸信息。

当照片中出现多张人脸的时候，可提取所有人脸信息。

步骤S130，将提取的人脸信息与预存储的人脸识别数据库进行匹配，识别所提取的人脸信息对应的人物。

在人脸识别数据库中，可以存储有人物识别优先级信息，在进行脸部特征匹配时，可按照设置的优先级来进行人物识别，例如优先识别“主人张三”。

在进行人脸识别时，相同人脸的出现频率越高，该人物的确定性越高。

对于集体照片，可以逐一识别，并在照片文件名或标签中标注所识别出的多个身份的信息。

对于照片中难以识别出的人物，可提取其人物关联信息，与数据库中存储的人物关联信息相匹配，其中，数据库中存储的人物关联信息例如可以为针对在先识别出的照片提取的识别出的人物的人物关联信息。如果利用数据库中的人物关联信息仍然难以识别出当前要识别的照片中的某个人物，则记录当前照片的识别结果，并继续扫描及识别后续照片。

步骤S150，提取能够识别的照片中与所识别出的人物相关联的人物关联信息。

该人物关联信息例如可以是以下中的至少一项：所识别出的人物的衣着颜色、衣着样式、持有物、佩戴物等。持有物例如可以是持有的手机、书籍、伞等等，佩戴物例如可以是手表、胸针、领结、帽子等等，以上仅为举例，本发明并不限于此。

如果所识别出的该人物的相同的人物关联信息已经存储在数据库中，可不重复存储，否则将该人物关联信息存储在数据库中。

步骤S160，确定对所有照片都进行了识别和人物关联信息提取，如果否，可以再次执行上述步骤S130和S150，直至对待分类的所有人物照片都进行了人脸识别以及人物关联信息提取。如果照片中的人物没有被成功识别出，则可将照片临时标识为尚未成功识别的照片。

步骤S170，利用人物关联信息识别另外的照片中的人物。

优选地，用从识别出的照片中提取出的人物关联信息来识别尚未被成功识别的照片，例如背面照、侧身照等。

上述识别结果可登记在照片与被摄人物对照数据库当中。

步骤S190，按照所识别出的人物对照片进行分类管理。

在本发明实施方式中，如图3所示，可以先按照拍摄时间和/或拍摄地点对照片进行初步分类，在对照片进行了人物识别处理后按照人物身份进行进一步分类。另选的，还可以先进行人物识别处理，然后按照拍摄时间和/或拍摄地点对照片进行进一步分类。在这种情况下，步骤S107可以在步骤S190之后执行。

进一步地，使用照片的拍摄设备信息以及分辨率信息，可以辨别出自拍者，基于所获取的自拍者的人脸信息可以对人物数据库进行标识。

如上所述，本发明在基于人物关联信息进行人物识别的时候，通过结合拍摄日期、拍摄地点、拍摄设备以及分辨率等信息进行辅助判断，可更加细致、精确地进行人物识别。因为在同一日期内更换服装的情况并不普遍，被拍摄人的总集合基本稳定，便于人物识别。

也就是说，根据照片的拍摄时间、地点、拍摄设备、分辨率信息等增加照片之间的关联性。上述拍摄日期、拍摄地点、拍摄设备以及分辨率等附带信息的组合一致性越高，判断结果越准确。根据上述辅助信息，也提高了人物与拍摄设备之间的关联。

通过以上方法，可以将人脸识别无法分类的照片进行识别，提高了照片识别率。

下面对用于实现上述本发明的方法的照片分类管理装置进行描述，该照片分类存储装置可以在照片存储、收集设备(如计算机、平板电脑、诸如手机之类的移动通信终端、机顶盒等设备)中实现。照片存储、收集设备可包括(未示出)：存储单元，其为具有存储介质及存储能力的装置，用来保存收集到设备当中的照片；导入单元，其包括但不限于从U盘、SD卡及通过WIFI从手持设备导入照片；照片分类管理装置，其对从导入单元导入的，保存于存储单元内的照片进行管理，照片分类管理装置包括但不限于，根据从照片文件的属性信息或者图像识别技术获得的信息对照片进行分类管理；显示单元，其通过HDMI或者SPDIF接口向电视等显示设备输出照片进行显示；备份单元，其通过USB接口或者网口，对照片进行本地备份或云备份；分享单元，其通过网口向其他设备分享照片。如图4所示，照片分类管理装置可以包括：

人脸扫描单元210，其用于对照片进行人脸扫描，提取照片中的人脸信息；

第一识别单元220，其将提取的人脸信息与预存储的人脸识别数据库进行匹配，识别所提取的人脸信息对应的人物；

关联信息提取单元230，其提取所述照片中与所识别出的人物相关联的人物关联信息；

第二识别单元240，其利用所述人物关联信息识别另外的照片中的人物；

分类管理单元250，其按照所识别出的人物对照片进行分类管理。

此外，该照片分类管理装置还可包括：第一获取单元260，其获取照片中的拍摄时间和/或拍摄地点信息，按照所提取的时间和/或拍摄地点信息对照片进行分类管理。

此外，该照片分类管理装置还可包括：第二获取单元270，其获取照片中的人脸信息、拍摄设备信息以及分辨率信息，根据分辨率信息确定该照片是否由所述拍摄设备的自拍摄像头拍摄的，在结果为是的情况下，基于所获取的人脸信息对人物数据库进行标识。

此外，该照片分类管理装置还可包括：人物检测单元(未示出)，其对每一照片进行人物检测分析，判断是否有人物信息；若有，则将所述照片归为人物类。

其中，第二识别单元根据待识别照片与已识别照片中相同关联信息的关联度和/或关联信息的数量，对识别结果进行可信度判断，当可信度达到一定数值时，确定识别结果为真。

本发明的各部分可以用硬件、软件、固件或者它们的组合来实现。在上述实施方式中，多个步骤或方法可以用存储在存储器中且由合适的指令执行***执行的软件或固件来实现。例如，如果用硬件来实现，和在另一实施方式中一样，可以用本领域共知的下列技术中的任一项或者他们的组合来实现：具有用于对数据信号实现逻辑功能的逻辑门电路的离散逻辑电路，具有合适的组合逻辑门电路的专用集成电路，可编程门阵列(PGA)，现场可编程门阵列(FPGA)等。

在流程图中表示或者在此以其它方式描述的逻辑和/或步骤，例如，可以被认为是用于实现逻辑功能的可执行指令的定序列表，可以具体实现在任何计算机可读介质中，以供指令执行***、装置或设备(如基于计算机的***、包括处理器的***或其他可以从指令执行***、装置或设备取指令并执行指令的***)使用，或结合这些指令执行***、装置或设备而使用。

本发明中，针对一个实施方式描述和/或例示的特征，可以在一个或更多个其它实施方式中以相同方式或以类似方式使用，和/或与其他实施方式的特征相结合或代替其他实施方式的特征。

需要说明的是，上述实施例仅为说明本发明而非限制本发明的专利范围，任何基于本发明的等同变换技术，均应在本发明的专利保护范围内。

Claims (10)

1.一种照片分类管理方法，其特征在于，该方法包括以下步骤：

对照片进行人脸扫描，提取照片中的人脸信息；

将提取的人脸信息与预存储的人脸识别数据库进行匹配，识别所提取的人脸信息对应的人物；

提取所述照片中与所识别出的人物相关联的人物关联信息；

利用所述人物关联信息识别另外的照片中的人物；

按照所识别出的人物对照片进行分类管理。

2.根据权利要求1所述的方法，其特征在于，所述人物关联信息包括以下信息中的至少一种：所述人物的衣着颜色、衣着样式、持有物、佩戴物；

其中，利用所述人物关联信息识别另外的照片中的人物的步骤包括：根据待识别照片与已识别照片中相同关联信息的关联度和/或关联信息的数量，对识别结果进行可信度判断，当可信度达到一定数值时，确定识别结果为真。

3.根据权利要求1所述的方法，其特征在于，所述方法还包括以下步骤：

获取照片中的拍摄时间和/或拍摄地点信息，按照所提取的时间和/或拍摄地点信息对照片进行分类管理。

4.根据权利要求1所述的方法，其特征在于，所述方法还包括以下步骤：

获取照片中的人脸信息、拍摄设备信息以及分辨率信息，根据分辨率信息确定该照片是否由所述拍摄设备的自拍摄像头拍摄的，在结果为是的情况下，基于所获取的人脸信息对人物数据库进行标识。

5.根据权利要求1所述的方法，其特征在于，在对照片进行人脸扫描的步骤前，所述方法还包括：

对照片进行人物检测分析，判断是否有人物信息；若有，则将所述照片归为人物类。

6.一种照片分类管理装置，其特征在于，所述装置包括：

人脸扫描单元，其用于对照片进行人脸扫描，提取照片中的人脸信息；

第一识别单元，其将提取的人脸信息与预存储的人脸识别数据库进行匹配，识别所提取的人脸信息对应的人物；

关联信息提取单元，其提取所述照片中与所识别出的人物相关联的人物关联信息；

第二识别单元，其利用所述人物关联信息识别另外的照片中的人物；

分类管理单元，其按照所识别出的人物对照片进行分类管理。

7.根据权利要求6所述的装置，其特征在于，所述人物关联信息包括以下信息中的至少一种：所述人物的衣着颜色、衣着样式、持有物、佩戴物；

其中，所述第二识别单元根据待识别照片与已识别照片中相同关联信息的关联度和/或关联信息的数量，对识别结果进行可信度判断，当可信度达到一定数值时，确定识别结果为真。

8.根据权利要求6所述的装置，其特征在于，所述装置还包括：

第一获取单元，其获取照片中的拍摄时间和/或拍摄地点信息，按照所提取的时间和/或拍摄地点信息对照片进行分类管理。

9.根据权利要求6所述的装置，其特征在于，所述装置还包括：

第二获取单元，其获取照片中的人脸信息、拍摄设备信息以及分辨率信息，根据分辨率信息确定该照片是否由所述拍摄设备的自拍摄像头拍摄的，在结果为是的情况下，基于所获取的人脸信息对人物数据库进行标识。

10.根据权利要求6所述的装置，其特征在于，所述装置还包括：

人物检测单元，其对每一照片进行人物检测分析，判断是否有人物信息；若有，则将所述照片归为人物类。