CN103049747A - 利用肤色的人体图像再识别的方法 - Google Patents

利用肤色的人体图像再识别的方法 Download PDF

Info

Publication number
CN103049747A
CN103049747A CN2012105877788A CN201210587778A CN103049747A CN 103049747 A CN103049747 A CN 103049747A CN 2012105877788 A CN2012105877788 A CN 2012105877788A CN 201210587778 A CN201210587778 A CN 201210587778A CN 103049747 A CN103049747 A CN 103049747A
Authority
CN
China
Prior art keywords
human body
body image
successful
match
image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN2012105877788A
Other languages
English (en)
Other versions
CN103049747B (zh
Inventor
刘忠轩
杨宇
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
IROBOTCITY (BEIJING) CO.,LTD.
TELEFRAME TECHNOLOGY (BEIJING) CO LTD
Original Assignee
XINZHENG ELECTRONIC TECHNOLOGY (BEIJING) Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by XINZHENG ELECTRONIC TECHNOLOGY (BEIJING) Co Ltd filed Critical XINZHENG ELECTRONIC TECHNOLOGY (BEIJING) Co Ltd
Priority to CN201210587778.8A priority Critical patent/CN103049747B/zh
Publication of CN103049747A publication Critical patent/CN103049747A/zh
Application granted granted Critical
Publication of CN103049747B publication Critical patent/CN103049747B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Image Analysis (AREA)

Abstract

本发明提供了一种利用肤色的人体图像再识别的方法,包括:检测出视频图像中的人体图像;检测所述人体图像中的多个肤色区域;检测每个肤色区域中的多个特征点,确定每个特征点的特征向量;将每个区域确定的特征向量与预先采集的数据库中的每个人体图像对应的各个区域的多个基准向量进行匹配;根据匹配的结果,确定匹配成功的人体图像。通过上述的步骤,可在数据库中确定出人体图像,将确定出的人体图像作为检测到的人体图像。从而可在视频中掌握每个人体图像的运动轨迹以及活动范围。

Description

利用肤色的人体图像再识别的方法
技术领域
本发明涉及视频监控领域,具体而言,涉及一种利用肤色的人体图像再识别的方法。
背景技术
对于公共场所的安防,目前通常采用摄像头实现图像的采集。
由于目前的视频识别技术,只能识别出视频中的人体图像,不能对人体图像所对应的个体进行确认,从而导致不能区分出每个人的移动轨迹,不能确定当前视频中的人体图像所对应的身份。
发明内容
本发明旨在提供一种利用肤色的人体图像再识别的方法,以解决不能对人体图像的个体进行确认的问题。
在本发明的实施例中,提供了一种利用肤色的人体图像再识别的方法,包括:
检测出视频图像中的人体图像;
检测所述人体图像中的多个肤色区域;
检测每个肤色区域中的多个特征点,确定每个特征点的特征向量;
将每个区域确定的特征向量与预先采集的数据库中的每个人体图像对应的各个区域的多个基准向量进行匹配;
根据匹配的结果,确定匹配成功的人体图像。
通过上述的步骤,可在数据库中确定出人体图像,将确定出的人体图像作为检测到的人体图像。从而可在视频中掌握每个人体图像的运动轨迹以及活动范围。
附图说明
此处所说明的附图用来提供对本发明的进一步理解,构成本申请的一部分,本发明的示意性实施例及其说明用于解释本发明,并不构成对本发明的不当限定。在附图中:
图1示出了实施例的流程图;
图2示出了实施例中识别到的人体图像的示意图;
图3示出了实施例中识别到的人体图像的各个肤色区域的示意图。
具体实施方式
下面将参考附图并结合实施例,来详细说明本发明。参见图1,实施例的步骤包括:
S11:检测出视频图像中的人体图像;
S12:检测所述人体图像中的多个肤色区域;
S13:检测每个肤色区域中的多个特征点,确定每个特征点的特征向量;
S14:将每个区域确定的特征向量与预先采集的数据库中的每个人体图像对应的各个区域的多个基准向量进行匹配;
S15:根据匹配的结果,确定匹配成功的人体图像。
通过上述的步骤,可在数据库中确定出人体图像,将确定出的人体图像作为检测到的人体图像。从而可在视频的多个人体图像中确定出唯一的人体图像。
优选地,实施例中,检测人体图像的步骤包括:使用高斯背景建模法在视频中检测运动区域。在检测到的运动区域内,使用基于方向梯度直方图(HOG)和带有隐含参数的支持向量机(latent SVM)的物体检测方法,在不同尺度上对视频中的人体图像进行检测。
优选地,实施例中,所述检测多个肤色区域的过程包括:
将所述人体图像转换为YCrCb格式;可按照以下公式转换:
Y=0.299R+0.587G+0.114B
Cr=0.500R-0.419G-0.081B+128
Cb=-0.169R-0.331G+0.500B+128
在YCrCb格式的人体图像中检测满足符合133≤Cr≤173,77≤Cb≤127的像素点;
将符合的像素点形成的区域为肤色区域。具体参见图2中的人体图像,经过上述步骤后,最后得到如图3所示的人体图像。
该肤色区域的图像先进行形态学开运算去除掉孤立的小点,噪声,毛刺及小桥。再通过形态学闭运算弥合断裂的人体区域。然后输出图像作为后续处理。
优选地,实施例中,所述区域包括脸部皮肤区域和手部皮肤区域。
优选地,实施例中,所述特征向量或基准向量通过以下步骤确定:
1、使用fast算子检测人体图像的各个肤色区域的特征点;这些特征点往往是皮肤的非平坦区域,例如眼角位置、鼻部、口部的轮廓位置,手指缝隙位置等。
2、通过以下moment矩运算,检测1中的所述特征点中主方向特征点的主方向;
·Moments:
M ij = Σ x Σ y x i y i I ( x , y )
·Corner orientation:
c x = M 10 M 00 , c y = M 01 M 00
C ori = tan - 1 ( c y c x )
主方向为Cori
I(x,y)是位置为(x,y)的特征点的像素亮度或灰度。
x,y分别为特征点水平和竖直坐标。
i,j根据后面公式的需要设定。例如计算M10时i为1,j为0。
Mij的物理意义与一般矩的意义相同。
3、在该主方向上,提取BRIEF描述子作为一个特征点的特征向量或基准向量。
优选地,实施例中,所述匹配过程如下:
采用hamming距离计算所述特征向量和基准向量对应位置的数值不同的个数,当不同数值的个数小于20%时,确定该特征向量匹配成功;
确定各个区域匹配成功的特征向量的数量,当各个区域匹配成功的数量大于阈值时,确定匹配成功。
例如:阈值为10,每个区域中匹配成功的特征点数量>12,则认为匹配成功。
当存在多个匹配成功的人体图像,还包括:选择匹配成功的特征向量与基准向量最多的特征点的人体图像作为识别的人体图像。
另外,还可根据不同场景为面部皮肤或手部皮肤设置权重,以消除环境因素的影响,例如,在室外光线好的情况下,将面部皮肤的图像的与手部皮肤的图像的权重的比值设置为3:2;在室内光线不好的情况下,将将面部皮肤的图像的与手部皮肤的图像的权重的比值设置为4:5。增加手部皮肤的权重,以消除环境光线的影响。
优选地,在实施例中,还包括,用RANSAC算法消除错误匹配。
RANSAC算法的输入是一组观测数据(往往含有较大的噪声或无效点),一个用于解释观测数据的参数化模型以及一些可信的参数。RANSAC通过反复选择数据中的一组随机子集来达成目标。被选取的子集被假设为局内点,并用下述方法进行验证:
1、有一个模型适应于假设的局内点,即所有的未知参数都能从假设的局内点计算得出。
2、用1中得到的模型去测试所有的其它数据,如果某个点适用于估计的模型,认为它也是局内点。
3、如果有足够多的点被归类为假设的局内点,那么估计的模型就足够合理。
4、然后,用所有假设的局内点去重新估计模型(譬如使用最小二乘法),因为它仅仅被初始的假设局内点估计过。
5、最后,通过估计局内点与模型的错误率来评估模型。
上述过程被重复执行固定的次数,每次产生的模型要么因为局内点太少而被舍弃,要么因为比现有的模型更好而被选用。
优选地,实施例中,还包括:
如果没有匹配成功,则将所述检测出的人体图像的各个区域的特征向量作为新的基准向量加入到所述数据库。
优选地,实施例中,还包括:
在当前帧图像和之前的视频图像中,采用最小的带颜色框体框住所述检测到的该人体图像。
显然,本领域的技术人员应该明白,上述的本发明的各模块或各步骤可以用通用的计算装置来实现,它们可以集中在单个的计算装置上,或者分布在多个计算装置所组成的网络上,可选地,它们可以用计算装置可执行的程序代码来实现,从而,可以将它们存储在存储装置中由计算装置来执行,或者将它们分别制作成各个集成电路模块,或者将它们中的多个模块或步骤制作成单个集成电路模块来实现。这样,本发明不限制于任何特定的硬件和软件结合。
以上所述仅为本发明的优选实施例而已,并不用于限制本发明,对于本领域的技术人员来说,本发明可以有各种更改和变化。凡在本发明的精神和原则之内,所作的任何修改、等同替换、改进等,均应包含在本发明的保护范围之内。

Claims (8)

1.一种利用肤色的人体图像再识别的方法,其特征在于,包括:
检测出视频图像中的人体图像;
检测所述人体图像中的多个肤色区域;
检测每个肤色区域中的多个特征点,确定每个特征点的特征向量;
将每个区域确定的特征向量与预先采集的数据库中的每个人体图像对应的各个区域的多个基准向量进行匹配;
根据匹配的结果,确定匹配成功的人体图像。
2.根据权利要求1所述的方法,其特征在于,所述检测多个肤色区域的过程包括:
将所述人体图像转换为YCrCb格式;
在YCrCb格式的人体图像中检测满足符合133≤Cr≤173,77≤Cb≤127的像素点;
将符合的像素点形成的区域作为肤色区域。
3.根据权利要求2所述的方法,其特征在于,所述区域包括脸部皮肤区域和手部皮肤区域。
4.根据权利要求1所述的方法,其特征在于,所述特征向量或基准向量通过以下步骤确定:
使用fast算子检测人体图像的各个肤色区域的特征点;
通过moment矩运算检测所述特征点中主方向特征点的主方向;
在该主方向上,提取BRIEF描述子作为一个特征点的特征向量或基准向量。
5.根据权利要求4所述的方法,其特征在于,所述匹配过程如下:
采用hamming距离计算所述特征向量和基准向量对应位置的数值不同的个数,当不同数值的个数小于20%时,确定该特征向量匹配成功;
确定各个区域匹配成功的特征向量的数量,当各个区域匹配成功的数量大于阈值时,确定匹配成功。
6.根据权利要求5所述的方法,其特征在于,
当存在多个匹配成功的人体图像,还包括:在匹配成功的人体图像中,选择特征向量与基准向量匹配成功数量最多的人体图像作为识别到的人体图像。
7.根据权利要求5所述的方法,其特征在于,还包括:
如果没有匹配成功,则将所述检测出的人体图像的各个区域的特征向量作为新的基准向量加入到所述数据库。
8.根据权利要求1所述的方法,其特征在于,还包括:
在当前帧图像和之前的视频图像中,采用最小的带颜色框体框住所述检测到的该人体图像。
CN201210587778.8A 2012-12-30 2012-12-30 利用肤色的人体图像再识别的方法 Expired - Fee Related CN103049747B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201210587778.8A CN103049747B (zh) 2012-12-30 2012-12-30 利用肤色的人体图像再识别的方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201210587778.8A CN103049747B (zh) 2012-12-30 2012-12-30 利用肤色的人体图像再识别的方法

Publications (2)

Publication Number Publication Date
CN103049747A true CN103049747A (zh) 2013-04-17
CN103049747B CN103049747B (zh) 2016-08-24

Family

ID=48062379

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201210587778.8A Expired - Fee Related CN103049747B (zh) 2012-12-30 2012-12-30 利用肤色的人体图像再识别的方法

Country Status (1)

Country Link
CN (1) CN103049747B (zh)

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103729641A (zh) * 2013-12-20 2014-04-16 乐视致新电子科技(天津)有限公司 一种人体特征检测方法和装置
CN106446958A (zh) * 2016-10-09 2017-02-22 湖南穗富眼电子科技有限公司 一种人体离开可靠检测方法
CN106909883A (zh) * 2017-01-17 2017-06-30 北京航空航天大学 一种基于ros的模块化手部区域检测方法和装置
CN107408211A (zh) * 2015-04-03 2017-11-28 三菱电机株式会社 用于物体的再识别的方法
CN109343920A (zh) * 2018-09-10 2019-02-15 深圳市腾讯网络信息技术有限公司 一种图像处理方法及其装置、设备和存储介质
CN112190227A (zh) * 2020-10-14 2021-01-08 上海鹰瞳医疗科技有限公司 眼底相机及其使用状态检测方法

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20060088209A1 (en) * 2004-10-21 2006-04-27 Microsoft Corporation Video image quality
CN102214291A (zh) * 2010-04-12 2011-10-12 云南清眸科技有限公司 一种快速准确的基于视频序列的人脸检测跟踪方法
CN102324025A (zh) * 2011-09-06 2012-01-18 北京航空航天大学 基于高斯肤色模型和特征分析的人脸检测与跟踪方法

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20060088209A1 (en) * 2004-10-21 2006-04-27 Microsoft Corporation Video image quality
CN102214291A (zh) * 2010-04-12 2011-10-12 云南清眸科技有限公司 一种快速准确的基于视频序列的人脸检测跟踪方法
CN102324025A (zh) * 2011-09-06 2012-01-18 北京航空航天大学 基于高斯肤色模型和特征分析的人脸检测与跟踪方法

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
RUBLEE,E等: "ORB: An efficient alternative to SIFT or SURF", 《COMPUTER VISION (ICCV), 2011 IEEE INTERNATIONAL CONFERENCE ON 》, 13 November 2011 (2011-11-13) *
陈松: "基于肤色的人脸检测与识别", 《中国优秀硕士学位论文全文数据库 》, 15 September 2007 (2007-09-15) *

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103729641A (zh) * 2013-12-20 2014-04-16 乐视致新电子科技(天津)有限公司 一种人体特征检测方法和装置
CN107408211A (zh) * 2015-04-03 2017-11-28 三菱电机株式会社 用于物体的再识别的方法
CN107408211B (zh) * 2015-04-03 2020-08-07 三菱电机株式会社 用于物体的再识别的方法
CN106446958A (zh) * 2016-10-09 2017-02-22 湖南穗富眼电子科技有限公司 一种人体离开可靠检测方法
CN106446958B (zh) * 2016-10-09 2019-04-12 湖南穗富眼电子科技有限公司 一种人体离开可靠检测方法
CN106909883A (zh) * 2017-01-17 2017-06-30 北京航空航天大学 一种基于ros的模块化手部区域检测方法和装置
CN109343920A (zh) * 2018-09-10 2019-02-15 深圳市腾讯网络信息技术有限公司 一种图像处理方法及其装置、设备和存储介质
CN109343920B (zh) * 2018-09-10 2021-09-07 深圳市腾讯网络信息技术有限公司 一种图像处理方法及其装置、设备和存储介质
CN112190227A (zh) * 2020-10-14 2021-01-08 上海鹰瞳医疗科技有限公司 眼底相机及其使用状态检测方法

Also Published As

Publication number Publication date
CN103049747B (zh) 2016-08-24

Similar Documents

Publication Publication Date Title
CN109255322B (zh) 一种人脸活体检测方法及装置
CN103049747A (zh) 利用肤色的人体图像再识别的方法
CN102289660B (zh) 一种基于手部姿态跟踪的违规驾驶行为检测方法
CN102799893B (zh) 考场监控视频处理方法
US11113526B2 (en) Training methods for deep networks
CN103093212B (zh) 基于人脸检测和跟踪截取人脸图像的方法和装置
CN110751022A (zh) 基于图像识别的城市宠物活动轨迹监测方法及相关设备
CN110163078A (zh) 活体检测方法、装置及应用活体检测方法的服务***
CN103279768B (zh) 一种基于增量学习人脸分块视觉表征的视频人脸识别方法
US20210327040A1 (en) Model training method and system for automatically determining damage level of each of vehicle parts on basis of deep learning
CN103473539A (zh) 步态识别方法和装置
US9489582B2 (en) Video anomaly detection based upon a sparsity model
CN109145742A (zh) 一种行人识别方法及***
CN104166841A (zh) 一种视频监控网络中指定行人或车辆的快速检测识别方法
CN104636118A (zh) 基于光平衡的qr二维码自适应二值化处理方法和装置
CN109740689A (zh) 一种图像语义分割的错误标注数据筛选方法及***
CN103390151B (zh) 人脸检测方法及装置
CN103975343A (zh) 用于通过融合人类检测模态的结果来增强人类计数的***和方法
CN102629320A (zh) 基于特征层定序测量统计描述的人脸识别方法
CN103093274A (zh) 基于视频的行人计数的方法
Fang et al. Partial attack supervision and regional weighted inference for masked face presentation attack detection
CN109948439A (zh) 一种活体检测方法、***及终端设备
CN103996207A (zh) 一种物体跟踪方法
CN106355066A (zh) 人脸验证方法及人脸验证装置
CN106384089A (zh) 基于终生学习的人体可靠检测方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
CP03 Change of name, title or address

Address after: 100096 A910-16, block A, 9 Sandi street, Haidian District, Beijing.

Patentee after: IROBOTCITY (BEIJING) CO.,LTD.

Address before: 100085 A-6, 28, Beijing, Haidian District, Shanghai.

Patentee before: Teleframe Electronic Technology (Beijing) Co.,Ltd.

CP03 Change of name, title or address
TR01 Transfer of patent right

Effective date of registration: 20180628

Address after: 100096 Haidian District, Beijing, west 2 new apartment building, three floor commercial room 337.

Patentee after: Teleframe Technology (Beijing) Co.,Ltd.

Address before: 100096 A910-16, block A, 9 Sandi street, Haidian District, Beijing.

Patentee before: IROBOTCITY (BEIJING) CO.,LTD.

TR01 Transfer of patent right
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20160824

Termination date: 20191230

CF01 Termination of patent right due to non-payment of annual fee