CN109325546A - 一种结合步法特征的成趟足迹识别方法 - Google Patents

一种结合步法特征的成趟足迹识别方法 Download PDF

Info

Publication number
CN109325546A
CN109325546A CN201811224871.6A CN201811224871A CN109325546A CN 109325546 A CN109325546 A CN 109325546A CN 201811224871 A CN201811224871 A CN 201811224871A CN 109325546 A CN109325546 A CN 109325546A
Authority
CN
China
Prior art keywords
footprint
image
time
footwork
classification
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201811224871.6A
Other languages
English (en)
Other versions
CN109325546B (zh
Inventor
王新年
王亚玲
于丹
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Dalian Maritime University
Original Assignee
Dalian Maritime University
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Dalian Maritime University filed Critical Dalian Maritime University
Priority to CN201811224871.6A priority Critical patent/CN109325546B/zh
Publication of CN109325546A publication Critical patent/CN109325546A/zh
Application granted granted Critical
Publication of CN109325546B publication Critical patent/CN109325546B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00Pattern recognition
    • G06F18/20Analysing
    • G06F18/21Design or setup of recognition systems or techniques; Extraction of features in feature space; Blind source separation
    • G06F18/214Generating training patterns; Bootstrap methods, e.g. bagging or boosting
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00Pattern recognition
    • G06F18/20Analysing
    • G06F18/23Clustering techniques
    • G06F18/231Hierarchical techniques, i.e. dividing or merging pattern sets so as to obtain a dendrogram
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00Pattern recognition
    • G06F18/20Analysing
    • G06F18/24Classification techniques

Landscapes

  • Engineering & Computer Science (AREA)
  • Data Mining & Analysis (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Bioinformatics & Cheminformatics (AREA)
  • Bioinformatics & Computational Biology (AREA)
  • Artificial Intelligence (AREA)
  • Evolutionary Biology (AREA)
  • Evolutionary Computation (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Image Analysis (AREA)

Abstract

本发明提供一种结合步法特征的成趟足迹识别方法,其特征在于,至少包括:离线训练过程和在线识别过程。通过采集单元获取待训练的成趟足迹图像,得到初始待训练的成趟足迹图像数据集。提取所述待训练的成趟足迹图像中单枚足迹。构建所述待训练的成趟足迹图像的步法能量图。提取用于粗粒度分类的待训练成趟足迹图像的步幅特征,根据提取的步幅特征构建成趟足迹粗粒度分类模型,进一步根据步法能量图与粗粒度分类模型再构建细粒度识别模型。本发明根据三角形稳定性原理,采用三枚单个足迹组成的图像加权平均,得到步法能量图作为判别图像,通过将不同时间段采集的脚印加权平均,减少了匹配误差,还保持了左右脚的相对关系,是足迹步法特征的融合,充分体现了成趟足迹的差异性。

Description

一种结合步法特征的成趟足迹识别方法
技术领域
本发明涉及成趟足迹的识别算法,特别是涉及一种结合步法特征成趟足迹的识别算法。
背景技术
足迹是犯罪现场中遗留率较高的重要物证之一,在刑事侦查案件中有很重要的作用,一般犯罪现场遗留足迹包括单个足迹和成趟足迹,通过对这些足迹的分析检验可以推测一个人的身高、体重、年龄、走路姿态,也可以分析遗留时间和作案路线等。在条件情况较好时,还可以通过步幅等特征进行追踪,直接抓获犯罪嫌疑人。因为每个人的身高、体重、职业、习惯都不一样,所以每个人的步态特征也不相同,而成趟足迹恰是通过左右脚之间的关系来体现人在行走过程中的行为习惯,且这种行为特征是经过长期习惯后形成的,所以具有相对的稳定性。深入挖掘人在行走过程中由于个人习惯在成趟足迹上体现出来的差异信息,检验分析人的步幅等特征,提出一种可靠的成趟足迹识别方法对未来基层民警在相关犯罪现场的刑侦鉴定和破案有非常积极地作用。
目前针对成趟足迹的主要研究工作有以下几种:
1、将成趟足迹中能够反映个体步幅特征规律的六个随机变量(步长、步角、步宽)作为研究对象,然后结合不同的步幅特征定量化检验方法,来判断足迹的归属。其中,《智能步幅特征分析检验***的设计与实现》中提出一种智能步幅特征分析检验***,该***主要功能包括:足迹提取、图像拼接、基于主分量分析(PCA)的步幅特征提取、隶属度检验等关键技术。利用步幅特征综合指标定量检验的方法,该方法通过相机获取犯罪现场遗留的成趟足迹,并求取步长步宽步角的平均值及置信区间,将嫌疑人的步长步宽步角的平均值与罪犯的置信区间进行对比,确定判为凶手的几率。
2、将成趟足迹采集过程中的压力信息作为研究对象,文献[3]中对每只脚的压力分布和采集过程中质心与重心的变化轨迹进行分析,从而达到识别的效果。
目前针对成趟足迹的研究工作中存在的问题是:1)压力变化信息需要动态采集,并不适用于案件现场的成趟足迹识别;2)步幅特征中的步长和步宽相对易受外界环境干扰,并不稳定,作为主要研究特征具有一定局限性;3)针对步幅特征定量化检验的方法,由于步幅特征的不稳定性导致在检验过程中,判别的结果只能得出一个相对的范围,检验结果往往只能大致排除部分嫌疑人,缩小一定范围,对于刑侦人员的帮助有限。
发明内容
根据上述提出的技术问题,而提供一种结合步法特征的成趟足迹识别方法。
本发明提出一种结合步法特征的成趟足迹识别方法,其特征在于,至少包括:离线训练过程和在线识别过程;
所述离线训练过程至少包括以下步骤:
S11:通过采集单元获取待训练的成趟足迹图像,得到初始待训练的成趟足迹图像数据集D={fi,i=1,2,L,N},其中fi表示第i个人的成趟足迹,N表示人的个数;
S12:提取所述待训练的成趟足迹图像集D中的单枚足迹;
S13:构建所述待训练的成趟足迹图像的步法能量图;
S14:根据单枚足迹提取用于粗粒度分类的待训练成趟足迹图像的步幅特征;
S15:根据提取的步幅特征构建成趟足迹粗粒度分类模型;
S16:根据步法能量图和粗粒度分类模型构建成趟足迹细粒度识别模型。
所述在线识别过程至少包括以下步骤:
S21:通过采集单元获取在线识别的成趟足迹图像;
S22:提取所述在线识别的成趟足迹图像中单枚足迹;
S23:构建所述在线识别的成趟足迹图像的步法能量图;
S24:提取粗粒度分类在线识别的成趟足迹图像的步幅特征;
S25:将提取的步幅特征输入到通过所述离线训练过程步骤S15构建的粗粒度分类模型,得到粗分类结果;
S26:根据粗粒度分类结果和提取的步法能量图,通过S16所构建的细粒度识别模型进行成趟足迹的细粒度识别。
进一步的,所述在线识别的/待训练的成趟足迹图像提取单枚足迹:
首先将所述在线识别的/待训练的成趟足迹图像通过线性空间滤波函数进行去噪;
将单个足迹通过边长为L*H大小的结构元素对图像进行膨胀运算,再对所述膨胀计算后的像素值水平方向投影,获得投影直方图,统计所述投影直方图投影累计像素值大于设定阈值t1的位置并标注索引,低于阈值的部分置零,从而筛除噪声的干扰;获取索引的一阶差分,判断足迹之间的间距,取所述每个足迹对应的中间位置作为分割点,将成趟足迹图像分割为连续的单个足迹图像,去除首尾两步,得到单个足迹第i个人的第j幅单个足迹图像fij,其中i∈[1,N],j∈[1,M],N表示数据库中人的数量,M表示成趟足迹分割得到的单个足迹数量。
更进一步的,所述构建所述待训练的成趟足迹图像/在线识别的成趟足迹图像的步法能量图:
通过获得单枚足迹的连通区域获得所述单枚足迹的连通区域,标记出所述连通区域面积大于设定连通区域阈值t2,通过矩形框标记,再比较连续两幅单个足迹图像fij与fi(j+1)的所述矩形框的左上角坐标(dx,dy)中dy的大小,dy值小的足迹判定为左脚,dy值大的足迹则判定为右脚;
将连续单个足迹进行二次拼接;其中将每幅拼接图中足迹数量确定为3,按照行走习惯特点以左脚为起始开始拼接,从而构成先后关系为“左右左”的二次拼接图像fip,其中fip表示第i个人的第p幅拼接足迹图像,其中i∈[1,N],q∈[1,P],N表示数据库中人的数量,P表示每个人的拼接图像数量
对所述二次拼接图像进行步行线矫正和尺度归一化,求取二次拼接图像中单个足迹各自的质心,连接所述二次拼接图像中两只左脚的质心,即为左步行线lip,该直线与图像x方向可以得到一个夹角θip,将图像旋转该角度,使步行线与x方向平行,完成对步行线的矫正,求取所述二次拼接图像中足迹区域的外接矩形,以矩形的左上角坐标为基准,遍历每个人的P幅图像并将其归一化到最大外接矩形的尺寸。
将归一化后的二次拼接图像组合求得步法能量图,构建每人的步法能量图其中表示第i个人的步法能量图像,N表示数据库中人的数量。
在训练过程中,依据足迹步幅特征,采用无监督层次化聚类的方式将足迹数据划分为足迹长度层类别和足迹偏移角度层类别,其中足迹长度层类别是足迹偏移角度层类别的父类别;在识别过程中,根据聚类结果分层次进行判别分类。
其中足迹长度层类别划分方法包括如下步骤:(1)统计数据集中,足迹长度的最大值和最小值,确定取值的区间范围;(2)将所述区间等间隔分为KL个子区间,将每个子区间的中点作为每类的初始中心,其中KL优选为3;(3)根据初始中心,采用K中心点聚类方法,依据足迹长度将数据集划分为KL类,各类结果记为L(i),i=1,...,KL。
其中足迹偏移角度类别层的划分方法包括如下步骤:(1)在足迹长度层各类L(i)中,统计该类别各足迹偏移角度的最大值和最小值,确定偏移角度的区间范围;(2)将区间等间隔分为KA个子空间,将每个子区间的中点作为每类的初始中心,其中KA优选为3;(3)根据初始中心,采用K中心点聚类方法,基于偏移角度将数据集划分为KAi类,其中i表示该类别在足迹长度层对应的类别编号。各类结果记为LA(i,j),j=1,...,KAi
进一步的,所述根据聚类结果分层次进行判别分类的步骤包括:(1)将足迹长度作为输入,计算其与L(i)类中各足迹长度差的绝对值,记为d(i,m),m=1,...,Mi,Mi表示L(i)中样本的数目;(2)依据计算待识别足迹与各类的距离;(3)将待识别足迹判别为与其距离最小的那类,记为i*类;(4)在数据集LA(i*,j),j=1,...,KAi中,依据待识别足迹角度信息计算与各类的角度距离;(5)将待识别足迹判别为与其角度距离最小的那类,记为j*类,得到该类下所有类别,记为LA(i*,j*),最终将数据集LA(i*,j*)中各样本步法能量图作为细粒度识别的输入。
细粒度识别模型的构建是指在足迹偏移角度层的各个类别中,依据各样本的步法能量图进行SVM、KNN等分类器的构建。优选的,本发明构建了NN分类器。
相似度得分依据步法能量图与数据集LA(i*,j*)中各样本步法能量图的归一化互相关系数计算而得。
分类方法是:(1)计算待识别图与数据集中各样本的相似度得分;(2)将相似度得分降序排列,计算其一阶差分的绝对值,记为DS(n),n=1,...,Q,Q表示待识别图像所在的偏移角度层对应的图像数目;(3)在从n=1依次遍历查找首个值大于预定阈值t3的位置n*;(4)根据将前n*幅图像所属类别,通过多数投票表决机制确定细粒度识别的最终结果,阈值t3通过训练确定,通常为0.2。
较现有技术相比,本发明具有以下优点:
1、传统的方法就是直接用步幅特征(步长、步宽、步角)进行识别,这里我们考虑了单个足迹大小信息,作为初步筛选条件,可以快速缩小范围。本发明充分考虑了在成趟足迹图像中,得到的同一方向上的单个足迹长度信息,根据足迹长度信息的大小差异,可以进行初步筛选,缩小识别人员范围。
2、本发明考虑了步幅信息可以体现一个人的行为习惯,但研究显示步长和步宽相对步角稳定性较差,易受心情、步速的影响,所以运用步角特征,只把足迹的偏移角度作为筛选条件,更具稳定性。
3、本发明根据三角形稳定性原理,采用三枚单个足迹组成的图像加权平均,得到步法能量图作为判别图像,通过将不同时间段采集的足迹加权平均,减少了匹配误差,还保持了左右脚的相对关系,是足迹步法特征的融合,充分体现了成趟足迹的差异性。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图做以简单地介绍,显而易见地,下面描述中的附图是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动性的前提下,还可以根据这些附图获得其他的附图。
图1为本发明整体流程示意图。
图2为本发明基于步幅特征的成趟足迹粗粒度分类模型示意图。
图3为本发明步法能量示意图。
图4为本发明提取单枚足迹长度和偏移角度图。
具体实施方式
为了使本技术领域的人员更好地理解本发明方案,下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分的实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都应当属于本发明保护的范围。
需要说明的是,本发明的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象,而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换,以便这里描述的本发明的实施例能够以除了在这里图示或描述的那些以外的顺序实施。此外,术语“包括”和“具有”以及他们的任何变形,意图在于覆盖不排他的包含,例如,包含了一系列步骤或单元的过程、方法、***、产品或设备不必限于清楚地列出的那些步骤或单元,而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。
如图1-4所示,本发明提供了一种结合步法特征的成趟足迹识别方法,至少包括:离线训练过程和在线识别过程;
在本实施方式中,离线训练过程至少包括以下步骤:
S11:通过采集单元获取待训练的成趟足迹图像,得到初始待训练的成趟足迹图像数据集D={fi,i=1,2,…,N},其中fi表示第i个人的成趟足迹,N表示人的个数;
S12:提取所述待训练的成趟足迹图像集D中的单枚足迹;
S13:构建所述待训练的成趟足迹图像的步法能量图;
S14:根据单枚足迹提取用于粗粒度分类的待训练成趟足迹图像的步幅特征;
S15:根据提取的步幅特征构建成趟足迹粗粒度分类模型;
S16:根据步法能量图和粗粒度分类模型构建成趟足迹细粒度识别模型。
作为优选的实施方式,在线识别过程至少包括以下步骤:
S21:通过采集单元获取在线识别的成趟足迹图像;
S22:提取所述在线识别的成趟足迹图像中单枚足迹;
S23:构建所述在线识别的成趟足迹图像的步法能量图;
S24:提取用于粗粒度分类的在线识别的成趟足迹图像的步幅特征;
S25:将提取的步幅特征输入到通过所述离线训练过程步骤S15构建的粗粒度分类模型,得到粗分类结果;
S26:根据粗粒度分类结果进和提取的步法能量图,通过S16构建的细粒度识别模型进行成趟足迹的细粒度识别。
在本实施方式中,在线识别的/待训练的成趟足迹图像提取单枚足迹:首先将所述在线识别的/待训练的成趟足迹图像通过线性空间滤波函数进行去噪。
作为优选的实施方式,将单枚足迹通过边长为L*H大小的结构元素对图进行膨胀运算,再对所述膨胀后的像素值在水平方向投影,获得投影直方图,统计所述投影直方图累计投影像素值大于设定阈值t1的位置并标记索引,低于阈值的部分置零,筛除噪声的干扰;获取索引的一阶差分,从而判断每个足迹间的间隔,取间隔的中点为分割点,将D中的成趟足迹图像分割为连续的单个足迹,去除首尾两步,得到单个足迹第i个人的第j幅单个足迹图像fij,其中i∈[1,N],j∈[1,M],N表示数据库中人的数量,M表示成趟足迹分割得到的单个足迹数量。
在本实施方式中,所述构建所述待训练的成趟足迹图像/在线识别的成趟足迹图像的步法能量图:通过连通区域标记法获得所述单枚足迹的连通区域,标记出所述连通区域面积大于设定连通区域阈值t2,通过矩形框标记,再比较连续两幅单个足迹图像fij与fi(j+1)的所述矩形框的左上角坐标(dx,dy)中dy的大小,dy值小的足迹判定为左脚,dy值大的足迹则判定为右脚;
基于左右脚的判定后,将连续单个足迹进行二次拼接;其中每幅拼接图中足迹数量确定为3,按照行走习惯特点以左脚为起始进行拼接,从而构成先后关系为“左右左”的二次拼接图像fip,其中fip表示第i个人的第p幅拼接图像,其中i∈[1,N],q∈[1,P],N表示数据库中人的数量,P表示每个人的拼接图像数量。可以理解为在其它的实施方式中,图像的选择可以按照实际需求进行选择,只要能够满足能够清楚的提取足迹并进行分析即可。
在本实施方式中,对所述二次拼接图像进行步行线矫正和尺度归一化,求取二次拼接图像中单个足迹各自的质心,连接所述二次拼接图像中两只左脚的质心,即为左步行线lip,该直线与图像x方向可以得到一个夹角θip,将图像旋转该角度,使步行线与x方向平行,完成对步行线的矫正,求取所述二次拼接图像中足迹区域的外接矩形,以矩形的左上角坐标为基准,遍历每个人的P幅图像并将其归一化到最大外接矩形的尺寸。将归一化后的二次拼接图像相加求得步法能量图,构建每个人的步法能量图其中表示第i个人的步法能量图像,N表示数据库中人的数量。
在本实施方式中,在完成图像二次拼接前提取单个足迹的步幅特征,首先确定单枚足迹主轴方向,将单枚足迹图像在过其质心的直线方向上投影,投影区间取最大时的直线取向即为主轴方向,其与图像x方向的夹角即为偏移角度,在x方向的长度即为单个足迹长度,将多个数据求平均得平均偏移角度αi和平均足迹长度hi
可以理解为,在本实施方式中,所述构建基于步幅特征的成趟足迹粗粒度分类模型是指:在训练过程中,依据足迹步幅特征,采用无监督层次化聚类的方式将足迹数据划分为足迹长度层类别和足迹偏移角度层类别,其中足迹长度层类别是足迹偏移角度层类别的父类别;在识别过程中,根据聚类结果分层次进行判别分类。
其中足迹长度层类别划分方法包括如下步骤:(1)统计数据集中,足迹长度的最大值和最小值,确定取值的区间范围;(2)将所述区间等间隔分为KL个子区间,将每个子区间的中点作为每类的初始中心,其中KL优选为3;(3)根据初始中心,采用K中心点聚类方法,依据足迹长度将数据集划分为KL类,各类结果记为L(i),i=1,...,KL。
其中足迹偏移角度类别层的划分方法包括如下步骤:(1)在足迹长度层每类中,统计该类别各足迹偏移角度的最大值和最小值,确定偏移角度的区间范围;(2)将区间等间隔分为KA个子空间,将每个子空间的中点作为每类的初始中心,其中KA优选为3;(3)根据初始中心,采用K中心点聚类方法,基于偏移角度将数据集划分为KAi类,其中i表示该类别在足迹长度层对应的类别编号。各类结果记为LA(i,j),j=1,...KAi
在本实施方式中,根据聚类结果分层进行判别分类的步骤包括:(1)将足迹长度作为输入,计算其与L(i)中各足迹长度差的绝对值,记为d(i,m),m=1,...,Mi,Mi表示L(i)中样本的数目;(2)依据计算待识别足迹与各类的距离;(3)将待识别足迹判别为与其角度距离最小的那类,记为i*类,(4)在数据集LA(i*,j),j=1,...,KAi值中,依据待识别足迹角度信息与各类的角度距离;(5)将待识别足迹判别为与其角度距离最小的那类,记为j*类,得到该类下所有类别,记为LA(i*,j*)作为细粒度识别的输入。
在本实施方式中,细粒度识别模型的构建是指在足迹偏移角度层的各个类别中,依据各样本的步法能量图进行SVM、KNN等分类器的构建。优选的,本发明构建了NN分类器。
可以理解为,相似度得分依据步法能量图与数据集中各样本步法能量图的归一化互相关系数计算而得。
分类方法是:(1)计算待识别图与数据集中各样本的相似度得分;(2)将相似度得分降序排列,计算其一阶差分的绝对值,记为DS(n),n=1,...,Q,Q表示待识别图像所在的偏移角度层对应类的图像数目;(3)在从n=1依次遍历查找首个值大于预定阈值t3的位置n*;(4)根据前n*幅图像所属类别,通过多数投票表决机制确定细粒度识别的最终结果,阈值t3通过训练确定,通常为0.2。
上述本发明实施例序号仅仅为了描述,不代表实施例的优劣。
在本发明的上述实施例中,对各个实施例的描述都各有侧重,某个实施例中没有详述的部分,可以参见其他实施例的相关描述。
在本申请所提供的几个实施例中,应该理解到,所揭露的技术内容,可通过其它的方式实现。其中,以上所描述的装置实施例仅仅是示意性的,例如所述单元的划分,可以为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个单元或组件可以结合或者可以集成到另一个***,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口,单元或模块的间接耦合或通信连接,可以是电性或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
最后应说明的是:以上各实施例仅用以说明本发明的技术方案,而非对其限制;尽管参照前述各实施例对本发明进行了详细的说明,本领域的普通技术人员应当理解:其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分或者全部技术特征进行等同替换;而这些修改或者替换,并不使相应技术方案的本质脱离本发明各实施例技术方案的范围。

Claims (6)

1.一种结合步法特征的成趟足迹识别方法,其特征在于,至少包括:离线训练过程和在线识别过程;
所述离线训练过程至少包括以下步骤:
S11:通过采集单元获取待训练的成趟足迹图像,得到初始待训练的成趟足迹图像数据集为D={fi,i=1,2,L,N},其中fi表示为第i个人的成趟足迹,N表示人的个数;
S12:提取所述待训练的成趟足迹图像集D中的单枚足迹;
S13:构建所述待训练的成趟足迹图像的步法能量图;
S14:根据单枚足迹提取用于粗粒度分类的待训练成趟足迹图像的步幅特征;
S15:根据提取的步幅特征构建成趟足迹粗粒度分类模型;
S16:根据步法能量图和粗粒度分类模型构建成趟足迹细粒度识别模型;
所述在线识别过程至少包括以下步骤:
S21:通过采集单元获取在线识别的成趟足迹图像;
S22:提取所述在线识别的成趟足迹图像中单枚足迹;
S23:构建所述在线识别的成趟足迹图像的步法能量图;
S24:提取用于粗粒度分类的在线识别成趟足迹图像的步幅特征;
S25:将提取的步幅特征输入到通过所述离线训练过程步骤S15构建的粗粒度分类型,得到粗分类结果;
S26:根据粗粒度分类结果和提取的步法能量图,通过所述步骤S16所构建的细粒度识别模型进行成趟足迹的细粒度识别。
2.根据权利要求1所述的一种结合步法特征的成趟足迹识别方法,其特征还在于:
所述在线识别的/待训练的成趟足迹图像提取单枚足迹:
首先将所述在线识别的/待训练的成趟足迹图像通过线性空间滤波函数进行去噪;
将单趟足迹通过边长为L*H大小的结构元素对图像进行膨胀运算,再对所述膨胀计算后的像素值水平方向投影,获得投影直方图,统计所述投影直方图投影累计像素值大于设定阈值t1的位置并标注索引,低于阈值的部分置零,从而筛除噪声的干扰;获取索引的一阶差分,判断单个足迹之间的间距。
取所述每个足迹对应间隔的中间位置作为分割点,将D中的成趟足迹图像分割为连续的单个足迹图像,去除首尾两步,得到单枚足迹。第i个人的第j幅单枚足迹图像,记为fij,其中i∈[1,N],j∈[1,M],N表示数据库中人的数量,M表示成趟足迹分割得到的单个足迹数量。
3.根据权利要求1所述的一种结合步法特征的成趟足迹识别方法,其特征还在于:
所述构建所述待训练的成趟足迹图像/在线识别的成趟足迹图像的步法能量图:
通过获得单枚足迹的连通区域,标记出所述连通区域面积大于设定连通区域阈值t2的部分,通过矩形框标记,再比较连续两幅单个足迹图像fij与fi(j+1)的所述矩形框的左上角坐标(dx,dy)中dy的大小,dy值小的足迹判定为左脚,dy值大的足迹则判定为右脚;
将连续单个足迹进行二次拼接;其中将每幅拼接图中足迹数量确定为3,按照行走习惯特点以左脚为起始开始拼接,从而构成先后关系为“左右左”的二次拼接图像fip,其中,fip表示第i个人的第p幅拼接足迹图像,其中i∈[1,N],p∈[1,P],N表示数据库中人的数量,P表示每个人的拼接图像数量;
对所述二次拼接图像进行步行线矫正和尺度归一化,求取二次拼接图像中单个足迹各自的质心,连接所述二次拼接图像中两只左脚的质心,即为左步行线lip该直线与图像x方向可以得到一个夹角θip,将图像旋转该角度,使步行线与x方向平行,完成对步行线的矫正,再求取所述二次拼接图像中足迹区域的外接矩形,以矩形的左上角坐标为基准,遍历每个人的P幅图像并将其归一化到最大外接矩形的尺寸,最后遍历每个人的P幅图像,将图像归一化到最大图像尺寸,其他位置补零;
将归一化后的二次拼接图像组合求得步法能量图,构建每个人的步法能量图其中表示第i个人的步法能量图像,N表示数据库中人的数量。
4.根据权利要求3所述的一种结合步法特征的成趟足迹识别方法,其特征还在于:
所述单个足迹步幅特征的提取,在图像完成二次拼接前,提取单个足迹图像的x方向的平均长度hi和平均偏移角度大小αi
5.根据权利要求1所述的一种结合步法特征的成趟足迹识别方法,其特征还在于:
所述构建基于步幅特征的成趟足迹粗粒度分类模型是指:在训练过程中,依据足迹步幅特征,采用无监督层次化聚类的方式将足迹数据划分为足迹长度层类别和足迹偏移角度层类别,其中足迹长度层类别是足迹偏移角度层类别的父类别;在识别过程中,根据聚类结果分层次进行判别分类;
所述足迹长度层类别划分方法包括如下步骤:(1)统计数据集中,足迹长度的最大值和最小值,确定取值的区间范围;(2)将所述区间等间隔分为KL个子区间,将每个子区间的中点作为每类的初始中心,其中KL优选为3;(3)根据初始中心,采用K中心点聚类方法,依据足迹长度将数据集划分为KL类,各类结果记为L(i),i=1,...,KL;
所述足迹偏移角度类别层的划分方法包括以下步骤:(1)在足迹长度层各类L(i)中,统计该类别各足迹偏移角度的最大值和最小值,确定偏移角度的区间范围;(2)将区间等间隔分为KA个子区间,将每个子区间的中点作为每类的初始中心,其中KA优选为3;(3)根据初始中心,采用K中心点聚类方法,基于偏移角度将数据集划分为KAi类,其中i表示该类别在足迹长度层对应的类别编号;各类结果记为LA(i,j),j=1,...,KAi
所述根据聚类结果分层次进行判别分类的步骤包括:(1)将足迹长度作为输入,计算其与L(i)类中各足迹长度差的绝对值,记为d(i,m),m=1,...,Mi,Mi表示L(i)中样本的数目;(2)依据计算待识别足迹与各类的距离;(3)将待识别足迹判别为与其距离最小的那类,记为i*类;(4)在数据集LA(i*,j),j=1,...,KAi中,依据待识别足迹角度信息计算与各类的角度距离;(5)将待识别足迹判别为与其角度距离最小的那类,记为j*类,得到该类下所有类别,记为LA(i*,j*),最终将数据集LA(i*,j*)中各样本步法能量图作为细粒度识别的输入。
6.根据权利要求5所述的一种结合步法特征的成趟足迹识别方法,其特征还在于:
所述细粒度识别模型的构建是指在足迹偏移角度层的各个类别中,依据各样本的步法能量图进行分类器的构建;所述分类器为NN分类器;
所述NN分类器分类方法为:(1)计算待识别图与数据集中各样本的相似度得分;(2)将相似度得分降序排列,计算其一阶差分的绝对值,记为DS(n),n=1,...,Q,其中,Q表示待识别图像所在的偏移角度层对应类的图像数目;(3)在从n=1依次遍历查找首个值大于预定阈值t3的位置n*;(4)根据将前n*幅图像所属类别,通过多数投票表决机制确定细粒度识别的最终结果,阈值t3通过训练确定,通常为0.2。
所述相似度得分依据步法能量图与数据集LA(i*,j*)中各样本步法能量图的归一化互相关系数计算。
CN201811224871.6A 2018-10-19 2018-10-19 一种结合步法特征的成趟足迹识别方法 Active CN109325546B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201811224871.6A CN109325546B (zh) 2018-10-19 2018-10-19 一种结合步法特征的成趟足迹识别方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201811224871.6A CN109325546B (zh) 2018-10-19 2018-10-19 一种结合步法特征的成趟足迹识别方法

Publications (2)

Publication Number Publication Date
CN109325546A true CN109325546A (zh) 2019-02-12
CN109325546B CN109325546B (zh) 2022-04-08

Family

ID=65261572

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201811224871.6A Active CN109325546B (zh) 2018-10-19 2018-10-19 一种结合步法特征的成趟足迹识别方法

Country Status (1)

Country Link
CN (1) CN109325546B (zh)

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110188694A (zh) * 2019-05-30 2019-08-30 大连海事大学 一种基于压力特征的穿鞋足迹序列识别方法
CN110298853A (zh) * 2019-07-04 2019-10-01 易思维(杭州)科技有限公司 面差视觉检测方法
CN110727814A (zh) * 2019-10-10 2020-01-24 徐庆 一种图像形状特征描述符的获取方法
CN111612727A (zh) * 2020-05-12 2020-09-01 安徽大学 一种光学足迹图像映射压力足迹图像的方法
CN111639719A (zh) * 2020-06-08 2020-09-08 安徽大学 基于时空运动和特征融合的足迹图像检索方法
CN112115909A (zh) * 2020-09-27 2020-12-22 大连海事大学 一种基于区域加权梯度分布的足迹表达方法
CN112329507A (zh) * 2020-07-17 2021-02-05 袁国平 足迹图像检测方法及装置
CN113435463A (zh) * 2021-07-27 2021-09-24 平安科技(深圳)有限公司 物体图像标注方法、***、设备及存储介质

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102184539A (zh) * 2011-04-29 2011-09-14 王靖中 基于图像处理技术的平面足迹检测分析***及其方法
KR20130142723A (ko) * 2012-06-20 2013-12-30 동국대학교 산학협력단 발자국 에너지 이미지를 이용한 사용자 인식방법 및 그 장치
CN103955715A (zh) * 2014-04-18 2014-07-30 大连恒锐科技股份有限公司 一种基于赤足或穿袜足迹图像的自动人身认定方法
CN107016414A (zh) * 2017-04-10 2017-08-04 大连海事大学 一种脚印的识别方法
CN107423715A (zh) * 2017-07-31 2017-12-01 大连海事大学 一种基于多特征联合决策的脚印自动识别方法
CN107527345A (zh) * 2017-09-29 2017-12-29 山东政法学院 一种利用步幅特征综合指标定量检验方法

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102184539A (zh) * 2011-04-29 2011-09-14 王靖中 基于图像处理技术的平面足迹检测分析***及其方法
KR20130142723A (ko) * 2012-06-20 2013-12-30 동국대학교 산학협력단 발자국 에너지 이미지를 이용한 사용자 인식방법 및 그 장치
CN103955715A (zh) * 2014-04-18 2014-07-30 大连恒锐科技股份有限公司 一种基于赤足或穿袜足迹图像的自动人身认定方法
CN107016414A (zh) * 2017-04-10 2017-08-04 大连海事大学 一种脚印的识别方法
CN107423715A (zh) * 2017-07-31 2017-12-01 大连海事大学 一种基于多特征联合决策的脚印自动识别方法
CN107527345A (zh) * 2017-09-29 2017-12-29 山东政法学院 一种利用步幅特征综合指标定量检验方法

Non-Patent Citations (4)

* Cited by examiner, † Cited by third party
Title
BO ZHOU ET AL.: "The Carpet Knows: Identifying People in a Smart Environment from a Single Step", 《2017 IEEE》 *
XINNIAN WANG E TAL.: "A manifold ranking based method using hybrid features for crime scene shoeprint retrieval", 《MULTIMED TOOLS APPL》 *
XINNIAN WANG ET AL.: "Single 2D Pressure Footprint Based Person Identification", 《2017 IEEE》 *
李岩等: "成趟足迹分析检验算法及***研究", 《机械与电子》 *

Cited By (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110188694A (zh) * 2019-05-30 2019-08-30 大连海事大学 一种基于压力特征的穿鞋足迹序列识别方法
CN110188694B (zh) * 2019-05-30 2022-10-21 大连海事大学 一种基于压力特征的穿鞋足迹序列识别方法
CN110298853A (zh) * 2019-07-04 2019-10-01 易思维(杭州)科技有限公司 面差视觉检测方法
CN110727814B (zh) * 2019-10-10 2022-10-11 徐庆 一种图像形状特征描述符的获取方法
CN110727814A (zh) * 2019-10-10 2020-01-24 徐庆 一种图像形状特征描述符的获取方法
CN111612727A (zh) * 2020-05-12 2020-09-01 安徽大学 一种光学足迹图像映射压力足迹图像的方法
CN111612727B (zh) * 2020-05-12 2023-09-12 安徽大学 一种光学足迹图像映射压力足迹图像的方法
CN111639719A (zh) * 2020-06-08 2020-09-08 安徽大学 基于时空运动和特征融合的足迹图像检索方法
CN111639719B (zh) * 2020-06-08 2023-04-07 安徽大学 基于时空运动和特征融合的足迹图像检索方法
CN112329507A (zh) * 2020-07-17 2021-02-05 袁国平 足迹图像检测方法及装置
CN112329507B (zh) * 2020-07-17 2024-04-26 袁国平 赤足足迹图像检测方法及装置
CN112115909A (zh) * 2020-09-27 2020-12-22 大连海事大学 一种基于区域加权梯度分布的足迹表达方法
CN112115909B (zh) * 2020-09-27 2024-01-09 大连海事大学 一种基于区域加权梯度分布的足迹表达方法
CN113435463A (zh) * 2021-07-27 2021-09-24 平安科技(深圳)有限公司 物体图像标注方法、***、设备及存储介质
CN113435463B (zh) * 2021-07-27 2023-06-06 平安科技(深圳)有限公司 物体图像标注方法、***、设备及存储介质

Also Published As

Publication number Publication date
CN109325546B (zh) 2022-04-08

Similar Documents

Publication Publication Date Title
CN109325546A (zh) 一种结合步法特征的成趟足迹识别方法
CN107832672B (zh) 一种利用姿态信息设计多损失函数的行人重识别方法
CN103268495B (zh) 计算机***中基于先验知识聚类的人体行为建模识别方法
CN108520226B (zh) 一种基于躯体分解和显著性检测的行人重识别方法
WO2018107760A1 (zh) 一种用于行人检测的协同式深度网络模型方法
CN108921083B (zh) 基于深度学习目标检测的非法流动摊贩识别方法
Kaâniche et al. Recognizing gestures by learning local motion signatures of HOG descriptors
CN105975932B (zh) 基于时间序列shapelet的步态识别分类方法
CN104794451B (zh) 基于分块匹配结构的行人比对方法
CN109829382B (zh) 基于行为特征智能分析的异常目标预警追踪***及方法
CN103279768B (zh) 一种基于增量学习人脸分块视觉表征的视频人脸识别方法
US20100278391A1 (en) Apparatus for behavior analysis and method thereof
CN103942577A (zh) 视频监控中基于自建立样本库及混合特征的身份识别方法
CN104992142A (zh) 一种基于深度学习和属性学习相结合的行人识别方法
CN109800624A (zh) 一种基于行人重识别的多目标跟踪方法
CN107133569A (zh) 基于泛化多标记学习的监控视频多粒度标注方法
CN102938065A (zh) 基于大规模图像数据的人脸特征提取方法及人脸识别方法
CN106778501A (zh) 基于压缩跟踪与ihdr增量学习的视频人脸在线识别方法
CN106204651A (zh) 一种基于改进的判决与生成联合模型的目标跟踪方法
CA3196344A1 (en) Rail feature identification system
Cebollada et al. Hierarchical localization in topological models under varying illumination using holistic visual descriptors
CN104268507A (zh) 一种基于rgb-d图像的手语字母识别方法
CN104966305A (zh) 基于运动矢量划分的前景检测方法
CN108898623A (zh) 目标跟踪方法及设备
CN112989889A (zh) 一种基于姿态指导的步态识别方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant