CN102200999A - 一种检索相似性形状的方法 - Google Patents

一种检索相似性形状的方法 Download PDF

Info

Publication number
CN102200999A
CN102200999A CN 201110106315 CN201110106315A CN102200999A CN 102200999 A CN102200999 A CN 102200999A CN 201110106315 CN201110106315 CN 201110106315 CN 201110106315 A CN201110106315 A CN 201110106315A CN 102200999 A CN102200999 A CN 102200999A
Authority
CN
China
Prior art keywords
shape
distance
retrieved
matrix
shapes
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN 201110106315
Other languages
English (en)
Other versions
CN102200999B (zh
Inventor
白翔
周瑜
刘文予
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Huazhong University of Science and Technology
Original Assignee
Huazhong University of Science and Technology
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Huazhong University of Science and Technology filed Critical Huazhong University of Science and Technology
Priority to CN201110106315A priority Critical patent/CN102200999B/zh
Publication of CN102200999A publication Critical patent/CN102200999A/zh
Application granted granted Critical
Publication of CN102200999B publication Critical patent/CN102200999B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Image Analysis (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本发明公开了一种相似性形状检索方法,步骤为:①提取输入查询图像和数据库中待检索图像的形状轮廓;②用内距离形状上下文描述子对所有形状(包括输入查询形状和数据库中的待检索形状)进行表示。③用动态规划方法对所有形状(包括输入查询形状和数据库中的待检索形状)进行两两之间的匹配。④用内容敏感的相似性度量方法计算获得新的相似度度量排序。⑤获得形状检索的结果。本发明不再使用两两形状之间的不相似性(距离)作为形状检索的直接依据,而是通过对形状的内在差异进行整合,利用形状相似性空间中的结构信息对原始两两形状之间的不相似度(距离)进行改进,从而有效的提升了形状检索的准确率。

Description

一种检索相似性形状的方法
技术领域
本发明涉及对形状进行检索,具体涉及一种检索相似性形状的方法。
背景技术
形状匹配/检索是计算机视觉中的一个非常重要的问题。现有许多种不同的形状匹配方法,并且在提高匹配精度上取得了一定的进展。然而,几乎所有这些方法都重点专注于两两形状之间的相似性度量,试图通过提出更合理的形状描述子和匹配算法,从而更好的度量两个形状之间的相似性或距离。这些方法都基于一个典型的观点,两个形状越相似,它们之间的差异就越小,这个差异通常由距离函数来度量。然而,这一观点忽视了一个事实:对于形状而言,有些同类形状之间的差异可能很大,而有些不同类形状之间的差异可能反而相对较小。这种现象由形状的复杂性引起,由于同类形状间的遮挡、扭曲或非刚性的形变等,同类的形状可能有很大的区别。换言之,对于区别很大的同类形状而言,无论如何改进形状描述子或匹配算法,都不可能对本来差异就很大的两个形状进行很好的度量和比较,使得它们很相似。虽然这种差异可能不是形状之间的本质区别,但却难以消除。要解决这个问题,需要对目前单纯从两个形状本身的特性出发进行相似性度量的思路进行改进。
“内距离形状上下文”是近年来提出的一种很有效的形状描述子。它对于同类形状的非刚性变化具有较强的稳定性。在本发明的***中,形状描述子使用内距离形状上下文。内距离形状上下文的具体内容,在HaibinLing和David W.Jacobs所著、2007年发表在期刊“IEEE Transactions onPattern Analysis and Machine Intelligence”第26卷第11期上的文章“ShapeClassification Using the Inner-Distance”中有详细介绍。
动态规划方法是运筹学的一个分支,是解决多阶段决策过程的一种数学方法。近年来,动态规划方法在形状匹配、形状检索中取得了广泛的应用。在本发明中,对形状进行匹配使用动态规划方法。关于动态规划方法在形状匹配中应用的内容,在Evangelos Milios和Euripides G.M.Petrakis所著、2000年发表在期刊“IEEE Transactions on Image Processing”第9卷第1期上的文章“Shape Retrieval Based on Dynamic Programming”中有详细的介绍。
发明内容
本发明的目的在于提供一种检索相似性形状的方法,该方法可以提高形状检索的准确率。
本发明提供的一种检索相似性形状的方法,包括下述步骤:
(1)提取输入查询图像和数据库中待检索图像的形状轮廓,查询图像称之为查询形状,待检索图像称之为待检索形状;
(2)在步骤(1)所提取的查询形状和待检索形状的基础上,计算每个形状轮廓的特征,也就是描述子;
(3)在步骤(2)计算得到的形状特征的基础上,对于输入的查询形状和数据库中的待检索形状所组成的形状集合,对集合中的任意两个形状之间进行匹配,求出其两两之间的不相似性度量值,根据这些不相似性度量值组成一个不相似性度量矩阵;
(4)根据步骤(3)求得的不相似性度量矩阵,计算查询形状跟数据库中任意一个待检索形状之间的相似度;
(5)基于步骤(4)中求得的输入查询形状跟数据库中所有待检索形状之间的相似度,确定检索输出结果。
本发明具备如下性质:(1)取代了以前只计算每一对形状的相似度的方式,更多地利用了由已知所有形状组成的流形;(2)没有显性地学习流形或测地线,因为这一计算耗费比较大。一个更好的相似度通过查询形状向数据库中待检索的形状传递相似度来得到。在具体实施方式部分将对本发明的效果作进一步的说明。
附图说明
图1是本发明输入的测试图像示例;
图2是形状轮廓抽样点及内距离示意图,(A)轮廓采样点示意图,(B)形状的内距离示意图,(C)局部形状的内距离示意图;
图3是内角度示意图;
图4是带角度划分的同心圆及其在轮廓表示上的应用示意图;
图5是带角度划分的同心圆及内距离示意图;
图6是计算统计直方图示意图;
图7是轮廓采样点及其统计直方图示意图;
图8是实施本发明方法的***流程图;
图9是在MPEG-7数据库上检索率的比较;
图10是在MPEG-7数据库上检索的结果的比较;
图11是带局部丢失的形状检索的结果比较。
具体实施方式
本发明涉及到一种相似形状的检索方法和***。***中有一个形状数据库,该数据库中包含若干个形状,这些形状是等待被检索输出的形状(以下简称为“待检索形状”)。另外,作为***的输入,有一个查询形状,数据库中的待检索形状会分别与该输入查询形状进行相似性比较,从而确定哪些待检索形状与输入查询形状足够相似并作为检索结果输出。
检索工作从***接收输入查询形状开始,以***返回通过检索得出的若干结果形状结束。
给定一个形状数据库、一个查询形状和一个形状距离函数,它不必是一个度量,本发明学习一个距离函数,这个距离函数通过查询形状和数据库中的待检索形状两两之间的相似度形成的流形上的最短路径来得到。本发明不需要显性地学习这个流形。实验证明,新学习的距离函数能够整合内在形状差异的知识。这个学习过程是非监督的。
在本发明提出的方法中,在根据已有形状描述子和形状匹配算法计算获得的形状相似度基础上,进一步计算得到新的相似度。直观的说,对于一个给定的形状S1,即使形状S3与形状S1不相似,但若与形状S3相似的形状S2相似于S1,那么形状S1和形状S3的相似度也会很高。然而,即使形状S1和形状S3很相似,但如果与形状S3相似的形状S2跟形状S1并不相似,那么形状S1和形状S3的相似度将会很低。因此,得到的新相似度是对内容敏感的,这里给定形状的内容就是与其相似的形状。
即使形状S1和形状S3的差异较大,但有一个形状S2与它们的差异都很小,仍然认为形状S1和形状S3相似。这种情况对于多数形状距离是可能的,因为它们不满足三角形不等式的关系,即d(S1,S3)≤d(S1,S2)+d(S2,S3)并不是一直成立。若对某些形状S1,S2,S3,,满足d(S1,S3)>d(S1,S2)+d(S2,S3)这一情况,那么本章提出的方法能够学到一个新距离d′(S1,S3)满足d′(S1,S3)≤d(S1,S2)+d(S2,S3)。同样,若在距离空间中存在一条路径使得d(S1,S3)>d(S1,S2,1)+...+d(S2,u,S3),其中u是该路径上形状的数量,那么本方法得到一个新的距离d′(S1,S3)≤d(S1,S2,1)+...+d(S2,u,S3)。由于这条路径表示一个从形状S1到形状S3的一个最小扭曲变形的过程,能够忽视不是很关键的形状差异,并且集中在较关键的形状差异上,这样就得到了一个新的距离d′。本发明通过这个新的距离度量提升了形状检索的正确率。
下面结合附图和实例对本发明方法作进一步详细的说明。
如图8所示,本发明方法包括下述步骤:
(1)提取输入查询图像和数据库中待检索图像的轮廓。输入的查询图像和数据库中的待检索图像,都是二值图像。如果输入的查询图像不是二值图像,先将其转换成二值图像。转换的方法包括人工手工标注或图像分割方法(例如,图归一化切分等算法)等。如图1所示,图中所示的形状是本发明的输入图像。从输入的查询图像和数据库的待检索图像中,通过轮廓提取算法得到形状轮廓。
从输入的查询图像所提取的形状轮廓称为查询形状,从数据库中的待检索图像所提取的形状轮廓称为待检索形状。由于形状轮廓包含了二值图像的关键信息,同时轮廓提取非常容易实现,所以输入的查询图像也可称为输入查询形状,二值图像数据库也可称为形状数据库,数据库中的待检索图像也可称为待检索形状。文中后面分别采用“查询形状”、“形状数据库”和“待检索形状”的说法。
对于数据库中的待检索图像,从二值图像得到相应的形状轮廓的处理工作,不用在检索阶段进行,可以事先完成。对于输入的查询图像,其提取形状轮廓的工作只能在检索阶段完成。
(2)在步骤(1)所提取的查询形状和待检索形状的基础上,计算每个形状轮廓的特征,也就是描述子。本发明使用内距离形状上下文作为形状的描述子。具体做法如下:
(2.1)对每个形状轮廓进行均匀采样。每个轮廓上采样N个点,N的取值在不同的应用环境中根据需要设定,如N=100。见图2(A)所示,在该图中剪刀的外轮廓上的圆形实心点即为轮廓上的采样点。
(2.2)对于每个形状轮廓上的每个采样点pi,i表示采样点的序号,i=1,...,N,使用内距离形状上下文描述子进行描述。对于某个形状来说,其形状轮廓上的所有N个采样点的内距离形状描述子,共同组成了这个形状的特征。
计算每个采样点的内距离形状上下文描述子,具体做法如下:
(2.2.1)计算内距离。定义采样点之间的内距离为在形状内部连接两个采样点的最短路径的长度。使用最短路径算法计算某个采样点pi到形状边界上其它采样点之间的内距离,计算方法如下:①首先构造一个图结构,在该图结构中,每个采样点pi作为图的顶点,设其中任意两个采样点为p1和p2,判断连接这两个顶点的边是否落在形状的内部,如果落在形状的内部,那么就在这两个顶点之间保留一条边的连接,边权重等于它们之间的欧式距离||p1-p2||。如果该边没有完全落在形状的内部,则这两个顶点之间没有一条边直接相连。②在整个权重图上使用最短路径算法(如迪科斯彻(Dijkstra)算法),获得任意两个点之间的最短连接,该最短距离即为内距离。在图2(C)中是形状局部细节上的最短路径线段。
(2.2.2)计算内角度。定义一个采样点p1相对于另一个采样点p2的内角度为轮廓采样点p1的切线方向和从点p1出发的p1、p2之间的最短路径方向之间的夹角。如图3中,p1和p2是轮廓上的两个采样点,图中所示的角度θ即为p1和p2之间的内角度。
(2.2.3)计算内距离形状上下文描述子。本发明中使用带方向划分的同心圆作为计算描述子的工具,所谓带方向划分是指以采样点pi的切线方向为零度角方向,将360度空间均匀划分成G个区间,如图4所示,同心圆的圆心处于某个轮廓采样点pi,同心圆每个圆的半径以及同心圆的方向角度划分根据应用的具体场合而定,假设零角度方向为采样点pi的切线方向,假设角度划分为G个区间,本例中使用的是将360度划分为G=12个区间,每个区域为30度。又假设有R个同心圆,本例中R=5,则R个同心圆和G个角度区间结合起来构成了(R+1)×G个区间。然后结合(2.2.1)和(2.2.2)获得的内距离和内角度,确定轮廓上其他的点在以点pi为圆心的带方向距离划分同心圆的(R+1)×G个区间中的分布,获得一个统计直方图,该直方图见图7右侧所示。该统计直方图即为内距离形状上下文描述子。其数学定义为:
hi(k)=#{pj:1≤j≤N,j≠i,pj-pi∈bin(k)}
在上式中,hi表示轮廓上第i个采样点的内距离形状上下文统计直方图,hi(k)表示落在该统计直方图的第k个区间里点的个数,k的取值范围是从1到(R+1)×G的整数。pi表示第i个采样点,也就是该统计直方图描述的对象,pj则表示形状轮廓上的N个采样点中,除了pi以外其他N-1个点中的任意一个。pi是上述同心圆的圆心,pj-pi表示一个向量,该向量指向pj。bin表示上述的用带方向距离划分的同心圆获得的区间划分,bin(k)表示第k个区间。表达式的含义是如果向量pj-pi落在区间bin(k)中,则认为点pj落在统计直方图的区间k中,把相应的统计直方图的区间k中的点的数量hi(k)加1。符号#表示累加的含义。
结合图4、图5进一步解释,在图4中,设圆心所在的位置为pi,箭头指向的位置为pj,经过一个中间点pw,图5中从圆心出发的折线段的长度即为内距离,在计算内距离形状上下文描述子时,首先将图5中的折线段做部分旋转得到图6中所示的直线段,然后看该直线段末端端点落在哪个距离区间中,判断该直线段与点pi的切线方向的夹角(即图6中接近圆心位置所标示的角度θ)的度数落在哪个角度区间中,结合上述两部分信息,最终确定点pj落在哪个区间中,然后将该区间的累加值在之前的基础上加1。
最终获得的统计直方图如图7所示,颜色越深的地方表示点数越少,颜色越浅的地方表示点数越多。
在图7的统计直方图中,横轴方向表示角度区间划分,纵轴方向表示距离区间划分。
(2.3)计算每个形状轮廓的特征
重复(2.2)的过程,计算获得某个形状轮廓上每一个采样点的内距离形状上下文描述子,从而获得对该形状的描述。这种对整个形状的描述,是通过一组如(2.2.3)描述的统计直方图所组成,每个统计直方图都是该形状轮廓上某一个点的描述。这样一组描述子,就是前面所述的形状特征。
重复这个过程,计算获得输入查询形状和数据库中所有待检索形状的特征。
对于数据库中的待检索形状,其形状轮廓特征的计算不用在检索阶段进行,可以事先完成。对于输入的查询形状,其形状轮廓特征的计算只能在检索阶段完成。
(3)形状匹配
在步骤(2)计算得到的形状特征的基础上,对于输入的查询形状和数据库中的待检索形状所组成的形状集合,对集合中的任意两个形状之间进行匹配,求出其两两之间的不相似性度量值(距离)。
(3.1)两个形状之间的匹配
本发明使用动态规划方法,求解任意两个形状轮廓上采样点的最佳对应关系和这两个形状之间的不相似性度量值(距离),完成形状匹配。具体做法如下:
假设待匹配的其中一个形状为A,另外一个形状为B,由A和B的轮廓采样点组成两个序列集合,分别记为{pi,i=1,...,N},{qj,j=1,...,N}。
(3.1.1)分别计算序列{pi,i=1,...,N}中的任意一个点pi与序列{qj,j=1,...,N}中的任意一个点qj之间的特征距离c(i,j),该距离定义为由(2.2)计算得到的点pi的统计直方图与点qj的统计直方图之间的距离,其数学定义如下:
c ( i , j ) = 1 2 Σ k = 1 ( R + 1 ) × G [ h A , i ( k ) - h B , j ( k ) ] 2 h A , i ( k ) + h B , j ( k )
其中hA,i,hB,j为(2.2.3)中定义的统计直方图,下标A和B表示hA,i(k)、hB,j(k)分别是形状A和形状B的统计直方图,c(i,j)表示点pi和点qi的特征距离。
通过计算形状A上所有点与形状B上所有点的特征距离,获得N×N的特征距离矩阵{c(i,j),i=1,...,N,j=1,...,N}:
C = c ( 1,1 ) c ( 1,2 ) . . . c ( 1 , N - 1 ) c ( 1 , N ) c ( 2,1 ) c ( 2,2 ) . . . c ( 2 , N - 1 ) c ( 2 , N ) . . . . . . . . . . . . . . . c ( N - 1,1 ) c ( N - 1,2 ) . . . c ( N - 1 , N - 1 ) c ( N - 1 , N ) c ( N , 1 ) c ( N , 2 ) . . . c ( N , N - 1 ) c ( N , N )
(3.1.2)假设两个序列{pi,i=1,...,N}和{qj,j=1,...,N}在点p1和q1处对齐。运用动态规划方法,求得两个序列的不相似度(距离)D1,其求解过程如下:
①生成一个N×N的空矩阵M,称为动态规划矩阵。
②初始化边际条件:
M(0,0)=0;
M(i,0)=γ×i,i=1,...,N;
M(0,j)=γ×j,j=1,...,N;
这些数值不包含在动态规划矩阵M中,因为M中的元素的行索引和列索引的范围均为从1到N的整数。γ为设定的一个标量惩罚因子。
③按照从左到右、从上到下的顺序,依次计算动态规划矩阵M中每个元素的值S(i,j),i=1,...,N,j=1,...,N。计算公式如下:
M ( i , j ) = min M ( i - 1 , j - 1 ) + c ( i , j ) M ( i - 1 , j ) + γ M ( i , j - 1 ) + γ
其中c(i,j)为点pi与点qj之间的特征距离。
④当动态规划矩阵中每个元素的值均计算完毕,则动态规划方法结束。两个序列的不相似度D1=M(N,N)。
(3.1.4)重复(3.1.3)的过程,分别假设两个序列{pi}和{qi}在p2与q1处对齐,p3与q1处对齐,......,pN与q1处对齐,分别运用动态规划算法求得不相似度(距离)D2,D3,...,DN
(3.1.5)选取步骤(3.1.3)到(3.1.4)中求得的N个距离中最小的那个,作为形状A,B之间的不相似性度量值(距离):
D(A,B)=min(Di),i=1,...,N
(3.2)形状集合中两两形状之间的匹配
对于由输入的查询形状和数据库中的待检索形状所组成的形状集合,利用步骤(3.1)所描述的方法,对集合中的任意两个形状,利用动态规划算法进行匹配,求出其不相似性度量值(距离)。
假设数据库中含有n个待检索形状,n为正整数,输入的查询形状与数据库中的n个形状一起,一共组成了n+1个形状{xi,i=1,...,n+1}。根据步骤(3.1),可以分别求出这n+1个形状两两之间的不相似性度量值(距离),组成一个不相似性度量矩阵(距离矩阵){Di,j,i,j=1,...,n,n+1}:
其中,Di,j表示第i个形状与第j个形状之间的不相似性度量值(距离)。另外,将输入的查询形状放在这n+1个形状中的第一个,即x1
对于数据库中的n个待检索形状,其两两之间的匹配和不相似性度量计算,不用在检索阶段进行,可以事先完成。但如果被匹配的两个形状中包含输入的查询形状,则其匹配和不相似性度量工作,只能在检索阶段完成。也就是说,对于矩阵D,其第一行和第一列的元素值必须在检索阶段计算,其他元素值均可事先计算求得。
(4)根据步骤(3)求得的不相似性度量(距离)矩阵,计算查询形状跟数据库中任意一个待检索形状之间的相似度。
本步骤也就是通过使用内容敏感的形状相似度度量方法获得检索结果,其具体做法如下:
(4.1)定义关系矩阵wi,j,其计算公式如下:
w i , j = exp ( - D i , j 2 λ i , j 2 )
其中,Di,j是步骤(3.2)中获得的不相似度量矩阵(距离矩阵),λi,j为归一化参数,该归一化参数的计算方法如下:
λi,j=α·mean({knnd(xi),knnd(xj)})
在上式中,mean({knnd(xi),knnd(xj)})表示形状xi,xj的前b个最近邻距离的平均距离。所谓最近邻距离,是指与该形状的不相似性度量值(距离)中最小的b个距离。参数b和α在实际应用环境中根据经验决定,在本例中b=10,α=0.27。
(4.2)定义概率转移矩阵P,该概率转移矩阵通过对wi,j沿行方向归一化得到,计算公式如下:
P i , j = w i , j Σ h = 1 n + 1 w i , h
其中wi,j为上述的关系矩阵。
(4.3)定义关键函数f,并通过下列递归的过程来求解关键函数:
f t + 1 ( x i ) = Σ j = 1 n + 1 P i , j f t ( x j ) , i=2,...,(n+1)
且有
ft+1(x1)=1
其中Pi,j为上述的概率转移矩阵;该递归过程需要经过T次迭代,参数T在实际应用环境中预先决定,本例中T=5000。
(4.4)使用步骤(4.3)的递归迭代过程得到的关键函数f,结果记作fT(xi),i=1,...,n,n+1,求解结果是一个n+1行1列的矩阵。去掉fT(x1),所剩余的n行1列的矩阵中,第i行的值表示数据库中的第i个形状与输入查询形状的相似度。
(5)基于(4)中求得的输入查询形状跟数据库中n个待检索形状之间的相似度fT(xi),i=2,...,n,n+1,确定检索输出结果。
对fT(xi),i=2,...,n+1中的n行值从大到小进行排序,根据排序以后的顺序,确定数据库中待检索形状的检索输出顺序。例如,第i个值最大,则输出的检索结果,第i-1个形状排在检索结果的第一位,以此类推得到第二位检索结果、第三位检索结果,等等。
检索输出的不是形状轮廓,而是数据库中的原始二值图像。如图10、图11所示。
设定一个参数l,表示检索返回的图像结果的数量。也就是说,检索返回的是数据库中与输入查询图像相似度最大的前l个图像。参数l的值由用户根据实际应用的需求灵活设定,本例中l=40。
实验结果证明本发明能够提高已有形状匹配方法的检索性能。
表1中给出了在MPEG-7CE-Shape-1数据库上本发明与近10年来发表在国际重要期刊和会议上的主要方法的比较,本发明取得了91.61%的检索精度,是目前在该数据库上取得的结果中最高的。
表2中给出了在Kimia99数据集上本发明与近年来的重要方法的结果并进行了比较,结果显示,本发明的方法在各个阶上的结果均高于其他方法。
在具体实施方式(4.1)中,存在着两个参数b和α,表3给出了在不同的参数下***能够达到的检索精度,可以看到,在微调参数的情况下,本发明的最高检索精度可以达到92.57%。
图9中给出的是在MPEG-7数据库上直接使用内距离形状上下文方法的检索率(圆圈标记的曲线)和使用本发明方法的检索率(“*”号标记的曲线)的比较。可以看到本发明给出的方法效果明显优于直接使用内距离形状上下文方法。
图10给出的是在MPEG-7数据库上检索的结果,第一列是待检索的形状,右边10列是直接使用内距离形状上下文方法(奇数行)的检索结果和本发明方法(偶数行)的检索结果,图中给出了前10个最相近的结果。可以看到本发明给出的方法效果明显优于直接使用内距离形状上下文方法。
图11给出的是带局部丢失的形状检索实验。第一列为丢失了一个部分的待检索图像,右边10列是直接使用内距离形状上下文方法(奇数行)进行检索和使用本发明方法(偶数行)进行检索得到的检索结果,图中给出了前10个最相似的检索结果。
表1不同方法在MPEG-7数据集上的检索率(bull’s eyes)
Figure BDA0000057703650000131
表2Kimia 99数据集的检索结果
Figure BDA0000057703650000132
表3在不同参数下的bull’s eye检索率
  b=3   b=5   b=7   b=9
  α=0.1   83.9%   88.11%   89.26%   89.84%
  α=0.15   84.33%   88.67%   89.66%   90.31%
  α=0.2   85.77%   90.29%   91.34%   91.84%
  α=0.25   88.71%   92.17%   92.57%   92.56%
  α=0.3   89.69%   91.16%   91.41%   91.16%
  α=0.35   89.03%   90.39%   90.30%   90.20%
  α=0.4   88.74%   89.99%   89.97%   89.84%
本发明不仅局限于上述具体实施方式,本领域一般技术人员根据本发明公开的内容,可以采用其它多种具体实施方式实施本发明,因此,凡是采用本发明的设计结构和思路,做一些简单的变化或更改的设计,都落入本发明保护的范围。

Claims (7)

1.一种检索相似性形状的方法,包括下述步骤:
(1)提取输入查询图像和数据库中待检索图像的形状轮廓,查询图像称之为查询形状,待检索图像称之为待检索形状;
(2)在步骤(1)所提取的查询形状和待检索形状的基础上,计算每个形状轮廓的特征,也就是描述子;
(3)在步骤(2)计算得到的形状特征的基础上,对于输入的查询形状和数据库中的待检索形状所组成的形状集合,对集合中的任意两个形状之间进行匹配,求出其两两之间的不相似性度量值,根据求出的不相似性度量值组成不相似性度量矩阵;
(4)根据步骤(3)求得的不相似性度量矩阵,计算查询形状跟数据库中任意一个待检索形状之间的相似度;
(5)基于(4)中求得的输入查询形状跟数据库中n个待检索形状之间的相似度,确定检索输出结果。
2.根据权利要求1所述的检索相似性形状的方法,其特征在于,步骤(2)包括下述过程:
(2.1)对每个形状轮廓进行均匀采样;
(2.2)对于每个形状轮廓上的每个采样点pi,i表示采样点的序号,i=1,...,N,使用内距离形状上下文描述子进行描述,N表示形状轮廓上的采样点的数量;
(2.3)重复(2.2)的过程,计算获得某个形状轮廓上每一个采样点的内距离形状上下文描述子,从而获得对该形状的描述。
3.根据权利要求1所述的检索相似性形状的方法,其特征在于,步骤(2.2)包括下述过程:
(2.2.1)计算内距离:定义采样点之间的内距离为在形状内部连接两个采样点的最短路径的长度,使用最短路径算法计算某个采样点pi到形状边界上其它采样点之间的内距离;
(2.2.2)计算内角度:定义一个采样点p1相对于另一个采样点p2的内角度为轮廓采样点p1的切线方向和从点p1出发的p1、p2之间的最短路径方向之间的夹角;
(2.2.3)计算内距离形状上下文描述子:使用带方向划分的同心圆作为计算描述子的工具,同心圆的圆心处于某个轮廓采样点pi,假设角度划分为G个区间,又假设有R个同心圆,则R个同心圆和G个角度区间结合起来构成了(R+1)×G个区间;然后结合(2.2.1)和(2.2.2)获得的内距离和内角度,确定轮廓上其他的点在以点pi为圆心的带方向距离划分同心圆的(R+1)×G个区间中的分布,获得一个统计直方图,该统计直方图即为内距离形状上下文描述子。
4.根据权利要求1所述的检索相似性形状的方法,其特征在于,步骤(3)具体包括下述过程:
(3.1)两个形状之间的匹配:
使用动态规划方法,求解任意两个形状轮廓上采样点的最佳对应关系和这两个形状之间的不相似性度量值,完成形状匹配;
(3.2)形状集合中两两形状之间的匹配,得到不相似度量矩阵{Di,j,i,j=1,...,n,n+1}:
对于由输入的查询形状和数据库中的待检索形状所组成的形状集合,利用步骤(3.1)所描述的方法,对集合中的任意两个形状,利用动态规划算法进行匹配,求出其不相似性度量值;
假设数据库中含有n个待检索形状,n为正整数,输入的查询形状与数据库中的n个形状一起,一共组成了n+1个形状{xi,i=1,...,n+1};根据步骤(3.1),分别求出这n+1个形状两两之间的不相似性度量值,组成一个不相似度量矩阵{Di,j,i,j=1,...,n,n+1}:
D i , j = D ( 1,1 ) D ( 1,2 ) . . . D ( 1 , n ) D ( 1 , n + 1 ) D ( 2,1 ) D ( 2,2 ) . . . D ( 2 , n ) D ( 2 , n + 1 ) . . . . . . . . . . . . . . . D ( n , 1 ) D ( n , 2 ) . . . D ( n , n ) D ( n , n + 1 ) D ( n + 1,1 ) D ( n + 1,2 ) . . . D ( n + 1 , n ) D ( n + 1 , n + 1 )
其中,Di,j表示第i个形状与第j个形状之间的不相似性度量值。
5.根据权利要求3所述的检索相似性形状的方法,其特征在于,步骤(3)具体包括下述过程:
(3.1)两个形状之间的匹配:
使用动态规划方法,求解任意两个形状轮廓上采样点的最佳对应关系和这两个形状之间的不相似性度量值,完成形状匹配;
(3.2)形状集合中两两形状之间的匹配,得到不相似度量矩阵{Di,j,i,j=1,...,n,n+1}:
对于由输入的查询形状和数据库中的待检索形状所组成的形状集合,利用步骤(3.1)所描述的方法,对集合中的任意两个形状,利用动态规划算法进行匹配,求出其不相似性度量值;
假设数据库中含有n个待检索形状,n为正整数,输入的查询形状与数据库中的n个形状一起,一共组成了n+1个形状{xi,i=1,...,n+1};根据步骤(3.1),分别求出这n+1个形状两两之间的不相似性度量值,组成一个不相似度量矩阵{Di,j,i,j=1,...,n,n+1}:
D i , j = D ( 1,1 ) D ( 1,2 ) . . . D ( 1 , n ) D ( 1 , n + 1 ) D ( 2,1 ) D ( 2,2 ) . . . D ( 2 , n ) D ( 2 , n + 1 ) . . . . . . . . . . . . . . . D ( n , 1 ) D ( n , 2 ) . . . D ( n , n ) D ( n , n + 1 ) D ( n + 1,1 ) D ( n + 1,2 ) . . . D ( n + 1 , n ) D ( n + 1 , n + 1 )
其中,Di,j表示第i个形状与第j个形状之间的不相似性度量值。
6.根据权利要求5所述的检索相似性形状的方法,其特征在于,步骤(3.1)具体包括下述过程:
(3.1.1)分别计算序列{pi,i=1,...,N}中的任意一个点pi与序列{qj,j=1,...,N}中的任意一个点qj之间的特征距离c(i,j),该距离定义为由(2.2)计算得到的点pi的统计直方图与点qj的统计直方图之间的距离,其数学定义如下:
c ( i , j ) = 1 2 Σ k = 1 ( R + 1 ) × G [ h A , i ( k ) - h B , j ( k ) ] 2 h A , i ( k ) + h B , j ( k )
其中hA,i,hB,j为步骤(2.2.3)中定义的统计直方图,下标A和B表示hA,i(k)、hB,j(k)分别是形状A和形状B的统计直方图,c(i,j)表示点pi和点qi的特征距离;
通过计算形状A上所有点与形状B上所有点的特征距离,获得N×N的特征距离矩阵{c(i,j),i=1,...,N,j=1,...,N}:
C = c ( 1,1 ) c ( 1,2 ) . . . c ( 1 , N - 1 ) c ( 1 , N ) c ( 2,1 ) c ( 2,2 ) . . . c ( 2 , N - 1 ) c ( 2 , N ) . . . . . . . . . . . . . . . c ( N - 1,1 ) c ( N - 1,2 ) . . . c ( N - 1 , N - 1 ) c ( N - 1 , N ) c ( N , 1 ) c ( N , 2 ) . . . c ( N , N - 1 ) c ( N , N )
(3.1.2)假设两个序列{pi,i=1,...,N}和{qj,j=1,...,N}在点p1和q1处对齐,运用动态规划方法,求得两个序列的不相似度,作为D1,其求解过程如下:
①生成一个N×N的空矩阵M,称为动态规划矩阵;
②初始化边际条件:
M(0,0)=0;
M(i,0)=γ×i,i=1,...,N;
M(0,j)=γ×j,j=1,...,N;
γ为设定的一个标量惩罚因子;
③按照从左到右、从上到下的顺序,依次计算动态规划矩阵M中每个元素的值S(i,j),i=1,...,N,j=1,...,N,计算公式如下:
M ( i , j ) = min M ( i - 1 , j - 1 ) + c ( i , j ) M ( i - 1 , j ) + γ M ( i , j - 1 ) + γ
其中c(i,j)为点pi与点qj之间的特征距离;
④当动态规划矩阵中每个元素的值均计算完毕,则动态规划方法结束,两个序列的不相似度D1=M(N,N);
(3.1.3)重复(3.1.2)的过程,分别假设两个序列{pi}和{qi}在p2与q1处对齐,p3与q1处对齐,......,pN与q1处对齐,分别运用动态规划算法求得不相似度D2,D3,...,DN
(3.1.4)选取步骤(3.1.2)到(3.1.3)中求得的N个距离中最小的那个,作为形状A,B之间的不相似性度量值:
D(A,B)=min(Di),i=1,...,N。
7.根据权利要求1至6中任一所述的检索相似性形状的方法,其特征在于,步骤(4)具体包括下述过程:
(4.1)定义关系矩阵wi,j,其计算公式如下:
w i , j = exp ( - D i , j 2 λ i , j 2 )
其中,Di,j,是步骤(3.2)中获得的不相似度量矩阵,λi,j为归一化参数,该归一化参数的计算方法如下:
λi,j=α·mean({knnd(xi),knnd(xj)})
在上式中,mean({knnd(xi),knnd(xj)})表示形状xi,xj的前b个最近邻距离的平均距离,所谓最近邻距离,是指与该形状的不相似性度量值中最小的b个距离;
(4.2)定义概率转移矩阵P,该概率转移矩阵通过对wi,j沿行方向归一化得到,计算公式如下:
P i , j = w i , j Σ h = 1 n + 1 w i , h
(4.3)定义关键函数f,并通过下列递归的过程来求解关键函数:
f t + 1 ( x i ) = Σ j = 1 n + 1 P i , j f t ( x j ) , i=2,...,(n+1)
且有
ft+1(x1)=1
其中Pi,j为上述的转移概率矩阵;该递归过程需要经过T次迭代,参数T为预先设定的迭代次数;
(4.4)使用步骤(4.3)的递归迭代过程得到关键函数f,结果记作fT(xi),i=1,...,n,n+1,求解结果是一个n+1行1列的矩阵;去掉fT(x1),所剩余的n行1列的矩阵中,第i行的值表示数据库中的第i个形状与输入查询形状的相似度。
CN201110106315A 2011-04-27 2011-04-27 一种检索相似性形状的方法 Expired - Fee Related CN102200999B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201110106315A CN102200999B (zh) 2011-04-27 2011-04-27 一种检索相似性形状的方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201110106315A CN102200999B (zh) 2011-04-27 2011-04-27 一种检索相似性形状的方法

Publications (2)

Publication Number Publication Date
CN102200999A true CN102200999A (zh) 2011-09-28
CN102200999B CN102200999B (zh) 2012-10-10

Family

ID=44661674

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201110106315A Expired - Fee Related CN102200999B (zh) 2011-04-27 2011-04-27 一种检索相似性形状的方法

Country Status (1)

Country Link
CN (1) CN102200999B (zh)

Cited By (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102306202A (zh) * 2011-09-30 2012-01-04 中国传媒大学 一种基于街区距离的高维向量快速检索算法
CN102521287A (zh) * 2011-11-28 2012-06-27 上海交通大学 基于期望模型的图像重排序方法
CN103093461A (zh) * 2013-01-14 2013-05-08 大连理工大学 一种基于度量信息的形状匹配方法
WO2013143222A1 (zh) * 2012-03-31 2013-10-03 中国科学技术大学 地震事件参数估计获取方法和***,地震事件搜索引擎
CN104299226A (zh) * 2014-09-22 2015-01-21 大冶市华兴玻璃有限公司 一种圆形瓶罐轮廓相似性检索的方法
CN104487961A (zh) * 2012-10-30 2015-04-01 惠普发展公司,有限责任合伙企业 用计算机视觉来分析数据
CN104680132A (zh) * 2015-01-30 2015-06-03 哈尔滨工程大学 一种基于形状上下文方法的声纳目标识别方法
WO2015047479A3 (en) * 2013-09-12 2015-06-04 The Boeing Company Isotropic feature matching
US9239395B2 (en) 2012-03-31 2016-01-19 University Of Science And Technology Of China Method and system of determining earthquake parameters, earthquake search engine
CN106682693A (zh) * 2016-12-23 2017-05-17 浙江大学 一种用于塑料瓶瓶身重叠图像的识别方法
CN108563767A (zh) * 2018-04-19 2018-09-21 深圳市商汤科技有限公司 图像检索方法及装置
CN109426791A (zh) * 2017-09-01 2019-03-05 深圳市金溢科技股份有限公司 一种多站点多元车辆匹配方法、服务器及***
CN109685837A (zh) * 2018-11-07 2019-04-26 中国矿业大学 一种基于地物结构相似度的异源遥感影像配准方法
CN113379777A (zh) * 2021-05-26 2021-09-10 西安电子科技大学 一种基于最小外接矩形垂直内距离比例的形状描述与检索方法

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2001011563A1 (en) * 1999-08-05 2001-02-15 Koninklijke Philips Electronics N.V. Detection of auxiliary data in an information signal
CN1379364A (zh) * 2001-03-29 2002-11-13 日本电气株式会社 图形对照装置及其图形对照方法

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2001011563A1 (en) * 1999-08-05 2001-02-15 Koninklijke Philips Electronics N.V. Detection of auxiliary data in an information signal
CN1379364A (zh) * 2001-03-29 2002-11-13 日本电气株式会社 图形对照装置及其图形对照方法

Cited By (25)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102306202B (zh) * 2011-09-30 2013-09-04 中国传媒大学 一种基于街区距离的高维向量快速检索算法
CN102306202A (zh) * 2011-09-30 2012-01-04 中国传媒大学 一种基于街区距离的高维向量快速检索算法
CN102521287A (zh) * 2011-11-28 2012-06-27 上海交通大学 基于期望模型的图像重排序方法
US9239395B2 (en) 2012-03-31 2016-01-19 University Of Science And Technology Of China Method and system of determining earthquake parameters, earthquake search engine
CN103365916A (zh) * 2012-03-31 2013-10-23 中国科学技术大学 地震事件参数估计获取方法和***,地震事件搜索引擎
JP2014517377A (ja) * 2012-03-31 2014-07-17 中国科学技▲術▼大学 地震イベントパラメータの推定を取得する方法及びそのシステム、地震イベント探索エンジン
WO2013143222A1 (zh) * 2012-03-31 2013-10-03 中国科学技术大学 地震事件参数估计获取方法和***,地震事件搜索引擎
CN103365916B (zh) * 2012-03-31 2016-12-14 中国科学技术大学 地震事件参数估计获取方法和***,地震事件搜索引擎
CN104487961A (zh) * 2012-10-30 2015-04-01 惠普发展公司,有限责任合伙企业 用计算机视觉来分析数据
CN104487961B (zh) * 2012-10-30 2018-05-18 企业服务发展公司有限责任合伙企业 用计算机视觉来分析数据
CN103093461B (zh) * 2013-01-14 2015-11-18 大连理工大学 一种基于度量信息的形状匹配方法
CN103093461A (zh) * 2013-01-14 2013-05-08 大连理工大学 一种基于度量信息的形状匹配方法
WO2015047479A3 (en) * 2013-09-12 2015-06-04 The Boeing Company Isotropic feature matching
US9305233B2 (en) 2013-09-12 2016-04-05 The Boeing Company Isotropic feature matching
CN104299226B (zh) * 2014-09-22 2017-07-28 大冶市华兴玻璃有限公司 一种圆形瓶罐轮廓相似性检索的方法
CN104299226A (zh) * 2014-09-22 2015-01-21 大冶市华兴玻璃有限公司 一种圆形瓶罐轮廓相似性检索的方法
CN104680132A (zh) * 2015-01-30 2015-06-03 哈尔滨工程大学 一种基于形状上下文方法的声纳目标识别方法
CN104680132B (zh) * 2015-01-30 2017-11-21 哈尔滨工程大学 一种基于形状上下文方法的声纳目标识别方法
CN106682693A (zh) * 2016-12-23 2017-05-17 浙江大学 一种用于塑料瓶瓶身重叠图像的识别方法
CN109426791A (zh) * 2017-09-01 2019-03-05 深圳市金溢科技股份有限公司 一种多站点多元车辆匹配方法、服务器及***
CN108563767A (zh) * 2018-04-19 2018-09-21 深圳市商汤科技有限公司 图像检索方法及装置
US11328171B2 (en) 2018-04-19 2022-05-10 Shenzhen Sensetime Technology Co., Ltd. Image retrieval method and apparatus
CN109685837A (zh) * 2018-11-07 2019-04-26 中国矿业大学 一种基于地物结构相似度的异源遥感影像配准方法
CN109685837B (zh) * 2018-11-07 2024-03-22 中国矿业大学 一种基于地物结构相似度的异源遥感影像配准方法
CN113379777A (zh) * 2021-05-26 2021-09-10 西安电子科技大学 一种基于最小外接矩形垂直内距离比例的形状描述与检索方法

Also Published As

Publication number Publication date
CN102200999B (zh) 2012-10-10

Similar Documents

Publication Publication Date Title
CN102200999B (zh) 一种检索相似性形状的方法
Chang et al. Sparse regularization in fuzzy $ c $-means for high-dimensional data clustering
Cucuringu Sync-rank: Robust ranking, constrained ranking and rank aggregation via eigenvector and SDP synchronization
Rayana et al. Sequential ensemble learning for outlier detection: A bias-variance perspective
Cucuringu et al. SPONGE: A generalized eigenproblem for clustering signed networks
CN101567051B (zh) 一种基于特征点的图像配准方法
CN110188225B (zh) 一种基于排序学习和多元损失的图像检索方法
Ma et al. Distance and density clustering for time series data
CN107291847A (zh) 一种基于MapReduce的大规模数据分布式聚类处理方法
CN104572965A (zh) 基于卷积神经网络的以图搜图***
Yang et al. A feature-metric-based affinity propagation technique for feature selection in hyperspectral image classification
CN109325510B (zh) 一种基于网格统计的图像特征点匹配方法
CN102495886A (zh) 基于量子算法的指纹数据库搜索方法
Lai et al. Point cloud discretization of Fokker--Planck operators for committor functions
CN111507297B (zh) 一种基于度量信息矩阵的雷达信号识别方法及***
Martínez et al. Adaptive sampling strategies for quickselects
CN110647647B (zh) 一种基于时间序列复杂度差异性的封闭图形相似性搜索方法
Feng et al. Hyperspectral band selection based on ternary weight convolutional neural network
Schlegel et al. Visual localization and loop closing using decision trees and binary features
Jiang Sparse estimation based on square root nonconvex optimization in high-dimensional data
WO2016112618A1 (zh) 一种基于距离的求解二维空间中代表性节点集的算法
CN105512480B (zh) 基于编辑距离的可穿戴设备数据优化处理方法
CN103678709A (zh) 一种基于时序数据的推荐***攻击检测算法
US20200258105A1 (en) Mutually repulsing centroids for segmenting a vast social graph
Sigirci et al. Spectral-spatial classification of hyperspectral images using BERT-based methods with HyperSLIC segment embeddings

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20121010

CF01 Termination of patent right due to non-payment of annual fee