CN106373131A - 基于边缘的图像显著性区域检测方法 - Google Patents
基于边缘的图像显著性区域检测方法 Download PDFInfo
- Publication number
- CN106373131A CN106373131A CN201610729055.5A CN201610729055A CN106373131A CN 106373131 A CN106373131 A CN 106373131A CN 201610729055 A CN201610729055 A CN 201610729055A CN 106373131 A CN106373131 A CN 106373131A
- Authority
- CN
- China
- Prior art keywords
- super
- pixel
- edge
- different
- significance value
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Landscapes
- Image Analysis (AREA)
Abstract
本发明公开了一种基于边缘的图像显著性区域检测方法,包括以下步骤:步骤一:将原始图像通过边缘检测得到超度量等高线图UCM;步骤二:针对UCM通过不同的门限去得到两个不同尺度的超像素划分;步骤三:在细颗粒度的超像素划分层面上同时考虑颜色对比度、空间先验和边界先验去得到初始显著性值;步骤四:在细颗粒度的超像素划分层面上,以每个超像素为节点,边缘强度为边建立一个无方向的图,通过计算图上不同节点的测地距离得到背景先验;步骤五:联合考虑初始显著性值、背景先验和不同尺度的一致性去得到最终的显著性值。本发明能够得到统一高亮的显著性物体或者区域,能够有助于图像缩放和图像分割等应用。
Description
技术领域
本发明涉及一种计算机视觉技术,特别是涉及一种基于边缘的图像显著性区域检测方法。
背景技术
现在,人们对高质量和高清晰度的图像内容的需求日益增多。然而,人眼在面对复杂场景的时候,往往注意力只会集中到少数几个比较突出的区域,这些突出的区域被称为视觉显著性区域。目前国内外提出了一些视觉显著性算法,例如,Cheng(M.Cheng,N.J.Mitra,X.Huang,P.H.S.Torr,S.Hu,Global contrast based salient regiondetection,IEEE Transactions on Pattern Analysis and Machine Intelligence 37(3)(2015)569–582.)提出了一种基于区域直方图的全局对比度算法,通过直方图计算对比度来度量区域间的颜色距离。该方法在区域对比度明显的时候能够取得不错的效果,当区域对比度不明显的时候效果会有显著的下降。Perazzi(F.Perazzi,P.Krahenbuhl,Y.Pritch,A.Hornung,Saliency filters:Contrast based filtering for salientregion detection,in:IEEE Conference on Computer Vision and PatternRecognition(CVPR),2012,pp.733–740.)提出了一种基于颜色对比度和空间分布的显著性算法。在考虑颜色对比度的基础上,同时考虑了颜色的空间分布先验,能够取得更好的效果。Wei(Y.Wei,F.Wen,W.Zhu,J.Sun,Geodesic saliency using background priors,in:European Conference on Computer Vision(ECCV),2012,pp.29–42.)提出了一个基于背景先验的显著性算法,由于显著性物体一般会远离图像的边缘,所以该方法能够取得较好的效果。然而,当显著性物体接触到图像边缘的时候,该方法性能下降明显。
目前国内专利有:基于色彩直方图和全局对比度的图像视觉显著性计算方法(中国专利申请号201110062520)与基于测地线距离的图像显著性区域检测方法(中国专利申请号201310066844)。前者只考虑了颜色对比度,后者过于依赖Harris角点检测的结果。
本发明公开的方法不同于上述所有方法,因为本发明目的在于得到统一高亮的显著性图,其能利用颜色对比度、空间先验和边界先验去得到初始的显著性值,然后通过背景先验和不同尺度的一致性的联合优化去得到最终的显著性图。
发明内容
本发明所要解决的技术问题是提供一种基于边缘的图像显著性区域检测方法,使得最终的显著性物体能被统一高亮,有效的选择人眼感兴趣的区域。
本发明是通过下述技术方案来解决上述技术问题的:一种基于边缘的图像显著性区域检测方法,其特征在于,其包括以下步骤:
步骤一:将原始图像通过边缘检测得到超度量等高线图UCM;
步骤二:针对UCM通过不同的门限去得到两个不同尺度的超像素划分{Ri},i=1,2,…,NR和{ri},i=1,2,…,Nr,其中NR代表细颗粒度的超像素的个数,Ri代表细颗粒度的第i个超像素,Nr代表粗颗粒度的超像素的个数,ri代表粗颗粒度的第i个超像素;
步骤三:在细颗粒的超像素划分层面上同时考虑颜色对比度、空间先验和边界先验,从而得到初始显著性值;
步骤四:在细颗粒的超像素划分层面上,以每个超像素为节点,边缘强度为边,建立一个无方向的图,通过计算图上不同节点的测地距离得到背景先验;
步骤五:联合考虑初始显著性值、背景先验和不同尺度的一致性去得到最终的显著性值。
优选地,所述步骤二中,使用不同的门限去截取UCM,得到两个不同尺度的超像素分割。
优选地,所述步骤三同时考虑颜色对比度、空间先验和边界先验去得到初始显著性值。
优选地,所述步骤四中,利用边缘强度而不是超像素块的亮度平均值的差异去表示图上面的不同节点之间边缘的幅度,同时利用测地距离去得到背景先验概率。
本发明的积极进步效果在于:本发明提供的方法在考虑不同尺度分割的前提下,利用颜色对比度、空间先验和边界先验在细颗粒度的分割下得到初始的显著性值,然后通过计算测地距离得到背景概率,最后把初始显著性值、背景先验和不同尺度的一致性联合优化,得到最终的显著性值,能够得到统一高亮的显著性值。
附图说明
图1为本发明所提出的基于边缘的图像显著性区域检测方法的流程图。
具体实施方式
下面结合附图给出本发明较佳实施例,以详细说明本发明的技术方案。
如图1所示,为本发明基于边缘的图像显著性区域检测方法的一个实例的处理流程图,包括以下步骤:
步骤一:将原始图像通过边缘检测得到超度量等高线图UCM;
步骤二:针对UCM通过不同的门限去得到两个不同尺度的超像素划分{Ri},i=1,2,…,NR和{ri},i=1,2,…,Nr,其中NR代表细颗粒度的超像素的个数,Ri代表细颗粒度的第i个超像素,Nr代表粗颗粒度的超像素的个数,ri代表粗颗粒度的第i个超像素;使用0.01去得到细颗粒度的超像素分割,使用得到的超像素个数不大于50去得到粗颗粒度的超像素分割。
步骤三:在细颗粒的超像素划分层面上同时考虑颜色对比度、空间先验和边界先验,从而得到初始显著性值;
其中颜色对比度计算公式如下式(1):
上式中M和N代表图像的长和宽,|Ri|代表超像素Ri的像素数目,μi代表超像素Ri的中心,ci代表超像素Ri的颜色平均值。
其中空间先验计算公式如下式(2):
上式中Hi代表超像素Ri的归一化的颜色直方图,χ(·,·)代表两个矢量的卡方距离。
其中边界先验计算公式如下式(3):
上式中B代表图像边界像素的集合,代表Ri周长上的像素,Bnd代表图像边界上超像素的集合,|Ri∩B|代表Ri在图像边界上的像素数目,δ(·)是狄拉克函数。
把归一化的颜色对比度、空间先验和边界先验相乘得到初始的显著性图,计算公式如下式(4):
CSi=CCi·SPi·BPi……(4)
按照(2)式对颜色空间进行量化的时候,每个通道采用12个bin,按照(4)式计算得到每个超像素的初始显著性值。
步骤四:在细颗粒的超像素划分层面上,以每个超像素为节点,边缘强度为边,建立一个无方向的图,通过计算图上不同节点的测地距离得到背景先验;
其中任意两个超像素的距离通过计算对应的节点在图上面的最短路径来得到,计算公式如下式(5):
上式中vi表示Ri对应的节点,e(i,j)表示对应Ri和Rj的边缘强度。
其中背景概率计算公式如下式(6):
上式中用来度量Ri对Rj的贡献。
按照(6)式计算得到背景先验,其中σ1=0.1,σ2=1。在具体计算过程中,如果边界上的超像素也属于显著的物体,直接使用(6)式会降低算法性能。在这里引入了一个操作来排除边界上的不显著的超像素,计算公式如下式(7)所示:
当边界上的某个超像素与集合中的其它所有超像素的差异值的和大于所有差异值的平均值的时候,我们就认为当前超像素是显著的。
步骤五:联合考虑初始显著性值、背景先验和不同尺度的一致性去得到最终的显著性值。
记s为NR个超像素的显著性值,优化的目标函数为如下式(8):
上式中wi,j是平滑项,用来度量相邻超像素的一致性。
由于考虑到不同尺度下超像素之间的相关性,我们赋予在同一个粗颗粒度的超像素下面的细颗粒度的超像素更高的一致性,计算公式如下式(9):
最终的显著性值计算公式如下式(10):
s*=(D-W+λWbg+Wfg)-1wfg……(10)
上式中:W=[2wij],φ=[1,1,…,1]T,wfg=φTWfg。
按照(10)式得到最终显著性值,其中σ1=10。
综上所述,本发明提供的方法在考虑不同尺度分割的前提下,利用颜色对比度、空间先验和边界先验在细颗粒度的分割下得到初始的显著性值,然后通过计算测地距离得到背景概率,最后把初始显著性值、背景先验和不同尺度的一致性联合优化,得到最终的显著性值,能够得到统一高亮的显著性值。
以上所述的具体实施例,对本发明的解决的技术问题、技术方案和有益效果进行了进一步详细说明,所应理解的是,以上所述仅为本发明的具体实施例而已,并不用于限制本发明,凡在本发明的精神和原则之内,所做的任何修改、等同替换、改进等,均应包含在本发明的保护范围之内。
Claims (4)
1.一种基于边缘的图像显著性区域检测方法,其特征在于,其包括以下步骤:
步骤一:将原始图像通过边缘检测得到超度量等高线图UCM;
步骤二:针对UCM通过不同的门限去得到两个不同尺度的超像素划分{Ri},i=1,2,…,NR和{ri},i=1,2,…,Nr,其中NR代表细颗粒度的超像素的个数,Ri代表细颗粒度的第i个超像素,Nr代表粗颗粒度的超像素的个数,ri代表粗颗粒度的第i个超像素;
步骤三:在细颗粒的超像素划分层面上同时考虑颜色对比度、空间先验和边界先验,从而得到初始显著性值;
步骤四:在细颗粒的超像素划分层面上,以每个超像素为节点,边缘强度为边,建立一个无方向的图,通过计算图上不同节点的测地距离得到背景先验;
步骤五:联合考虑初始显著性值、背景先验和不同尺度的一致性去得到最终的显著性值。
2.根据权利要求1所述的基于边缘的图像显著性区域检测方法,其特征在于,所述步骤二中,使用不同的门限去截取UCM,得到两个不同尺度的超像素分割。
3.根据权利要求1所述的基于边缘的图像显著性区域检测方法,其特征在于,所述步骤三同时考虑颜色对比度、空间先验和边界先验去得到初始显著性值。
4.根据权利要求1所述的基于边缘的图像显著性区域检测方法,其特征在于,所述步骤四中,利用边缘强度而不是超像素块的亮度平均值的差异去表示图上面的不同节点之间边缘的幅度,同时利用测地距离去得到背景先验概率。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201610729055.5A CN106373131B (zh) | 2016-08-25 | 2016-08-25 | 基于边缘的图像显著性区域检测方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201610729055.5A CN106373131B (zh) | 2016-08-25 | 2016-08-25 | 基于边缘的图像显著性区域检测方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN106373131A true CN106373131A (zh) | 2017-02-01 |
CN106373131B CN106373131B (zh) | 2020-11-06 |
Family
ID=57879462
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201610729055.5A Active CN106373131B (zh) | 2016-08-25 | 2016-08-25 | 基于边缘的图像显著性区域检测方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN106373131B (zh) |
Cited By (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN107092871A (zh) * | 2017-04-06 | 2017-08-25 | 重庆市地理信息中心 | 基于多尺度多特征融合的遥感影像建筑物检测方法 |
CN107895162A (zh) * | 2017-10-17 | 2018-04-10 | 天津大学 | 基于物体先验的图像显著性目标检测算法 |
CN108416347A (zh) * | 2018-01-04 | 2018-08-17 | 天津大学 | 基于边界先验和迭代优化的显著目标检测算法 |
CN109711417A (zh) * | 2018-12-06 | 2019-05-03 | 重庆邮电大学 | 一种基于低水平显著性融合和测地线的视频显著性检测方法 |
CN113242417A (zh) * | 2021-05-10 | 2021-08-10 | 中国人民解放军海军航空大学 | 标准差加权的色偏数字图像校正方法 |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104809729A (zh) * | 2015-04-29 | 2015-07-29 | 山东大学 | 一种鲁棒的图像显著性区域自动分割方法 |
CN104899851A (zh) * | 2014-03-03 | 2015-09-09 | 天津医科大学 | 一种分割肺结节图像的方法 |
CN105654475A (zh) * | 2015-12-25 | 2016-06-08 | 中国人民解放军理工大学 | 基于可区分边界和加权对比度的图像显著性检测方法及其装置 |
CN105787481A (zh) * | 2016-04-05 | 2016-07-20 | 湖南人文科技学院 | 一种基于目标性潜在区域分析的目标检测算法及其应用 |
-
2016
- 2016-08-25 CN CN201610729055.5A patent/CN106373131B/zh active Active
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104899851A (zh) * | 2014-03-03 | 2015-09-09 | 天津医科大学 | 一种分割肺结节图像的方法 |
CN104809729A (zh) * | 2015-04-29 | 2015-07-29 | 山东大学 | 一种鲁棒的图像显著性区域自动分割方法 |
CN105654475A (zh) * | 2015-12-25 | 2016-06-08 | 中国人民解放军理工大学 | 基于可区分边界和加权对比度的图像显著性检测方法及其装置 |
CN105787481A (zh) * | 2016-04-05 | 2016-07-20 | 湖南人文科技学院 | 一种基于目标性潜在区域分析的目标检测算法及其应用 |
Non-Patent Citations (3)
Title |
---|
KEZE WANG,LIANG LIN,JIANGBO LU,CHENGLONG LI,KEYANG SHI: "《Pixelwise Image Saliency by Aggregating Complementary Appearance Contrast Measures With Edge-Preserving Coherence》", 《IEEE TRANSACTIONS ON IMAGE PROCESSING》 * |
成培瑞,王建立,王斌,李正炜,吴元昊: "《基于多尺度区域对比的显著目标识别》", 《中国光学》 * |
王刚,王晓东,陈超,汪朝林: "《一种多尺度超像素显著性检测算法》", 《计算机工程》 * |
Cited By (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN107092871A (zh) * | 2017-04-06 | 2017-08-25 | 重庆市地理信息中心 | 基于多尺度多特征融合的遥感影像建筑物检测方法 |
CN107895162A (zh) * | 2017-10-17 | 2018-04-10 | 天津大学 | 基于物体先验的图像显著性目标检测算法 |
CN107895162B (zh) * | 2017-10-17 | 2021-08-03 | 天津大学 | 基于物体先验的图像显著性目标检测算法 |
CN108416347A (zh) * | 2018-01-04 | 2018-08-17 | 天津大学 | 基于边界先验和迭代优化的显著目标检测算法 |
CN109711417A (zh) * | 2018-12-06 | 2019-05-03 | 重庆邮电大学 | 一种基于低水平显著性融合和测地线的视频显著性检测方法 |
CN109711417B (zh) * | 2018-12-06 | 2022-12-27 | 重庆邮电大学 | 一种基于低水平显著性融合和测地线的视频显著性检测方法 |
CN113242417A (zh) * | 2021-05-10 | 2021-08-10 | 中国人民解放军海军航空大学 | 标准差加权的色偏数字图像校正方法 |
CN113242417B (zh) * | 2021-05-10 | 2022-09-13 | 中国人民解放军海军航空大学 | 标准差加权的色偏数字图像校正方法 |
Also Published As
Publication number | Publication date |
---|---|
CN106373131B (zh) | 2020-11-06 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN106373131A (zh) | 基于边缘的图像显著性区域检测方法 | |
Li et al. | Multi-angle head pose classification when wearing the mask for face recognition under the COVID-19 coronavirus epidemic | |
US8649599B2 (en) | Image processing apparatus, image processing method, and program | |
Tan et al. | Semi-supervised elastic net for pedestrian counting | |
Maas et al. | Using pattern recognition to automatically localize reflection hyperbolas in data from ground penetrating radar | |
CN103020993B (zh) | 一种双通道颜色对比度融合的视觉显著性检测方法 | |
CN106056553B (zh) | 基于紧框架特征字典的图像修复方法 | |
CN104463870A (zh) | 一种图像显著区域检测方法 | |
CN104331690B (zh) | 一种基于单张图像的肤色人脸检测方法及*** | |
Hua et al. | Extended guided filtering for depth map upsampling | |
CN104966285A (zh) | 一种显著性区域的检测方法 | |
CN107301643A (zh) | 基于鲁棒稀疏表示与拉普拉斯正则项的显著目标检测方法 | |
CN106780450A (zh) | 一种基于低秩多尺度融合的图像显著性检测方法 | |
CN106778634B (zh) | 一种基于区域融合的显著性人体区域检测方法 | |
Jin et al. | Improved direction estimation for Di Zenzo's multichannel image gradient operator | |
Yuan et al. | Half-CNN: a general framework for whole-image regression | |
CN105118051A (zh) | 一种应用于静态图像人体分割的显著性检测方法 | |
CN104537381A (zh) | 一种基于模糊不变特征的模糊图像识别方法 | |
CN104952071A (zh) | 一种基于灰度空间相关的最大类间方差图像分割算法 | |
CN106022310B (zh) | 基于htg-hog和stg特征的人体行为识别方法 | |
Ayoub et al. | Visual saliency detection based on color frequency features under Bayesian framework | |
Scharfenberger et al. | Image saliency detection via multi-scale statistical non-redundancy modeling | |
CN106056575A (zh) | 一种基于似物性推荐算法的图像匹配方法 | |
CN102156879A (zh) | 基于加权陆地运动距离的人体目标匹配方法 | |
Zhong et al. | Vertical corner line detection on buildings in quasi-Manhattan world |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |