CN104780362A - 基于局部特征描述的视频静止logo检测方法 - Google Patents

基于局部特征描述的视频静止logo检测方法 Download PDF

Info

Publication number
CN104780362A
CN104780362A CN201510203609.3A CN201510203609A CN104780362A CN 104780362 A CN104780362 A CN 104780362A CN 201510203609 A CN201510203609 A CN 201510203609A CN 104780362 A CN104780362 A CN 104780362A
Authority
CN
China
Prior art keywords
logo
local feature
block
feature description
static
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201510203609.3A
Other languages
English (en)
Inventor
姜建德
查林
余横
马琰
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
HONGYOU IMAGE TECHNOLOGY (SHANGHAI) Co Ltd
Original Assignee
HONGYOU IMAGE TECHNOLOGY (SHANGHAI) Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by HONGYOU IMAGE TECHNOLOGY (SHANGHAI) Co Ltd filed Critical HONGYOU IMAGE TECHNOLOGY (SHANGHAI) Co Ltd
Priority to CN201510203609.3A priority Critical patent/CN104780362A/zh
Publication of CN104780362A publication Critical patent/CN104780362A/zh
Pending legal-status Critical Current

Links

Landscapes

  • Image Analysis (AREA)

Abstract

本发明提供一种基于局部特征描述的视频静止logo检测方法,包括步骤如下:1)、将图像划分为块进行logo检测保护;2)、计算每个块的局部特征,将前后帧同位置处的块局部特征描述子进行比较,相似性越高,越可能被检测为局部特征相似块;3)、块的单帧相似性结果在时间轴上进行累加,达到一定门限后,认为该宏块是logo。本发明方法能够有效检测到视频序列中的logo,然后可以在运动估计运动补偿模块中对其进行保护,避免插值帧logo破碎。

Description

基于局部特征描述的视频静止logo检测方法
技术领域
本发明涉及图像处理技术,更具体的,涉及一种基于局部特征描述的视频静止logo检测方法。
背景技术
近年来液晶显示器应用非常广泛,传统CRT电视已被取代,然而由于液晶分子的显示特性,液晶屏观看电视存在画面拖尾现象,如果刷新率不够,一些画面还会看到明显的运动抖动。解决抖动和拖尾的常见方法之一是提升帧频,目前普遍采用运动估计运动补偿(Motion estimation and motion compensation,MEMC)技术。MEMC技术的应用极大地提高了观看体验,但是算法在很多场景下都有局限性,运动搜索无法找到正确的运动矢量,譬如复杂运动,小物体运动,Logo保护等。其中,Logo静止不动,很容易被运动背景的矢量影响,收敛到错误的运动矢量,造成补偿图像Logo处破碎。
已有技术实现是,在Logo处尽可能调整运动估计策略收敛到正确矢量,但这种方法对多数logo处都无法取得明显的效果,很难实现对logo的保护。
发明内容
本发明针对上述现有技术中存在的技术问题,提供一种基于局部特征描述的视频静止logo检测方法,可以有效检测到视频序列中的静止logo,然后可以在后端处理时对其进行保护,避免插值帧logo破碎。
为达到上述目的,本发明所采用的技术方案如下:
1、一种基于局部特征描述的视频logo检测方法,其特征在于,包括步骤如下:
1)、将图像按块进行分割,基于块对logo进行检测;
2)、计算每个块的局部特征,将前后帧同位置处的块局部特征描述子进行比较,相似性越高,越可能被检测为局部特征相似块;
3)、将每个块的单次相似性计算结果在时间轴上进行累加,达到一定门限后即认为该块是静止logo。
所述步骤1)中图像按照固定大小的块进行分割,基于局部特征的方法检测logo是基于块的基础,可以是任意M×N大小的块,M=1,2,3...,N=1,2,3...。
所述步骤2)中,用于目标检测的图像特征描述子算法都可用来检测logo,如SIFT特征、SURF特征、ORB特征、HOG特征或其他常用的局部特征。
所述步骤2)中的局部特征描述子算法是能够描述logo特殊唯一性的特征。
所述步骤2)的局部特征描述子在比较前,先做归一化处理。
所述归一化处理的方法是:
若一个块用特征算法计算出多个或多维特征描述子:f1,f2,f3,...fn,对他们进行归一化处理:
f1=f1/(f1+f2+...+fn)
f2=f2/(f1+f2+...+fn)
......
fn=fn/(f1+f2+...+fn)
若只计算出一个特征描述子,则不必进行归一化处理。
所述步骤2)中,连续两帧间,比较同样位置块的局部特征描述子,用两个特征描述子之间的距离去衡量两帧同一个块描述子的相似性。
所述两个特征描述子之间的距离是由用于衡量相似度的距离方法计算得到,该方法包括但不限于两个描述子的绝对差值
所述步骤3),在时间轴上把所述值进行累加,用以衡量在一段持续时间上这个块是否是静止的logo。
一定门限是指可调节的一个值,用时间轴上累加的值和其进行比较,用以判断块是否是静止logo。
本发明方法还包括后端处理步骤,在后端根据已检测到的logo结果对视频中的静止logo进行保护,避免错误的运动矢量在运动补偿后造成的logo破碎。
本发明采用上述的技术方案,所带来的有益效果如下:
现有帧率转换技术中,更多重视的是运动估计运动补偿模块,静止logo很容易被周围运动物体的矢量所影响,导致插值图像中logo破碎,若调整运动估计策略,使其容易在logo处收敛至静止的矢量,又会影响其余地方的收敛速度,而且这种方法对logo的保护也不是非常有效。本发明提出了一种基于局部特征描述的视频logo检测方法,可以独立于运动估计模块,完成对静止logo的检测,在运动估计运动补偿部分根据检测到的结果,对logo进行保护,该方法检测准确,可以很好地保护到logo,避免其破碎,提升帧率转换的画质。
附图说明
通过阅读参照以下附图对非限制性实施例所作的详细描述,本发明的其它特征、目的和优点将会变得更明显:
图1是本发明所提供的方法的流程图。
具体实施方式
下面结合具体实施例对本发明进行详细说明。以下实施例将有助于本领域的技术人员进一步理解本发明,但不以任何形式限制本发明。应当指出的是,对本领域的普通技术人员来说,在不脱离本发明构思的前提下,还可以做出若干变形和改进。这些都属于本发明的保护范围。
如图1所示,本发明所提供的帧率转换中运动估计的候选运动矢量排名方法,包括步骤如下:
1)、首先将图像按块进行分割,基于块对logo进行检测;
2)、logo是静止的稳定的具有特定形状的标志,计算每个块的局部特征,logo应该是在连续帧内相同位置处局部特征描述子是高度相似的;
3)、步骤2)中的局部特征可以是SIFT特征,SURF特征,ORB特征,HOG特征,...或者任意一种可以描述块特殊性的局部特征算法,是一种能够描述logo特殊唯一性的局部特征;
4)、比较两帧中相同位置块的局部特征描述子,用局部特征描述子的距离来衡量块在两帧间的相似性,譬如绝对差,相似性越高,表明该块越可能是logo;
5)、局部特征描述子在比较前,可以先做归一化处理;
6)、将每个块的单次相似性计算结果(比如绝对差)在连续时间轴上进行累加,若在足够的累计时间上,绝对差和都很小,低于一个门限值,说明该块一直在静止相似,可判为logo;
7)最终在后端根据已检测到的logo结果对视频中的静止logo进行保护,可避免错误的运动矢量在运动补偿后造成的logo破碎。
以上对本发明的具体实施例进行了描述。需要理解的是,本发明并不局限于上述特定实施方式,本领域技术人员可以在权利要求的范围内做出各种变形或修改,这并不影响本发明的实质内容。

Claims (8)

1.一种基于局部特征描述的视频静止logo检测方法,其特征在于,包括步骤如下:
1)、将图像按块进行分割,基于块对logo进行检测,块大小为M×N,M=1,2,3,...,N=1,2,3,...;
2)、计算每个块的局部特征,将前后帧同位置处的块局部特征描述子进行比较,相似性越高,越可能被检测为局部特征相似块;
3)、将每个块的单次相似性计算结果在时间轴上进行累加,达到一定门限后即认为该块是静止logo。
2.根据权利要求1所述的基于局部特征描述的视频静止logo检测方法,其特征在于,所述步骤2)中局部特征描述子算法是能够描述logo特殊唯一性的特征。
3.根据权利要求1所述的基于局部特征描述的视频静止logo检测方法,其特征在于,所述步骤2)中,若一个块特征提取出多个或多维特征描述子,在相似度比较前,进行归一化处理以提高logo检测的鲁棒性。
4.根据权利要求3所述的基于局部特征描述的视频静止logo检测方法,其特征在于,若一个块用特征提取算法计算出多个特征描述子:f1,f2,f3,...fn,对其进行归一化处理的方法如下:
f1=f1/(f1+f2+...+fn)
f2=f2/(f1+f2+...+fn)
......
fn=fn/(f1+f2+...+fn)。
5.根据权利要求1所述的基于局部特征描述的视频静止logo检测方法,其特征在于,所述步骤2)中,连续两帧间,比较同样位置块的局部特征描述子,用两个特征描述子之间的距离去衡量两帧同一个块描述子的相似性。
6.根据权利要求5所述的基于局部特征描述的视频静止logo检测方法,其特征在于,所述两个特征描述子之间的距离是由用于衡量相似度的距离方法计算得到,包括但不限于两个描述子的绝对差值。
7.根据权利要求5所述的基于局部特征描述的视频静止logo检测方法,其特征在于,所述步骤3)中,在时间轴上把所述值进行累加,并设定一个可调节的门限值,将累积的值与所述门限值进行比较,用以衡量在持续时间上这个块是否是静止的logo,从而得到最终的logo检测结果。
8.根据权利要求1所述的基于局部特征描述的视频静止logo检测方法,其特征在于,还包括后端处理步骤,在后端根据已检测到的logo结果对视频中的静止logo进行保护,避免错误的运动矢量在运动补偿后造成的logo破碎。
CN201510203609.3A 2015-04-24 2015-04-24 基于局部特征描述的视频静止logo检测方法 Pending CN104780362A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201510203609.3A CN104780362A (zh) 2015-04-24 2015-04-24 基于局部特征描述的视频静止logo检测方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201510203609.3A CN104780362A (zh) 2015-04-24 2015-04-24 基于局部特征描述的视频静止logo检测方法

Publications (1)

Publication Number Publication Date
CN104780362A true CN104780362A (zh) 2015-07-15

Family

ID=53621568

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201510203609.3A Pending CN104780362A (zh) 2015-04-24 2015-04-24 基于局部特征描述的视频静止logo检测方法

Country Status (1)

Country Link
CN (1) CN104780362A (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106851047A (zh) * 2016-12-30 2017-06-13 中国科学院自动化研究所 一种视频图像中静止像素点检测方法及***
CN107124642A (zh) * 2017-03-08 2017-09-01 宏祐图像科技(上海)有限公司 连续运动图像中字幕的检测方法及***
CN110580871A (zh) * 2019-08-07 2019-12-17 深圳市华星光电半导体显示技术有限公司 一种智能化补偿残影的方法

Citations (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101299269A (zh) * 2008-06-13 2008-11-05 北京中星微电子有限公司 静止场景的标定方法及装置
CN100525455C (zh) * 2004-03-01 2009-08-05 索尼株式会社 运动矢量检测装置和运动矢量检测方法
CN101809616A (zh) * 2007-09-28 2010-08-18 日立软件工程株式会社 拍摄对象物的静止判定方法及装置
CN101807257A (zh) * 2010-05-12 2010-08-18 上海交通大学 图像标签信息识别方法
CN102123237A (zh) * 2009-12-11 2011-07-13 佳能株式会社 图像处理装置及其控制方法
CN101464951B (zh) * 2007-12-21 2012-05-30 北大方正集团有限公司 图像识别方法及***
CN101201934B (zh) * 2006-12-15 2012-07-04 财团法人工业技术研究院 视频对象分段方法
CN102860031A (zh) * 2010-04-09 2013-01-02 索尼公司 用于识别运动图像内容中包含的静止图像的装置和方法
CN103258187A (zh) * 2013-04-16 2013-08-21 华中科技大学 一种基于hog特征的电视台标识别方法
CN103473551A (zh) * 2013-09-16 2013-12-25 中国传媒大学 基于sift算子的台标识别方法及***
CN103927513A (zh) * 2014-03-26 2014-07-16 广州品唯软件有限公司 Logo识别方法和装置
CN104364824A (zh) * 2012-06-13 2015-02-18 松下知识产权经营株式会社 物体检测装置
CN104463135A (zh) * 2014-12-19 2015-03-25 深圳市捷顺科技实业股份有限公司 一种车标识别方法和***
CN104537376A (zh) * 2014-11-25 2015-04-22 深圳创维数字技术有限公司 一种识别台标的方法及相关设备、***

Patent Citations (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN100525455C (zh) * 2004-03-01 2009-08-05 索尼株式会社 运动矢量检测装置和运动矢量检测方法
CN101201934B (zh) * 2006-12-15 2012-07-04 财团法人工业技术研究院 视频对象分段方法
CN101809616A (zh) * 2007-09-28 2010-08-18 日立软件工程株式会社 拍摄对象物的静止判定方法及装置
CN101464951B (zh) * 2007-12-21 2012-05-30 北大方正集团有限公司 图像识别方法及***
CN101299269A (zh) * 2008-06-13 2008-11-05 北京中星微电子有限公司 静止场景的标定方法及装置
CN102123237A (zh) * 2009-12-11 2011-07-13 佳能株式会社 图像处理装置及其控制方法
CN102860031A (zh) * 2010-04-09 2013-01-02 索尼公司 用于识别运动图像内容中包含的静止图像的装置和方法
CN101807257A (zh) * 2010-05-12 2010-08-18 上海交通大学 图像标签信息识别方法
CN104364824A (zh) * 2012-06-13 2015-02-18 松下知识产权经营株式会社 物体检测装置
CN103258187A (zh) * 2013-04-16 2013-08-21 华中科技大学 一种基于hog特征的电视台标识别方法
CN103473551A (zh) * 2013-09-16 2013-12-25 中国传媒大学 基于sift算子的台标识别方法及***
CN103927513A (zh) * 2014-03-26 2014-07-16 广州品唯软件有限公司 Logo识别方法和装置
CN104537376A (zh) * 2014-11-25 2015-04-22 深圳创维数字技术有限公司 一种识别台标的方法及相关设备、***
CN104463135A (zh) * 2014-12-19 2015-03-25 深圳市捷顺科技实业股份有限公司 一种车标识别方法和***

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
朱明明: "基于图像分类及检索的Logo识别技术的研究与实现", 《CNKI优秀硕士学位论文全文库》 *

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106851047A (zh) * 2016-12-30 2017-06-13 中国科学院自动化研究所 一种视频图像中静止像素点检测方法及***
CN106851047B (zh) * 2016-12-30 2020-02-07 中国科学院自动化研究所 一种视频图像中静止像素点检测方法及***
CN107124642A (zh) * 2017-03-08 2017-09-01 宏祐图像科技(上海)有限公司 连续运动图像中字幕的检测方法及***
CN110580871A (zh) * 2019-08-07 2019-12-17 深圳市华星光电半导体显示技术有限公司 一种智能化补偿残影的方法

Similar Documents

Publication Publication Date Title
US10984583B2 (en) Reconstructing views of real world 3D scenes
KR101930235B1 (ko) 디지털 이미지 안정화 방법, 장치 및 시스템
CN104284059B (zh) 用于稳定图像的设备和方法
US9148622B2 (en) Halo reduction in frame-rate-conversion using hybrid bi-directional motion vectors for occlusion/disocclusion detection
US9390511B2 (en) Temporally coherent segmentation of RGBt volumes with aid of noisy or incomplete auxiliary data
US9253402B2 (en) Video anti-shaking method and video anti-shaking device
US20160140391A1 (en) Automatic target selection for multi-target object tracking
EP3149940B1 (en) Block-based static region detection for video processing
WO2012005946A1 (en) System and method for shot change detection in a video sequence
CN111462185A (zh) ***辅助的图像捕获
CN104780362A (zh) 基于局部特征描述的视频静止logo检测方法
CN104299188B (zh) 图像修正方法及***
El-Saban et al. Fast stitching of videos captured from freely moving devices by exploiting temporal redundancy
US9466095B2 (en) Image stabilizing method and apparatus
US20170011528A1 (en) Method for controlling tracking using a color model, corresponding apparatus and non-transitory program storage device
CN104010114A (zh) 视频去噪方法和装置
US20140294370A1 (en) Image Blurring Avoiding Method and Image Processing Chip Thereof
CN113870302A (zh) 运动估计方法、芯片、电子设备以及存储介质
US20200226763A1 (en) Object Detection Method and Computing System Thereof
US20150125028A1 (en) Electronic device and video object motion trajectory modification method thereof
Deshmukh et al. Embedded vision system for atmospheric turbulence mitigation
US20130201404A1 (en) Image processing method
KR101590083B1 (ko) 정지자막 영역의 움직임 보상 프레임 보간 장치 및 그 방법
TW201740725A (zh) 影像處理裝置及其影像處理方法
KR101429509B1 (ko) 손떨림 보정 장치

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
EXSB Decision made by sipo to initiate substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20150715