CN111353496A - 一种红外弱小目标实时检测方法 - Google Patents

一种红外弱小目标实时检测方法 Download PDF

Info

Publication number
CN111353496A
CN111353496A CN201811567537.0A CN201811567537A CN111353496A CN 111353496 A CN111353496 A CN 111353496A CN 201811567537 A CN201811567537 A CN 201811567537A CN 111353496 A CN111353496 A CN 111353496A
Authority
CN
China
Prior art keywords
image
target
background suppression
real
variance
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201811567537.0A
Other languages
English (en)
Other versions
CN111353496B (zh
Inventor
史泽林
向伟
常铮
蓝德岩
刘云鹏
王学娟
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shenyang Institute of Automation of CAS
Original Assignee
Shenyang Institute of Automation of CAS
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shenyang Institute of Automation of CAS filed Critical Shenyang Institute of Automation of CAS
Priority to CN201811567537.0A priority Critical patent/CN111353496B/zh
Publication of CN111353496A publication Critical patent/CN111353496A/zh
Application granted granted Critical
Publication of CN111353496B publication Critical patent/CN111353496B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/20Image preprocessing
    • G06V10/26Segmentation of patterns in the image field; Cutting or merging of image elements to establish the pattern region, e.g. clustering-based techniques; Detection of occlusion
    • G06V10/267Segmentation of patterns in the image field; Cutting or merging of image elements to establish the pattern region, e.g. clustering-based techniques; Detection of occlusion by performing operations on regions, e.g. growing, shrinking or watersheds
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00Pattern recognition
    • G06F18/20Analysing
    • G06F18/25Fusion techniques
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V2201/00Indexing scheme relating to image or video recognition or understanding
    • G06V2201/07Target detection

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Data Mining & Analysis (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • Bioinformatics & Cheminformatics (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Artificial Intelligence (AREA)
  • Multimedia (AREA)
  • Bioinformatics & Computational Biology (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Evolutionary Biology (AREA)
  • Evolutionary Computation (AREA)
  • General Engineering & Computer Science (AREA)
  • Image Analysis (AREA)
  • Studio Devices (AREA)

Abstract

本发明涉及一种红外弱小目标实时检测方法,输入原始红外图像,对输入图像进行空间背景抑制,对输入图像进行双局部方差背景抑制;将空间背景抑制后的图像和双局部方差背景抑制后的图像按像素点对应相乘;对背景抑制后的图像选取若干个局部极大值点,进行目标分割,得到并统计疑似候选目标的特征;将多帧图像中的疑似候选目标进行关联,选取真实目标。本发明使用滤波的方法预测低频背景,使用积分图计算双局部方差方法实现背景抑制,搜索局部极大值后进行目标分割,对分割得到候选目标区域提取特征,综合多帧图像的候选目标特征,得到真实红外弱小目标的检测结果,有效提升了计算速度和检测准确率,降低了虚警率。

Description

一种红外弱小目标实时检测方法
技术领域
本发明涉及红外图像目标检测技术领域,具体地说是一种红外弱小目标实时检测方法。
背景技术
红外弱小目标检测是红外探测***的关键技术之一。由于背景的复杂性和目标的机动性,使得低信噪比情况下检测未知位置和速度的运动弱小目标面临着较大的困难。国内外有关红外弱小目标检测的众多算法,从目标判决时所需处理图像数据量的差异进行分析,这些算法可以归结为两大类,即基于单帧的方法和基于序列的方法。
基于单帧检测的弱小目标检测方法以其计算量少,实时性好等特点在工程实践中得到了广泛的应用。由于目标检测算法对低信噪比条件下的检测效果较差,而这会直接影响后续对目标跟踪的处理,所以稳健的背景抑制算法对于单帧检测算法来说非常重要。基于序列检测的弱小目标检测方法从计算量来说较大,但是能进一步提高图像信噪比使得算法在低信噪比的图像中得到有效的检测效果。序列检测算法性能好坏的关键在于它能否成功地累积分布在图像序列中的目标能量。但由于目标的机动性,序列检测算法很可能需要进行全时空搜索。显然,这是以搜索目标可能的运动轨迹时间为代价的。序列时间越长则越可能产生目标跟踪时间延迟,与实际情况无法同步。
发明内容
针对现有技术的不足,本发明提供一种红外弱小目标实时检测方法,解决现有低信噪比红外图像中弱小目标检测运算量大、检测概率低,虚警率高的问题。
本发明为实现上述目的所采用的技术方案是:
一种红外弱小目标实时检测方法,包括以下步骤:
步骤1:输入原始红外图像,对输入图像进行空间背景抑制,得到空间背景抑制后的图像,对输入图像进行双局部方差背景抑制,得到双局部方差背景抑制后的图像;
步骤2:将空间背景抑制后的图像和双局部方差背景抑制后的图像按像素点对应相乘,得到背景抑制后的图像;
步骤3:对背景抑制后的图像选取若干个局部极大值点,进行目标分割,得到若干疑似候选目标;
步骤4:统计疑似候选目标的特征;
步骤5:将多帧图像中的疑似候选目标进行关联,选取真实目标,并输出。
所述空间背景抑制,包括:
利用周围像素的灰度分布计算中心像素的背景估计值:
Figure BDA0001913758310000021
其中,
Figure BDA0001913758310000022
为空域背景抑制法的背景估计图;
Figure BDA0001913758310000023
为空域背景抑制法的(x,y)位置处背景估计值;I为被处理图像;w(m,n)为空域抑制模板中的权重系数;IM为以被预测像素点为中心的背景区域;M为预测模板;
计算空间背景抑制后的图像:
Figure BDA0001913758310000024
所述双局部方差背景抑制,包括:
步骤1.1:利用第一方差模板计算出图像第一方差S1(x,y),利用第二方差模板计算出图像第二方差S2(x,y);
步骤1.2:将图像第一方差S1(x,y)与图像第二方差S2(x,y)进行减法计算,得到局部方差差值D(x,y)=S1(x,y)-S2(x,y),其中,D(x,y)表示在(x,y)位置处的局部方差差值;
步骤1.3:对(x,y)位置处的局部方差差值D(x,y)进行归一化:
Figure BDA0001913758310000031
其中,K(x,y)为(x,y)位置处的双局部方差背景抑制后的图像值,K为双局部方差背景抑制后的图像。
所述疑似候选目标的特征包括:目标坐标、目标长度、目标宽度、目标面积和目标能量。
所述将多帧图像中的疑似候选目标进行关联,选取真实目标,包括:
提取疑似候选目标的能量变化值ΔE、疑似候选目标的运动距离值ΔD和疑似候选目标的面积变化值ΔA,选取总变化ΔS最小的疑似候选目标为真实目标:
ΔS=ΔE*ΔD*ΔA。
本发明具有以下有益效果及优点:
与现有技术相比,本发明在图像预处理过程中使用滤波的方法预测低频背景,实现空域背景抑制。使用积分图计算双局部方差方法进一步实现背景抑制,搜索局部极大值后进行目标分割,对分割得到候选目标区域提取特征。综合多帧图像的候选目标特征,得到真实红外弱小目标的检测结果,有效提升了计算速度和检测准确率,降低了虚警率。
附图说明
图1是本发明的方法流程图;
图2是本发明的双方差模板图;
图3是本发明的红外弱小目标检测结果示意图。
具体实施方式
下面结合附图及实施例对本发明做进一步的详细说明。
为使本发明的上述目的、特征和优点能够更加明显易懂,下面结合附图对本发明的具体实施方式做详细的说明。在下面的描述中阐述了很多具体细节以便于充分理解本发明。但本发明能够以很多不同于在此描述的其他方式来实施,本领域技术人员可以在不违背发明内涵的情况下做类似改进,因此本发明不受下面公开的具体实施的限制。
除非另有定义,本文所使用的所有的技术和科学术语与属于本发明的技术领域的技术人员通常理解的含义相同。本文中在发明的说明书中所使用的术语只是为了描述具体的实施例的目的,不是旨在于限制本发明。
如图1所示为方法流程图。
一种红外弱小目标实时检测方法,包括如下步骤:
步骤一、输入原始红外图像;可以红外热像仪直接采集红外图像,也可以对存储的红外图像进行目标检测;
步骤二、对输入的原始红外图像进行预处理,实现背景抑制的目的。背景抑制的实现包括两部分:
第一部分,空域背景抑制。空域背景抑制法主要利用的是背景区域能量分布缓变的特点。假设背景相邻或相近像素的灰度值具有相似性,利用周围像素的灰度分布去计算中心像素的背景估计值。空域背景抑制法的背景估计模型如下式所示。
Figure BDA0001913758310000041
上式中,
Figure BDA0001913758310000042
为空域背景抑制法的背景估计图;I为被处理图像;w(m,n)为空域抑制模板中的权重系数;IM为以被预测像素点为中心的背景区域;M为预测模板。得到红外图像背景的估计后,通过与原图作差得到背景抑制后的处理结果,如下式所示。
Figure BDA0001913758310000043
式(3)和(4)空域背景抑制算法的基本运算过程。决定这种算法效果的核心因素就是模板的权重系数矩阵w。
优选地,考虑计算复杂度和实时性需求,权重系数矩阵w为权重系数设为同一值,其效果就是将周边像素背景的均值当作中心像素的背景估计值。即
Figure BDA0001913758310000053
为均值滤波后图像,实施例中均值滤波尺寸5x5。
第二部分,双局部方差背景抑制。红外小目标图像包括:天空,云层,地面物体和红外小目标物体,这四类物体在红外图像中灰度分布不同。局部方差反映了图像中某个区域灰度分布的离散状况,图像灰度分布越分散,其局部方差就越大,图像灰度分布越集中,其局部方差就越小。目标区域与其它不同区域有着不同的特点,目标区域整体方差较大,而去除中心区域后,剩余部分的局部方差较小。根据上述目标与其他区域区别,建立如图2所示的双方差模板。优选L取值7,K取值3。
双局部方差背景抑制方法的计算流程可归纳为:
(1)得到局部方差图像。将模板1与模板2计算出的图像方差分别替换为模板中心点的灰度值,得到不同模板的局部方差图像S1(x,y),S2(x,y)。
(2)减法运算。将上面得到的不同模板处理后的局部方差图像进行减法计算得到局部方差差值,将其表示为
D(x,y)=S1(x,y)-S2(x,y) (5)
上式中,D(x,y)表示在(x,y)位置处的局部方差差值。
(3)归一化运算。为便于和空域背景抑制法融合,将D(x,y)除以S1(x,y),将其值范围置于0~1之间。即
Figure BDA0001913758310000051
上式中K(x,y)表示(x,y)双局部方差背景抑制的最终结果。根据上面分析,目标处S2(x,y)远小于S1(x,y),因此,K(x,y)接近于1,而净空、云层、云边缘处S2(x,y)接近S1(x,y),因此,K(x,y)接近于0。
优选地,根据方差计算公式
Figure BDA0001913758310000052
x为数组中的元素值,在图像中为像素值。计算图像固定区域的方差时,通过一次遍历即可求出方差,可提高计算效率。在双方差背景抑制过程,需要计算所有点的双局部方差。进一步地,预先计算整幅图像x的积分图和整幅图像像素值平方x2的积分图,在计算所有点双局部方差时,可以非常大的降低求和操作的运算量,更有助于计算效率的提升,满足实时性要求。
将空域背景抑制的结果图像和双局部方差背景抑制的结果图像对应位置像素相乘,得到预处理后的图像。
步骤三,在经过预处理后的图像中,选取n个局部极大值点,局部极大值点在原始图像中的信噪比t满足一定阈值,实施例中n取值10,t取值3。在对n个局部极大值点使用区域生长的方法进行目标分割,得到那n个候选目标。剔除不满足形状约束(长宽比,饱和度,大小)的候选目标,保留余下的候选目标为疑似候选目标。
步骤四,统计疑似候选目标坐标、长度、宽度、面积、能量等特征。
步骤五,根据记录的前m帧候选目标与本帧计算得到疑似候选目标进行关联,选取能量(目标灰度值)的变化最小,两帧之间运动距离的变化最小,目标面积的变化最小,运动方向的一致的疑似候选目标作为真实目标。实施例中m取值4。
步骤六,如图3所示,输出检测到的真实目标,并记录目标在步骤四中得到的特征。

Claims (5)

1.一种红外弱小目标实时检测方法,其特征在于,包括以下步骤:
步骤1:输入原始红外图像,对输入图像进行空间背景抑制,得到空间背景抑制后的图像,对输入图像进行双局部方差背景抑制,得到双局部方差背景抑制后的图像;
步骤2:将空间背景抑制后的图像和双局部方差背景抑制后的图像按像素点对应相乘,得到背景抑制后的图像;
步骤3:对背景抑制后的图像选取若干个局部极大值点,进行目标分割,得到若干疑似候选目标;
步骤4:统计疑似候选目标的特征;
步骤5:将多帧图像中的疑似候选目标进行关联,选取真实目标,并输出。
2.根据权利要求1所述的红外弱小目标实时检测方法,其特征在于:所述空间背景抑制,包括:
利用周围像素的灰度分布计算中心像素的背景估计值:
Figure FDA0001913758300000011
其中,
Figure FDA0001913758300000012
为空域背景抑制法的背景估计图;
Figure FDA0001913758300000013
为空域背景抑制法的(x,y)位置处背景估计值;I为被处理图像;w(m,n)为空域抑制模板中的权重系数;IM为以被预测像素点为中心的背景区域;M为预测模板;
计算空间背景抑制后的图像:
Figure FDA0001913758300000014
3.根据权利要求1所述的红外弱小目标实时检测方法,其特征在于:所述双局部方差背景抑制,包括:
步骤1.1:利用第一方差模板计算出图像第一方差S1(x,y),利用第二方差模板计算出图像第二方差S2(x,y);
步骤1.2:将图像第一方差S1(x,y)与图像第二方差S2(x,y)进行减法计算,得到局部方差差值D(x,y)=S1(x,y)-S2(x,y),其中,D(x,y)表示在(x,y)位置处的局部方差差值;
步骤1.3:对(x,y)位置处的局部方差差值D(x,y)进行归一化:
Figure FDA0001913758300000021
其中,K(x,y)为(x,y)位置处的双局部方差背景抑制后的图像值,K为双局部方差背景抑制后的图像。
4.根据权利要求1所述的红外弱小目标实时检测方法,其特征在于:所述疑似候选目标的特征包括:目标坐标、目标长度、目标宽度、目标面积和目标能量。
5.根据权利要求1所述的红外弱小目标实时检测方法,其特征在于:所述将多帧图像中的疑似候选目标进行关联,选取真实目标,包括:
提取疑似候选目标的能量变化值ΔE、疑似候选目标的运动距离值ΔD和疑似候选目标的面积变化值ΔA,选取总变化ΔS最小的疑似候选目标为真实目标:
ΔS=ΔE*ΔD*ΔA。
CN201811567537.0A 2018-12-20 2018-12-20 一种红外弱小目标实时检测方法 Active CN111353496B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201811567537.0A CN111353496B (zh) 2018-12-20 2018-12-20 一种红外弱小目标实时检测方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201811567537.0A CN111353496B (zh) 2018-12-20 2018-12-20 一种红外弱小目标实时检测方法

Publications (2)

Publication Number Publication Date
CN111353496A true CN111353496A (zh) 2020-06-30
CN111353496B CN111353496B (zh) 2023-07-28

Family

ID=71195641

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201811567537.0A Active CN111353496B (zh) 2018-12-20 2018-12-20 一种红外弱小目标实时检测方法

Country Status (1)

Country Link
CN (1) CN111353496B (zh)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112541486A (zh) * 2020-12-31 2021-03-23 洛阳伟信电子科技有限公司 基于改进Pixel分割的红外弱小目标检测算法
CN113592914A (zh) * 2021-09-28 2021-11-02 南京天朗防务科技有限公司 红外弱小飞行目标自适应检测跟踪方法、装置
CN113822352A (zh) * 2021-09-15 2021-12-21 中北大学 基于多特征融合的红外弱小目标检测方法
CN114820665A (zh) * 2022-06-30 2022-07-29 中国人民解放军国防科技大学 一种星图背景抑制方法、装置、计算机设备和存储介质

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104299229A (zh) * 2014-09-23 2015-01-21 西安电子科技大学 一种基于时空域背景抑制的红外弱小目标检测方法
CN104766079A (zh) * 2015-05-05 2015-07-08 四川九洲电器集团有限责任公司 一种远距离红外弱小目标检测方法
CN107092911A (zh) * 2017-03-29 2017-08-25 中国电子科技集团公司第十研究所 一种时空联合弱小目标检测方法与装置

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104299229A (zh) * 2014-09-23 2015-01-21 西安电子科技大学 一种基于时空域背景抑制的红外弱小目标检测方法
CN104766079A (zh) * 2015-05-05 2015-07-08 四川九洲电器集团有限责任公司 一种远距离红外弱小目标检测方法
CN107092911A (zh) * 2017-03-29 2017-08-25 中国电子科技集团公司第十研究所 一种时空联合弱小目标检测方法与装置

Non-Patent Citations (5)

* Cited by examiner, † Cited by third party
Title
DAVID G. LOWE ET AL.: "Distinctive Image Features from Scale-Invariant Keypoints" *
刘刚等: "空域-小波域联合滤波的红外复杂背景抑制" *
孙立辉等: "基于局部统计特征的自适应红外背景抑制算法" *
徐航等: "基于局部均值差分的红外小目标图像背景抑制算法" *
王军等: "基于噪声方差估计的红外弱小目标检测与跟踪方法" *

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112541486A (zh) * 2020-12-31 2021-03-23 洛阳伟信电子科技有限公司 基于改进Pixel分割的红外弱小目标检测算法
CN112541486B (zh) * 2020-12-31 2022-11-08 洛阳伟信电子科技有限公司 基于改进Pixel分割的红外弱小目标检测算法
CN113822352A (zh) * 2021-09-15 2021-12-21 中北大学 基于多特征融合的红外弱小目标检测方法
CN113822352B (zh) * 2021-09-15 2024-05-17 中北大学 基于多特征融合的红外弱小目标检测方法
CN113592914A (zh) * 2021-09-28 2021-11-02 南京天朗防务科技有限公司 红外弱小飞行目标自适应检测跟踪方法、装置
CN113592914B (zh) * 2021-09-28 2022-04-01 南京天朗防务科技有限公司 红外弱小飞行目标自适应检测跟踪方法、装置
CN114820665A (zh) * 2022-06-30 2022-07-29 中国人民解放军国防科技大学 一种星图背景抑制方法、装置、计算机设备和存储介质
CN114820665B (zh) * 2022-06-30 2022-09-02 中国人民解放军国防科技大学 一种星图背景抑制方法、装置、计算机设备和存储介质

Also Published As

Publication number Publication date
CN111353496B (zh) 2023-07-28

Similar Documents

Publication Publication Date Title
CN109919981B (zh) 一种基于卡尔曼滤波辅助的多特征融合的多目标跟踪方法
CN111353496B (zh) 一种红外弱小目标实时检测方法
EP1697901B1 (en) Method for modeling background and foreground regions
Sengar et al. Moving object area detection using normalized self adaptive optical flow
CN112257569B (zh) 一种基于实时视频流的目标检测和识别方法
CN110728697A (zh) 基于卷积神经网络的红外弱小目标检测跟踪方法
CN106204484B (zh) 一种基于光流和局部不变特征的交通目标跟踪方法
CA2780595A1 (en) Method and multi-scale attention system for spatiotemporal change determination and object detection
CN108804992B (zh) 一种基于深度学习的人群统计方法
Niu et al. A moving objects detection algorithm based on improved background subtraction
CN111208479B (zh) 一种降低深度网络检测中虚警概率的方法
CN114758219A (zh) 基于光谱数据和红外温度数据融合的尾迹识别方法
CN112288778A (zh) 一种基于多帧回归深度网络的红外小目标检测方法
CN111985314A (zh) 一种基于ViBe与改进LBP的烟雾检测方法
Angelo A novel approach on object detection and tracking using adaptive background subtraction method
Devi et al. A survey on different background subtraction method for moving object detection
Zhou et al. Dynamic background subtraction using spatial-color binary patterns
Wu et al. Research on crack detection algorithm of asphalt pavement
CN108985216B (zh) 一种基于多元logistic回归特征融合的行人头部检测方法
CN108038872B (zh) 一种基于动静态目标检测与实时压缩感知追踪研究方法
Xu et al. Moving target tracking based on adaptive background subtraction and improved camshift algorithm
Liu et al. [Retracted] Mean Shift Fusion Color Histogram Algorithm for Nonrigid Complex Target Tracking in Sports Video
CN113963017A (zh) 一种实时红外弱小目标检测方法、装置和计算机设备
CN113496159B (zh) 一种多尺度卷积与动态权重代价函数的烟尘目标分割方法
CN110751673B (zh) 一种基于集成学习的目标跟踪方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant