CN108108697A - 一种实时无人机视频目标检测与跟踪方法 - Google Patents
一种实时无人机视频目标检测与跟踪方法 Download PDFInfo
- Publication number
- CN108108697A CN108108697A CN201711415848.0A CN201711415848A CN108108697A CN 108108697 A CN108108697 A CN 108108697A CN 201711415848 A CN201711415848 A CN 201711415848A CN 108108697 A CN108108697 A CN 108108697A
- Authority
- CN
- China
- Prior art keywords
- target
- weights
- value
- object listing
- matching
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/10—Terrestrial scenes
- G06V20/13—Satellite images
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F18/00—Pattern recognition
- G06F18/20—Analysing
- G06F18/22—Matching criteria, e.g. proximity measures
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/20—Image preprocessing
- G06V10/22—Image preprocessing by selection of a specific region containing or referencing a pattern; Locating or processing of specific regions to guide the detection or recognition
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/40—Extraction of image or video features
- G06V10/44—Local feature extraction by analysis of parts of the pattern, e.g. by detecting edges, contours, loops, corners, strokes or intersections; Connectivity analysis, e.g. of connected components
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Multimedia (AREA)
- Data Mining & Analysis (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Bioinformatics & Cheminformatics (AREA)
- Evolutionary Computation (AREA)
- Evolutionary Biology (AREA)
- General Engineering & Computer Science (AREA)
- Bioinformatics & Computational Biology (AREA)
- Artificial Intelligence (AREA)
- Life Sciences & Earth Sciences (AREA)
- Astronomy & Astrophysics (AREA)
- Remote Sensing (AREA)
- Image Analysis (AREA)
Abstract
本发明公开了一种无人机视频中特定目标(主要针对坦克、汽车、舰船等运动目标)实时检测与跟踪的计算方法,它涉及计算机视觉技术、机器学习技术和摄影测量。它在对已有目标学习的基础上,在当前视频帧中检测目标,并与前一帧目标进行匹配,对匹配成功的目标进行更新、对旧目标进行跟踪、对新增的目标进行确认,最终得到当前帧的目标集合,并可以根据目标在相机中坐标计算输出目标地理位置。在无人机应用中,本发明能够实时发现并自动跟踪和精确定位敌方具有军事价值的目标,如坦克、汽车、舰船。
Description
技术领域
本发明涉及计算机视觉中目标检测与跟踪技术领域。确切地说,本发明是一种在无人机飞行过程中自动从成像装置中发现特定目标并进行跟踪的方法,涉及的技术领域包括计算机视觉、机器学习和摄影测量。
背景技术
对特定目标的检测及跟踪,是数字视频分析和机器视觉的关键技术,在无人机应用中有迫切的需求,特别是在实时飞行过程中对具有军事价值的特定目标(坦克、车辆、军舰、油库等)进行检测、跟踪和定位,可实时返回目标位置信息,便于后续精确打击。既能够减少操控人员的劳动强度,增强***可靠性;又能够减少与操控人员的通信,防止信号被侦察而导致操控人员被暴露。
视频目标检测方法主要基于视频监控等摄像头静止的场景,主要有帧差法、光流法和背景差法三种,其中帧差法和背景差法都假设背景静止,并不适合无人机视频。光流法根据相邻两帧建立运动场来关联当前帧的每个像素与下一帧对应的像素,但是计算光流的基本方程的成立是建立在亮度守恒基本假设这个条件下,在现实场景中很难满足这一条件。
目标跟踪方法一直是计算机视觉的热点,新方法也层出不穷,目前主要方法基于核密度估计理论的跟踪算法、基于概率统计的跟踪算法、基于机器学习的跟踪算法。基于核密度估计理论的跟踪算法作为一种经典算法,在早期目标跟踪中发挥着重要作用。但其需要由解析形式推出均值漂移变量,限制了其对特征的提取,具有一定局限性;基于概率统计的跟踪算法在解决非线性问题上有着良好的表现,但其同样复杂的计算,影响了跟踪速度,实时性较差;基于学习的跟踪算法一般不需要复杂的计算,具有良好的适应性,但其在跟踪过程中仍然存在由于模板更新而带来的漂移问题。并且现有算法都还无法完全解决无人机目标长时间跟踪的问题。
发明内容
本发明的目标在于提供一种在无人机飞行过程中从摄像头中自动发现特定目标并进行跟踪的方法,实现战术无人机对地面移动目标侦察打击、警用无人机对移动目标的定向跟踪等需要无人机对地面运行目标进行精确观测的场景。
为了达到上述目的,本发明采用下述技术方案:
一种实时无人机视频目标检测与跟踪方法,包括以下步骤:
(1)初始化:将视频帧图像分为检测区域和跟踪区域,并定义目标的外观属性;所述的跟踪区域是当前视频帧图像与上一视频帧图像交叠的区域,其他区域为检测区域;极限情况下跟踪区域面积为0;
(2)对当前视频帧图像进行背景区域检测;
(3)如果当前视频帧图像为第一帧,则在整幅当前视频帧图像中进行目标检测;否则,在当前视频帧图像的检测区域与背景区域的相交区域进行目标检测;目标检测之后提取目标的相关特征,并与目标的外观属性进行匹配,将特征属性符合要求的目标放入当前帧目标列表L;
(4)获取上一帧目标列表Lp,将当前帧目标列表L与上一帧目标列表Lp中的目标进行逐一匹配,根据匹配算法进行两两比较,形成目标匹配矩阵,然后依次从目标匹配矩阵中提取最优值,形成最优匹配列表,匹配之后分三种情况:如果目标T为最优匹配列表中的目标,即在当前帧目标列表L中与上一帧目标列表Lp中均存在目标T,则转入步骤(5);如果当前帧目标列表L中存在目标T,但上一帧目标列表Lp中没有目标T,则转入步骤(6);如果当前帧目标列表L中没有目标T,但是上一帧目标列表Lp中存在的目标T,则转入步骤(7);
(5)将目标T的权值设为目标T在Lp中的权值加上设定的权值步长S,并将目标T从上一帧目标列表Lp中删除,进入步骤(8);
(6)将目标T设为疑似目标,并将目标T的权值初值设为Vorg,进入步骤(8);
(7)判断目标T的权值是否超过所设定阈值V1,如果是,则采用目标跟踪算法进行跟踪,得到当前帧的目标,将当前帧的目标的权值设为Vmax并加入当前帧目标列表L中,并将目标T从Lp中删除,进入步骤(8);否则将目标T的权值降低权值步长S,如果降低后的权值大于指定阈值Vmin,则加入当前帧目标列表L中,并将目标T从Lp中删除,否则直接将目标T从Lp中删除,进入步骤(8);
(8)合并Lp至L中,然后找出当前帧目标列表L中所有权值超过所设定阈值V2的目标,根据无人机的姿态、速度和位置,计算所有目标的位置,并通过无线***输出至地面或者武器;
(9)将当前帧目标列表L作为上一帧目标列表Lp,获取下一视频帧图像,将下一视频帧图像作为当前视频帧图像,转入步骤(2)。
其中,步骤(2)具体包括以下步骤:
(2.1)对当前视频帧图像进行滤波;
(2.2)使用canny算子得到当前视频帧图像的边缘;
(2.3)计算所有边缘的外接矩形;
(2.4)寻找所有边缘最长的20条边缘,并分为2组,最长的10条,其他10条;
(2.5)在2组中各选5条,组合出10条边缘,确保选出来的10条边的外接矩形面积最小;
(2.6)找到的最小外接矩形即为背景区域。
其中,步骤(4)中将当前帧目标列表L与上一帧目标列表Lp中的目标进行逐一匹配,根据匹配算法进行两两比较,形成目标匹配矩阵,然后依次从目标匹配矩阵中提取最优值,形成最优匹配列表,具体为:
(4.1)建立匹配矩阵M,其列数为当前帧目标列表L中数据个数,行数为上一帧目标列表Lp中数据个数,或者行数为当前帧目标列表L中数据个数,列数为上一帧目标列表Lp中数据个数;
(4.2)矩阵所有初始值为一个不可能出现的权值S;
(4.3)对当前帧目标列表L中的所有目标与上一帧目标列表Lp中的所有目标逐一匹配,将列表L中的任一目标Tl与列表Lp中的任一目标Tp的匹配值V作为匹配矩阵M中对应位置的权值,得到目标匹配矩阵;
(4.4)从目标匹配矩阵中取优于阈值T1的最优值,提取出行号和列号,认为匹配正确,并将它所在的行和列的其他权值赋值为S;
(4.5)重复步骤(4.4),直到矩阵中没有优于阈值T1的权值,将匹配正确的目标形成最优匹配列表。
其中,步骤(4.3)中列表L中的任一目标Tl与列表Lp中的任一目标Tp的匹配值V的具体计算方法如下:
(4.3.1)位置比较:如果位置间隔大于目标的外观属性中定义的最大间隔d,则权值为设定值V1,如果位置间隔为外观属性中定义的最小间隔,则权值为设定值V2;如果位置间隔在最大间隔与最小间隔之间,则线性赋值;
(4.3.2)面积比较:如果面积比例值为外观属性中定义的最小面积,则权值为设定值V3;如果面积比例值大于外观属性中定义的最大面积,则权值为设定值V4;如果面积比例值在最小面积和最大面积之间,则线性赋值;
(4.3.3)长宽比比较:如果长宽比相同,则权值为设定值V5;如果长宽比值大于外观属性中定义的最大长宽比,则权值为设定值V6;如果长宽比在1与最大长宽比之间,则线性赋值;
(4.3.4)均值比较:采用亮度均值,如果均值差为0,则权值为设定值V7;如果均值差在外观属性中定义的最大亮度均值以上,则权值为设定值V8;如果均值差在0与最大亮度均值之间,则线性赋值;
(4.3.5)方差比较:采用亮度方差,如果方差之差为0,则权值为设定值V9;如果方差差值在外观属性中定义的最大亮度方差以上,则权值为设定值V10;如果方差之差在0与最大亮度方差之间,则线性赋值;
(4.3.6)综合权值:将上述权值取平均,得到两两比较的目标匹配矩阵。
本发明与背景技术相比具有如下优点:
1本发明针对特定目标同时使用自动检测与跟踪相结合的算法框架,实现了目标自动发现及跟踪。
2本发明在部分目标检测过程中采用先检测背景,再检测目标的方法,减少搜索量。
3本发明实现了机载图像实时目标检测与跟踪处理。
附图说明
图1是本发明实施例的工作流程图。
图2为检测区域与跟踪区域的正常情况示意图。
图3为镜头倾斜情况示意图。
图4为无跟踪区域情况示意图。
具体实施方式
本发明实施例的工作流程如图1所示,下面结合附图1本发明技术方案中所涉及的各个细节问题作进一步描述。应指出的是,所描述的实施例仅旨在便于对本发明的理解而不起任何限定作用。
(1)初始化。
(1.1)将视频帧图像定义检测区域和跟踪区域矩形框。假设无人机速度为v1,目标运动速度为v2,则目标在画面中的最大移动距离为d=(v1+v2)*t,(其中t为视频帧图像采样时间间隔),视频帧图像的视角范围为d1×d2,配合无人机参数,可以算出检测区域在图像中的位置,见图2所示,当视角倾斜的时候,这种情况下可以使用图3的矩形区域作为跟踪区域。原则上,在计算能力足够的请框下,设定的跟踪区域应小于实际计算处理的区域,如上述参数不确定或者机载设备计算能力足够,可以将整个画面都定义为检测区域,如图4所示。
(1.2)定义目标外观属性。定义目标外观属性的目的主要是为了减少目标虚警,在实施过程中采用了目标在图像中的最小长度、最大长度、最小宽度、最大宽度、最小面积、最大面积、最小长宽比、最大长宽比、最大亮度方差、最大亮度均值等。在本实施例中通过预先训练的目标得到,并将所有大值放大至1.2倍,小值缩小至0.8倍。
(2)背景区域检测。本实施例跟踪的目标为车辆,对于车辆,即其背景区域为道路。道路的快速检测算法如下:
(2.1)对图像进行滤波;
(2.2)使用canny算子得到图像的边缘;
(2.3)计算所有边缘的外接矩形;
(2.4)寻找所有边缘最长的20条边缘,并分为2组,最长的10条,其他10条;
(2.5)在2组中各选5条,组合出10条边缘,确保选出来的10条边的外接矩形面积最小。
(2.6)找到的最小外接矩形即定义为道路区。
(3)如果当前视频帧图像为第一帧,在整幅当前视频帧图像中进行目标检测;否则,在当前视频帧图像的目标检测区域与背景区域的相交区域进行目标检测。检测出目标后提取目标的统计特性,包括形状属性、特征点、颜色属性、灰度方差、背景属性等,经过属性比对,形状属性符合要求的放入当前帧目标列表L。
(3.1)目标检测算法,采用opencv2.4.13自带的CascadeClassifier(该算法为基于学习的算法,需要按照opencv提供的工具和文档预先进行样本学习)
(3.2)提取目标的特征,包括点特征(SIFT点)、外接矩形的长度、宽度、面积、长宽比、亮度的最高值、最低值、以及对应像素所在的位置。
(3.3)根据已有统计结果,与1.2定义目标外观属性统计结果进行比较,将属性明显不符合要求的目标进行过滤,符合要求的目标作为正确目标放入当前帧目标列表L。
(4)获取上一帧目标列表Lp,将当前帧目标列表L与上一帧目标列表Lp中的目标进行逐一匹配,根据匹配算法进行两两比较,形成目标匹配矩阵,然后依次从目标匹配矩阵中提取最优值,形成最优匹配列表,匹配之后分三种情况:如果目标T为最优匹配列表中的目标,即在当前帧目标列表L中与上一帧目标列表Lp中均存在目标T,则转入步骤(5);如果当前帧目标列表L中存在目标T,但上一帧目标列表Lp中没有目标T,则转入步骤(6);如果当前帧目标列表L中没有目标T,但是上一帧目标列表Lp中存在的目标T,则转入步骤(7);具体为:
(4.1)建立匹配矩阵,其列数为当前帧目标L中数据个数,行数为上一帧目标列表Lp中数据个数,或者行数为当前帧目标列表L中数据个数,列数为上一帧目标列表Lp中数据个数;
矩阵的初始权值均为-1。然后开始两两比较,假设L中的目标序号为c,Lp中的目标序号为r;
(4.2)位置比较:如果位置间隔大于(1.1)中的d,则权值为0,如果位置间隔为0,则为1.5;在d~0之间,线性赋值;(线性赋值是通过线性函数进行赋值,线性函数的两个端点为0,1.5和d,0);
(4.2)面积比较:如果面积比例值为1,权值为1;大于10权值为0;在10~1之间,线性赋值;
(4.3)长宽比比较:如果长宽比相同,权值为1,;如果长宽比值大于10倍,权值为0;1~10之间,线性赋值;
(4.4)均值比较:采用亮度均值,如果均值差为0,权值为1;如果均值差在50以上,权值为0;0~50之间,线性赋值;
(4.5)方差比较:采用亮度方差,如果方差之差为0,权值为1;如果方差差值在20以上,权值为0;0~50之间,线性赋值;
(4.6)综合得分:将上述权值取平均,得到两两比较的目标匹配矩阵;
(4.7)从目标匹配矩阵中取大于阈值T1的最大值,提取出行号和列号,认为匹配正确,并将它所在的行和列的其他值赋值为-1;
(4.8)重复步骤(4.7),直到矩阵中没有权值大于阈值T1的值,将匹配正确的目标形成最优匹配列表。
(5)将目标T的权值设为目标T在Lp中的权值加上设定的权值步长S,并将目标T从上一帧目标列表Lp中删除,进入步骤(8);
(6)将目标T设为疑似目标,并将目标T的权值初值设为Vorg,进入步骤(8);
(7)判断目标T的权值是否超过所设定阈值V1,如果是,则采用目标跟踪算法进行跟踪,得到当前帧的目标,将当前帧的目标的权值设为Vmax并加入当前帧目标列表L中,并将目标T从Lp中删除,进入步骤(8);否则将目标T的权值降低权值步长S,如果降低后的权值大于指定阈值Vmin,则加入目标列表L中,并将目标T从Lp中删除,否则直接将目标T从Lp中删除,进入步骤(8);
(8)合并Lp至L中,然后找出当前帧目标列表L中所有权值超过所设定阈值V2的目标,根据无人机的姿态、速度和位置,计算所有目标的位置,并通过无线***输出至地面或者武器;
(8.1)计算地球坐标系到当地地理坐标系的坐标变换
其变换矩阵R1为:R1=Rx T(-(90°-B0))Rz T(90°+L0)
本式和以下各式中的Rx(θ),Ry(θ),Rz(θ),分别表示绕X轴、Y轴和Z轴旋转θ角的坐标旋转矩阵。B0表示飞机当前纬度,L0表示飞机经度。
(8.2)计算当地地理坐标系到机体坐标系的坐标变换
其变换矩阵R2为:
其中,ψ为航向角,θ为俯仰角,γ为横滚角。
(8.3)计算当机体坐标系到平台坐标系的坐标变换
其变换矩阵R3为:R3=Rz(ζ)Ry(η)
其中,η为方位角,ζ平台滚动角。
(8.4)计算平台坐标系到相机坐标系的坐标变换
其变换矩阵R4为:R4=Rz(βc)Rx(αc)
(8.5)计算相机坐标系到地球坐标系的转换,利用上述变换矩阵得:
(9)将当前帧目标列表L作为上一帧目标列表Lp,获取下一视频帧图像,将下一视频帧图像作为当前视频帧图像,转入步骤(2)。
尽管本发明之最佳实施方式说明了本发明,然而可以理解的是,在不背离权利要求书所规定值发明实质的前提下,可以对本发明做某些修改。
Claims (4)
1.一种实时无人机视频目标检测与跟踪方法,其特征在于,包括以下步骤:
(1)初始化:将视频帧图像分为检测区域和跟踪区域,并定义目标的外观属性;所述的跟踪区域是当前视频帧图像与上一视频帧图像交叠的区域,其他区域为检测区域;极限情况下跟踪区域面积为0;
(2)对当前视频帧图像进行背景区域检测;
(3)如果当前视频帧图像为第一帧,则在整幅当前视频帧图像中进行目标检测;否则,在当前视频帧图像的检测区域与背景区域的相交区域进行目标检测;目标检测之后提取目标的相关特征,并与目标的外观属性进行匹配,将特征属性符合要求的目标放入当前帧目标列表L;
(4)获取上一帧目标列表Lp,将当前帧目标列表L与上一帧目标列表Lp中的目标进行逐一匹配,根据匹配算法进行两两比较,形成目标匹配矩阵,然后依次从目标匹配矩阵中提取最优值,形成最优匹配列表,匹配之后分三种情况:如果目标T为最优匹配列表中的目标,即在当前帧目标列表L中与上一帧目标列表Lp中均存在目标T,则转入步骤(5);如果当前帧目标列表L中存在目标T,但上一帧目标列表Lp中没有目标T,则转入步骤(6);如果当前帧目标列表L中没有目标T,但是上一帧目标列表Lp中存在的目标T,则转入步骤(7);
(5)将目标T的权值设为目标T在Lp中的权值加上设定的权值步长S,并将目标T从上一帧目标列表Lp中删除,进入步骤(8);
(6)将目标T设为疑似目标,并将目标T的权值初值设为Vorg,进入步骤(8);
(7)判断目标T的权值是否超过所设定阈值V1,如果是,则采用目标跟踪算法进行跟踪,得到当前帧的目标,将当前帧的目标的权值设为Vmax并加入当前帧目标列表L中,并将目标T从Lp中删除,进入步骤(8);否则将目标T的权值降低权值步长S,如果降低后的权值大于指定阈值Vmin,则加入当前帧目标列表L中,并将目标T从Lp中删除,否则直接将目标T从Lp中删除,进入步骤(8);
(8)合并Lp至L中,然后找出当前帧目标列表L中所有权值超过所设定阈值V2的目标,根据无人机的姿态、速度和位置,计算所有目标的位置,并通过无线***输出至地面或者武器;
(9)将当前帧目标列表L作为上一帧目标列表Lp,获取下一视频帧图像,将下一视频帧图像作为当前视频帧图像,转入步骤(2)。
2.根据权利要求1所述的一种实时无人机视频目标检测与跟踪方法,其特征在于:步骤(2)具体包括以下步骤:
(2.1)对当前视频帧图像进行滤波;
(2.2)使用canny算子得到当前视频帧图像的边缘;
(2.3)计算所有边缘的外接矩形;
(2.4)寻找所有边缘最长的20条边缘,并分为2组,最长的10条,其他10条;
(2.5)在2组中各选5条,组合出10条边缘,确保选出来的10条边的外接矩形面积最小;
(2.6)找到的最小外接矩形即为背景区域。
3.根据权利要求1所述的一种实时无人机视频目标检测与跟踪方法,其特征在于:步骤(4)中将当前帧目标列表L与上一帧目标列表Lp中的目标进行逐一匹配,根据匹配算法进行两两比较,形成目标匹配矩阵,然后依次从目标匹配矩阵中提取最优值,形成最优匹配列表,具体包括以下步骤:
(4.1)建立匹配矩阵M,其列数为当前帧目标列表L中数据个数,行数为上一帧目标列表Lp中数据个数,或者行数为当前帧目标列表L中数据个数,列数为上一帧目标列表Lp中数据个数;
(4.2)矩阵所有初始值为一个设定权值S;
(4.3)对当前帧目标列表L中的所有目标与上一帧目标列表Lp中的所有目标逐一匹配,将列表L中的任一目标Tl与列表Lp中的任一目标Tp的匹配值V作为匹配矩阵M中对应位置的权值,得到目标匹配矩阵;
(4.4)从目标匹配矩阵中取优于阈值T1的最优值,提取出行号和列号,认为匹配正确,并将它所在的行和列的其他权值赋值为S;
(4.5)重复步骤(4.4),直到矩阵中没有优于阈值T1的权值,将匹配正确的目标形成最优匹配列表。
4.根据权利要求3所述的一种实时无人机视频目标检测与跟踪方法,其特征在于:步骤(4.3)中列表L中的任一目标Tl与列表Lp中的任一目标Tp的匹配值V的具体计算方法如下:
(4.3.1)位置比较:如果位置间隔大于目标的外观属性中定义的最大间隔d,则权值为设定值V1,如果位置间隔为外观属性中定义的最小间隔,则权值为设定值V2;如果位置间隔在最大间隔与最小间隔之间,则线性赋值;
(4.3.2)面积比较:如果面积比例值为外观属性中定义的最小面积,则权值为设定值V3;如果面积比例值大于外观属性中定义的最大面积,则权值为设定值V4;如果面积比例值在最小面积和最大面积之间,则线性赋值;
(4.3.3)长宽比比较:如果长宽比相同,则权值为设定值V5;如果长宽比值大于外观属性中定义的最大长宽比,则权值为设定值V6;如果长宽比在1与最大长宽比之间,则线性赋值;
(4.3.4)均值比较:采用亮度均值,如果均值差为0,则权值为设定值V7;如果均值差在外观属性中定义的最大亮度均值以上,则权值为设定值V8;如果均值差在0与最大亮度均值之间,则线性赋值;
(4.3.5)方差比较:采用亮度方差,如果方差之差为0,则权值为设定值V9;如果方差差值在外观属性中定义的最大亮度方差以上,则权值为设定值V10;如果方差之差在0与最大亮度方差之间,则线性赋值;
(4.3.6)综合权值:将上述权值取平均,得到两两比较的目标匹配矩阵。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201711415848.0A CN108108697B (zh) | 2017-12-25 | 2017-12-25 | 一种实时无人机视频目标检测与跟踪方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201711415848.0A CN108108697B (zh) | 2017-12-25 | 2017-12-25 | 一种实时无人机视频目标检测与跟踪方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN108108697A true CN108108697A (zh) | 2018-06-01 |
CN108108697B CN108108697B (zh) | 2020-05-19 |
Family
ID=62212615
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201711415848.0A Active CN108108697B (zh) | 2017-12-25 | 2017-12-25 | 一种实时无人机视频目标检测与跟踪方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN108108697B (zh) |
Cited By (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN109118523A (zh) * | 2018-09-20 | 2019-01-01 | 电子科技大学 | 一种基于yolo的图像目标跟踪方法 |
CN109409283A (zh) * | 2018-10-24 | 2019-03-01 | 深圳市锦润防务科技有限公司 | 一种海面舰船跟踪和监控的方法、***和存储介质 |
CN110163889A (zh) * | 2018-10-15 | 2019-08-23 | 腾讯科技(深圳)有限公司 | 目标跟踪方法、目标跟踪装置、目标跟踪设备 |
CN110503663A (zh) * | 2019-07-22 | 2019-11-26 | 电子科技大学 | 一种基于抽帧检测的随机多目标自动检测跟踪方法 |
CN110826497A (zh) * | 2019-11-07 | 2020-02-21 | 厦门市美亚柏科信息股份有限公司 | 一种基于最小距离法的车辆排重方法、装置及存储介质 |
CN111311640A (zh) * | 2020-02-21 | 2020-06-19 | 中国电子科技集团公司第五十四研究所 | 一种基于运动估计的无人机识别跟踪方法 |
CN111361570A (zh) * | 2020-03-09 | 2020-07-03 | 福建汉特云智能科技有限公司 | 一种多目标跟踪反向验证方法及存储介质 |
CN112840376A (zh) * | 2018-10-15 | 2021-05-25 | 华为技术有限公司 | 一种图像处理方法、装置与设备 |
CN113096165A (zh) * | 2021-04-16 | 2021-07-09 | 无锡物联网创新中心有限公司 | 一种目标对象定位方法及装置 |
Citations (15)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20060182368A1 (en) * | 2005-01-21 | 2006-08-17 | Changick Kim | Efficient and robust algorithm for video sequence matching |
CN101408983A (zh) * | 2008-10-29 | 2009-04-15 | 南京邮电大学 | 基于粒子滤波和活动轮廓模型的多目标跟踪方法 |
CN101714252A (zh) * | 2009-11-26 | 2010-05-26 | 上海电机学院 | Sar图像中道路的提取方法 |
CN101807303A (zh) * | 2010-03-05 | 2010-08-18 | 北京智安邦科技有限公司 | 一种基于多目标均值漂移的跟踪装置 |
CN102316307A (zh) * | 2011-08-22 | 2012-01-11 | 安防科技(中国)有限公司 | 一种道路交通视频检测方法及装置 |
CN103500322A (zh) * | 2013-09-10 | 2014-01-08 | 北京航空航天大学 | 基于低空航拍图像的车道线自动识别方法 |
CN104657978A (zh) * | 2014-12-24 | 2015-05-27 | 福州大学 | 一种基于遥感图像道路形状特征的道路提取方法 |
CN105069407A (zh) * | 2015-07-23 | 2015-11-18 | 电子科技大学 | 一种基于视频的交通流量获取方法 |
CN105261035A (zh) * | 2015-09-15 | 2016-01-20 | 杭州中威电子股份有限公司 | 一种高速公路运动目标跟踪方法及装置 |
CN105353772A (zh) * | 2015-11-16 | 2016-02-24 | 中国航天时代电子公司 | 一种无人机机动目标定位跟踪中的视觉伺服控制方法 |
CN105549614A (zh) * | 2015-12-17 | 2016-05-04 | 北京猎鹰无人机科技有限公司 | 无人机目标跟踪方法 |
CN105956527A (zh) * | 2016-04-22 | 2016-09-21 | 百度在线网络技术(北京)有限公司 | 用于无人驾驶车的障碍物检测结果评估方法和装置 |
CN106097388A (zh) * | 2016-06-07 | 2016-11-09 | 大连理工大学 | 视频目标跟踪中目标位置预测、搜索范围自适应调整及双重匹配融合的方法 |
CN106228577A (zh) * | 2016-07-28 | 2016-12-14 | 西华大学 | 一种动态背景建模方法及装置、前景检测方法及装置 |
CN106981073A (zh) * | 2017-03-31 | 2017-07-25 | 中南大学 | 一种基于无人机的地面运动目标实时跟踪方法及*** |
-
2017
- 2017-12-25 CN CN201711415848.0A patent/CN108108697B/zh active Active
Patent Citations (15)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20060182368A1 (en) * | 2005-01-21 | 2006-08-17 | Changick Kim | Efficient and robust algorithm for video sequence matching |
CN101408983A (zh) * | 2008-10-29 | 2009-04-15 | 南京邮电大学 | 基于粒子滤波和活动轮廓模型的多目标跟踪方法 |
CN101714252A (zh) * | 2009-11-26 | 2010-05-26 | 上海电机学院 | Sar图像中道路的提取方法 |
CN101807303A (zh) * | 2010-03-05 | 2010-08-18 | 北京智安邦科技有限公司 | 一种基于多目标均值漂移的跟踪装置 |
CN102316307A (zh) * | 2011-08-22 | 2012-01-11 | 安防科技(中国)有限公司 | 一种道路交通视频检测方法及装置 |
CN103500322A (zh) * | 2013-09-10 | 2014-01-08 | 北京航空航天大学 | 基于低空航拍图像的车道线自动识别方法 |
CN104657978A (zh) * | 2014-12-24 | 2015-05-27 | 福州大学 | 一种基于遥感图像道路形状特征的道路提取方法 |
CN105069407A (zh) * | 2015-07-23 | 2015-11-18 | 电子科技大学 | 一种基于视频的交通流量获取方法 |
CN105261035A (zh) * | 2015-09-15 | 2016-01-20 | 杭州中威电子股份有限公司 | 一种高速公路运动目标跟踪方法及装置 |
CN105353772A (zh) * | 2015-11-16 | 2016-02-24 | 中国航天时代电子公司 | 一种无人机机动目标定位跟踪中的视觉伺服控制方法 |
CN105549614A (zh) * | 2015-12-17 | 2016-05-04 | 北京猎鹰无人机科技有限公司 | 无人机目标跟踪方法 |
CN105956527A (zh) * | 2016-04-22 | 2016-09-21 | 百度在线网络技术(北京)有限公司 | 用于无人驾驶车的障碍物检测结果评估方法和装置 |
CN106097388A (zh) * | 2016-06-07 | 2016-11-09 | 大连理工大学 | 视频目标跟踪中目标位置预测、搜索范围自适应调整及双重匹配融合的方法 |
CN106228577A (zh) * | 2016-07-28 | 2016-12-14 | 西华大学 | 一种动态背景建模方法及装置、前景检测方法及装置 |
CN106981073A (zh) * | 2017-03-31 | 2017-07-25 | 中南大学 | 一种基于无人机的地面运动目标实时跟踪方法及*** |
Non-Patent Citations (3)
Title |
---|
EMILLO MAGGIO 等: "particle PHD filtering for multi-target visual tracking", 《2007 IEEE INTERNATIONAL CONFERENCE ON ACOUSTICS, SPEECH AND SIGNAL PROCESSING-ICASSP"07》 * |
李红波 等: "基于mean-shift和粒子滤波的两步多目标跟踪方法", 《重庆邮电大学学报(自然科学版)》 * |
谭媛: "遥感图像道路边缘检测与路面提取方法研究", 《中国优秀硕士学位论文全文数据库_信息科技辑》 * |
Cited By (17)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN109118523A (zh) * | 2018-09-20 | 2019-01-01 | 电子科技大学 | 一种基于yolo的图像目标跟踪方法 |
CN109118523B (zh) * | 2018-09-20 | 2022-04-22 | 电子科技大学 | 一种基于yolo的图像目标跟踪方法 |
CN110163889A (zh) * | 2018-10-15 | 2019-08-23 | 腾讯科技(深圳)有限公司 | 目标跟踪方法、目标跟踪装置、目标跟踪设备 |
US12026863B2 (en) | 2018-10-15 | 2024-07-02 | Huawei Technologies Co., Ltd. | Image processing method and apparatus, and device |
CN112840376A (zh) * | 2018-10-15 | 2021-05-25 | 华为技术有限公司 | 一种图像处理方法、装置与设备 |
CN109409283B (zh) * | 2018-10-24 | 2022-04-05 | 深圳市锦润防务科技有限公司 | 一种海面舰船跟踪和监控的方法、***和存储介质 |
CN109409283A (zh) * | 2018-10-24 | 2019-03-01 | 深圳市锦润防务科技有限公司 | 一种海面舰船跟踪和监控的方法、***和存储介质 |
CN110503663A (zh) * | 2019-07-22 | 2019-11-26 | 电子科技大学 | 一种基于抽帧检测的随机多目标自动检测跟踪方法 |
CN110503663B (zh) * | 2019-07-22 | 2022-10-14 | 电子科技大学 | 一种基于抽帧检测的随机多目标自动检测跟踪方法 |
CN110826497A (zh) * | 2019-11-07 | 2020-02-21 | 厦门市美亚柏科信息股份有限公司 | 一种基于最小距离法的车辆排重方法、装置及存储介质 |
CN110826497B (zh) * | 2019-11-07 | 2022-12-02 | 厦门市美亚柏科信息股份有限公司 | 一种基于最小距离法的车辆排重方法、装置及存储介质 |
CN111311640B (zh) * | 2020-02-21 | 2022-11-01 | 中国电子科技集团公司第五十四研究所 | 一种基于运动估计的无人机识别跟踪方法 |
CN111311640A (zh) * | 2020-02-21 | 2020-06-19 | 中国电子科技集团公司第五十四研究所 | 一种基于运动估计的无人机识别跟踪方法 |
CN111361570B (zh) * | 2020-03-09 | 2021-06-18 | 福建汉特云智能科技有限公司 | 一种多目标跟踪反向验证方法及存储介质 |
CN111361570A (zh) * | 2020-03-09 | 2020-07-03 | 福建汉特云智能科技有限公司 | 一种多目标跟踪反向验证方法及存储介质 |
CN113096165B (zh) * | 2021-04-16 | 2022-02-18 | 无锡物联网创新中心有限公司 | 一种目标对象定位方法及装置 |
CN113096165A (zh) * | 2021-04-16 | 2021-07-09 | 无锡物联网创新中心有限公司 | 一种目标对象定位方法及装置 |
Also Published As
Publication number | Publication date |
---|---|
CN108108697B (zh) | 2020-05-19 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN108108697A (zh) | 一种实时无人机视频目标检测与跟踪方法 | |
CN107235044B (zh) | 一种基于多传感数据实现对道路交通场景和司机驾驶行为的还原方法 | |
CN102682292B (zh) | 基于单目视觉的道路边缘检测及粗定位方法 | |
Caraffi et al. | Off-road path and obstacle detection using decision networks and stereo vision | |
CN111968128B (zh) | 一种基于图像标记的无人机视觉姿态和位置解算方法 | |
CN104820998B (zh) | 一种基于无人机动平台的人体检测与跟踪方法及装置 | |
CN102436738B (zh) | 一种基于无人机的交通监测装置 | |
CN103778645B (zh) | 一种基于图像的圆形目标实时跟踪方法 | |
CN104881650A (zh) | 一种基于无人机动平台的车辆跟踪方法 | |
CN106845364B (zh) | 一种快速自动目标检测方法 | |
CN105373135A (zh) | 一种基于机器视觉的飞机入坞引导和机型识别的方法及*** | |
CN105550692B (zh) | 基于标志物颜色及轮廓检测的无人机自动寻的着陆方法 | |
CN105225251B (zh) | 基于机器视觉的超视距海上运动目标快速识别与定位装置及方法 | |
KR101261409B1 (ko) | 영상 내 노면표시 인식시스템 | |
CN105549614A (zh) | 无人机目标跟踪方法 | |
CN108198417B (zh) | 一种基于无人机的道路巡检*** | |
CN112488061B (zh) | 一种联合ads-b信息的多航空器检测与跟踪方法 | |
CN105718872A (zh) | 两侧车道快速定位及检测车辆偏转角度的辅助方法及*** | |
CN109492525B (zh) | 一种测量基站天线工程参数的方法 | |
CN104809433A (zh) | 一种基于最大稳定区域和随机采样的斑马线检测方法 | |
CN111598952A (zh) | 一种多尺度合作靶标设计与在线检测识别方法及*** | |
CN114495068B (zh) | 基于人机交互和深度学习的路面健康检测方法 | |
CN110472628A (zh) | 一种基于视频特征的改进Faster R-CNN网络检测漂浮物方法 | |
CN103455815A (zh) | 一种复杂场景下的自适应车牌字符分割方法 | |
CN109165602A (zh) | 一种基于视频分析的黑烟车检测方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |