CN109003292B - 一种基于开关卡尔曼滤波器的运动目标跟踪方法 - Google Patents
一种基于开关卡尔曼滤波器的运动目标跟踪方法 Download PDFInfo
- Publication number
- CN109003292B CN109003292B CN201810661518.8A CN201810661518A CN109003292B CN 109003292 B CN109003292 B CN 109003292B CN 201810661518 A CN201810661518 A CN 201810661518A CN 109003292 B CN109003292 B CN 109003292B
- Authority
- CN
- China
- Prior art keywords
- target
- kalman filter
- error
- robot
- motion
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
- 238000000034 method Methods 0.000 title claims abstract description 18
- 230000033001 locomotion Effects 0.000 claims abstract description 65
- 239000011159 matrix material Substances 0.000 claims abstract description 35
- 230000008859 change Effects 0.000 claims abstract description 17
- 238000005259 measurement Methods 0.000 claims abstract description 13
- 239000013598 vector Substances 0.000 claims abstract description 9
- 230000007704 transition Effects 0.000 claims abstract description 7
- 238000012544 monitoring process Methods 0.000 claims abstract description 6
- 230000008569 process Effects 0.000 claims description 6
- 230000000007 visual effect Effects 0.000 claims description 6
- 230000009466 transformation Effects 0.000 claims description 4
- 230000005484 gravity Effects 0.000 claims description 2
- 230000000694 effects Effects 0.000 abstract description 2
- 230000035772 mutation Effects 0.000 description 5
- 238000010586 diagram Methods 0.000 description 4
- 238000012937 correction Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 238000005070 sampling Methods 0.000 description 2
- 102000002274 Matrix Metalloproteinases Human genes 0.000 description 1
- 108010000684 Matrix Metalloproteinases Proteins 0.000 description 1
- 230000001133 acceleration Effects 0.000 description 1
- 230000007547 defect Effects 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 230000009125 negative feedback regulation Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/20—Analysis of motion
- G06T7/277—Analysis of motion involving stochastic approaches, e.g. using Kalman filters
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Image Analysis (AREA)
- Control Of Position, Course, Altitude, Or Attitude Of Moving Bodies (AREA)
- Feedback Control In General (AREA)
Abstract
本发明公开了一种基于开关卡尔曼滤波器的运动目标跟踪方法,包括步骤:S1,视觉***采集图像信息,获得目标在机器人坐标系下的位置;S2,初始化卡尔曼滤波器的状态转移矩阵、测量矩阵、误差协方差矩阵、状态迭代误差协方差矩阵;S3,使用运动监视器监测目标的运动速度是否产生突变,若否,则使用卡尔曼滤波器估计得到目标的运动速度;若是,则先重置卡尔曼滤波器的目标状态向量,再使用重置的卡尔曼滤波器估计得到目标的运动速度;S4,把估计得到的目标运动速度前馈到机器人视觉伺服控制器中,实现实时动态跟踪。本发明在目标运动状态产生突变的情况下,能够抑制因目标运动状态产生突变导致的跟踪误差,具有稳定的跟踪效果和较好的鲁棒性。
Description
技术领域
本发明属于机器人控制领域,主要是基于视觉的运动目标跟踪,具体涉及一种基于开关卡尔曼滤波器的运动目标跟踪方法。
背景技术
运动目标实时跟踪技术在机器人生产线、服务机器人领域有着广泛的应用需求。但由于运动目标的运动状态未知,运动状态可能产生突变等原因,跟踪误差较大,难得达到实际应用的要求,因此开发一种鲁棒性、高效性的、能够抑制因为目标的运动状态产生突变导致跟踪误差扩大的跟踪算法具有重大意义。
发明内容
本发明的目的在于克服现有技术的不足,满足现有的需求,提供一种基于开关卡尔曼滤波器的运动目标跟踪方法。该方法利用卡尔曼滤波器对目标的运动状态进行估计,再结合运动监视器对目标运动状态是否产生突变进行监控,在快速运动情况和运动状态产生突变的情况下对目标进行跟踪。
为了实现上述目的,本发明提供一种基于开关卡尔曼滤波器的运动目标跟踪方法,包括如下步骤:
S1,视觉***采集图像信息,经过模板匹配和相机投影变换算法获得目标在机器人坐标系下的位置;
S2,初始化卡尔曼滤波器的状态转移矩阵、测量矩阵、误差协方差矩阵、状态迭代误差协方差矩阵;
S3,使用运动监视器监测目标的运动速度是否产生突变,若否,则使用卡尔曼滤波器估计得到目标的运动速度;若是,则先重置卡尔曼滤波器的目标状态向量,再使用重置后的卡尔曼滤波器估计得到目标的运动速度;
S4,把步骤S3中估计得到的目标运动速度前馈到机器人视觉伺服控制器中,实现实时动态跟踪。
进一步地,所述步骤S2包括:
考虑对平面目标进行跟踪,在参考坐标系为机器人基坐标系下,保持目标位置和机器人位置不变,使用相机测量目标重心在机器人基坐标系下的位置,总共采集N个数据,
求误差协方差矩阵:
其中t为视觉***采集和处理一张图片所需的时间。
进一步地,所述步骤S3中,所述使用运动监视器监测目标的运动速度是否产生突变包括:
若条件为真,则表示检测到了不光滑运动,即目标的运动产生突变,此时重置卡尔曼滤波器;
所述误差带宽通过最近n次预测误差的标准偏差来定义:
则误差带宽定义为标准差的倍数:
所述误差带中心定义为最近n次预测误差的均值:
进一步地,所述步骤S3中,
***状态迭代方程为:
测量过程为:
卡尔曼滤波器的方程可以分成两部分,一部分为时间更新,另一部分为测量校正,
时间更新方程:
测量校正过程:
状态空间方程为:
观测值为目标的笛卡尔坐标:
测量矩阵为:
进一步地,所述步骤S4中,
考虑对一个运动目标进行跟踪,并假设期望的特征向量为一个常向量(图像平面上),此时误差的时间导数为:
设计一个控制率使得误差以指数方式收敛到0:
所以:
相比现有技术,本发明在目标运动状态产生突变的情况下,能够抑制因目标运动状态产生突变导致的跟踪误差,具有稳定的跟踪效果,具有较好的鲁棒性。
附图说明
图1是基于开关卡尔曼滤波器的运动目标跟踪算法框图。
图2是机器人运动目标跟踪流程图。
图3是跟踪误差曲线图,其中图3a)为运动目标X方向轨迹变化图,3b)为运动目标Y方向轨迹变化图,3c)为机器人末端X方向跟踪误差曲线,3d)为机器人末端Y方向跟踪误差曲线。
具体实施方式
为了更好地理解本发明,下面结合附图对本发明作进一步地描述:
本发明基于开关卡尔曼滤波器的运动目标跟踪方法,图1是本发明的算法框图,具体实施步骤如下:
步骤1,视觉***采集图像信息,经过模板匹配和相机投影变换算法获得目标在机器人坐标系下的位置;
步骤2,初始化卡尔曼滤波器的状态转移矩阵、测量矩阵、误差协方差矩阵、状态迭代误差协方差矩阵;
步骤3,卡尔曼滤波器对目标的运动速度进行估计,若运动监视器检测到目标的运动状态产生突变,向卡尔曼滤波器发出开关信号,重置卡尔曼滤波器,否则,卡尔曼滤波器把估计得到的速度前馈到视觉伺服控制器。
步骤4,根据期望图像特征与当前图像特征的偏差计算得到控制偏差并输入到视觉伺服控制器中,获得机器人的运动速度,并与卡尔曼滤波器估计得到的目标的运动速度相加作为机器人最终的运动速度,实现实时动态跟踪。
负反馈调节用于镇定***,使跟踪误差收敛。
图2为采用本发明的完整的机器人运动目标跟踪算法的流程图,具体实施步骤如下:
步骤1:视觉***采集图像信息,经过模板匹配和相机投影变换算法获得目标在机器人坐标系下的位置。
步骤2:卡尔曼滤波器对目标的运动速度进行估计,若运动监视器检测到目标的运动状态产生突变,像卡尔曼滤波器发出开关信号,重置卡尔曼滤波器,否则,卡尔曼滤波器把估计得到的速度前馈到视觉伺服控制器。
步骤3,根据期望图像特征与当前图像特征的偏差计算得到控制偏差。输入到视觉伺服控制器中,获得机器人的运动速度,与卡尔曼滤波器估计得到的速度相加作为机器人最终的运动速度。
步骤4,积分得到机器人需要运动的矢量距离,与当前机器人末端的位置相加得到机器人运动的下一个笛卡尔空间点。
步骤5,根据机器人逆运动学得到机器人各个关节位置,在机器人关节空间做三次样图插补,得到电机在机器人每一个插补周期的输入值。
图3a)-3d)为算法跟踪误差曲线。使用基于运动监视器的开关卡尔曼滤波器的运动目标跟踪算法对目标进行跟踪,在目标运动没有产生突变的情况下,运动监视器没有发出开关信号,跟踪误差先增加后减少到0.5mm以内。在目标突然静止时,由于目标的突然静止,先前假设的运动模型失效,状态迭代会产生一个误差很大的值,这会使得卡尔曼滤波器估计得到的目标运动状态具有很大的误差。在目标突然静止之后的短时间内,机器人定位误差会迅速扩大,同时,卡尔曼滤波器的两步预测值与当前状态的测量值的误差很大,运动监视器会监测到目标运动状态的突变,产生开关信号重置卡尔曼滤波器,在这之后,跟踪误差又快速以指数方式收敛到0.03mm内。
本发明是一种实时有效的运动目标跟踪方法,通过卡尔曼滤波器对目标状态进行估计得到目标的运动速度,前馈到视觉伺服控制器中,减少跟踪过程的误差;运动监视器根据卡尔曼滤波器的预测偏差来判断目标的运动状态是否产生突变,若目标运动状态产生突变,发出开关信号重置卡尔曼滤波器,抑制因为目标运动状态产生突变导致的跟踪误差。
本发明的上述实施例仅仅是为清楚地说明本发明所作的举例,而并非是对本发明的实施方式的限定。对于所属领域的普通技术人员来说,在上述说明的基础上还可以做出其它不同形式的变化或变动。这里无需也无法对所有的实施方式予以穷举。凡在本发明的精神和原则之内所作的任何修改、等同替换和改进等,均应包含在本发明权利要求的保护范围之内。
Claims (1)
1.一种基于开关卡尔曼滤波器的运动目标跟踪方法,其特征在于,包括如下步骤:
S1,视觉***采集图像信息,经过模板匹配和相机投影变换算法获得目标在机器人坐标系下的位置;
S2,初始化卡尔曼滤波器的状态转移矩阵、测量矩阵、误差协方差矩阵、状态迭代误差协方差矩阵;
S3,使用运动监视器监测目标的运动速度是否产生突变,若否,则使用卡尔曼滤波器估计得到目标的运动速度;若是,则先重置卡尔曼滤波器的目标状态向量,再使用重置后的卡尔曼滤波器估计得到目标的运动速度;
S4,根据期望图像特征与当前图像特征的偏差计算得到控制偏差并输入到视觉伺服控制器中,获得机器人的运动速度,并与卡尔曼滤波器估计得到的目标的运动速度相加作为机器人最终的运动速度,实现实时动态跟踪;
所述步骤S2包括:
考虑对平面目标进行跟踪,在参考坐标系为机器人基坐标系下,保持目标位置和机器人位置不变,使用相机测量目标重心在机器人基坐标系下的位置,总共采集N个数据,
求误差协方差矩阵:
Rk即为卡尔曼滤波器的误差协方差矩阵;
P1,0即为卡尔曼滤波器的状态迭代误差协方差矩阵;
状态转移矩阵A与测量矩阵H为:
其中t为视觉***采集和处理一张图片所需的时间;
所述步骤S3中,所述使用运动监视器监测目标的运动速度是否产生突变包括:
在k时刻,运动预测检测器的判别条件为:
|Δxp(k)-μ(k)|<δ(k)
若条件为真,则表示检测到了不光滑运动,即目标的运动产生突变,此时重置卡尔曼滤波器;
其中Δxp(k)是卡尔曼滤波器的m步预测误差:
所述误差带宽通过最近n次预测误差的标准偏差来定义:
E{Δxp}为最近n次预测误差的均值;
则误差带宽定义为标准偏差的倍数:
δ(k)=λσn(k)
其中λ为一个常数;
所述误差带中心定义为最近n次预测误差的均值:
μ(k)=E{Δxp}。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201810661518.8A CN109003292B (zh) | 2018-06-25 | 2018-06-25 | 一种基于开关卡尔曼滤波器的运动目标跟踪方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201810661518.8A CN109003292B (zh) | 2018-06-25 | 2018-06-25 | 一种基于开关卡尔曼滤波器的运动目标跟踪方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN109003292A CN109003292A (zh) | 2018-12-14 |
CN109003292B true CN109003292B (zh) | 2022-01-18 |
Family
ID=64601714
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201810661518.8A Expired - Fee Related CN109003292B (zh) | 2018-06-25 | 2018-06-25 | 一种基于开关卡尔曼滤波器的运动目标跟踪方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN109003292B (zh) |
Families Citing this family (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN109623162B (zh) * | 2019-01-31 | 2020-02-14 | 中国地质大学(武汉) | 一种基于视觉伺服与卡尔曼滤波补偿的二维激光雕刻机 |
CN109886323B (zh) * | 2019-01-31 | 2020-10-30 | 中国地质大学(武汉) | 一种用于测试运动轨迹滤波算法的装置 |
US20200271421A1 (en) * | 2019-02-26 | 2020-08-27 | Bae Systems Information And Electronic Systems Integration Inc. | Robust angle only nine state target state estimator (tse) |
WO2020220284A1 (zh) * | 2019-04-30 | 2020-11-05 | 深圳市大疆创新科技有限公司 | 一种瞄准控制方法、移动机器人及计算机可读存储介质 |
CN110007601B (zh) * | 2019-05-06 | 2022-03-25 | 广东工业大学 | 一种双边遥操作***的控制装置和设备 |
CN110792430B (zh) * | 2019-11-20 | 2021-08-17 | 中国地质大学(北京) | 一种基于多传感器数据融合的随钻测斜方法及装置 |
CN111289967A (zh) * | 2020-03-31 | 2020-06-16 | 四川长虹电器股份有限公司 | 基于毫米波雷达的人员检测跟踪与计数算法 |
CN114711968B (zh) * | 2022-03-31 | 2024-07-16 | 广东工业大学 | 一种基于手术机器人***的无标定靶区定位跟踪方法 |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102721951A (zh) * | 2012-05-04 | 2012-10-10 | 西安电子科技大学 | 一种高机动目标跟踪方法 |
CN103034249A (zh) * | 2012-12-27 | 2013-04-10 | 中国电子科技集团公司第二十六研究所 | 一种基于模糊决策的双轴光电转台复合控制***和控制方法 |
CN108038868A (zh) * | 2017-10-17 | 2018-05-15 | 国网河南省电力公司郑州供电公司 | 基于三维数字模型的变电站复杂环境跨视场目标跟踪方法 |
-
2018
- 2018-06-25 CN CN201810661518.8A patent/CN109003292B/zh not_active Expired - Fee Related
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102721951A (zh) * | 2012-05-04 | 2012-10-10 | 西安电子科技大学 | 一种高机动目标跟踪方法 |
CN103034249A (zh) * | 2012-12-27 | 2013-04-10 | 中国电子科技集团公司第二十六研究所 | 一种基于模糊决策的双轴光电转台复合控制***和控制方法 |
CN108038868A (zh) * | 2017-10-17 | 2018-05-15 | 国网河南省电力公司郑州供电公司 | 基于三维数字模型的变电站复杂环境跨视场目标跟踪方法 |
Non-Patent Citations (3)
Title |
---|
《Visual servo control II: Advanced approaches》;Francois Chaumette; Seth Hutchinson;《IEEE Robotics & Automation Magazine,2007》;20070402;第14卷(第1期);第109-118页 * |
《光学测试转台若干控制算法研究》;杨天锡;《中国优秀硕士学位论文全文数据库 信息科技辑,2009年第03期,I140-501》;20090315;第50-51页 * |
《基于双目视觉的智能车辆路径识别方法研究》;季聪;《中国优秀硕士学位论文全文数据库 信息科技辑,2014年第02期,I138-755》;20140215;第18,22页 * |
Also Published As
Publication number | Publication date |
---|---|
CN109003292A (zh) | 2018-12-14 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN109003292B (zh) | 一种基于开关卡尔曼滤波器的运动目标跟踪方法 | |
CN110675435B (zh) | 基于卡尔曼滤波和χ2检测平滑处理的车辆轨迹跟踪方法 | |
CN107627303B (zh) | 一种基于眼在手上结构的视觉伺服***的pd-smc控制方法 | |
JP4967062B2 (ja) | オプティカルフロー、運動学及び深さ情報を使用して、物体の適切な運動を推定する方法 | |
CN111178385B (zh) | 一种鲁棒在线多传感器融合的目标跟踪方法 | |
CN105242533B (zh) | 一种融合多信息的变导纳遥操作控制方法 | |
Wüthrich et al. | Probabilistic object tracking using a range camera | |
CN108255791B (zh) | 基于分布式传感器一致性的机动目标跟踪方法 | |
CN111398984B (zh) | 基于扫地机器人的自适应激光雷达点云校正与定位方法 | |
CN107907857B (zh) | 一种基于uwb的实时定位方法及定位装置 | |
CN108515519B (zh) | 一种基于力传感器的打磨路径自适应校正方法 | |
CN107229037B (zh) | 移动平台传感器量测数据扩维空间配准方法 | |
CN111489399B (zh) | 一种视觉跟踪组件安装参数标定装置和方法 | |
CN109352655B (zh) | 一种基于多输出高斯过程回归的机器人变形补偿方法 | |
CN107945166B (zh) | 基于双目视觉的待测物体三维振动轨迹的测量方法 | |
Jayakumar et al. | Risk-sensitive filters for recursive estimation of motion from images | |
CN113442171A (zh) | 一种机器人动态稳定判别方法和动态自适应姿态控制方法 | |
CN115446836B (zh) | 一种基于多种图像特征信息混合的视觉伺服方法 | |
CN112034713A (zh) | 非理想网络环境下移动目标的最优状态估计方法及*** | |
Norizuki et al. | Contact prediction control for a teleoperation system with time delay | |
Incremona et al. | Trajectory tracking of mechanical systems with unilateral constraints: Experimental results of a recently introduced hybrid PD feedback controller | |
CN114034290B (zh) | 放样机器人***的放样方法 | |
CN113534164B (zh) | 一种基于主被动联合声纳阵列的目标路径跟踪方法 | |
Röstel et al. | Learning a state estimator for tactile in-hand manipulation | |
CN112268548A (zh) | 一种基于双目视觉的飞机局部外形测量方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant | ||
CF01 | Termination of patent right due to non-payment of annual fee |
Granted publication date: 20220118 |
|
CF01 | Termination of patent right due to non-payment of annual fee |