CN107045490A - 一种非线性***的状态估计方法 - Google Patents

一种非线性***的状态估计方法 Download PDF

Info

Publication number
CN107045490A
CN107045490A CN201710319278.9A CN201710319278A CN107045490A CN 107045490 A CN107045490 A CN 107045490A CN 201710319278 A CN201710319278 A CN 201710319278A CN 107045490 A CN107045490 A CN 107045490A
Authority
CN
China
Prior art keywords
state
time
neural network
computing
vector
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201710319278.9A
Other languages
English (en)
Inventor
许大星
王海伦
张露
柴国飞
陈佳泉
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Quzhou University
Original Assignee
Quzhou University
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Quzhou University filed Critical Quzhou University
Priority to CN201710319278.9A priority Critical patent/CN107045490A/zh
Publication of CN107045490A publication Critical patent/CN107045490A/zh
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F17/00Digital computing or data processing equipment or methods, specially adapted for specific functions
    • G06F17/10Complex mathematical operations
    • G06F17/11Complex mathematical operations for solving equations, e.g. nonlinear equations, general mathematical optimization problems

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Mathematical Physics (AREA)
  • General Physics & Mathematics (AREA)
  • Pure & Applied Mathematics (AREA)
  • Mathematical Optimization (AREA)
  • Mathematical Analysis (AREA)
  • Computational Mathematics (AREA)
  • Data Mining & Analysis (AREA)
  • Theoretical Computer Science (AREA)
  • Operations Research (AREA)
  • Algebra (AREA)
  • Databases & Information Systems (AREA)
  • Software Systems (AREA)
  • General Engineering & Computer Science (AREA)
  • Feedback Control In General (AREA)

Abstract

本申请提出了一种基于高阶容积卡尔曼滤波和神经网络的状态估计方法,在算法的实现过程中,首先利用神经网络对非线性***建立状态空间模型,然后把神经网络的权重和***的状态变量组合在一起作为新的状态变量,并采用高阶容积卡尔曼滤波对新的状态进行实时更新,从而达到神经网络对非线性***模型的真实逼近以及对状态值的精确估计,并且实验仿真表明了本发明方法的有效性。

Description

一种非线性***的状态估计方法
技术领域
本申请属于航空航天、智能交通、模式识别以及医学工程技术领域,具体地说,涉及一种非线性***的状态估计方法。
背景技术
非线性***状态模型未知情况下,现有的基于非线性滤波和神经网络的算法对非线性***状态估计的精度受限。
当***模型未知时,采用神经网络对模型进行非线性近似是一种简单而有效的方法。神经网络根据实际数据集确定网络逼近的非线性函数,然而,当实际***的状态变量不完全可测时,单独采用神经网络将无法建立过程的模型。状态空间模型法对***的内部状态和外部可观测输出变量之间的变化关系进行描述,由于该方法可以对***内部复杂的状态进行估计和预测,因此已经被广泛的应用在动态***的处理当中。对***的状态空间模型建立完成之后,就需要对利用合适的方法对***的状态进行估计。滤波方法在状态空间中利用***输入输出观测数据,对***状态进行最优估计。这种滤波的方法不仅可以对状态进行估计,还可以对神经网络***参数进行辨识。
非线性滤波算法在参数估计中得到了长足的发展,特别是在神经网络的参数辨识方面,其将网络的权系数参数看作特殊的状态进行估计。现有的方法利用神经网络建立状态空间模型,将网络权系数作为***的状态变量,进而基于扩展卡尔曼滤波算法对状态变量进行实时更新。扩展卡尔曼滤波是目前应用最为广泛的一种非线性滤波方法,然而当***的非线性程度较高,一阶近似会带来非常大的截断误差,扩展卡尔曼滤波算法的估计性能将随之大大下降,甚至发散。由于扩展卡尔曼滤波稳定性差、精度低等缺点,Julier等人提出了无迹卡尔曼滤波,使用无迹变换来处理均值和方差的非线性传递。已经有不少学者利用无迹卡尔曼滤波和神经网络来解决未知***模型的非线性***状态估计问题。大量的仿真实验结果表明基于无迹卡尔曼滤波算法的神经网络算法明显优于基于扩展卡尔曼滤波算法的神经网络算法。然而无迹卡尔曼滤波的精度仍然有限,而且当***维数较高时,其估计性能明显降低。
发明内容
有鉴于此,本申请针对状态模型未知的非线性***,提出了一种基于高阶容积卡尔曼滤波算法和神经网络的非线性***状态估计方法,该方法利用神经网络对***状态进行建模,并利用高阶容积卡尔曼滤波算法对状态进行实时更新估计,本发明方法弥补了现有算法的不足。
一种非线性***的状态估计方法,包括以下步骤:
步骤一:将非线性***的状态与神经网络的权系数组合起来,利用神经网络建立状态空间模型,将网络的权系数和非线性***的状态组合一起为增广的状态变量;
步骤二:采用高阶容积卡尔曼滤波算法对神经网络***状态进行时间更新,以及根据时间更新后的结果进行测量更新,从而实现网络权系数的自适应调整和状态的实时更新。
进一步地,如上所述的方法,步骤一包括:
将***的状态与神经网络的权系数组合起来,形成增广状态xa=[xW]T,则可建立如下所示的非线性***:
其中,fj(xk)为神经网络对非线性***建立的数学模型:
g(x)为神经网络Sigmod核函数,Wk为神经网络的权系数,新***的过程噪声wk和观测噪声vk均为独立的零均值高斯白噪声,并且对应的协方差矩阵分别为Qk,Rk
xk代表第k时刻的状态向量,代表第k时刻的增广状态向量,zk代表表示第k时刻的观测向量,代表非线性观测函数。
进一步地,如上所述的方法,步骤二对状态进行时间更新包括:
6)在时刻k,假设k-1时刻的误差协方差已知且为Pk-1|k-1,分解因数:
其中,向量Sk-1|k-1为Pk-1|k-1的Cholesky分解;代表Sk-1|k-1的转置,T代表转置操作;
7)计算容积点
代表第k-1时刻增广状态的估计值;
其中m=2n,向量ξi
式中,ei表示n维单位向量且其第i个元素为1;分别为
8)计算状态方程传播后的容积点(i=1,2,…,m)
9)计算一步状态预测
其中,权值wi分别为
10)计算一步预测误差协方差矩阵
进一步地,如上所述的方法,步骤二根据时间更新后的结果进行测量更新包括:
10)分解因数:
Sk|k-1代表矩阵分解值;
11)计算更新后的状态容积点
12)计算测量方程传播后的容积点
13)计算k时刻一步量测预测
14)计算新息协方差矩阵
15)计算一步预测互协方差矩阵
16)计算增益矩阵
17)计算更新状态
18)计算协方差矩阵
与现有技术相比,本申请可以获得包括以下技术效果:
本发明针对未知状态模型的非线性***,首先利用神经网络建立状态空间模型,将网络的权系数和***的状态组合一起为增广的状态变量,然后采用高阶容积卡尔曼滤波算法对神经网络***状态进行估计预测,从而实现网络权系数的自适应调整和状态的实时更新,提高了非线性***状态的估计精度,仿真实验表明了本发明所提算法的有效性。
附图说明
此处所说明的附图用来提供对本申请的进一步理解,构成本申请的一部分,本申请的示意性实施例及其说明用于解释本申请,并不构成对本申请的不当限定。在附图中:
图1是神经网络的模型结构;
图2是状态估计***原理图;
图3为仿真实验中状态1的估计曲线;
图4为仿真实验中状态2的估计曲线;
图5为仿真实验中状态1的误差曲线;
图6为仿真实验中状态2的误差曲线。
具体实施方式
以下将配合附图及实施例来详细说明本申请的实施方式,藉此对本申请如何应用技术手段来解决技术问题并达成技术功效的实现过程能充分理解并据以实施。
神经网络的状态空间模型
神经网络的结构模型一般可分为前馈神经网络模型、反馈神经网络模型以及随机神经网络模型等。目前在各个行业领域中前馈神经网络模型应用最为广泛,其状态空间的模型结构如图1所示,其中,x1,x2,...xn用来表示输入的样本节点,y1,y2,...ym用来表示输出样本节点,θ12,...θq表示权重系数,该神经网络模型结构共有三个节点层,分别为输入层、隐层和输出层,各个层之间通过权系数进行连接,输入输出层在两端,中间隐含层的节点数根据实际要求进行选取。
高阶容积卡尔曼滤波原理
首先考虑如下离散非线性***:
xk=f(xk-1)+wk (1)
zk=h(xk)+vk (2)
其中,xk为n维的状态向量;zk为m维的观测向量;函数f,h为已知的非线性函数;{wk}与{vk}均为独立的零均值高斯白噪声。
对于一般的非线性***,在高斯假设下可将贝叶斯估计基本理论与任意阶容积规则相结合,从而推导出高阶的容积卡尔曼滤波。与无迹卡尔曼滤波结构相同,同样分为状态预测(时间更新)和测量更新两个步骤,主要是高阶容积卡尔曼滤波采用的是相径容积规则解决了高维***维数***问题。高阶容积规则满足:
式中,ej为n维空间Rn的单位矢量矩阵的第j列。为如下式所示的点集:
权系数分别为
其中,是单位球面的表面积,根据矩匹配法,当n=2时,权值为:
基于高阶容积卡尔曼滤波和神经网络的状态估计
当***的模型未知时,采用神经网络对***模型进行建模逼近,那么就需要求解最优的网络节点权系数,同时状态也是未知的,然而,状态跟权系数是彼此联系的,因此,本发明将***的状态和权系数组合在一起作为新的状态,将原来的***方程和权系数方程的增广方程作为新的***模型,进而利用高阶容积卡尔曼滤波算法对状态和权系数实时估计,具体的***原理如图2所示。图2当中,在k-1时刻,原***的状态xk-1与权系数Wk-1组合成新的增广状态向量[xk-1Wk-1],输入到神经网络中,进而高阶容积卡尔曼滤波根据增广状态和神经网络的输出结果进行时间更新步骤,最后高阶容积卡尔曼滤波结合时间更新的结果和测量的输出结构进行时间更新得到k时刻的***增广状态值[xk Wk],并作为下次***的输入状态。具体算法如下:
首先将***的状态与神经网络的权系数组合起来,形成增广状态xa=[xW]T,则可建立如下所示的非线性***:
其中,fj(xk)为神经网络对非线性***建立的数学模型:
g(x)为神经网络Sigmod核函数,Wk为神经网络的权系数,新***的过程噪声wk和观测噪声vk均为独立的零均值高斯白噪声,并且对应的协方差矩阵分别为Qk,Rk
然后对状态进行时间更新:
1)在时刻k,假设k-1时刻的误差协方差已知且为Pk-1|k-1,分解因数:
其中,向量Sk-1|k-1为Pk-1|k-1的Cholesky分解。
2)计算容积点
其中m=2n,向量ξi
式中,ei表示n维单位向量且其第i个元素为1。分别为
3)计算状态方程传播后的容积点(i=1,2,…,m)
4)计算一步状态预测
其中,权值wi分别为
5)计算一步预测误差协方差矩阵
最后进行测量更新:
19)分解因数:
20)计算更新后的状态容积点
21)计算测量方程传播后的容积点
22)计算k时刻一步量测预测
23)计算新息协方差矩阵
24)计算一步预测互协方差矩阵
25)计算增益矩阵
26)计算更新状态
27)计算协方差矩阵
对于公式(9)(10)所描述的已知非线性***,给定状态初始条件P0|0,即可根据上述的时间更新和测量更新两个步骤进行高阶容积卡尔曼滤波,得到增广的状态向量值。
仿真实验
考虑如下非线性***离散模型
y(k)=x1(k)+x2(k)+v(k) (30)
其中,过程噪声w(k)和观测噪声v(k)均是相互独立的零均值高斯白噪声,且方差分别为和R(k)=0.1,初始状态x0=[10 0.6]T,初始状态估计值为以及初始状态误差协方差矩阵为神经网络隐层节点数为10,核函数选择Sigmod型,初始权重设为方差为0.3的随机噪声,漂移方差阵为Qw=0.022I40×40
为了对比方便,本发明对如下算法进行如下简单标记:
算法1:基于高阶容积卡尔曼滤波和神经网络的估计算法
算法2:基于无迹卡尔曼滤波和神经网络的估计算法
仿真结果如图1-图6及表1所示。
表1估计误差对比
平均绝对估计误差 算法1 算法2
状态1 0.1835 0.2830
状态2 0.2202 0.5663
从图3和图4的估计曲线来看,算法1和算法2都能对原始状态进行较好的跟踪估计,说明两种算法都是有效的,从图4和图5的估计误差曲线来看,两种算法的误差很快趋于稳定,且算法1的误差明显要小于算法的误差,从表1的统计数据来看,算法1的状态估计精度大大高于算法2,特别是在对状态2的估计精度上,算法2的估计误差是算法1估计误差的两倍多,这主要是因为高阶容积卡尔曼滤波算法的估计精度高于无迹卡尔曼滤波算法,从而说明了基于高阶容积卡尔曼滤波和神经网络的估计算法的有效性。
上述说明示出并描述了本申请的若干优选实施例,但如前所述,应当理解本申请并非局限于本发明所披露的形式,不应看作是对其他实施例的排除,而可用于各种其他组合、修改和环境,并能够在本申请构想范围内,通过上述教导或相关领域的技术或知识进行改动。而本领域人员所进行的改动和变化不脱离本申请的精神和范围,则都应在本申请所附权利要求的保护范围内。

Claims (4)

1.一种非线性***的状态估计方法,其特征在于,包括以下步骤:
步骤一:将非线性***的状态与神经网络的权系数组合起来,利用神经网络建立状态空间模型,将网络的权系数和非线性***的状态组合一起为增广的状态变量;
步骤二:采用高阶容积卡尔曼滤波算法对神经网络***状态进行时间更新,以及根据时间更新后的结果进行测量更新,从而实现网络权系数的自适应调整和状态的实时更新。
2.根据权利要求1所述的方法,其特征在于,步骤一包括:
将***的状态与神经网络的权系数组合起来,形成增广状态xa=[x W]T,则可建立如下所示的非线性***:
其中,fj(xk)为神经网络对非线性***建立的数学模型:
g(x)为神经网络Sigmod核函数,Wk为神经网络的权系数,新***的过程噪声wk和观测噪声vk均为独立的零均值高斯白噪声,并且对应的协方差矩阵分别为Qk,Rk
xk代表第k时刻的状态向量,代表第k时刻的增广状态向量,zk代表表示第k时刻的观测向量,代表非线性观测函数。
3.据权利要求1所述的方法,其特征在于,步骤二对状态进行时间更新包括:
1)在时刻k,假设k-1时刻的误差协方差已知且为Pk-1|k-1,分解因数:
其中,向量Sk-1|k-1为Pk-1|k-1的Cholesky分解;代表Sk-1|k-1的转置,T代表转置操作;
2)计算容积点
代表第k-1时刻增广状态的估计值;
其中m=2n,向量ξi
式中,ei表示n维单位向量且其第i个元素为1;分别为
3)计算状态方程传播后的容积点(i=1,2,…,m)
4)计算一步状态预测
其中,权值wi分别为
5)计算一步预测误差协方差矩阵
4.据权利要求3所述的方法,其特征在于,步骤二根据时间更新后的结果进行测量更新包括:
1)分解因数:
Sk|k-1代表矩阵分解值;
2)计算更新后的状态容积点
3)计算测量方程传播后的容积点
4)计算k时刻一步量测预测
5)计算新息协方差矩阵
6)计算一步预测互协方差矩阵
7)计算增益矩阵
8)计算更新状态
9)计算协方差矩阵
CN201710319278.9A 2017-05-09 2017-05-09 一种非线性***的状态估计方法 Pending CN107045490A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201710319278.9A CN107045490A (zh) 2017-05-09 2017-05-09 一种非线性***的状态估计方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201710319278.9A CN107045490A (zh) 2017-05-09 2017-05-09 一种非线性***的状态估计方法

Publications (1)

Publication Number Publication Date
CN107045490A true CN107045490A (zh) 2017-08-15

Family

ID=59546723

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201710319278.9A Pending CN107045490A (zh) 2017-05-09 2017-05-09 一种非线性***的状态估计方法

Country Status (1)

Country Link
CN (1) CN107045490A (zh)

Cited By (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107992877A (zh) * 2017-10-11 2018-05-04 衢州学院 两阶段高阶容积信息滤波方法
CN108008632A (zh) * 2017-12-11 2018-05-08 东北石油大学 一种基于协议的时滞马尔科夫***的状态估计方法和***
CN108226887A (zh) * 2018-01-23 2018-06-29 哈尔滨工程大学 一种观测量短暂丢失情况下的水面目标救援状态估计方法
CN109088749A (zh) * 2018-07-23 2018-12-25 哈尔滨理工大学 一种随机通讯协议下复杂网络的状态估计方法
CN109459040A (zh) * 2019-01-14 2019-03-12 哈尔滨工程大学 基于rbf神经网络辅助容积卡尔曼滤波的多auv协同定位方法
CN109612470A (zh) * 2019-01-14 2019-04-12 广东工业大学 一种基于模糊容积卡尔曼滤波的单站无源导航方法
CN109828211A (zh) * 2018-12-25 2019-05-31 宁波飞拓电器有限公司 一种基于神经网络自适应滤波的应急灯电池soc估计方法
CN109920514A (zh) * 2019-03-11 2019-06-21 重庆科技学院 一种基于卡尔曼滤波神经网络的自闭症拥抱机体验评价方法及***
CN111193528A (zh) * 2019-12-30 2020-05-22 哈尔滨工业大学 基于非理想条件下非线性网络***的高斯滤波方法
CN111381498A (zh) * 2020-03-09 2020-07-07 常熟理工学院 多传感器基于多率变时滞状态空间模型的期望最大化辨识方法
CN112865846A (zh) * 2021-01-06 2021-05-28 南京航空航天大学 一种基于容积卡尔曼滤波的毫米波波束跟踪方法
CN114202212A (zh) * 2021-12-15 2022-03-18 北京中科智易科技有限公司 一种防化装备数据采集及分析评估方法及***

Cited By (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107992877B (zh) * 2017-10-11 2020-05-19 衢州学院 两阶段高阶容积信息滤波方法
CN107992877A (zh) * 2017-10-11 2018-05-04 衢州学院 两阶段高阶容积信息滤波方法
CN108008632A (zh) * 2017-12-11 2018-05-08 东北石油大学 一种基于协议的时滞马尔科夫***的状态估计方法和***
CN108226887B (zh) * 2018-01-23 2021-06-01 哈尔滨工程大学 一种观测量短暂丢失情况下的水面目标救援状态估计方法
CN108226887A (zh) * 2018-01-23 2018-06-29 哈尔滨工程大学 一种观测量短暂丢失情况下的水面目标救援状态估计方法
CN109088749A (zh) * 2018-07-23 2018-12-25 哈尔滨理工大学 一种随机通讯协议下复杂网络的状态估计方法
CN109088749B (zh) * 2018-07-23 2021-06-29 哈尔滨理工大学 一种随机通讯协议下复杂网络的状态估计方法
CN109828211A (zh) * 2018-12-25 2019-05-31 宁波飞拓电器有限公司 一种基于神经网络自适应滤波的应急灯电池soc估计方法
CN109459040A (zh) * 2019-01-14 2019-03-12 哈尔滨工程大学 基于rbf神经网络辅助容积卡尔曼滤波的多auv协同定位方法
CN109612470A (zh) * 2019-01-14 2019-04-12 广东工业大学 一种基于模糊容积卡尔曼滤波的单站无源导航方法
CN109459040B (zh) * 2019-01-14 2021-06-18 哈尔滨工程大学 基于rbf神经网络辅助容积卡尔曼滤波的多auv协同定位方法
CN109920514A (zh) * 2019-03-11 2019-06-21 重庆科技学院 一种基于卡尔曼滤波神经网络的自闭症拥抱机体验评价方法及***
CN111193528A (zh) * 2019-12-30 2020-05-22 哈尔滨工业大学 基于非理想条件下非线性网络***的高斯滤波方法
CN111381498A (zh) * 2020-03-09 2020-07-07 常熟理工学院 多传感器基于多率变时滞状态空间模型的期望最大化辨识方法
CN112865846A (zh) * 2021-01-06 2021-05-28 南京航空航天大学 一种基于容积卡尔曼滤波的毫米波波束跟踪方法
CN114202212A (zh) * 2021-12-15 2022-03-18 北京中科智易科技有限公司 一种防化装备数据采集及分析评估方法及***

Similar Documents

Publication Publication Date Title
CN107045490A (zh) 一种非线性***的状态估计方法
Liu et al. Maximum likelihood extended gradient‐based estimation algorithms for the input nonlinear controlled autoregressive moving average system with variable‐gain nonlinearity
Ding et al. Decomposition based least squares iterative identification algorithm for multivariate pseudo-linear ARMA systems using the data filtering
Chen et al. Kernel least mean square with adaptive kernel size
Zhang et al. Recursive identification of bilinear time-delay systems through the redundant rule
Salhi et al. A recursive parametric estimation algorithm of multivariable nonlinear systems described by Hammerstein mathematical models
US8346711B2 (en) Method for identifying multi-input multi-output Hammerstein models
CN112445131A (zh) 一种线性***自适应最优跟踪控制方法
CN109163720A (zh) 基于渐消记忆指数加权的卡尔曼滤波跟踪方法
CN106487358A (zh) 一种基于统计线性回归的最大相关熵容积卡尔曼滤波方法
CN106599368A (zh) 基于改进粒子提议分布和自适应粒子重采样的FastSLAM方法
CN105205313A (zh) 模糊高斯和粒子滤波方法、装置及目标跟踪方法、装置
Garnier et al. A bias-eliminated least-squares method for continuous-time model identification of closed-loop systems
Meng et al. Adaptive fault tolerant control for a class of switched nonlinear systems with unknown control directions
Hu et al. An iterative least squares estimation algorithm for controlled moving average systems based on matrix decomposition
Zhang et al. Identification of continuous-time nonlinear systems: The nonlinear difference equation with moving average noise (NDEMA) framework
CN110311652A (zh) 一种欠观测条件下的增量求积分卡尔曼滤波方法
Wang et al. Convergence analysis of the hierarchical least squares algorithm for bilinear-in-parameter systems
Ding et al. The model equivalence based parameter estimation methods for Box–Jenkins systems
Souza et al. On building local models for inverse system identification with vector quantization algorithms
Yang et al. Recursive least mean p-power extreme learning machine
Du et al. A novel locally regularized automatic construction method for RBF neural models
Chen et al. Maximum likelihood based recursive parameter estimation for controlled autoregressive ARMA systems using the data filtering technique
CN114445459B (zh) 基于变分贝叶斯理论的连续-离散最大相关熵目标跟踪方法
Cristóbal et al. Confidence bands in nonparametric regression with length biased data

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
WD01 Invention patent application deemed withdrawn after publication
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20170815