CN103678869A - 一种飞行参数缺失数据的预测估计方法 - Google Patents
一种飞行参数缺失数据的预测估计方法 Download PDFInfo
- Publication number
- CN103678869A CN103678869A CN201310422714.7A CN201310422714A CN103678869A CN 103678869 A CN103678869 A CN 103678869A CN 201310422714 A CN201310422714 A CN 201310422714A CN 103678869 A CN103678869 A CN 103678869A
- Authority
- CN
- China
- Prior art keywords
- parameter
- missing data
- data
- prediction
- flight
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Landscapes
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
Abstract
本发明公开了一种飞行参数缺失数据的预测估计方法,本方法首先计算各参量之间的相关度得到相关矩阵,通过对相关矩阵进行主成分分析确定反映飞机飞行状态的各主成分,接着选择与缺失数据相关度较大的参量,比较与缺失数据的参量相关性较大的主成分在各参量上的载荷,进一步选择与缺失数据相关度最大的参量,进而利用时序建模方法进行时序建模、定阶,并利用分析残差白性的方法对模型进行检验,得到合理的模型后进行缺失数据的估计预测。本发明能够提高飞行参数缺失数据的预测估计准确度,同时降低数据处理的维数。
Description
技术领域
本发明涉及一种多元时间序列缺失数据的预测估计方法,特别适用于飞行参数数据。
背景技术
随着科技水平的不断提高,在各领域中都涌现出多元时间序列数据。多元时间序列不是多个一元时间序列的简单叠加,多元时间序列中包含多个参量,各个参量共同确定事物的状态,并且各参量间存在一定的关联关系。
对于多元时间序列数据,国内外研究者利用神经网络、支持向量机等技术进行预测估计处理。上述方法均是基于统计学习的方法,侧重于从数据的统计特征来分析数据的发展趋势,比较适用于不强调时序关系的多元时间序列数据。
飞行参数数据是多元时间序列数据中的一种,其特征是:(1)参数元数高,各元参数值之间具有一定的相关性;(2)各元参数值的前后数据有一定的时序关系,表现为一种发展趋势;(3)数据量大。
在利用飞参记录仪采集和记录飞行参数数据的过程中,会因为噪音、电子等干扰,产生一些数据丢失、数据失真和记录的非正常开始或结束等异常情况。这些异常情况将严重影响基于飞行参数数据进行飞行动作评估的效果。因而,在进行飞行训练评估等活动之前,需要对失真数据及缺失数据进行估计替换。
将现有技术中的神经网络、支持向量机等技术用于处理飞行参数数据时,预测估计的准确度较低,计算复杂度较高。针对飞行参数数据的时序性特征,可以应用时间序列分析技术进行预测估计,但是目前的时间序列分析技术,如多元自回归建模分析方法虽然能够考虑多个参量之间的相关性进行分析,但其局限于参量元数比较少的情况,不适用于参数元数高的飞行参数数据。
发明内容
本发明要解决的技术问题在于:针对现有技术的不足,本发明提供一种飞行参数缺失数据的预测估计方法,利用主成分分析提取与飞行动作最相关的参量,将这些参量的相关性融入到对失真及缺失数据的估计过程,从而得到能够合理反映和重现飞机飞行状态的时间序列数据。
为解决上述技术问题,本发明的具体步骤为:
一种飞行参数缺失数据的预测估计方法,其特征在于利用主成分分析提取与飞行动作最相关的参量,并将这些参量的相关性融入到对失真及缺失数据的估计过程,从而得到能够合理反映和重现飞机飞行动作的时间序列数据,具体步骤为:
(1)从给定的飞行参数数据中提取部分完整的、没有缺失的时间序列数据集,并对数据集进行标准化处理;
(2)建立数据集各元参量数据之间的相关矩阵;
(3)进行主成分分析:通过对相关矩阵进行特征矩阵计算求得各主成分在各参量上的载荷,并通过计算主成分的累积贡献率来确定反映飞机飞行状态的主成分;
(4)选择与缺失数据的参量相关性较大的参量,并通过比较所选参量的主成分在各参量上的载荷,进一步选择与缺失数据相关性最大的参量;
(5)利用时序建模分析方法对上步选取的与缺失数据相关度最大的参量的数据进行时序建模、定阶;
(6)利用步骤(5)得到的模型对缺失数据参量的任意时刻数据进行预测,预测的结果与实际的结果进行比较,得到残差序列;
(7)对预测结果进行检验,判断所述残差序列是否为白噪声,若是白噪声,则接受所建立的模型,否则,需要重新建模、定阶、预测和检验;
(8)利用通过检验的模型对缺失数据进行估计。
作为本发明的进一步改进:
步骤(4)中确定所述与缺失数据相关度较大的参量的过程是:
(4a)对所述载荷取绝对值并归一化处理得到各参量的相关度权重;
(4b)将相关度权重从大到小排列;
(4c)选取前m项参量:前m项相关度权重的和值等于d,所述d的范围是0.6≤J≤0.8,所述m值≤5,前m项相关度权重对应的参量为与缺失数据参量相关性较大的m个参量。
步骤(3)中所述的累积贡献率大于95%。
步骤(5)中的时序建模分析方法指多元自回归建模。
步骤(5)中所述的定阶的原则为AIC函数最小原则。
与现有技术相比,本发明的优点在于能够将飞行参数各参量之间的相关性融入到对失真及缺失数据的估计过程,可以得到合理反映和重现飞机飞行状态的时间序列数据。本发明适合处理参量元数多数据量大的飞行参数数据且预测误差小。
附图说明
图1为一种飞行参数缺失数掘的预测估计方法流程图;
具体实施方式
以下将结合附图和具体实施例对本发明作进一步详细说明。
结合图1所示,本发明的具体步骤包括:
步骤1:从给定的飞行参数数据中提取部分完整的、没有缺失的时间序列数据集Xc,并对Xc进行标准化处理。
设给定的飞行参数数据X,X涉及n个参量xi(i=1,2,…,n)。假设采样次数为T,即每个参量xi,都由T个采样数据构成,参量xi的分量为xij,(i=1,2,…,n,j=1,2,…,T)。从X中选取部分完整的、没有缺失的时间序列数据集Xc,设Xc包含X中Tc个采样数据,即每个参量xi由Tc个采样数据构成。对Xc进行标准化处理,标准化处理后的分量为式中和si分别是参量xi的平均值和标准差。
步骤2:针对标准化后的数据集Xc,建立其各参量数据之间的相关矩阵R。
计算样本Xc的相关矩阵
式中
步骤3:对相关矩阵R进行特征矩阵计算求得各主成分在各参量上的载荷,并通过计算主成分的累积贡献率来确定前r个主成分。
本发明中主成分yk,(k=1,2,…,r)可表示为
yk=Uk1X1+uk2x2+…+uknxn
式中,ukj,表示主成分yk在参量xi上的载荷。
对相关矩阵R进行特征矩阵计算,列出特征方程|R-λI|=0,即
求出方程的n个非负实根,并将非负实根按从大到小进行排列,即λ1≥λ2≥…≥λn≥0。
将λk(k=1,2,…,n)代入下面方程求出特征向量,该特征向量即主成分yk在参量xi上的载荷uki。
结合uki对参量xi线性变换得到n个主成分yk,(k=1,2,…,n)。
为了反映飞机的飞行状态,前r个主成分的累积贡献率优选为大于95%。
步骤4:选择与缺失数据的参量xb相关性较大的参量,并通过比较所选参量的主成分在各参量上的载荷,进一步选择与缺失数据相关性最大的m个参量;
设缺失数据的参量为xb(b∈{1,2,…,n}),比较xb在r个主成分yk(k=1,2,…,r)中载荷ukb的绝对值(|ukb|)的大小,找出最大值|uqb|(=max(|u1b|,|u2b|,…|urb|)。选定最大值|uqb|对应的主成分yb=uq1x1+uq2x2+…+uqbxp+…+uqnxn,并从yq的线性变换表达式中,比较各参量xi(i=1,2,…,n)上的载荷uqi,选择与yq相关性最大的m个参量。作为优选实例,该m个参量确定的具体步骤为:
(4.1)对载荷uqi取绝对值并归一化处理,得到n个参量的相关度权重分别为|C|1,|C|2,…,|C|n,其中
(4.2)将相关度权重(|C|1,|C|2,…,|C|n)从大到小排列;
(4.3)前m项相关度权重的和值应大于d,所述d的范围是O.6~0.8,从处理速度以及准确度出发,低于等于5维的数据适合利用时序建模方法进行后续数据处理,故所述m值的范围是1~5,前m项相关度权重对应的参量为与yq相关性最大的m个参量。
本步骤这样处理的效果是,可以选取出与某***状态相关性最大的m个参量,这m个参量数据同时用于缺失数据估计,可以提高估计的准确度且同时降低数据处理的维数,也便于利用时序建模方法进行后续数据处理。
步骤5:利用时序建模分析方法对上步选取的与缺失数据相关度最大的参量的数据进行时序建模、定阶。
所述时序建模分析方法有自回归建模分析、滑动平均建模分析以及自回归滑动建模分析。由于自回归模型的参数估计为线性回归过程,其计算简单、速度快,实际物理***也往往是全极点***,因此本发明优选采用多元自回归模型,综合多个相关参数值进行建模分析对飞行参数数据建模来估计数据。
用Xt=(x1t,x2t…,xmt)来表示在t时刻,m个飞行参数的时间序列,则Xt的m维自回归模型的一般形式为:
Xt=a1Xt-1+a2Xt-2+…+apxt-p+εt
式中,p是模型的阶数,a1,a2,…ap都是m×m阶待估参数矩阵,εt=(ε1t,ε2t,…,emt)τ是m维白噪声向量,也称εt为模型的残差。
首先分析Xt的平稳性,并对其进行平稳化处理和正态化检验。经过差分处理后的时间序列的自相关系数有显著下降趋势,说明经过差分变换的序列已符合回归建模的条件,然后对其进行标准化正态处理和多元自回归建模。m维的自回归模型可以表示为:
A(i)=[a1(i),a2(i)…,ap(i)]T。设Ⅳ为最终的观测时刻,并令
则自回归模型可以转化为LN(i)=BNA(i)+EN(i)。
残差平方和J可表达为
当J达到极小值时,必然有
为最符合数据特征的定阶模型,还需要进一步对模型进行定阶。定阶的原则有很多,本发明中模型的阶数p优选采用AIC函数最小原则确定。
即本发明中可由步骤(4)得到的从大到小顺序排列的前m项相关度权重(|C|1,|C|2,…,|C|m)计算可得。表示m维参数时间序列Xt,=(x1t,x2t,…,xmt)τ中)xit的拟合残差方差。对准则函数AIC(p),真实模型的阶数po定阶满足
步骤7:对预测结果进行检验,判断所述残差序列是否为白噪声,若是白噪声,则接受所建立的模型,否则,需要重新建模、定阶、预测和检验。
步骤8:利用通过检验的模型对缺失数据进行估计。
以上所述仅是本发明的优选实施方式,本发明的保护范围并不仅局限于上述实施例,凡属于本发明思路下的技术方案均属于本发明的保护范围。应该提出,对于本技术领域的普通技术人员来说,在不脱离本发明原理前提下的改进和润饰,这些改进和润饰也应视为本发明的保护范围。
Claims (5)
1.一种飞行参数缺失数据的预测估计方法,其特征在于利用主成分分析提取与飞行动作最相关的参量,并将这些参量的相关性融入到对失真及缺失数据的估计过程,从而得到能够合理反映和重现飞机飞行动作的时间序列数据,具体步骤为:
(1)从给定的飞行参数数据中提取部分完整的、没有缺失的时间序列数据集,并对数据集进行标准化处理;
(2)建立数据集各元参量数据之间的相关矩阵;
(3)进行主成分分析:通过对相关矩阵进行特征矩阵计算求得各主成分在各参量上的载荷,并通过计算主成分的累积贡献率来确定反映飞机飞行状态的主成分;
(4)选择与缺失数据的参量相关性较大的参量,并通过比较所选参量的主成分在各参量上的载荷,进一步选择与缺失数据相关性最大的参量;
(5)利用时序建模分析方法对上步选取的与缺失数据相关性最大的参量的数据进行时序建模、定阶;
(6)利用步骤(5)得到的模型对缺失数据参量的任意时刻数据进行预测,预测的结果与实际的结果进行比较,得到残差序列;
(7)对预测结果进行检验,判断所述残差序列是否为白噪声,若是白噪声,则接受所建立的模型,否则,需要重新建模、定阶、预测和检验;
(8)利用通过检验的模型对缺失数据进行估计。
2.根据权利要求1所述的一种飞行参数缺失数据的预测估计方法,其特征在于步骤(4)中确定所述与缺失数据相关性最大的参量的过程是:
(4a)对所述载荷取绝对值并归一化处理得到各参量的相关度权重;
(4b)将相关度权重从大到小排列;
(4c)选取前m项参量:前m项相关度权重的和值等于d,所述d的范围是O.6≤J≤O.8,所述m值≤5,前m项相关度权重对应的参量为与缺失数据参量相关性最大的m个参量。
3.根据权利要求1所述的一种飞行参数缺失数据的预测估计方法,其特征在于步骤(3)中所述的累积贡献率大于95%。
4.根据权利要求1所述的一种飞行参数缺失数据的预测估计方法,其特征在于步骤(5)中的时序建模分析方法指多元自回归建模。
5.根据权利要求1所述的一种飞行参数缺失数据的预测估计方法,其特征在于步骤(5)中所述的定阶的原则为AIC函数最小原则。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201310422714.7A CN103678869A (zh) | 2013-09-17 | 2013-09-17 | 一种飞行参数缺失数据的预测估计方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201310422714.7A CN103678869A (zh) | 2013-09-17 | 2013-09-17 | 一种飞行参数缺失数据的预测估计方法 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN103678869A true CN103678869A (zh) | 2014-03-26 |
Family
ID=50316399
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201310422714.7A Pending CN103678869A (zh) | 2013-09-17 | 2013-09-17 | 一种飞行参数缺失数据的预测估计方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN103678869A (zh) |
Cited By (13)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN105069298A (zh) * | 2015-08-14 | 2015-11-18 | 华中农业大学 | 一种农产品信息采集***中节点缺失数据的估算方法 |
CN105809304A (zh) * | 2014-12-27 | 2016-07-27 | 上海麦杰环境科技有限公司 | 电厂和治污设施生产运行参数相关性分析的方法 |
CN105930303A (zh) * | 2016-04-11 | 2016-09-07 | 中国石油大学(华东) | 含有不可忽略缺失数据的估计方程的稳健估计方法 |
CN106844290A (zh) * | 2015-12-03 | 2017-06-13 | 南京南瑞继保电气有限公司 | 一种基于曲线拟合的时序数据处理方法 |
CN108646688A (zh) * | 2018-05-31 | 2018-10-12 | 成都天衡智造科技有限公司 | 一种基于回归学习的工艺参数优化分析方法 |
CN110046645A (zh) * | 2019-03-04 | 2019-07-23 | 三峡大学 | 一种基于主成分分析与bp神经网络的藻类水华预测方法 |
CN110175637A (zh) * | 2019-05-09 | 2019-08-27 | 北京工商大学 | 非平稳时序数据深度预测方法、***、存储介质及设备 |
US10438126B2 (en) | 2015-12-31 | 2019-10-08 | General Electric Company | Systems and methods for data estimation and forecasting |
CN110874645A (zh) * | 2019-11-14 | 2020-03-10 | 北京首汽智行科技有限公司 | 一种数据还原方法 |
CN111942602A (zh) * | 2020-08-10 | 2020-11-17 | 中国人民解放军海军航空大学青岛校区 | 飞参数据综合处理*** |
CN112766325A (zh) * | 2021-01-04 | 2021-05-07 | 清华大学 | 一种基于时空融合的交通数据多模式缺失填补方法 |
CN113190124A (zh) * | 2021-01-27 | 2021-07-30 | 中科曙光(南京)计算技术有限公司 | 基于时间序列的汉字输入法预测方法 |
CN114037012A (zh) * | 2021-11-09 | 2022-02-11 | 四川大学 | 基于相关性分析与深度学习的飞行数据异常检测方法 |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2005242580A (ja) * | 2004-02-25 | 2005-09-08 | Osaka Prefecture | パラメータ推定方法、データ予測方法、パラメータ推定装置、データ予測装置、及びコンピュータプログラム |
CN102269972A (zh) * | 2011-03-29 | 2011-12-07 | 东北大学 | 基于遗传神经网络的管道压力缺失数据补偿方法及装置 |
CN103207948A (zh) * | 2013-04-08 | 2013-07-17 | 同济大学 | 基于风速相关性的风电场测风仪风速缺失数据插补方法 |
-
2013
- 2013-09-17 CN CN201310422714.7A patent/CN103678869A/zh active Pending
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2005242580A (ja) * | 2004-02-25 | 2005-09-08 | Osaka Prefecture | パラメータ推定方法、データ予測方法、パラメータ推定装置、データ予測装置、及びコンピュータプログラム |
CN102269972A (zh) * | 2011-03-29 | 2011-12-07 | 东北大学 | 基于遗传神经网络的管道压力缺失数据补偿方法及装置 |
CN103207948A (zh) * | 2013-04-08 | 2013-07-17 | 同济大学 | 基于风速相关性的风电场测风仪风速缺失数据插补方法 |
Non-Patent Citations (1)
Title |
---|
王清毅等: "部分数据缺失环境下的知识发现方法", 《软件学报》 * |
Cited By (18)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN105809304A (zh) * | 2014-12-27 | 2016-07-27 | 上海麦杰环境科技有限公司 | 电厂和治污设施生产运行参数相关性分析的方法 |
CN105809304B (zh) * | 2014-12-27 | 2021-04-09 | 上海麦杰环境科技有限公司 | 电厂和治污设施生产运行参数相关性分析的方法 |
CN105069298B (zh) * | 2015-08-14 | 2018-08-03 | 华中农业大学 | 一种农产品信息采集***中节点缺失数据的估算方法 |
CN105069298A (zh) * | 2015-08-14 | 2015-11-18 | 华中农业大学 | 一种农产品信息采集***中节点缺失数据的估算方法 |
CN106844290A (zh) * | 2015-12-03 | 2017-06-13 | 南京南瑞继保电气有限公司 | 一种基于曲线拟合的时序数据处理方法 |
CN106844290B (zh) * | 2015-12-03 | 2019-05-21 | 南京南瑞继保电气有限公司 | 一种基于曲线拟合的时序数据处理方法 |
US10438126B2 (en) | 2015-12-31 | 2019-10-08 | General Electric Company | Systems and methods for data estimation and forecasting |
CN105930303A (zh) * | 2016-04-11 | 2016-09-07 | 中国石油大学(华东) | 含有不可忽略缺失数据的估计方程的稳健估计方法 |
CN108646688A (zh) * | 2018-05-31 | 2018-10-12 | 成都天衡智造科技有限公司 | 一种基于回归学习的工艺参数优化分析方法 |
CN108646688B (zh) * | 2018-05-31 | 2019-05-07 | 成都天衡智造科技有限公司 | 一种基于回归学习的工艺参数优化分析方法 |
CN110046645A (zh) * | 2019-03-04 | 2019-07-23 | 三峡大学 | 一种基于主成分分析与bp神经网络的藻类水华预测方法 |
CN110175637A (zh) * | 2019-05-09 | 2019-08-27 | 北京工商大学 | 非平稳时序数据深度预测方法、***、存储介质及设备 |
CN110874645A (zh) * | 2019-11-14 | 2020-03-10 | 北京首汽智行科技有限公司 | 一种数据还原方法 |
CN111942602A (zh) * | 2020-08-10 | 2020-11-17 | 中国人民解放军海军航空大学青岛校区 | 飞参数据综合处理*** |
CN112766325A (zh) * | 2021-01-04 | 2021-05-07 | 清华大学 | 一种基于时空融合的交通数据多模式缺失填补方法 |
CN113190124A (zh) * | 2021-01-27 | 2021-07-30 | 中科曙光(南京)计算技术有限公司 | 基于时间序列的汉字输入法预测方法 |
CN114037012A (zh) * | 2021-11-09 | 2022-02-11 | 四川大学 | 基于相关性分析与深度学习的飞行数据异常检测方法 |
CN114037012B (zh) * | 2021-11-09 | 2023-04-07 | 四川大学 | 基于相关性分析与深度学习的飞行数据异常检测方法 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN103678869A (zh) | 一种飞行参数缺失数据的预测估计方法 | |
CN108960303B (zh) | 一种基于lstm的无人机飞行数据异常检测方法 | |
CN105699804B (zh) | 一种配电网大数据故障检测与定位方法 | |
US10539613B2 (en) | Analog circuit fault diagnosis method using single testable node | |
WO2016155241A1 (zh) | 基于Kalman滤波器的容量预测方法、***和计算机设备 | |
WO2016091084A1 (zh) | 一种基于复杂网络的高速列车***安全评估方法 | |
US11003738B2 (en) | Dynamically non-gaussian anomaly identification method for structural monitoring data | |
CN103389472B (zh) | 一种基于nd-ar模型的锂离子电池循环寿命的预测方法 | |
CN105279365A (zh) | 用于学习异常检测的样本的方法 | |
CN107767191A (zh) | 一种基于医药大数据预测药品销售趋势的方法 | |
CN104459668A (zh) | 基于深度学习网络的雷达目标识别方法 | |
CN103268519A (zh) | 基于改进Lyapunov指数的电力***短期负荷预测方法及装置 | |
CN105629958A (zh) | 一种基于子时段mpca-svm的间歇过程故障诊断方法 | |
Kang et al. | Bayesian-Emulator based parameter identification for calibrating energy models for existing buildings | |
CN103310113A (zh) | 一种基于频带分离和数据建模的通用血糖预测方法 | |
Daemi et al. | Identification of robust Gaussian Process Regression with noisy input using EM algorithm | |
CN105488335A (zh) | 一种基于李雅普诺夫指数的电力***负荷预测方法及装置 | |
CN103885867B (zh) | 一种模拟电路性能的在线评价方法 | |
US20190122131A1 (en) | An anomaly identification method for structural monitoring data considering spatial-temporal correlation | |
CN104795063A (zh) | 一种基于声学空间非线性流形结构的声学模型构建方法 | |
CN103353295B (zh) | 一种精确预测大坝坝体垂直变形量的方法 | |
CN109976311A (zh) | 一阶定值控制***传感器故障诊断方法及诊断*** | |
CN117521512A (zh) | 一种基于多尺度贝叶斯卷积Transformer模型的轴承剩余使用寿命预测方法 | |
CN104008433A (zh) | 基于贝叶斯动态模型的中长期电力负荷预测方法 | |
CN111753776A (zh) | 基于回声状态与多尺度卷积联合模型的结构损伤识别方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
WD01 | Invention patent application deemed withdrawn after publication | ||
WD01 | Invention patent application deemed withdrawn after publication |
Application publication date: 20140326 |