CN112272066B - 一种用于机场终端区甚高频通信中的频谱数据清洗方法 - Google Patents
一种用于机场终端区甚高频通信中的频谱数据清洗方法 Download PDFInfo
- Publication number
- CN112272066B CN112272066B CN202010969910.6A CN202010969910A CN112272066B CN 112272066 B CN112272066 B CN 112272066B CN 202010969910 A CN202010969910 A CN 202010969910A CN 112272066 B CN112272066 B CN 112272066B
- Authority
- CN
- China
- Prior art keywords
- data
- frequency point
- signal
- value
- frequency
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04B—TRANSMISSION
- H04B17/00—Monitoring; Testing
- H04B17/30—Monitoring; Testing of propagation channels
- H04B17/373—Predicting channel quality or other radio frequency [RF] parameters
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
- G06N3/00—Computing arrangements based on biological models
- G06N3/02—Neural networks
- G06N3/08—Learning methods
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04B—TRANSMISSION
- H04B17/00—Monitoring; Testing
- H04B17/30—Monitoring; Testing of propagation channels
- H04B17/382—Monitoring; Testing of propagation channels for resource allocation, admission control or handover
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
- Y02D—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
- Y02D30/00—Reducing energy consumption in communication networks
- Y02D30/70—Reducing energy consumption in communication networks in wireless communication networks
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Electromagnetism (AREA)
- Computer Networks & Wireless Communication (AREA)
- Signal Processing (AREA)
- Data Mining & Analysis (AREA)
- Molecular Biology (AREA)
- Artificial Intelligence (AREA)
- Biomedical Technology (AREA)
- Biophysics (AREA)
- Computational Linguistics (AREA)
- Health & Medical Sciences (AREA)
- Evolutionary Computation (AREA)
- General Health & Medical Sciences (AREA)
- Life Sciences & Earth Sciences (AREA)
- Computing Systems (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Mathematical Physics (AREA)
- Software Systems (AREA)
- Quality & Reliability (AREA)
- Monitoring And Testing Of Transmission In General (AREA)
- Optical Communication System (AREA)
Abstract
本发明公开了一种用于机场终端区民航甚高频通信中的频谱数据清洗方法,其特征在于,包括以下步骤:包括以下过程:通过对数据进行滑窗处理来确定信号检测特征;设置数据归一化参数以及统计信号检测门限值来检测信号类型并形成标签;对各频点实测数据进行切片、压缩处理重构成三维张量数据样本,实现对频谱数据的清洗。
Description
技术领域
本发明属于民航无线电话音通信频谱预测技术领域,具体地说是涉及一种用于机场终端区甚高频通信中的频谱数据清洗方法。
背景技术
为了确保无线电频率资源具备安全的用频环境,国际民航组织(ICAO)为航空移动通信业务划分了专用的民航甚高频通信工作频段,即频率范围为118MHz~136.975MHz,信道带宽为25KHz。各机场所使用的甚高频通信频点均预先固定分配,未经允许,不得变更。然而,随着机场终端区航班起降流量的日益增加,机场塔台和飞机之间的甚高频用频业务量也在不断加大,这将导致飞机与飞机之间、飞机与地面之间的用频冲突日益凸显,直接制约着民航机场的航班吞吐量。为了进一步提高频谱资源利用率,ICAO已推荐将甚高频话音通信信道带宽由25KHz压缩成8.33KHz。目前我国仍采用25KHz作为民航甚高频话音通信的信道带宽。因此,如何利用已分配的有限频率资源扩大民航甚高频话音通信容量,以适应机场终端区甚高频通信业务越来越大的用频需求,成为了频谱预测技术关注的焦点。
近年来,基于深度学习和人工智能技术的进步,智能频谱预测技术较之传统的基于模型的频谱预测技术可为上述问题提供更有效、更可靠的解决方案。需要强调的是,在所有的智能频谱预测中,均涉及一项共性关键支撑技术,即频谱数据清洗技术。不同的频谱数据清洗策略会直接影响频谱数据质量,而频谱数据质量又在很大程度上决定着智能频谱预测的可靠性和预测有效时长,并最终影响到智能频谱预测性能。因此,采取合理、有效的频谱数据清洗方法对于研究数据驱动的智能频谱预测技术至关重要。截至目前,数据清洗方法在物联网技术领域的研究较多,也较为成熟。例如,福州大学的林晓佳等人利用协同相关的异构传感器节点,对多源异构传感网络的数据清洗进行了研究。该数据清洗框架将数据时空相关性的算法设计思想应用于时空粒度转换传感器所收集的数据值和数据频率,实现了对数据精确度,能效和压缩率的较大提升。江苏大学的周金生等人以农业温室大棚的传感器数据为对象进行了数据清洗研究,针对相同和不同类型的传感器数据特点来设计模型,实现了对采集环境的空间相似性的预测。此外,人工智能技术的引入使得数据清洗技术达到了一定的研究高度。河海大学的蒋晨阳等人首先对感知数据的时间相关性、空间相关性和时空相关性进行了分析,其次根据感知数据的特点利用神经网络建立了数据清洗框架,在对感知缺失数据的实际清洗中取得了较好的结果。基于众多研究,清华大学的郝爽等人发表了一篇高质量的文献综述来介绍目前主流数据清洗方法及现状。从国内外对数据清洗的研究中发现,当前针对已有数据清洗技术的应用研究较多,而单纯针对数据清洗方法的研究较少。同时,由于处理的数据对象不同,导致数据清洗的解决方案和技术思路互不适用。因此,针对民航无线电话音通信业务的频谱数据清洗技术目前仍然没有一个规范化的处理方法。
发明内容
本发明的针对当前频谱数据清洗技术在民航无线电话音通信业务中的规范化研究空白,提出一种用于机场终端区甚高频通信中的频谱数据清洗方法。
为了实现上述目的,本发明采用的技术方案如下所述:
一种用于机场终端区甚高频通信中的频谱数据清洗方法,包括以下步骤:
A.选取信号检测特征并设置滑窗宽度。
A1:选取单频点数据。从甚高频通信频段118MHz~136.975MHz中确定实测频点集{f1,f2,...,fn},然后从中获取频点为f1的IQ数据。
A11:判别信号类型。利用频点f1的IQ数据绘制二维时域图(横坐标为时间采样点,纵坐标为幅值)。通过二维时域图中的幅值差异来判别IQ数据为含噪信号或纯噪声(含噪信号幅值参考范围为[12,600],纯噪声幅值参考范围为[0,200])。
A12.:滑窗处理数据。设置滑窗宽度值w=2n,其中n为正整数,推荐取值范围为[8,128]。依据所设置滑窗宽度值对步骤A11中的含噪信号数据和纯噪声数据进行滑窗处理,对滑窗提取数据段求平均值,得到滑窗处理后的含噪信号数据与纯噪声数据。smin为处理后含噪信号数据的最小值,nmax为处理后纯噪声数据的最大值。若smin/nmax>1,则滑窗宽度设置合理,若smin/nmax≤1,则增大滑窗宽度值直至满足要求。将满足要求的最小滑窗宽度作为频点f1的数据处理滑窗宽度值,记为w。
A2:重复步骤A1,统计所有频点{f1,f2,...,fn}的滑窗宽度值并记为{w1,w2,...,wn},从中选取最大值作为处理所有数据的滑窗宽度,对所有数据进行滑窗处理。
A3:确定信号检测特征。利用所有频点{f1,f2,...,fn}滑窗处理后的数据绘制二维时域图。依据二维时域图,若含噪信号幅值与纯噪声幅值的比值处于推荐范围[2,10]内,则可将幅值特征作为信号检测特征。
B.设置数据归一化参数与统计门限值。
B1:统计频点f1一分钟数据的归一化参数vm、门限值以Trdm及信噪比snrm。对频点f1的实测数据进行滑窗处理后,信号幅值参考范围应为[400,600],噪声幅值参考范围应为[0,50]。依据该判定条件,统计一分钟内的信号数据{s1,s2,...,sp}与噪声数据{n1,n2,...,nq}。其中,p+q=60。从s1到sp中找出每秒的幅值最大值[s1-max,s2-max,...,sp-max]、最小值[s1-min,s2-min,...,sp-min]及平均值[s1-mea,s2-mea,...,sp-mea];从n1到nq中找出每秒的幅值最大值[n1-max,n2-max,...,nq-max]及平均值[n1-mea,n2-mea,...,nq-mea]。选取[s1-max,s2-max,...,sq-max]中的最小值作为一分钟单频点实测数据的归一化参数vm。对[s1-min,s2-min,...,sn-min]中的最小值以及[n1-max,n2-max,...,nm-max]中的最大值进行归一化,其所得值记为sN-min与nN-max,则一分钟的门限值设为Trdm=nN-max+(sN-min-nN-max)/2,信号功率为Ps=mean(s1-mea,s2-mea,...,sp-mea),噪声功率为Pn=mean(n1-mea,n2-mea,...,nq-mea),信噪比为snrm=10log10((Ps-Pn)2/nP2)。
B2:统计频点f1一小时数据的归一化参数vh、门限值Trdh、信噪比snrh。以5分钟的时间间隔,分别提取频点f1的一小时数据,重复步骤B1,统计频点f1一小时数据的归一化参数、检测门限值以及信噪比。
将一小时的归一化参数集中的最小值记为Vh;计算一小时的检测门限集均值,记为Trdh;计算一小时的信噪比参数集均值,记为snrh。则该小时内的归一化参数、检测门限值以及信噪比分别记为[Vh,Trdh,snrh]。
B3:统计频点f1一天数据的归一化参数vd、门限值Trdd、信噪比snrd。选取f1频点一天的实测数据,重复步骤B1~B2,统计频点f1一天数据的归一化参数、检测门限值与信噪比。
将一天的归一化参数集中的最小值记为Vd;对一天的检测门限集求均值,记为Trdd;对一天的信噪比参数集求均值,记为snrd。则该天内的归一化参数、检测门限值以及信噪比分别记为[Vd,Trdd,snrd]。
B4:统计频点f1全部实测数据的归一化参数、门限值与信噪比。根据频点f1实测数据的采集天数,重复步骤B1~B3,统计频点f1全部数据的归一化参数、门限值与信噪比的。
将所得归一化参数集中的最小值记为V;对所得检测门限集求均值,记为Trd;对所得信噪比参数集求均值,记为snr。则全部数据的归一化参数、检测门限值以及信噪比分别记为[V,Trd,snr]。
步骤B5:统计所有已测频点集{f1,f2,...,fn}的数据归一化参数、门限值与信噪比。重复步骤A~B,统计全部频点数据的归一化参数,记为{V1,V2,...,Vn},检测门限值,记为[Trd1,Trd2,...,Trdn],信噪比,记为[snr1,snr2,...,snrn]。
C.检测信号并形成标签。
D1:利用步骤B5中所得到频点f1对应的归一化参数V,对频点f1的每秒实测数据进行归一化,并提取归一化后数据的最大值,与频点f1的检测门限值Trd进行比较。当该最大值大于等于检测门限值时,则判定为信号(标签为1),否则判定为噪声(标签为0)。
D2:统计频点f1在1天内的数据标签。重复步骤D1对频点f1在1天内的实测数据进行标签统计。
D.通信时长边界判定。
E1:统计最大通信时长。依据步骤D中获得的标签,统计标签连续为1的时间长度,作为连续通信时间并记为[T1,T2,...,Tn],其中Tn为单个连续通信的时长。Tmax为所有连续通信的时长中的最大值,并将Tmax作为频点f1数据预处理中的单位时间尺度。
E2:统计频点f1的1秒实测数据中连续的信号数据点。依据步骤C所获得的频点f1的归一化参数V对1秒数据进行归一化,将归一化后的数据与步骤C所得的频点f1的门限值Trd进行对比。若大于门限值则判定为信号数据点,若小于门限值则判定为噪声数据点,统计1秒钟内所有连续的信号数据点长度。
E3:重复步骤E2统计频点f1的1天实测数据中连续的信号数据点长度,并对得到的数据点长度进行累积分布函数(CDF)计算。
选取累积分布概率为95%的连续信号数据点长度作为频点f1的1天实测数据中最小通信时长。
E4:重复步骤E1~E3,根据频点f1的采集天数,统计频点f1实测数据中的最小通信时长。
最终,统计频点f1实测数据的最小通信时长中的最小值Tmin,并作为该频点数据的切片长度。
E.计算已测频点集{f1,f2,...,fn}的最大通信时长、最小通信时长。重复步骤A~E
完成全部全部已测频点的最大、最小通信时长统计。
最终将已测频点集{f1,f2,...,fn}中各频点最大通信时长中的最大值作为所有频点数据预处理中的单位时间尺度,记为TL,将最小通信时长中的最大值作为所有频点数据预处理中的切片长度,记为Lc-s(此最大值切片将所有频点的通信长度最小值统计出来后,再在这些最小值中选取他的最大值,作为所有频点的切片长度)。
F.对频点f1实测数据进行切片、压缩并形成张量。
G1:对频点f1单位时间尺度的实测数据进行切片。依据步骤F中所获得的最大单位时间尺度,计算其中所包含的数据点个数N=[(TL×N1)×1]。N1为频点f1的1秒钟实测数据的数据点个数,切片长度为Lc-s,对N进行切片处理,重构成大小为[(N/Lc-s)×Lc-s]的矩阵,完成频点f1在单位时间尺度的实测数据切片,并将切片后的数据进行重组,重构成“I+j*Q”的形式,形成矩阵。
G2:对频点f1单个切片数据进行压缩。对切片数据的实部和虚部分别进行求模、平均值处理,形成“Ic+j*Qc”的数据点。
G3:重复步骤G2,对频点f1单位时间尺度的所有切片数据进行压缩,形成大小为[(N/Lc-s)×1]的矩阵。
G4:对频点f1的一天的实测数据进行切片、压缩。重复步骤G1~G3,对频点f1实测数据进行切片、压缩,重构成大小为[((N/Lc-s)×(T/TL))×1]的矩阵,以此形成样本张量。
G5:对频点f1所有的实测数据进行切片、压缩。重复步骤G1~G4,依据频点f1数据的采集天数,完成频点f1所有实测数据的切片、压缩,形成大小为[((N/Lc-s)×(T/TL))×1×D]的张量(D为采集天数)。
G.对所有已测频点集{f1,f2,...,fn}的实测数据进行数据预处理。重复步骤G完成已测频点集{f1,f2,...,fn}实测数据的切片、压缩以及张量形成,最终重构成大小为[((N/Lc-s)×(T/TL))×n×D]的三维张量数据样本。
本发明与现有技术相比的有益效果在于:
本发明提供了一种用于机场终端区甚高频通信中的频谱数据清洗方法,为后续训练智能频谱预测神经网络模型参数提供了高质量的频谱数据样本,提高了训练样本构造的灵活性和可实现性,保证了智能频谱预测的可靠性和预测有效时长需求。本发明为提升机场终端区甚高频话音通信频率的利用率以及保障机场终端区的航空运行安全提供了重要技术支撑。
附图说明
图1是本发明频谱数据三维张量训练样本生成流程图;
图2是实施例中原始实测数据的二维时域图;
图3是实施例中滑窗处理后数据的二维时域图;
图4是实施例中129.45MHz的最小通信时长累积分布图。
具体实施方式
下面将结合附图对本发明的技术方案进行清楚、完整地描述,显然,所描述的实施例是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
实施例
本实施例利用广汉机场终端区甚高频通信频段的实测频谱数据,对本发明所提出的方法进行了验证,其结果证实了本发明内容的可行性和有效性。
A.设置信号检测特征及滑窗宽度。
A1:选取单频点数据。根据广汉机场终端区甚高频通信频率所确定的实测频点集为{120.3MHz,129.2MHz,129.45MHz}。从该频点集中选取129.45MHz的IQ数据。
A11:判别信号类型。利用频点129.45MHz的IQ数据绘制二维时域图(横坐标为时间采样点,纵坐标为幅值)。通过二维时域图中的幅值差异来判别IQ数据为含噪信号或纯噪声(含噪信号幅值参考范围为[12,600],纯噪声幅值参考范围为[0,200])。
A12.:滑窗处理数据。选定w=16,其中n为正整数。依据所设置滑窗宽度值对步骤A11中的含噪信号数据和纯噪声数据进行滑窗处理,对滑窗提取数据段求平均值,得到滑窗处理后的含噪信号数据与纯噪声数据为
滑窗处理后含噪信号数据的最小值为与纯噪声数据的最大值为[124,42]。则124/42>1,所设置的滑窗宽度值满足要求。
A2:重复步骤A1,统计所有频点的滑窗宽度值为[16,16,8],选取所有频点滑窗宽度值中的最大值作为处理所有频点数据的滑窗宽度值,则w=16。
A3:确定信号检测特征。用步骤A2中得到的滑窗宽度对步骤A1中频点集{120.3MHz;129.2MHz;129.45MHz}的重组数据进行滑窗处理,并对处理后的重组数据进行二维时域图绘制。依据二维时域图,含噪信号幅值特征与纯噪信号幅值特征的比值等于[3,5,3],满足幅值特征作为信号的检测特征。
B.设置数据归一化参数与统计门限值。
B1:统计频点129.45MHz一分钟数据的归一化参数vm、门限值Trdm以及信噪比snrm。对频点129.45MHz的实测数据进行滑窗处理后,信号幅值参考范围应为(150,270),噪声幅值参考范围应为(0,50)。依据该判定条件,统计一分钟内的信号数据与噪声数据。
其中,p+q=60。从s1到sp中找出每秒的幅值最大值为[228,260,...,221]、最小值[170,181,...,168]及平均值[202,223,...,194];从n1到nq中找出每秒的幅值最大值[35,33,...,34]及平均值[23,21,...,21]。选取[228,260,...,221]中的最小值作为一分钟单频点实测数据的归一化参数vN-m=220。对[170,181,...,168]中的最小值以及[35,33,...,34]中的最大值进行归一化,其中sN-min=0.76,nN-max=0.17,则一分钟的门限值为0.465,信号功率为212,噪声功率为21,信噪比为18。
B2:统计频点129.45MHz一小时数据的归一化参数vh、门限值Trdh、信噪比snrh。以5分钟的时间间隔,分别提取频点129.45MHz的一小时数据,重复步骤B1,统计频点129.45MHz一小时数据的归一化参数、检测门限值以及信噪比。
将一小时的归一化参数集中的最小值为220;计算一小时的检测门限集均值,为0.46;计算一小时的信噪比参数集均值为18。则该小时内的归一化参数、检测门限值以及信噪比分别记为[0.46,220,18]。
B3:统计频点129.45MHz一天数据的归一化参数vd、门限值Trdd、信噪比snrd。选取129.45MHz频点一天的实测数据,重复步骤B1~B2,统计频点129.45MHz一天数据的归一化参数、检测门限值与信噪比。
一天的归一化参数集中的最小值为224;对一天的检测门限集求均值,其值为0.46;对一天的信噪比参数集求均值,其值为18。则该天内的归一化参数、检测门限值以及信噪比分别记为[0.46,224,18]。
B4:统计频点129.45MHz全部实测数据的归一化参数、门限值与信噪比。根据频点129.45MHz实测数据的采集天数,重复步骤B1~B3,统计频点129.45MHz全部数据的归一化参数、门限值与信噪比。
B5:将所得归一化参数集中的最小值为221;对所得检测门限集求均值,其值为0.46;对所得信噪比参数集求均值,其值为18。则全部数据的归一化参数、检测门限值以及信噪比分别记为[0.46,221,18]。
C.统计所有已测频点集{120.3MHz、129.2MHz、129.45MHz}的数据归一化参数、门限值与信噪比。重复步骤A~B,统计全部频点数据的归一化参数、检测门限值、信噪比。
D.检测信号并形成标签。
D1:利用步骤B5中所得到频点129.45MHz对应的归一化参数为221,对频点129.45MHz的每秒实测数据进行归一化,并提取归一化后数据的最大值,与频点129.45MHz的检测门限值进行比较。当该最大值大于等于检测门限值时,则判定为信号(标签为1),否则判定为噪声(标签为0)。
D2:统计频点129.45MHz在1天内的数据标签。重复步骤D1对频点129.45MHz在1天内的实测数据进行标签统计。
E.通信时长边界判定。
E1:统计最大通信时长。依据步骤D中获得的标签,统计标签连续为1的时间长度,作为连续通信时间,并将最大通信时长作为129.45MHz频点数据预处理中的单位时间尺度。
E2:统计频点129.45MHz的1秒实测数据中连续的信号数据点。依据步骤C所获得的129.45MHz频点的归一化参数对1秒数据进行归一化,将归一化后的数据与步骤C所得的129.45MHz频点的门限值进行对比。若大于门限值则判定为信号数据点,若小于门限值则判定为噪声数据点,统计1秒钟内所有连续的信号数据点长度。
E3:重复步骤E2统计129.45MHz频点的1天实测数据中连续的信号数据点长度,并对得到的数据点长度进行累积分布函数(CDF)计算。
选取累积分布概率为95%的连续信号数据点长度作为129.45MHz频点的1天实测数据中最小通信时长。
E4:重复步骤E1~E3,根据129.45MHz频点的采集天数,统计频点129.45MHz实测数据中的最小通信时长。
最终,统计129.45MHz频点实测数据的最小通信时长中的最小值为128,并作为该频点数据的切片长度。
F.计算已测频点集{120.3MHz;129.2MHz;129.45MHz}的最大通信时长、最小通信时长。重复步骤A~E完成全部全部已测频点的最大、最小通信时长统计。
最终将已测频点集{120.3MHz;129.2MHz;129.45MHz}中各频点最大通信时长中的最大值作为所有频点数据预处理中的单位时间尺度,其值为11s,将最小通信时长中的最大值作为所有频点数据预处理中的切片长度,其值为276。
G.对129.45MHz频点实测数据进行切片、压缩并形成张量。
G1:对频点129.45MHz单位时间尺度的实测数据进行切片。依据步骤F中所获得的最大单位时间尺度,计算其数据点个数N=[(131072×11)×1]。切片长度为276,对N进行切片处理,重构成大小为[5223×276]的矩阵,完成129.45MHz频点在单位时间尺度的实测数据切片,并将切片后的数据进行重组,重构成“I+j*Q”的形式,形成[5223×138]矩阵。
G2:对129.45MHz频点单个切片数据进行压缩。对切片数据的实部和虚部分别进行求模、平均值处理,形成“-0.734+0.254i”的数据点。
G3:重复步骤G2,对129.45MHz频点的单位时间尺度的所有切片数据进行压缩,形成大小为[5223×1]的矩阵。
G4:对129.45MHz频点的一天的实测数据进行切片、压缩。重复步骤G1~G3,对129.45MHz频点的实测数据进行切片、压缩,重构成大小为[20512145×1]的矩阵(采集小时数为12),以此形成样本张量。
G5:对129.45MHz频点的所有的实测数据进行切片、压缩。重复步骤G1~G4,依据129.45MHz频点的数据的采集天数,完成129.45MHz频点的所有实测数据的切片、压缩,形成大小为[20512145×1×30]的张量(采集天数为30)。
H.对所有已测频点集{120.3MHz;129.2MHz;129.45MHz}的实测数据进行数据预处理。重复步骤G完成已测频点集{120.3MHz;129.2MHz;129.45MHz}实测数据的切片、压缩以及张量形成,最终重构成大小为[20512145×3×30]的三维张量数据样本。
原始数据的二维时域图与进行滑窗处理后数据的二维时域图如图3、图4所示。图3显示了原始噪声数据与含噪信号数据的二维时域图,表明了噪声与含噪信号在幅值上具有可分性,但可分性效果不明显。图4显示了经过滑窗处理后数据的二维时域图,表明数据在进行滑窗处理后,在幅值上的可分性明显。说明可利用滑窗处理后数据的幅值可分性可以实现噪声与含噪信号的分类。
通信频率129.45MHz的最小通信时长累积分布图如图4所示,表明最小通信时长的分布情况,选取CDF值为0.95所对应的时间采样点长度作为数据预处理的切片长度,更好地保证预测效果。
综上所述,本发明通过智能频谱传感器对机场终端区甚高频通信实测数据进行采集,设置信号检测阈值来统计数据的最大、最小通信时长,并依据最小通信时长对数据样本进行压缩,依据最大通信时长对数据样本进行切片,最终生成适合智能频谱预测神经网络输入的三维张量训练样本。该方法可以获得更高质量的频谱预测数据,为后续训练智能频谱预测神经网络模型参数构建了高质量的频谱数据样本,提升了复杂电磁环境下智能频谱预测神经网络的预测能力,最终达到提升频谱预测准确度和可靠性的目的,为提升机场终端区的甚高频话音通信频率利用率以及保障机场终端区的航空运行安全提供了重要技术支撑。
最后应说明的是:以上所述仅为本发明的优选实施例而已,并不用于限制本发明,尽管参照前述实施例对本发明进行了详细的说明,对于本领域的技术人员来说,其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分技术特征进行等同替换。凡在本发明的精神和原则之内,所作的任何修改、等同替换、改进等,均应包含在本发明的保护范围之内。
Claims (7)
1.一种用于机场终端区甚高频通信中的频谱数据清洗方法,其特征在于,包括以下步骤:通过对数据进行滑窗处理来确定信号检测特征;设置数据归一化参数以及统计信号检测门限值来检测信号类型并形成标签;对各频点实测数据根据通信时长进行切片、压缩处理重构成三维张量数据样本,实现对频谱数据的清洗;
上述通过对数据进行滑窗处理来确定信号检测特征,包括以下步骤:
步骤A1:选取单频点数据;从甚高频通信频段118MHz~136.975MHz中确定实测频点集{f1,f2,...,fn},然后从中获取频点为f1的IQ数据;
步骤A2:重复步骤A1,统计所有频点{f1,f2,...,fn}的滑窗宽度值并记为{w1,w2,...,wn},从中选取最大值作为处理所有数据的滑窗宽度,对所有数据进行滑窗处理;
步骤A3:确定信号检测特征,利用所有频点{f1,f2,...,fn}滑窗处理后的数据绘制二维时域图,依据二维时域图,若含噪信号幅值与纯噪声幅值的比值处于范围内,则可将幅值特征作为信号检测特征。
2.根据权利要求1所述的一种用于机场终端区甚高频通信中的频谱数据清洗方法,其特征在于,上述步骤A1的实现过程包括:
A11:判别信号类型,利用频点f1的IQ数据绘制二维时域图,横坐标为时间采样点,纵坐标为幅值;通过二维时域图中的幅值差异来判别IQ数据为含噪信号或纯噪声;
A12:滑窗处理数据,设置滑窗宽度值w=2n,其中n为正整数;依据所设置滑窗宽度值对步骤A11中的含噪信号数据和纯噪声数据进行滑窗处理,对滑窗提取数据段求平均值,得到滑窗处理后的含噪信号数据与纯噪声数据;smin为处理后含噪信号数据的最小值,nmax为处理后纯噪声数据的最大值,若smin/nmax>1,则滑窗宽度设置合理,若smin/nmax≤1,则增大滑窗宽度值直至满足要求,将满足要求的最小滑窗宽度作为频点f1的数据处理滑窗宽度值,记为w;
A13:确定信号检测特征,利用所有频点{f1,f2,...,fn}滑窗处理后的数据绘制二维时域图;依据二维时域图,若含噪信号幅值与纯噪声幅值的比值处于范围内,则可将幅值特征作为信号检测特征。
3.根据权利要求1所述的一种用于机场终端区甚高频通信中的频谱数据清洗方法,其特征在于,上述设置数据归一化参数以及统计信号检测门限值包括以下步骤:
步骤B1:统计频点f1一分钟数据的归一化参数vm、门限值Trdm以及信噪比snrm;对频点f1的实测数据进行滑窗处理后,信号幅值参考范围应为[400,600],噪声幅值参考范围应为[0,50];依据该判定条件,统计一分钟内的信号数据{s1,s2,...,sp}与噪声数据{n1,n2,...,nq};其中,p+q=60;从s1到sp中找出每秒的幅值最大值[s1-max,s2-max,...,sp-max]、最小值[s1-min,s2-min,...,sp-min]及平均值[s1-mea,s2-mea,...,sp-mea];从到中找出每秒的幅值最大值[n1-max,n2-max,...,nq-max]及平均值[n1-mea,n2-mea,...,nq-mea];选取[s1-max,s2-max,...,sq-max]中的最小值作为一分钟单频点实测数据的归一化参数vm,对[s1-min,s2-min,...,sn-min]中的最小值以及[n1-max,n2-max,...,nm-max]中的最大值进行归一化,其所得值记为sN-min与nN-max,则一分钟的门限值设为Trdm=nN-max+(sN-min-nN-max)/2,信号功率为Ps=mean(s1-mea,s2-mea,...,sp-mea),噪声功率为Pn=mean(n1-mea,n2-mea,...,nq-mea),信噪比为snrm=10log10((Ps-Pn)2/Pn 2);
步骤B2:统计频点f1一小时数据的归一化参数vh、门限值Trdh、信噪比snrh;以5分钟的时间间隔,分别提取频点f1的一小时数据,重复步骤B1,统计频点f1一小时数据的归一化参数、检测门限值以及信噪比;
将一小时的归一化参数集中的最小值记为Vh;计算一小时的检测门限集均值,记为Trdh;计算一小时的信噪比参数集均值,记为snrh;则该小时内的归一化参数、检测门限值以及信噪比分别记为[Vh,Trdh,snrh];
步骤B3:统计频点f1一天数据的归一化参数vd、门限值Trdd、信噪比snrd;选取f1频点一天的实测数据,重复步骤B1~B2,统计频点f1一天数据的归一化参数、检测门限值与信噪比;
将一天的归一化参数集中的最小值记为Vd;对一天的检测门限集求均值,记为Trdd;对一天的信噪比参数集求均值,记为snrd;则该天内的归一化参数、检测门限值以及信噪比分别记为[Vd,Trdd,snrd];
步骤B4:统计频点f1全部实测数据的归一化参数、门限值与信噪比;根据频点f1实测数据的采集天数,重复步骤B1~B3,统计频点f1全部数据的归一化参数、门限值与信噪比的;
将所得归一化参数集中的最小值记为V;对所得检测门限集求均值,记为Trd;对所得信噪比参数集求均值,记为snr;则全部数据的归一化参数、检测门限值以及信噪比分别记为[V,Trd,snr];
步骤B5:统计所有已测频点集{f1,f2,...,fn}的数据归一化参数、门限值与信噪比;统计全部频点数据的归一化参数,记为{V1,V2,...,Vn},检测门限值,记为[Trd1,Trd2,...,Trdn],信噪比,记为[snr1,snr2,...,snrn]。
4.根据权利要求1所述的一种用于机场终端区甚高频通信中的频谱数据清洗方法,其特征在于,检测信号类型并形成标签包括以下步骤:
步骤D1:利用步骤B5中所得到频点f1对应的归一化参数V,对频点f1的每秒实测数据进行归一化,并提取归一化后数据的最大值,与频点f1的检测门限值Trd进行比较;当该最大值大于等于检测门限值时,则判定为信号,标签为1,否则判定为噪声,标签为0;
步骤D2:统计频点f1在1天内的数据标签;重复步骤D1对频点f1在1天内的实测数据进行标签统计。
5.根据权利要求4所述的一种用于机场终端区甚高频通信中的频谱数据清洗方法,其特征在于,对各频点实测数据进行切片、压缩处理重构成三维张量数据样本,包括以下步骤:
步骤E1:统计频点实测数据的最小通信时长及最大通信时长,统计频点实测数据的最小通信时长中的最小值,并作为该频点数据的切片长度;
步骤E2:计算已测频点集的最大通信时长、最小通信时长,完成全部已测频点的最大、最小通信时长统计;将已测频点集{f1,f2,...,fn}中各频点最大通信时长中的最大值作为所有频点数据预处理中的单位时间尺度,记为TL,将最小通信时长中的最大值作为所有频点数据预处理中的切片长度,记为Lc-s;
步骤E3:对频点f1实测数据进行切片、压缩并形成张量;
步骤E4:对所有已测频点集{f1,f2,...,fn}的实测数据进行数据预处理,完成已测频点集{f1,f2,...,fn}实测数据的切片、压缩以及张量形成,最终重构成大小为[((N/Lc-s)×(T/TL))×n×D]的三维张量数据样本,其中N为数据点个数,T为单个连续通信的时长,D为采集天数。
6.根据权利要求5所述的一种用于机场终端区甚高频通信中的频谱数据清洗方法,其特征在于,上述步骤E1的实现还包括以下过程:
E11:统计最大通信时长;依据标签,统计标签连续为1的时间长度,作为连续通信时间并记为[T1,T2,...,Tn],其中Tn为单个连续通信的时长;Tmax为所有连续通信的时长中的最大值,并将Tmax作为频点f1数据预处理中的单位时间尺度;
E12:统计频点f1的1秒实测数据中连续的信号数据点;依据频点f1的归一化参数V对1秒数据进行归一化,将归一化后的数据与频点f1的门限值Trd进行对比;若大于门限值则判定为信号数据点,若小于门限值则判定为噪声数据点,统计1秒钟内所有连续的信号数据点长度;
E13:重复步骤E12统计频点f1的1天实测数据中连续的信号数据点长度,并对得到的数据点长度进行累积分布函数计算;选取累积分布概率为95%的连续信号数据点长度作为频点f1的1天实测数据中最小通信时长;
E14:重复步骤E11~E13,根据频点f1的采集天数,统计频点f1实测数据中的最小通信时长;统计频点f1实测数据的最小通信时长中的最小值Tmin,并作为该频点数据的切片长度。
7.根据权利要求5所述的一种用于机场终端区甚高频通信中的频谱数据清洗方法,其特征在于,上述步骤E3还包括以下过程:
E31:对频点f1单位时间尺度的实测数据进行切片;依据获得的最大单位时间尺度,计算其中所包含的数据点个数N=[(TL×N1)×1];N1为频点f1的1秒钟实测数据的数据点个数,切片长度为Lc-s,对N进行切片处理,重构成大小为[(N/Lc-s)×Lc-s]的矩阵,完成频点f1在单位时间尺度的实测数据切片,并将切片后的数据进行重组,重构成I+j*Q的形式,形成矩阵;
E32:对频点f1单个切片数据进行压缩,对切片数据的实部和虚部分别进行求模、平均值处理,形成Ic+j*Qc的数据点;
E33:重复步骤E32,对频点f1单位时间尺度的所有切片数据进行压缩,形成大小为[(N/Lc-s)×1]的矩阵;
E34:对频点f1的一天的实测数据进行切片、压缩;重复步骤E31~E33,对频点f1实测数据进行切片、压缩,重构成大小为[((N/Lc-s)×(T/TL))×1]的矩阵,以此形成样本张量;
E35:对频点f1所有的实测数据进行切片、压缩;重复步骤E31~E34,依据频点f1数据的采集天数,完成频点f1所有实测数据的切片、压缩,形成大小为[((N/Lc-s)×(T/TL))×1×D]的张量,D为采集天数。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010969910.6A CN112272066B (zh) | 2020-09-15 | 2020-09-15 | 一种用于机场终端区甚高频通信中的频谱数据清洗方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010969910.6A CN112272066B (zh) | 2020-09-15 | 2020-09-15 | 一种用于机场终端区甚高频通信中的频谱数据清洗方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN112272066A CN112272066A (zh) | 2021-01-26 |
CN112272066B true CN112272066B (zh) | 2022-08-26 |
Family
ID=74349004
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202010969910.6A Active CN112272066B (zh) | 2020-09-15 | 2020-09-15 | 一种用于机场终端区甚高频通信中的频谱数据清洗方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN112272066B (zh) |
Families Citing this family (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN113312996B (zh) * | 2021-05-19 | 2023-04-18 | 哈尔滨工程大学 | 一种混叠短波通信信号检测与识别方法 |
CN114614922B (zh) * | 2022-03-16 | 2024-06-14 | 三亚航空旅游职业学院 | 基于频域的民航甚高频通信中的频谱数据清洗方法 |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP0575110A2 (en) * | 1992-06-16 | 1993-12-22 | Sony Corporation | Compressing and expanding digital signals |
CN105654963A (zh) * | 2016-03-23 | 2016-06-08 | 天津大学 | 频谱校正及数据密度聚类法语音欠定盲识别方法和装置 |
CN107273860A (zh) * | 2017-06-20 | 2017-10-20 | 电子科技大学 | 基于连通区域标记的跳频信号动态聚类提取方法 |
CN109831265A (zh) * | 2019-01-24 | 2019-05-31 | 西安电子科技大学 | 一种基于空域滤波的宽带信号频谱感知方法和*** |
CN109951243A (zh) * | 2017-12-20 | 2019-06-28 | 中国科学院深圳先进技术研究院 | 一种频谱预测方法、***及电子设备 |
Family Cites Families (14)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP2254264A3 (en) * | 2005-01-05 | 2013-11-13 | ATC Technologies, LLC | Adaptive beam forming with multi-user detection and interference reduction in satellite communication systems and methods |
US8825131B2 (en) * | 2009-10-14 | 2014-09-02 | Nocimed, Llc | MR spectroscopy system and method for diagnosing painful and non-painful intervertebral discs |
CN103986539B (zh) * | 2014-06-10 | 2016-02-03 | 哈尔滨工业大学 | 一种基于稀疏去噪的认知无线电频谱感知方法 |
DE102015010602A1 (de) * | 2015-08-18 | 2017-02-23 | Hochschule Aschaffenburg | Verfahren zur Analyse eines Datensatzes einer Flugzeit-Massenspektrometrie-Messung und eine Vorrichtung |
BR112018073440A2 (pt) * | 2016-05-13 | 2019-03-26 | Huawei Tech Co Ltd | método de reportar informação de estado de canal, método de ler informação de estado de canal, e dispositivo relacionado |
CN106569188B (zh) * | 2016-11-01 | 2019-03-05 | 中国航天科工集团八五一一研究所 | 基于改进pga的电离层相位污染校正算法 |
US10637544B1 (en) * | 2018-04-24 | 2020-04-28 | Genghiscomm Holdings, LLC | Distributed radio system |
CN109344207B (zh) * | 2018-08-07 | 2021-08-06 | 南京航空航天大学 | 基于北斗扫描的天地一体频谱大数据平台 |
CN109995448A (zh) * | 2019-02-28 | 2019-07-09 | 南京航空航天大学 | 具有缺失值和稀疏异常值下的长期频谱预测方法 |
CN110471104B (zh) * | 2019-08-26 | 2021-03-16 | 电子科技大学 | 基于智能特征学习的叠后地震反射模式识别方法 |
CN110610717B (zh) * | 2019-08-30 | 2021-10-15 | 西南电子技术研究所(中国电子科技集团公司第十研究所) | 复杂频谱环境混合信号的分离方法 |
CN110855384B (zh) * | 2019-10-23 | 2021-08-27 | 中国科学院新疆天文台 | 一种基于窗口划分的宽带频谱信噪分离方法 |
CN111193618B (zh) * | 2019-12-20 | 2021-05-25 | 山东大学 | 一种基于张量计算的6g移动通信***及其数据处理方法 |
CN111130630A (zh) * | 2019-12-31 | 2020-05-08 | 南京御通信息技术有限公司 | 一种通信卫星频谱监测设备及其频谱获取与特征识别方法 |
-
2020
- 2020-09-15 CN CN202010969910.6A patent/CN112272066B/zh active Active
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP0575110A2 (en) * | 1992-06-16 | 1993-12-22 | Sony Corporation | Compressing and expanding digital signals |
CN105654963A (zh) * | 2016-03-23 | 2016-06-08 | 天津大学 | 频谱校正及数据密度聚类法语音欠定盲识别方法和装置 |
CN107273860A (zh) * | 2017-06-20 | 2017-10-20 | 电子科技大学 | 基于连通区域标记的跳频信号动态聚类提取方法 |
CN109951243A (zh) * | 2017-12-20 | 2019-06-28 | 中国科学院深圳先进技术研究院 | 一种频谱预测方法、***及电子设备 |
CN109831265A (zh) * | 2019-01-24 | 2019-05-31 | 西安电子科技大学 | 一种基于空域滤波的宽带信号频谱感知方法和*** |
Also Published As
Publication number | Publication date |
---|---|
CN112272066A (zh) | 2021-01-26 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN112272066B (zh) | 一种用于机场终端区甚高频通信中的频谱数据清洗方法 | |
CN114755745B (zh) | 基于多通道深度残差收缩网络的冰雹天气识别与分类方法 | |
CN108985179B (zh) | 一种基于改进小波阈值函数的电能质量信号去噪方法 | |
CN109325399B (zh) | 一种基于信道状态信息的陌生人手势识别方法及*** | |
CN102697495B (zh) | 基于总体平均经验模式分解的二代小波肌电信号消噪方法 | |
CN102824172B (zh) | 一种脑电特征提取方法 | |
CN103267905B (zh) | 一种基于分层-聚类算法的电磁背景噪声提取方法 | |
CN108648764B (zh) | 基于雨水敲击声识别的雨量测量***及其测量方法 | |
CN114469124B (zh) | 一种运动过程中异常心电信号的识别方法 | |
CN105300844A (zh) | 一种硅橡胶绝缘子憎水性等级判定方法 | |
CN116828070A (zh) | 一种智慧电网数据优化传输方法 | |
CN112213688B (zh) | 一种用于低空空域低小慢飞行器目标个体识别的特征提取方法 | |
KR102221839B1 (ko) | 잡음 환경 내 실시간 심장 박동수 탐지 장치 및 그 방법 | |
CN113325277A (zh) | 一种局部放电处理方法 | |
CN101766509A (zh) | 一种基于单点采集肌音信号的假肢实时控制方法 | |
CN109255874B (zh) | 一种基于普通商用WiFi设备的通行及人数检测方法 | |
CN114707558A (zh) | 冰崩次声特征提取及分类识别方法和介质 | |
CN111104639B (zh) | 一种点面融合的时序pm2.5空间分布估算方法 | |
CN112926555B (zh) | 一种基于自编码器数据增强的小样本无源行为感知方法 | |
CN115687894A (zh) | 一种基于小样本学习的跌倒检测***及方法 | |
CN110146922A (zh) | 高速铁路地震预警***单双地震计干扰识别方法 | |
CN109409281A (zh) | 一种基于改进的小波阈值函数的降噪方法 | |
CN114614922B (zh) | 基于频域的民航甚高频通信中的频谱数据清洗方法 | |
CN117172601A (zh) | 一种基于残差全卷积神经网络的非侵入式负荷监测方法 | |
CN103070681B (zh) | 一种基于稀疏成分分析的心室晚电位分离方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |