CN113254441A - 一种电网遥测数据可变尺度规模化时序存储方法 - Google Patents
一种电网遥测数据可变尺度规模化时序存储方法 Download PDFInfo
- Publication number
- CN113254441A CN113254441A CN202110529970.0A CN202110529970A CN113254441A CN 113254441 A CN113254441 A CN 113254441A CN 202110529970 A CN202110529970 A CN 202110529970A CN 113254441 A CN113254441 A CN 113254441A
- Authority
- CN
- China
- Prior art keywords
- value
- power grid
- data
- time
- telemetry data
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 17
- 238000013500 data storage Methods 0.000 abstract description 10
- 238000005070 sampling Methods 0.000 description 3
- 238000005259 measurement Methods 0.000 description 2
- 238000011161 development Methods 0.000 description 1
- 238000010586 diagram Methods 0.000 description 1
- 238000012423 maintenance Methods 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/22—Indexing; Data structures therefor; Storage structures
- G06F16/2291—User-Defined Types; Storage management thereof
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
- Y02D—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
- Y02D10/00—Energy efficient computing, e.g. low power processors, power management or thermal management
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Software Systems (AREA)
- Data Mining & Analysis (AREA)
- Databases & Information Systems (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
Abstract
本发明揭示了一种电网遥测数据可变尺度规模化时序存储方法,数据按常规存储、极值存储、斜率存储三种模式存储,分别存时间间隔端点值、分别存时间间隔端点值及极值、分别存时间间隔端点值及中值。通过本发明提出的存储方法可实现电网遥测数据的高效存储,在进一步降低数据存储量的同时,有效反映原有数据曲线的特征。
Description
技术领域
本发明涉及时序数据采样领域,特别涉及电网遥测数据存储领域。
背景技术
随着电网自动化技术的不断发展,调度自动化***采集电网有功、无功、电流、电压等遥测数据范围也越来越广,电网遥测数据量成规模的增长,如何简洁高效的存储这些电网历史数据,同时又反映电网数据曲线的特点已成为电网运行维护中的一个难题。
电网遥测数据具有时序的特点,其遥测数据值需带有时标。当前,常规遥测数据值每5分钟一个存储点,重要遥测数据值每30秒存储一个点,考虑到电网的规模,遥测数据存储量较大,需规模化存储。
面对海量的电网遥测数据,按5分钟一个采样点,虽然降低了数据存储量,但该时间间隔内的数据完全丢失,造成历史曲线失真。若按30秒一个存储点则保留了历史曲线的特点,但将造成数据存储量巨大,占用***硬盘存储量,同时也难以便于后期数据调用查找。
发明内容
本发明所要解决的技术问题是实现一种实现电网遥测数据的简洁高效存储,在固定时间间隔时序数据采样的情况进一步降低数据存储量,同时尽可能反映原有数据曲线的特点。
为了实现上述目的,本发明采用的技术方案为:一种电网遥测数据可变尺度规模化时序存储方法,包括以下步骤:
步骤1、实时获取电网遥测数据;
步骤2、距离上一次存储数据的间隔时间大于Δt,若否返回步骤1、若是执行下一步;
步骤3、本次Δt时间内获取的电网遥测数据是否有极值,若是则记录本次Δt时间内的端点值和极值,并返回步骤1,若否执行下一步;
步骤4、本次Δt时间内获取的电网遥测数据的始端和末端数据差值是否大于设定值,若是则记录本次Δt时间内中值和端点值,并返回步骤1,若否则执行下一步;
步骤5、记录本次Δt时间内端点值,并返回步骤1.
所述步骤3中,极值包括极大值和极小值,当本次Δt时间内获取电网遥测数据的最大值非两端端值,则记录该最大值为极大值,当本次Δt时间内获取电网遥测数据的最小值非两端端值,则记录该最小值为极小值。
当获取的极值只有极大值时,步骤3记录端点值和极大值,当获取的极值只有极小值时,步骤3记录端点值和极小值,当获取的极值既有极大值也有极小值时,步骤3记录端点值、极大值和极小值。
所述端点值为本次Δt时间内末端时刻获取的电网遥测数据。
所述步骤4中,所述中值为本次Δt时间电网遥测数据的始端和末端数据平均值的电网遥测数据。
本发明存储方法,数据按常规存储、极值存储、斜率存储三种模式存储,分别存时间间隔端点值、分别存时间间隔端点值及极值、分别存时间间隔端点值及中值;通过该存储方法可实现电网遥测数据的高效存储,在进一步降低数据存储量的同时,有效反映原有数据曲线的特征。
附图说明
下面对本发明说明书中每幅附图表达的内容作简要说明:
图1为一种可变尺度规模化时序数据存储方法原理图;
图2为一种可变尺度规模化时序数据存储方法流程图。
具体实施方式
下面对照附图,通过对实施例的描述,本发明的具体实施方式如所涉及的各构件的形状、构造、各部分之间的相互位置及连接关系、各部分的作用及工作原理、制造工艺及操作使用方法等,作进一步详细的说明,以帮助本领域技术人员对本发明的发明构思、技术方案有更完整、准确和深入的理解。
可变尺度规模化时序数据存储方法将获取的参数采样三种方式进行存储,包括常规存储、极值存储、斜率存储。
常规存储为历史数据的按固定的时间间隔存储离散时序数据值,如图1中t1至t2时间段,不存在极大值,y1和y2的差值也小于Δy,则记录y2值即可;
极值存储为在固定时间间隔离散时序数据值的基础上存储时间间隔内的时序数据极大值、极小值,获取数据是,若该存储时间间隔内的时序数据存在极大值、极小值,将该极值及其时间也存储,如图1中t4至t5时间段,存在极大值,则记录ymax和y5;
斜率存储为在固定时间间隔离散时序数据值的基础上存储时间隔内的变化较大的时序数据中值,若该存储时间隔内时序数据值变化较大,即该时序数据斜率较大或较低,则将该时序数据中值及其时间也存储,如图1中t5至t6时间段,不存在极大值,但y5和y6的差值大于设定的参数Δy,其中y5和y6的中间值(y5/2+y6/2)为ymid,则记录ymid和y6值;
具体存储方法流程如图2所示,包括以下步骤:
1、实时记录电网实时时序遥测数据,并存储在临时数据库中;
2、如果存储数据时间间隔大于设定时间间隔,在对该时间间隔内数据进行判断;
3、如果该时间间隔内数据存在极值,则按极值存储模式记录时间间端点值、极值,以及数据相应时间;
4、如果该时间间隔内两端点数据差值过大,即时序数据斜率较大或较低,则按斜率存储模式,记录时间间隔端点值、中值,以及数据相应时间;
5、如果不存在以上两种情况,则按常规模式存储,记录时间间隔端点值。
上面结合附图对本发明进行了示例性描述,显然本发明具体实现并不受上述方式的限制,只要采用了本发明的方法构思和技术方案进行的各种非实质性的改进,或未经改进将本发明的构思和技术方案直接应用于其它场合的,均在本发明的保护范围之内。
Claims (5)
1.一种电网遥测数据可变尺度规模化时序存储方法,其特征在于,包括以下步骤:
步骤1、实时获取电网遥测数据;
步骤2、距离上一次存储数据的间隔时间大于Δt,若否返回步骤1、若是执行下一步;
步骤3、本次Δt时间内获取的电网遥测数据是否有极值,若是则记录本次Δt时间内的端点值和极值,并返回步骤1,若否执行下一步;
步骤4、本次Δt时间内获取的电网遥测数据的始端和末端数据差值是否大于设定值,若是则记录本次Δt时间内中值和端点值,并返回步骤1,若否则执行下一步;
步骤5、记录本次Δt时间内端点值,并返回步骤1。
2.根据权利要求1所述的电网遥测数据可变尺度规模化时序存储方法,其特征在于:所述步骤3中,极值包括极大值和极小值,当本次Δt时间内获取电网遥测数据的最大值非两端端值,则记录该最大值为极大值,当本次Δt时间内获取电网遥测数据的最小值非两端端值,则记录该最小值为极小值。
3.根据权利要求2所述的电网遥测数据可变尺度规模化时序存储方法,其特征在于:当获取的极值只有极大值时,步骤3记录端点值和极大值,当获取的极值只有极小值时,步骤3记录端点值和极小值,当获取的极值既有极大值也有极小值时,步骤3记录端点值、极大值和极小值。
4.根据权利要求1所述的电网遥测数据可变尺度规模化时序存储方法,其特征在于:所述端点值为本次Δt时间内末端时刻获取的电网遥测数据。
5.根据权利要求1所述的电网遥测数据可变尺度规模化时序存储方法,其特征在于:所述步骤4中,所述中值为本次Δt时间电网遥测数据的始端和末端数据平均值的电网遥测数据。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110529970.0A CN113254441A (zh) | 2021-05-14 | 2021-05-14 | 一种电网遥测数据可变尺度规模化时序存储方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110529970.0A CN113254441A (zh) | 2021-05-14 | 2021-05-14 | 一种电网遥测数据可变尺度规模化时序存储方法 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN113254441A true CN113254441A (zh) | 2021-08-13 |
Family
ID=77182037
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202110529970.0A Pending CN113254441A (zh) | 2021-05-14 | 2021-05-14 | 一种电网遥测数据可变尺度规模化时序存储方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN113254441A (zh) |
Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1525395A (zh) * | 2003-02-24 | 2004-09-01 | 深圳迈瑞生物医疗电子股份有限公司 | 信号时域波形极值点和周期的检测方法 |
CN102435912A (zh) * | 2011-10-13 | 2012-05-02 | 华北电力大学(保定) | 电网中故障扰动点的定位方法 |
CN102568018A (zh) * | 2010-12-09 | 2012-07-11 | 成都交大光芒科技股份有限公司 | 一种绘制遥测趋势曲线的方法 |
CN102981071A (zh) * | 2012-09-18 | 2013-03-20 | 广东电网公司佛山供电局 | 应用于电网调度自动化***的电力***主要参数监测方法 |
CN103294713A (zh) * | 2012-02-29 | 2013-09-11 | 鸿富锦精密工业(深圳)有限公司 | 监测数据存储***及方法 |
CN107807271A (zh) * | 2017-09-29 | 2018-03-16 | 中国电力科学研究院 | 一种用于对过电压监测数据自动进行压缩的方法及*** |
CN108471128A (zh) * | 2018-05-05 | 2018-08-31 | 石家庄科林电气股份有限公司 | 一种使用均衡寻优算法实现的三相负荷不平衡自动调节方法 |
-
2021
- 2021-05-14 CN CN202110529970.0A patent/CN113254441A/zh active Pending
Patent Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1525395A (zh) * | 2003-02-24 | 2004-09-01 | 深圳迈瑞生物医疗电子股份有限公司 | 信号时域波形极值点和周期的检测方法 |
CN102568018A (zh) * | 2010-12-09 | 2012-07-11 | 成都交大光芒科技股份有限公司 | 一种绘制遥测趋势曲线的方法 |
CN102435912A (zh) * | 2011-10-13 | 2012-05-02 | 华北电力大学(保定) | 电网中故障扰动点的定位方法 |
CN103294713A (zh) * | 2012-02-29 | 2013-09-11 | 鸿富锦精密工业(深圳)有限公司 | 监测数据存储***及方法 |
CN102981071A (zh) * | 2012-09-18 | 2013-03-20 | 广东电网公司佛山供电局 | 应用于电网调度自动化***的电力***主要参数监测方法 |
CN107807271A (zh) * | 2017-09-29 | 2018-03-16 | 中国电力科学研究院 | 一种用于对过电压监测数据自动进行压缩的方法及*** |
CN108471128A (zh) * | 2018-05-05 | 2018-08-31 | 石家庄科林电气股份有限公司 | 一种使用均衡寻优算法实现的三相负荷不平衡自动调节方法 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN107943831B (zh) | 一种基于HBase的电网历史数据集中存储方法 | |
CN110289631B (zh) | 一种风电场储能装置容量的计算方法及*** | |
CN102611454A (zh) | 一种实时历史数据动态无损压缩方法 | |
CN112286962B (zh) | 一种用电信息采集终端抄表成功率统计方法与*** | |
CN106557550B (zh) | 一种配电终端自描述定点记录的快速存储、检索及补全的实现方法及装置 | |
CN113254441A (zh) | 一种电网遥测数据可变尺度规模化时序存储方法 | |
CN114389231B (zh) | 一种基于配电网保护及设备实时数据的负荷预测诊断方法 | |
CN110995320A (zh) | 一种基于宽带载波通信的三相用电数据采集方法及装置 | |
JPH1069498A (ja) | プラントデータ収集収録装置 | |
CN111625517B (zh) | 基于变化存储的新能源实时数据处理方法及装置 | |
CN109270360B (zh) | 一种高精度计算在线线损的方法 | |
CN113629871A (zh) | 一种运用源端录波信息过滤的录波主站优化运行方法 | |
CN112463793A (zh) | 一种基于influxdb数据库的EMS信息展示***以及方法 | |
CN101751389A (zh) | 变压器稳态录波数据检索方法 | |
CN112688692A (zh) | 抄表数据压缩方法、数据格式、设备及存储介质 | |
CN111221820A (zh) | 一种设备联网数据的存储及实时读取的方法 | |
CN113567721B (zh) | 一种智能电表的停电统计方法 | |
CN114629967B (zh) | 通信转化方法、装置、电子设备和存储介质 | |
CN115525654A (zh) | 一种基于物模型的智能变电站数据存储方法 | |
CN107463575A (zh) | 一种新型的智能风电历史数据处理方法与*** | |
CN112330090B (zh) | 一种低压配网数据驱动业务方法 | |
CN220208244U (zh) | 一种基于smb的嵌入式数据存储电力***动态记录装置 | |
CN115797102A (zh) | 一种电力设备数据治理方法及装置 | |
CN117997353B (zh) | 一种水利工程水位数据处理方法 | |
Wu et al. | Scene-Based Data Management Method for Power System Using Snapshot Technology |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
RJ01 | Rejection of invention patent application after publication |
Application publication date: 20210813 |
|
RJ01 | Rejection of invention patent application after publication |