CN108306756A - 一种基于电力数据网全息评估***及其故障定位方法 - Google Patents
一种基于电力数据网全息评估***及其故障定位方法 Download PDFInfo
- Publication number
- CN108306756A CN108306756A CN201711397572.8A CN201711397572A CN108306756A CN 108306756 A CN108306756 A CN 108306756A CN 201711397572 A CN201711397572 A CN 201711397572A CN 108306756 A CN108306756 A CN 108306756A
- Authority
- CN
- China
- Prior art keywords
- data
- detection
- network
- node
- layer
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims abstract description 80
- 238000001093 holography Methods 0.000 title claims abstract description 21
- 238000001514 detection method Methods 0.000 claims abstract description 148
- 239000000523 sample Substances 0.000 claims abstract description 40
- 239000010410 layer Substances 0.000 claims description 90
- 238000004458 analytical method Methods 0.000 claims description 67
- 230000006870 function Effects 0.000 claims description 52
- 238000007726 management method Methods 0.000 claims description 41
- 230000008569 process Effects 0.000 claims description 34
- 230000002159 abnormal effect Effects 0.000 claims description 33
- 238000007781 pre-processing Methods 0.000 claims description 28
- 238000011156 evaluation Methods 0.000 claims description 25
- 238000006243 chemical reaction Methods 0.000 claims description 24
- 238000012545 processing Methods 0.000 claims description 24
- 238000007405 data analysis Methods 0.000 claims description 16
- 238000013519 translation Methods 0.000 claims description 16
- 238000004891 communication Methods 0.000 claims description 11
- 238000012544 monitoring process Methods 0.000 claims description 10
- 238000012360 testing method Methods 0.000 claims description 10
- 238000005259 measurement Methods 0.000 claims description 8
- 238000003860 storage Methods 0.000 claims description 8
- 239000011159 matrix material Substances 0.000 claims description 7
- 230000007246 mechanism Effects 0.000 claims description 7
- 238000013507 mapping Methods 0.000 claims description 6
- 238000012800 visualization Methods 0.000 claims description 6
- 230000005540 biological transmission Effects 0.000 claims description 5
- 238000009795 derivation Methods 0.000 claims description 5
- 230000002452 interceptive effect Effects 0.000 claims description 5
- 230000004807 localization Effects 0.000 claims description 5
- 238000012856 packing Methods 0.000 claims description 5
- 230000005855 radiation Effects 0.000 claims description 5
- 230000000007 visual effect Effects 0.000 claims description 5
- 230000003993 interaction Effects 0.000 claims description 4
- 230000004044 response Effects 0.000 claims description 4
- 238000009825 accumulation Methods 0.000 claims description 3
- 238000007906 compression Methods 0.000 claims description 3
- 230000006835 compression Effects 0.000 claims description 3
- 239000002346 layers by function Substances 0.000 claims description 3
- 238000011056 performance test Methods 0.000 claims description 3
- 230000009466 transformation Effects 0.000 claims description 3
- 230000008859 change Effects 0.000 claims description 2
- 238000013500 data storage Methods 0.000 claims description 2
- 238000005516 engineering process Methods 0.000 abstract description 15
- 238000012423 maintenance Methods 0.000 abstract description 5
- 238000004422 calculation algorithm Methods 0.000 description 9
- 238000010586 diagram Methods 0.000 description 8
- 238000013499 data model Methods 0.000 description 4
- 238000007689 inspection Methods 0.000 description 4
- 238000011160 research Methods 0.000 description 4
- 230000008878 coupling Effects 0.000 description 3
- 238000010168 coupling process Methods 0.000 description 3
- 238000005859 coupling reaction Methods 0.000 description 3
- 238000011161 development Methods 0.000 description 3
- 238000012986 modification Methods 0.000 description 3
- 230000004048 modification Effects 0.000 description 3
- 230000001360 synchronised effect Effects 0.000 description 3
- 230000001960 triggered effect Effects 0.000 description 3
- 230000009471 action Effects 0.000 description 2
- 238000004140 cleaning Methods 0.000 description 2
- 238000010219 correlation analysis Methods 0.000 description 2
- 238000013480 data collection Methods 0.000 description 2
- 238000013501 data transformation Methods 0.000 description 2
- 230000007812 deficiency Effects 0.000 description 2
- 238000012217 deletion Methods 0.000 description 2
- 230000037430 deletion Effects 0.000 description 2
- 238000003745 diagnosis Methods 0.000 description 2
- 230000004927 fusion Effects 0.000 description 2
- 238000004519 manufacturing process Methods 0.000 description 2
- 238000005457 optimization Methods 0.000 description 2
- 238000007794 visualization technique Methods 0.000 description 2
- 241000700605 Viruses Species 0.000 description 1
- 230000005856 abnormality Effects 0.000 description 1
- 230000003213 activating effect Effects 0.000 description 1
- 230000003044 adaptive effect Effects 0.000 description 1
- 238000013528 artificial neural network Methods 0.000 description 1
- 230000004888 barrier function Effects 0.000 description 1
- 230000006399 behavior Effects 0.000 description 1
- 230000008901 benefit Effects 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 238000007418 data mining Methods 0.000 description 1
- 230000007547 defect Effects 0.000 description 1
- 230000002950 deficient Effects 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 238000004141 dimensional analysis Methods 0.000 description 1
- 239000006185 dispersion Substances 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000001914 filtration Methods 0.000 description 1
- 238000005206 flow analysis Methods 0.000 description 1
- 238000009472 formulation Methods 0.000 description 1
- 238000005194 fractionation Methods 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 230000010365 information processing Effects 0.000 description 1
- 238000010801 machine learning Methods 0.000 description 1
- 239000000203 mixture Substances 0.000 description 1
- 238000003032 molecular docking Methods 0.000 description 1
- 230000035699 permeability Effects 0.000 description 1
- 230000002787 reinforcement Effects 0.000 description 1
- 238000010187 selection method Methods 0.000 description 1
- 238000007619 statistical method Methods 0.000 description 1
- 230000009885 systemic effect Effects 0.000 description 1
- 230000002123 temporal effect Effects 0.000 description 1
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L41/00—Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
- H04L41/06—Management of faults, events, alarms or notifications
- H04L41/0631—Management of faults, events, alarms or notifications using root cause analysis; using analysis of correlation between notifications, alarms or events based on decision criteria, e.g. hierarchy, tree or time analysis
-
- H02J13/0013—
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L41/00—Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
- H04L41/06—Management of faults, events, alarms or notifications
- H04L41/0677—Localisation of faults
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L41/00—Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
- H04L41/14—Network analysis or design
- H04L41/145—Network analysis or design involving simulating, designing, planning or modelling of a network
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L41/00—Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
- H04L41/14—Network analysis or design
- H04L41/147—Network analysis or design for predicting network behaviour
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L41/00—Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
- H04L41/16—Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks using machine learning or artificial intelligence
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L43/00—Arrangements for monitoring or testing data switching networks
- H04L43/04—Processing captured monitoring data, e.g. for logfile generation
- H04L43/045—Processing captured monitoring data, e.g. for logfile generation for graphical visualisation of monitoring data
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L43/00—Arrangements for monitoring or testing data switching networks
- H04L43/12—Network monitoring probes
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y04—INFORMATION OR COMMUNICATION TECHNOLOGIES HAVING AN IMPACT ON OTHER TECHNOLOGY AREAS
- Y04S—SYSTEMS INTEGRATING TECHNOLOGIES RELATED TO POWER NETWORK OPERATION, COMMUNICATION OR INFORMATION TECHNOLOGIES FOR IMPROVING THE ELECTRICAL POWER GENERATION, TRANSMISSION, DISTRIBUTION, MANAGEMENT OR USAGE, i.e. SMART GRIDS
- Y04S10/00—Systems supporting electrical power generation, transmission or distribution
- Y04S10/40—Display of information, e.g. of data or controls
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y04—INFORMATION OR COMMUNICATION TECHNOLOGIES HAVING AN IMPACT ON OTHER TECHNOLOGY AREAS
- Y04S—SYSTEMS INTEGRATING TECHNOLOGIES RELATED TO POWER NETWORK OPERATION, COMMUNICATION OR INFORMATION TECHNOLOGIES FOR IMPROVING THE ELECTRICAL POWER GENERATION, TRANSMISSION, DISTRIBUTION, MANAGEMENT OR USAGE, i.e. SMART GRIDS
- Y04S10/00—Systems supporting electrical power generation, transmission or distribution
- Y04S10/50—Systems or methods supporting the power network operation or management, involving a certain degree of interaction with the load-side end user applications
- Y04S10/52—Outage or fault management, e.g. fault detection or location
Landscapes
- Engineering & Computer Science (AREA)
- Computer Networks & Wireless Communication (AREA)
- Signal Processing (AREA)
- Data Mining & Analysis (AREA)
- Artificial Intelligence (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Databases & Information Systems (AREA)
- Evolutionary Computation (AREA)
- Medical Informatics (AREA)
- Software Systems (AREA)
- Data Exchanges In Wide-Area Networks (AREA)
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
Abstract
本发明涉及电力数据网故障定位技术领域,公开了一种基于电力数据网全息评估***及其故障定位方法,所述方法包括以下步骤:步骤1:选择探测路径形成探测集;步骤2:发送探测进行故障检测;步骤3:对故障检测的探测结果进行分析;步骤4:基于主动探测进行故障定位;本发明提出通过该全息评估***及故障定位方法解决了现有的风险预警方法发现风险耗时较长,故障定位技术需要借助维护人员的经验判断,效率较低的技术问题,在需要探测时,能快速地完成探测,并进行定位,降低发现风险的时长,提高效率。
Description
技术领域
本发明涉及电力数据网故障定位技术领域,尤其涉及一种基于电力数据网全息评估***及其故障定位方法。
背景技术
随着社会与经济的不断发展,电力数据网的发展也极为迅速,尤其是电力数据网故障定位技术的发展已经达到一定高度,现有这些技术有效避免和降低了电力数据网故障带来的损失,为人们提供可靠的用电环境,方便了人们的生活。电力数据网要求的风险预警时效性较普通网络更高,所要求的故障定位时间也更短,传统的网管技术所采用的被动采集网络数据的方法已经无法满足电力数据网的需求,需要研究如何利用主被动探针等多种探测方式实现网络业务质量的主动监测和实时监控,以提高风险预警的时效性。
针对现有的风险预警方法发现风险耗时较长,故障定位技术需要借助维护人员的经验判断,效率较低的技术问题,本发明提出了一种基于电力数据网全息评估***及其故障定位方法。
发明内容
针对现有技术中存在的问题,本发明提出了一种基于电力数据网全息评估***及其故障定位方法,对网络业务质量进行实时跟踪分析,从而实现电力数据网业务质量的高精度风险预警与故障定位。
本发明提供了一种基于电力数据网全息评估***,所述***包括数据探测部、数据预处理部、数据分析部、数据应用部以及平台部,其中,所述数据探测部用于通过部署各类主动和/或被动测量探针,完成对多维度细粒度网络和业务质量数据的原始采集,包括对电力数据网骨干网络、接入网络、以及数据中心的网络及业务性能数据及流量数据的采集;
所述数据预处理部,根据分析需求完成对所采集数据的预处理,并将数据入库;所述数据预处理部,用于实现数据预处理配置、数据预处理过程和数据预处理管控,所述数据预处理配置为数据预处理过程提供了操作依据;所述数据预处理过程包括通过格式转换单元、数据翻译单元和数据衍生单元分别完成格式转换、数据翻译和数据衍生功能,所述数据预处理管控为预处理过程提供调度、监控、异常控制和统计功能;
所述数据分析部,包括多维数据融合分析单元,用于对经过预处理的数据进行多维数据融合分析;所述多维数据融合分析,通过对智能探针捕获的数据包经过预处理后进行分析,并借助于数据包到达序列和状态等信息,利用协议识别的结果,分别通过各单元模块完成网络层性能分析、传输层性能分析、应用层性能分析和通用业务性能分析;
所述数据应用部,用于利用所述数据分析部输出的数据完成各种应用,所述数据应用部,包括完成基于风险容忍度模型的电力数据网风险预警功能的风险预警单元,完成基于风险容忍度模型的电力数据网故障定位机制的故障定位单元和完成全网业务质量动态可视化的可视化单元;
所述平台部,用于搭建一个***平台,承载上述所有功能,所述平台部采用模块化和分层方式实现。
优选地,所述格式转换单元,用于解析源数据与目标数据之间的不同数据存储格式以及确定相应的存储格式之间的转换规则,所述数据翻译单元,通过从源数据到目标数据的映射规则,实现数据翻译;所述数据衍生单元,用于对原始信息分析并结合业务规则进行衍生获得信息。
优选地,所述数据分析部,在完成应用层业务性能分析的过程中,还将实现应用业务溯源,以实时动态追溯某一个具体应用层业务的完成过程,记录每一个步骤上的响应时间,进而针对数据、语音、视频、多媒体以及其他电力数据网业务的具体特性,完成对多维度细粒度数据的性能分析工作。
优选地,所述风险预警单元,通过学习网络异常判断与处理的知识,如异常流量模型的参数,实现将从探针获取的网络实时数据与网络异常知识进行匹配,判断是否产生异常流量;如果发现异常流量,则按照事先设定的处理规则进行相关处理,并提出告警;同时,与数据库进行交互,更新异常流量模型的参数,产生新规则;其中,所述风险预警单元能够根据历史流量信息自动调整异常流量模型,以实现异常流量的自适应检测。
优选地,所述可视化单元,通过计算机图形技术和图像处理技术,将数据转换成图形或图像在屏幕上显示出来,并进行交互处理,从而实现通过图像来揭示数据中隐含的有效信息;其可视化分析结果可通过各种布局方式来体现,包括正交布局和辐射布局。
优选地,所述平台部为电力数据网智能探测及全息评估平台,包括:物理层、采集层、预处理层、管理层、分析层和展示层,其中,物理层为基础设施层,该层部署电力数据网的各类设备与链路,属于被监测被管理的对象;采集层为数据采集层,该层部署各类主被动测量探针,完成对多维度细粒度网络和业务质量数据的原始采集,包括对电力数据网骨干网络、接入网络、以及数据中心的网络及业务性能数据及流量数据的采集;预处理层根据分析需求完成对所采集数据的预处理,并将数据入库;管理层为探测控制功能层,该层完成探针管理、监测任务调度、测量策略管理等功能;分析层为分析和评估功能层,该层完成各层流量和协议分析、性能分析、性能测试,以及业务流量特征分析等功能,并完成风险预警、故障检测与定位功能;展示层为界面呈现层,该层完成整个平台***的配置管理和界面展示功能;存储层完成对各类网络和业务质量采集数据及相关分析数据的入库存储;接口层完成与数据网综合网络管理***之间的接***互;在各层之间,将采用统一的安全通信机制,实现对各层功能间互访时的认证、压缩和安全传输功能。
除此之外,本发明还公开了一种应用于上述基于电力数据网全息评估***的故障定位方法,所述方法包括以下步骤:
步骤1:选择探测路径形成探测集;
步骤2:发送探测进行故障检测;
步骤3:对故障检测的探测结果进行分析;
步骤4:基于主动探测进行故障定位;
其中,所述探测路径为由探测站点向其他节点所产生的路径,所选的探测路径需要满足覆盖网络中的所有节点,且所述探测路径为最少探测路径;
所述发送探测进行故障检测包括以下步骤:
步骤21:首次初始化时探测集合为空,否则执行步骤22;
步骤22:基于探测依赖矩阵建模,计算每个节点对应的列向量的权值;
步骤23:得出经过每个节点的探测数,找出被最少探测经过的节点;
步骤24:计算上述被最少探测经过的节点的所有探测的行向量权值,并进行降序排列,找出覆盖最多尚未被覆盖节点的探测;
所述对故障检测的探测结果进行分析包括以下步骤:
步骤31:收集探测结果,进行分析判断;
步骤32:若探测成功,则认为成功探测经过的所有节点均为正常节点,并将这些节点加入正常节点集合;
步骤33:若有节点之前被判定为可疑节点,将其从可疑节点集合中删除;
步骤34:若探测失败,则失败探测路径上所有之前未被判定为正常节点的节点均为可疑节点,并加入可疑节点集合;
步骤35:若一条失败探测所经过的所有节点中,仅有一个节点为可疑节点,其他节点都被某些成功探测经过,那么该可疑节点即为故障节点,并被加入故障节点集合。
优选地,所述基于主动探测进行故障定位包括以下步骤:
步骤41:从备选探测集合里面选取满足使得可疑节点数尽量减少的探测;
步骤42:基于探测依赖矩阵建模,对故障检测再次进行分析;
步骤43:若只覆盖一个可疑节点的探测测试结果返回失败,则表明该可疑节点为故障节点;
步骤44:若覆盖可疑节点的探测测试结果返回成功,则表明这些可疑节点为正常节点;
其中,所述备选探测集合为未被作为探测的探测集合,在故障检测阶段表示除了故障检测集合以外的可用探测集合,在故障定位阶段表示除了故障检测集合和之前故障定位探测以外的可用探测集合。
优选地,所述步骤44中,还需要把可疑节点从可疑节点集合中删除,并加入正常节点集合;之后对所有的前面探测失败的探测集合重新进行判定。
优选地,所述探测的方法包括触发对相关网络设备的信息查询和连通性检测,并结合网络设备信息自动触发主动网络性能探测。
本发明实施例的技术方案提供了一种基于电力数据网全息评估***及其故障定位方法,本发明实施例的技术方案具有以下显著效果:
本发明提出了一种基于电力数据网全息评估***及其故障定位方法,通过该全息评估***及故障定位方法解决了现有的风险预警方法发现风险耗时较长,故障定位技术需要借助维护人员的经验判断,效率较低的技术问题,在需要探测时,能快速地完成探测,并进行定位,降低发现风险的时长,提高效率。
附图说明
图1为本发明实施例一的电力数据网智能探测及全息评估***图;
图2为本发明实施例二多维数据融合分析过程示意图;
图3为本发明电力数据网故障定位方法的流程示意图;
图4为本发明电力数据网故障定位方法中故障检测的流程示意图;
图5为本发明电力数据网故障定位方法中对探测结果进行分析的流程示意图;
图6为本发明电力数据网故障定位方法中故障定位的流程示意图;
具体实施方式
为使得本发明的发明目的、特征、优点能够更加的明显和易懂,下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而非全部实施例。基于本发明中的实施例,本领域技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
在现有的风险预警及故障定位方法中发现风险耗时较长,故障定位技术需要借助维护人员的经验判断,效率较低的技术问题;针对上述问题,本发明提出了一种基于电力数据网全息评估***及其故障定位方法。
实施例一、电力数据网智能探测及全息评估***
如图1所示,为本发明实施例一的电力数据网智能探测及全息评估***图,本发明提供了一种基于电力数据网全息评估***,所述***包括数据探测部1、数据预处理部2、数据分析部3、数据应用部4以及平台部5,其中,所述数据探测部1用于通过部署各类主动和/或被动测量探针,完成对多维度细粒度网络和业务质量数据的原始采集,包括对电力数据网骨干网络、接入网络、以及数据中心的网络及业务性能数据及流量数据的采集。
所述数据预处理部2,根据分析需求完成对所采集数据的预处理,并将数据入库;所述数据预处理部2,用于实现数据预处理配置、数据预处理过程和数据预处理管控,所述数据预处理配置为数据预处理过程提供了操作依据,包括预处理规则配置和预处理方式配置;所述数据预处理过程可以根据配置功能提供的规则、方式、频度等内容进行具体操作,其包括通过格式转换单元21、数据翻译单元22和数据衍生单元23分别完成格式转换、数据翻译和数据衍生功能,所述数据预处理管控为预处理过程提供调度、监控、异常控制和统计功能;
所述数据分析部3,包括多维数据融合分析单元31,用于对经过预处理的数据进行多维数据融合分析;所述多维数据融合分析,通过对智能探针捕获的数据包经过预处理后进行分析,并借助于数据包到达序列和状态等信息,利用协议识别的结果,分别通过各单元模块完成网络层性能分析、传输层性能分析、应用层性能分析和通用业务性能分析功能;
所述数据应用部4,用于利用所述数据分析部输出的数据完成各种应用,所述数据应用部4,包括完成基于风险容忍度模型的电力数据网风险预警功能的风险预警单元41,完成基于风险容忍度模型的电力数据网故障定位机制的故障定位单元42和完成全网业务质量动态可视化的可视化单元43;
所述平台部5,用于搭建一个***平台,承载上述所有功能,所述平台部采用模块化和分层方式实现。
优选地,所述格式转换单元21,用于解析源数据与目标数据之间的不同数据存储格式以及确定相应的存储格式之间的转换规则,所述格式转换包括数据类型转换,数据精度转换,空值判断处理,字符串处理,日期格式处理;所述数据翻译单元,通过从源数据到目标数据的映射规则,实现数据翻译;所述数据衍生单元,用于对原始信息分析并结合业务规则进行衍生获得信息。
优选地,所述数据分析部2,在完成应用层业务性能分析的过程中,还将实现应用业务溯源,以实时动态追溯某一个具体应用层业务的完成过程,记录每一个步骤上的响应时间,进而针对数据、语音、视频、多媒体以及其他电力数据网业务的具体特性,完成对多维度细粒度数据的性能分析工作。
优选地,所述风险预警单元41,通过学习网络异常判断与处理的知识,如异常流量模型的参数,实现将从探针获取的网络实时数据与网络异常知识进行匹配,判断是否产生异常流量;如果发现异常流量,则按照事先设定的处理规则进行相关处理,并提出告警;同时,与数据库进行交互,更新异常流量模型的参数,产生新规则;其中,所述风险预警单元41能够根据历史流量信息自动调整异常流量模型,以实现异常流量的自适应检测。
优选地,所述可视化单元43,通过计算机图形技术和图像处理技术,将数据转换成图形或图像在屏幕上显示出来,并进行交互处理,从而实现通过图像来揭示数据中隐含的有效信息;其可视化分析结果可通过各种布局方式来体现,包括正交布局和辐射布局。
(1)正交布局可视化技术
正交布局要求在布局选择位置的时候都要按照垂直或者水平的方向对齐摆放,其布局方式规整,与人类视觉习惯相匹配。
针对数据网网络节点之间的拓扑层级关系、业务特征分类等可使用该图进行直观展现,当数据量大时可通过鼠标滚动操作来查看。
(2)辐射布局可视化技术
辐射式布局的主要特点是根节点位于圆心的位置,其他节点根据其所处于的层次分别放置于不同半径的同心圆上面,能够满足随着图形节点随层级增加而增加的特点。针对按照应用类别、协议类别等对数据流量进行统计分析的场景可使用该辐射布局图进行直观展现。
实施例二、多维数据融合分析
如图2所示为本发明实施例二多维数据融合分析过程示意图;所述多维数据融合分析单元31,用于对经过预处理的数据进行多维数据融合分析;所述多维数据融合分析,通过对智能探针捕获的数据包经过预处理后进行分析,并借助于数据包到达序列和状态等信息,利用协议识别的结果,分别通过各单元模块完成网络层性能分析、传输层性能分析、应用层性能分析和通用业务性能分析功能;
具体如下:数据包或流表进入网络层性能分析单元32处理之后,依次经过传输层性能分析单元33、应用层性能分析单元34和通用业务性能分析35进行分析处理,然后输出给不同的业务性能分析单元进行分析,主要包括:数据业务性能分析单元301、语音业务性能分析单元302、视频业务性能分析单元303、多媒体业务性能分析单元304、扩展业务性能分析单元305;其中,还包括协议识别模块38输出协议结果A和解码模块37输出解码结果B给应用层业务溯源单元34,而流表维护模块36分别输出流数据C和D分别给传输层性能分析单元33和网络层业务性能分析单元32,同时,网络层性能分析单元32、传输层性能分析单元33、应用层性能分析单元34和通用业务性能分析35分别输出结果给监测结果管理模块39进行管理,从而完成多维数据分析过程。
实施例三、数据预处理
数据预处理功能主要包括数据预处理配置和数据预处理过程(ETL)、数据预处理管控三大部分,数据预处理配置为数据预处理过程提供了操作依据,数据预处理过程可以根据配置功能提供的规则、方式、频度等内容进行具体操作,数据预处理管控为预处理过程提供调度、监控、异常控制和统计。
a)数据预处理配置
数据预处理配置是数据处理中重要的实现环节,涉及到多个***来源和数据处理技术,需要针对不同来源,不同质量的源数据制定灵活的处理策略,以支撑灵活的数据预处理,包括预处理规则配置和预处理方式配置。
预处理规则是在数据预处理过程中,各个阶段对数据处理的约束和要求,对数据的来源和操作明确需要遵循的规定,数据预处理规则的配置包括如下内容:
数据的清洗规则配置:针对源数据存在的准确性和完整性问题,根据数据质量评估方法,制定相应的过滤规则,以便筛选出不符合要求的数据,记录数据质量问题,以供日后进行查询统计。数据的准确性是指各对象类型数据的关键属性或信息是符合规定制值,包括值符合规定的枚举值、规定的字符长度、规定的字符串类型、规定的取值范围。数据的完整性是指各对象类型数据的关键属性或信息是否完整。所进行评价的关键属性或信息不为空,则视为完整;所进行评价的关键属性或信息为空,则视为不完整。
数据转换的规则配置:设定源数据的数据格式转换规则,对探测的原始数据和目标融合模型之间建立映射转换关系。通过规则的指引,将原始源数据转换为统一的目标数据格式。
数据的关联关系配置:由于各主题域分散在不同业务***中,为加强数据之间的关联特性,识别出同一对象在不同主题域中的活动情况,可通过主题域之间的关联关系,建立数据与数据之间的关系,从而得到对象的完整反映。以设备为例,设备在通信资源数据模型中存在设备基本信息、设备承载业务信息、设备配置信息;该设备通过资产编号,在台帐数据模型中存在物理属性信息,资产履历信息;该设备通过资产编号,在工程数据模型中能找到设备所在工程的基本信息,工程流程信息;设备通过资产编号,可找到设备在事件数据模型中的缺陷、告警、故障等工单数据。通过以上关联关系,可将分散数据联系为一个有机整体,强化了对象的整体性。
b)数据预处理过程
根据预处理规则进行数据预处理时,对不符合要求的数据,将判断的结果通过预处理任务管控,形成数据检查任务。不符合要求的数据主要包含不完整的数据、错误的数据和重复的数据三大类。其中:不完整数据指由于一些应该有的信息缺失或数据的关联关系、承载关系不完整;错误的数据指由于解析错误或人工误操作导致,在错误数据输入时没有进行判断直接写入数据库;重复的数据指由于数据模型存在不足,主键或者约束有缺陷,或由于消息预处理过程存在错误导致的重复数据。
经过数据符合性检查后,需要对数据进行转换预处理,数据转换包括格式转换、数据翻译、数据衍生、数据聚合等。多数情况下,数据预处理过程主要是完成格式转换、数据翻译、数据衍生,而复杂的数据聚合以及其他复杂计算主要在数据汇总时实现。数据转换功能应支持数据的定义、数据结构和错误数据的转换处理。数据转换主要包括以下几个部分:
格式转换:由于数据源***与通信大数据***之间在数据模型、数据格式等方面可能存在较大差异或者数据源***本身提供的数据缺乏规整性,为了使得预处理后续环节能够以简单一致的方式进行处理,需要解析源数据与目标数据之间的不同数据存储格式以及确定相应的存储格式之间的转换规则。格式转换包括数据类型转换,数据精度转换,空值判断处理,字符串处理,日期格式处理等。
数据翻译:是数据预处理中最复杂的处理过程,在数据翻译的过程中必须深刻的了解和认识源数据信息,识别异常数据情况,建立从源数据到目标数据的映射规则。在映射的过程中,有些信息是直接可以从源数据得到的,如0代表性别女,1代表性别男等。而有些并不能从源数据直接得到,需要对源数据进行一定的计算、合并、拆分等翻译操作。针对每个数据源以及数据目标,要为通信大数据的每个数据实体确定从数据源到目的表的转换(翻译)规则,这部分内容包括具体到源***的一张或多张表的哪些字段对应到目标数据的一张或者多张表的哪些字段,以及相对应的转换规则如何等。
数据衍生:通信大数据***中的数据围绕企业的生产运营分析应用,因此存在大量的上下文信息,源***的数据需要提炼出来才能为通信大数据***所使用。通信大数据的上下文信息提炼是在数据的标准化处理(清洗)之后,进行数据的衍生信息的处理。通信大数据分析应用中所要求的数据在生产***中并不直接存在,而是需要通过对原始信息分析并结合业务规则衍生获得的信息,因此需要对原始信息进行衍生信息处理。
最后,将预处理后的数据入库,以便于后续的数据挖掘和分析工作。
实施例四、电力数据网智能探测及全息评估平台
(1)平台***结构
所述平台部5为电力数据网智能探测及全息评估平台51,包括:物理层、采集层、预处理层、管理层、分析层和展示层,其中,物理层为基础设施层,该层部署电力数据网的各类设备与链路,属于被监测被管理的对象;采集层为数据采集层,该层部署各类主被动测量探针,完成对多维度细粒度网络和业务质量数据的原始采集,包括对电力数据网骨干网络、接入网络、以及数据中心的网络及业务性能数据及流量数据的采集;预处理层根据分析需求完成对所采集数据的预处理,并将数据入库;管理层为探测控制功能层,该层完成探针管理、监测任务调度、测量策略管理等功能;分析层为分析和评估功能层,该层完成各层流量和协议分析、性能分析、性能测试,以及业务流量特征分析等功能,并完成风险预警、故障检测与定位功能;展示层为界面呈现层,该层完成整个平台***的配置管理和界面展示功能;存储层完成对各类网络和业务质量采集数据及相关分析数据的入库存储;接口层完成与数据网综合网络管理***之间的接***互;在各层之间,将采用统一的安全通信机制,实现对各层功能间互访时的认证、压缩和安全传输功能。
(2)平台***基本功能及扩展功能
电力数据网智能探测与全息评估平台***,主要基本功能包括:
探针管理:完成对主被动探针的统一调度和管理功能;
监测任务管理:完成对主被动探测任务的管理,包括探测任务的创建、删除、查询、修改、停止等功能;
策略管理:完成对主被动测量策略的管理,包括策略的制定、修改、查询等功能;
流量分析:完成对各类业务流量的多层次多维度分析功能;
业务质量分析:完成对各类业务质量的多角度差异化分析功能;
风险预警:根据探测数据完成对业务质量的风险预警功能;
故障检测与定位:根据探测数据完成对数据网网络故障的检测和定位功能。此外,本***中还将实现数据网网络管理的部分功能,包括:
资源管理功能:完成对电力数据网资源数据的获取和基本管理功能。
VPN管理功能:完成VPN业务信息查看功能和VPN业务发现功能,根据定期自动获取的各PE设备上RT信息进行匹配,从而自动发现三层MPLS VPN信息,得到网络中MPLS VPN的拓扑情况。
路由协议分析功能:实现对电力数据网骨干PE路由器设备动态路由协议的全面监测,实时、自动发现全网路由协议的工作状况,并对重要的路由事件进行追踪,模拟。
与通信管理***(TMS)对接及数据共享功能:本***将实现与通信管理***(TMS)的对接,通过标准接口向通信管理***TMS提供实时的流量数据,并根据TMS的配置,完成流量采集周期的设定和流量数据的同步等功能。
(3)智能探测与评估平台的并行优化技术
在平台研发过程中,为了提高***平台面向电力数据网的处理能力和实时响应能力,本课题还将研究平台***的并行优化技术。基于多处理器平台的线程级并行技术是提高计算机***性能的首选方案。多处理器架构根据处理器间互连方式的不同可分为:松耦合多处理器架构和紧耦合多处理器架构。前者常见于各大型计算的场合如各类集群***。本课题较为关注后者,尤其是以CMP(多核处理器)为代表的紧耦合多处理器架构,这是一类相对轻量级却又不失高效性的解决方案。CMP可以看作一个集成了多个核的SoC芯片。每个核有自己的Ll级数据缓存(cache)与指令缓存(cache);各个核共享L2级缓存或有自己独立的L2级缓存,通过硬件实现同步。
随着多核处理器以及多处理器平台技术逐渐成熟,通过软件多线程提升性能成为目前的研究热点。采用多线程技术可以使硬件资源得到更加充分的利用,从而达到提高计算性能的目的。线程(thread)是一些相关指令的离散序列。线程与其他指令序列的执行相互独立。每个程序至少包含一个线程,即主线程。主线程负责程序的初始化工作,并且执行初始指令。随后,主线程会为执行各种不同任务而分别创建其他的线程。从硬件层次上讲,线程是一条与其他硬件线程执行路径相互独立的执行路径。操作***的工作是将软件线程映射到硬件执行资源上。因为多线程技术支持多个操作同时执行,所以能够显著提高程序性能。但是,多线程同时也使得应用程序行为变得更加复杂,根本原因在于:程序会同时发生多个动作。对这些同时发生的动作以及它们之间的交互进行管理需要考虑到以下四个方面:同步、通信、负载均衡和可扩展性。
实施例五、基于电力数据网全息评估***的故障定位
如图3所示为基于电力数据网全息评估***的故障定位方法的流程示意图,基于智能探测的电力数据网故障检测与定位机制主要基于主动探针探测技术,该发明分为三个部分:1.探针部署位置的选择;2.探测路径的选择;3.基于主动探测的故障诊断。其中探测路径的选择又分为两部分:故障检测探测的选择和故障定位探测的选择。
(1)故障探测的主动探针选择
如图4所示,为本发明基于电力数据网全息评估***故障定位方法中故障检测的流程示意图;故障检测的目的是检测网络中是否存在故障,所选的测试路径需要满足覆盖网络中的所有节点。由探测站点向其他所有节点产生的探测路径便形成了所有可用探测集,在故障检测探测阶段,需要在可用探测集合中选择出一部分探测路径作为故障检测集合,故障检测集合的选取需满足以下条件:所选的测试路径覆盖网络中的所有节点;测试路径尽量少。
故障检测的探测选择问题是一个二分覆盖问题,已被证明是NP完全问题,常用的基本方法是基于贪心算法的近似算法,目前常见的贪心策略求解思路有两种:一是贪心增加算法:设初始化探测集合为空,不断选取能够覆盖最多的尚未被覆盖节点的探测,直到所有节点都被覆盖;二是贪心减少算法:将所有探测的全集设为初始化探测集合,不断尝试删除某个探测,只需判定该探测的删除不会导致某些节点不被覆盖,直到探测集合中没有这样的冗余探测为止。
虽然这两种算法选择出的探测集合都能覆盖到网络中的所有节点,但是选择出来的探测集合并不一定是最小的探测集合。相对于贪心增加算法,贪心减少算法存在着较多的不确定性,本课题拟针对贪心增加算法做改进,以提高算法的性能。
改进算法在开始选择时,不是首先选择覆盖最多节点的探测,而是先挑选出被最少探测覆盖的节点,再从能覆盖到该节点的探测中选出覆盖最多节点的探测。在探测依赖矩阵中,每一列向量对应一个节点被探测经过的状态,计算每个节点对应的列向量的权值,可以得出经过每个节点的探测数,在找出被最少探测经过的节点后,可以通过计算经过它的所有探测的行向量的权值,并进行降序排列,来找出覆盖最多尚未被覆盖节点的探测,如此循环,直到所有的节点均被覆盖。
(2)故障定位的主动探针选择
图5为本发明基于电力数据网全息评估***故障定位方法中对探测结果进行分析的流程示意图;在故障检测阶段的工作完成后,需要对探测结果进行分析,如若检测到故障的存在,则会进行故障定位阶段的探测选择,目的是定位故障的根源,为达到该目的,需要发送合适的探测来获取更多的信息。
首先对故障检测的探测结果进行分析。若探测成功,则认为成功探测经过的所有节点均为正常节点,并将这些节点加入正常节点集合Nnn(Normal Node),若有节点之前被判定为可疑节点,将其从可疑节点集合中删除;若探测失败,则失败探测路径上所有之前未被判定为正常节点的节点均为可疑节点,并加入可疑节点集合N步骤n(步骤u步骤piciou步骤Node);若一条失败探测所经过的所有节点中,仅有一个节点为可疑节点,其他节点都被某些成功探测经过,那么该可疑节点即为故障节点,并被加入故障节点集合Nfn(Fault Node)。
然后,通过对故障检测阶段探测返回结果的分析,我们可以得出正常节点集合,可疑节点集合以及故障节点集合。图6所示,为本发明基于电力数据网全息评估***故障定位方法中故障定位的流程示意图;可疑节点集合作为状态不确定的节点集合,将成为故障定位阶段的探测目标。目前故障定位阶段的探测选择方法有两大类:预先选择探测方式和交互式选择探测方式。前者一次性选择出所有故障定位探测集合,发送到网络中并接收探测结果,预先选择的方式对网络施加固定的负荷,虽然这种方式计算过程比较简单,但是对所有的探测执行如此方式是极其低效的;交互式的探测方式是每次根据上一次探测结果自适应地选择下一个探测,这样可以有效减少所需执行探测的数量,从而得到更好的时效性和更低的额外网络负载,但计算过程往往异常复杂。本课题拟选择交互式探测思路来设计故障定位探针选择算法。
故障定位阶段的探测选择要求选择一个新的探测,该探测将要使得可疑节点集合中的节点数量尽量减少。该阶段探测选择的建模也是探测依赖矩阵,和故障探测阶段的探测选择不同的是,本阶段的探测选择是从备选探测集合(未被作为探测的探测集合,在故障检测阶段表示除了故障检测集合以外的可用探测集合,在故障定位阶段表示除了故障检测集合和之前故障定位探测以外的可用探测集合)里面选取满足使得可疑节点数尽量减少的探测,所以本阶段的探测必须覆盖可疑节点。
对于减少可疑节点有以下两种情况:一种情况是若只覆盖一个可疑节点的探测测试结果返回失败,则表明该可疑节点为故障节点;二是若覆盖可疑节点的探测测试结果返回成功,则表明这些可疑节点为正常节点。需要注意的是面对第二种情况时,还要考虑由于把这些可疑节点从可疑节点集合删除,加入正常节点集合之后,之前测试集合中结果返回失败且覆盖多个可疑节点的探测可能现在只含有一个可疑节点了,需要对所有的然后失败的探测集合重新进行情况一的判定。
在一个优选实施例中,所述故障定位方法基于电力数据网业务质量评估指标体系及全息评估模型进行,采用主被动探针对网络与业务质量进行联合探测,并采用多维联合分析技术,对网络业务质量进行实时跟踪分析,从而实现电力数据网业务质量的高精度风险预警。
优选地,所述主动探测的方法包括触发对相关网络设备的信息查询和连通性检测。
优选地,所述主动探测的方法包括触发对相关网络设备的信息查询和连通性检测,并结合网络设备信息自动触发主动网络性能探测。
优选地,所述电力数据网故障定位以后,基于主动探测进行故障诊断,并进行风险预警。
优选地,所述电力数据网故障定位基于电力数据网智能探测及全息评估平台进行。
在一个优选的实施例中,电力数据网风险预警技术应能够学习网络异常判断与处理的知识如异常流量模型的参数,能够将从探针获取的网络实时数据与网络异常知识进行匹配,判断是否产生异常流量。如果发现异常流量,则按照事先设定的处理规则进行相关处理,并提出告警。同时,与数据库进行交互,更新异常流量模型的参数,产生新规则。
风险预测模型能够根据历史流量信息自动调整异常流量模型,以实现异常流量的自适应检测。但是,对于异常流量判定阈值的设定,还需要对被监测网络的流量特征进行长时间的学习或研究,才能确定最佳阈值。
异常流量有许多可能的来源,包括新的应用***与业务上线、计算机病毒、黑客入侵、网络蠕虫、拒绝网络服务、使用非法软件、网络设备故障、非法占用网络带宽等。网络流量异常的检测方法包括四类:统计异常检测法、基于机器学习的异常检测方法、基于数据挖掘的异常检测法和基于神经网络的异常检测法等。本课题将以时间序列模型为基础,研究探测数据的时间相关性,然后结合方差计算设定置信区间,运用马尔科夫过程模型,通过分析状态转移矩阵来对网络状态的变化进行预测,从而实现对电力数据网网络和业务质量的风险预警。
以上所述,仅为本发明的较佳实施例而已,并非用于限定本发明的保护范围,凡在本发明的精神和原则之内所作的任何修改、等同替换和改进等,均应包含在本发明的保护范围之内。
Claims (10)
1.一种基于电力数据网全息评估***,其特征在于,所述***包括数据探测部、数据预处理部、数据分析部、数据应用部以及平台部,其中,所述数据探测部用于通过部署各类主动和/或被动测量探针,完成对多维度细粒度网络和业务质量数据的原始采集,包括对电力数据网骨干网络、接入网络、以及数据中心的网络及业务性能数据及流量数据的采集;
所述数据预处理部,根据分析需求完成对所采集数据的预处理,并将数据入库;所述数据预处理部,用于实现数据预处理配置、数据预处理过程和数据预处理管控,所述数据预处理配置为数据预处理过程提供了操作依据;所述数据预处理过程包括通过格式转换单元、数据翻译单元和数据衍生单元分别完成格式转换、数据翻译和数据衍生功能,所述数据预处理管控为预处理过程提供调度、监控、异常控制和统计功能;
所述数据分析部,包括多维数据融合分析单元,用于对经过预处理的数据进行多维数据融合分析;所述多维数据融合分析,通过对智能探针捕获的数据包经过预处理后进行分析,并借助于数据包到达序列和状态等信息,利用协议识别的结果,分别通过各单元模块完成网络层性能分析、传输层性能分析、应用层性能分析和通用业务性能分析;
所述数据应用部,用于利用所述数据分析部输出的数据完成各种应用,所述数据应用部,包括完成基于风险容忍度模型的电力数据网风险预警功能的风险预警单元,完成基于风险容忍度模型的电力数据网故障定位机制的故障定位单元和完成全网业务质量动态可视化的可视化单元;
所述平台部,用于搭建一个***平台,承载上述所有功能,所述平台部采用模块化和分层方式实现。
2.根据权利要求1所述的***,其特征在于,所述格式转换单元,用于解析源数据与目标数据之间的不同数据存储格式以及确定相应的存储格式之间的转换规则,所述数据翻译单元,通过从源数据到目标数据的映射规则,实现数据翻译;所述数据衍生单元,用于对原始信息分析并结合业务规则进行衍生获得信息。
3.根据权利要求1所述的***,其特征在于,所述数据分析部,在完成应用层业务性能分析的过程中,还将实现应用业务溯源,以实时动态追溯某一个具体应用层业务的完成过程,记录每一个步骤上的响应时间,进而针对数据、语音、视频、多媒体以及其他电力数据网业务的具体特性,完成对多维度细粒度数据的性能分析工作。
4.根据权利要求1所述的***,其特征在于,所述风险预警单元,通过学习网络异常判断与处理的知识,如异常流量模型的参数,实现将从探针获取的网络实时数据与网络异常知识进行匹配,判断是否产生异常流量;如果发现异常流量,则按照事先设定的处理规则进行相关处理,并提出告警;同时,与数据库进行交互,更新异常流量模型的参数,产生新规则;其中,所述风险预警单元能够根据历史流量信息自动调整异常流量模型,以实现异常流量的自适应检测。
5.根据权利要求1所述的***,其特征在于,所述可视化单元,通过计算机图形技术和图像处理技术,将数据转换成图形或图像在屏幕上显示出来,并进行交互处理,从而实现通过图像来揭示数据中隐含的有效信息;其可视化分析结果可通过各种布局方式来体现,包括正交布局和辐射布局。
6.根据权利要求1所述的***,其特征在于,所述平台部为电力数据网智能探测及全息评估平台,包括:物理层、采集层、预处理层、管理层、分析层和展示层,其中,物理层为基础设施层,该层部署电力数据网的各类设备与链路,属于被监测被管理的对象;采集层为数据采集层,该层部署各类主被动测量探针,完成对多维度细粒度网络和业务质量数据的原始采集,包括对电力数据网骨干网络、接入网络、以及数据中心的网络及业务性能数据及流量数据的采集;预处理层根据分析需求完成对所采集数据的预处理,并将数据入库;管理层为探测控制功能层,该层完成探针管理、监测任务调度、测量策略管理等功能;分析层为分析和评估功能层,该层完成各层流量和协议分析、性能分析、性能测试,以及业务流量特征分析等功能,并完成风险预警、故障检测与定位功能;展示层为界面呈现层,该层完成整个平台***的配置管理和界面展示功能;存储层完成对各类网络和业务质量采集数据及相关分析数据的入库存储;接口层完成与数据网综合网络管理***之间的接***互;在各层之间,将采用统一的安全通信机制,实现对各层功能间互访时的认证、压缩和安全传输功能。
7.一种应用于权利要求1-6中任意一项基于电力数据网全息评估***的故障定位方法,其特征在于,所述方法包括以下步骤:
步骤1:选择探测路径形成探测集;
步骤2:发送探测进行故障检测;
步骤3:对故障检测的探测结果进行分析;
步骤4:基于主动探测进行故障定位;
其中,所述探测路径为由探测站点向其他节点所产生的路径,所选的探测路径需要满足覆盖网络中的所有节点,且所述探测路径为最少探测路径;
所述发送探测进行故障检测包括以下步骤:
步骤21:首次初始化时探测集合为空,否则执行步骤22;
步骤22:基于探测依赖矩阵建模,计算每个节点对应的列向量的权值;
步骤23:得出经过每个节点的探测数,找出被最少探测经过的节点;
步骤24:计算上述被最少探测经过的节点的所有探测的行向量权值,并进行降序排列,找出覆盖最多尚未被覆盖节点的探测;
所述对故障检测的探测结果进行分析包括以下步骤:
步骤31:收集探测结果,进行分析判断;
步骤32:若探测成功,则认为成功探测经过的所有节点均为正常节点,并将这些节点加入正常节点集合;
步骤33:若有节点之前被判定为可疑节点,将其从可疑节点集合中删除;
步骤34:若探测失败,则失败探测路径上所有之前未被判定为正常节点的节点均为可疑节点,并加入可疑节点集合;
步骤35:若一条失败探测所经过的所有节点中,仅有一个节点为可疑节点,其他节点都被某些成功探测经过,那么该可疑节点即为故障节点,并被加入故障节点集合。
8.根据权利要求7所述的方法,其特征在于,所述基于主动探测进行故障定位包括以下步骤:
步骤41:从备选探测集合里面选取满足使得可疑节点数尽量减少的探测;
步骤42:基于探测依赖矩阵建模,对故障检测再次进行分析;
步骤43:若只覆盖一个可疑节点的探测测试结果返回失败,则表明该可疑节点为故障节点;
步骤44:若覆盖可疑节点的探测测试结果返回成功,则表明这些可疑节点为正常节点;
其中,所述备选探测集合为未被作为探测的探测集合,在故障检测阶段表示除了故障检测集合以外的可用探测集合,在故障定位阶段表示除了故障检测集合和之前故障定位探测以外的可用探测集合。
9.根据权利要求8所述的方法,其特征在于,所述步骤44中,还需要把可疑节点从可疑节点集合中删除,并加入正常节点集合;之后对所有的前面探测失败的探测集合重新进行判定。
10.根据权利要求7-9中任意一项所述的方法,其特征在于,所述探测的方法包括触发对相关网络设备的信息查询和连通性检测,并结合网络设备信息自动触发主动网络性能探测。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201711397572.8A CN108306756B (zh) | 2017-12-21 | 2017-12-21 | 一种基于电力数据网全息评估***及其故障定位方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201711397572.8A CN108306756B (zh) | 2017-12-21 | 2017-12-21 | 一种基于电力数据网全息评估***及其故障定位方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN108306756A true CN108306756A (zh) | 2018-07-20 |
CN108306756B CN108306756B (zh) | 2021-03-30 |
Family
ID=62870417
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201711397572.8A Expired - Fee Related CN108306756B (zh) | 2017-12-21 | 2017-12-21 | 一种基于电力数据网全息评估***及其故障定位方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN108306756B (zh) |
Cited By (16)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN109067592A (zh) * | 2018-08-31 | 2018-12-21 | 国网辽宁省电力有限公司电力科学研究院 | 一种面向智能配用电的智能管控装置及管控方法 |
CN109639485A (zh) * | 2018-12-13 | 2019-04-16 | 国家电网有限公司 | 用电采集通信链路的监测方法和装置 |
CN109635933A (zh) * | 2018-12-18 | 2019-04-16 | 中国民航大学 | 基于bp神经网络广域信息管理***可生存性评估模型方法 |
CN110311943A (zh) * | 2019-04-16 | 2019-10-08 | 南京华盾电力信息安全测评有限公司 | 一种电力企业大数据平台中数据的查询与展示方法 |
CN110472683A (zh) * | 2019-08-13 | 2019-11-19 | 智洋创新科技股份有限公司 | 一种输电线路通道可视化告警区域划分初始点的确定方法 |
CN111198774A (zh) * | 2018-10-31 | 2020-05-26 | 百度在线网络技术(北京)有限公司 | 无人车仿真异常追踪方法、装置、设备及计算机可读介质 |
CN111211926A (zh) * | 2019-12-31 | 2020-05-29 | 杭州迪普科技股份有限公司 | 一种通信故障的监测方法、装置、存储介质及设备 |
CN112261042A (zh) * | 2020-10-21 | 2021-01-22 | 中国科学院信息工程研究所 | 一种基于攻击危害评估的防渗透*** |
CN112261041A (zh) * | 2020-10-21 | 2021-01-22 | 中国科学院信息工程研究所 | 一种电力终端多级分布式监测与防渗透*** |
CN112351024A (zh) * | 2020-11-03 | 2021-02-09 | 广东电网有限责任公司 | 一种公网通信安全监测***及方法 |
CN113259167A (zh) * | 2021-05-28 | 2021-08-13 | 贵州电网有限责任公司 | 一种基于事件触发机制的配电终端数据传输方法 |
CN112994972B (zh) * | 2021-02-02 | 2022-05-20 | 成都卓源网络科技有限公司 | 一种分布式探针监测平台 |
CN115550211A (zh) * | 2021-06-29 | 2022-12-30 | 青岛海尔科技有限公司 | 网络连接质量的探测方法、装置、存储介质和电子装置 |
CN115914009A (zh) * | 2021-08-10 | 2023-04-04 | ***通信集团江苏有限公司 | ToB专网业务质量测试方法及*** |
CN116089392A (zh) * | 2022-09-17 | 2023-05-09 | 新疆维吾尔自治区信息中心 | 一种信息***评估建库***及方法 |
CN116962143A (zh) * | 2023-09-18 | 2023-10-27 | 腾讯科技(深圳)有限公司 | 网络故障检测方法、装置、计算机设备和存储介质 |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102361351A (zh) * | 2011-10-14 | 2012-02-22 | 广东电网公司电力科学研究院 | 电力***的远程监测诊断*** |
CN103124105A (zh) * | 2012-03-27 | 2013-05-29 | 湖南大学 | 一种面向智能变电站设备状态监测的无线智能传感器网络*** |
CN103633739A (zh) * | 2013-11-28 | 2014-03-12 | 中国科学院广州能源研究所 | 一种微电网能量管理***和方法 |
CN105486976A (zh) * | 2015-11-19 | 2016-04-13 | 云南电力调度控制中心 | 一种故障定位的探测选择方法 |
CN105932774A (zh) * | 2016-05-11 | 2016-09-07 | 国网冀北电力有限公司张家口供电公司 | 基于ica算法的智能变电站设备状态预警方法 |
CN106324428A (zh) * | 2016-07-28 | 2017-01-11 | 东南大学 | 基于大数据的电力电缆监测***及监测方法 |
-
2017
- 2017-12-21 CN CN201711397572.8A patent/CN108306756B/zh not_active Expired - Fee Related
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102361351A (zh) * | 2011-10-14 | 2012-02-22 | 广东电网公司电力科学研究院 | 电力***的远程监测诊断*** |
CN103124105A (zh) * | 2012-03-27 | 2013-05-29 | 湖南大学 | 一种面向智能变电站设备状态监测的无线智能传感器网络*** |
CN103633739A (zh) * | 2013-11-28 | 2014-03-12 | 中国科学院广州能源研究所 | 一种微电网能量管理***和方法 |
CN105486976A (zh) * | 2015-11-19 | 2016-04-13 | 云南电力调度控制中心 | 一种故障定位的探测选择方法 |
CN105932774A (zh) * | 2016-05-11 | 2016-09-07 | 国网冀北电力有限公司张家口供电公司 | 基于ica算法的智能变电站设备状态预警方法 |
CN106324428A (zh) * | 2016-07-28 | 2017-01-11 | 东南大学 | 基于大数据的电力电缆监测***及监测方法 |
Cited By (22)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN109067592A (zh) * | 2018-08-31 | 2018-12-21 | 国网辽宁省电力有限公司电力科学研究院 | 一种面向智能配用电的智能管控装置及管控方法 |
CN109067592B (zh) * | 2018-08-31 | 2022-01-18 | 国网辽宁省电力有限公司电力科学研究院 | 一种面向智能配用电的智能管控装置及管控方法 |
CN111198774A (zh) * | 2018-10-31 | 2020-05-26 | 百度在线网络技术(北京)有限公司 | 无人车仿真异常追踪方法、装置、设备及计算机可读介质 |
CN111198774B (zh) * | 2018-10-31 | 2023-09-29 | 百度在线网络技术(北京)有限公司 | 无人车仿真异常追踪方法、装置、设备及计算机可读介质 |
CN109639485A (zh) * | 2018-12-13 | 2019-04-16 | 国家电网有限公司 | 用电采集通信链路的监测方法和装置 |
CN109635933A (zh) * | 2018-12-18 | 2019-04-16 | 中国民航大学 | 基于bp神经网络广域信息管理***可生存性评估模型方法 |
CN110311943A (zh) * | 2019-04-16 | 2019-10-08 | 南京华盾电力信息安全测评有限公司 | 一种电力企业大数据平台中数据的查询与展示方法 |
CN110472683A (zh) * | 2019-08-13 | 2019-11-19 | 智洋创新科技股份有限公司 | 一种输电线路通道可视化告警区域划分初始点的确定方法 |
CN111211926A (zh) * | 2019-12-31 | 2020-05-29 | 杭州迪普科技股份有限公司 | 一种通信故障的监测方法、装置、存储介质及设备 |
CN111211926B (zh) * | 2019-12-31 | 2023-01-24 | 杭州迪普科技股份有限公司 | 一种通信故障的监测方法、装置、存储介质及设备 |
CN112261041A (zh) * | 2020-10-21 | 2021-01-22 | 中国科学院信息工程研究所 | 一种电力终端多级分布式监测与防渗透*** |
CN112261042A (zh) * | 2020-10-21 | 2021-01-22 | 中国科学院信息工程研究所 | 一种基于攻击危害评估的防渗透*** |
CN112351024A (zh) * | 2020-11-03 | 2021-02-09 | 广东电网有限责任公司 | 一种公网通信安全监测***及方法 |
CN112994972B (zh) * | 2021-02-02 | 2022-05-20 | 成都卓源网络科技有限公司 | 一种分布式探针监测平台 |
CN113259167A (zh) * | 2021-05-28 | 2021-08-13 | 贵州电网有限责任公司 | 一种基于事件触发机制的配电终端数据传输方法 |
CN113259167B (zh) * | 2021-05-28 | 2023-07-18 | 贵州电网有限责任公司 | 一种基于事件触发机制的配电终端数据传输方法 |
CN115550211A (zh) * | 2021-06-29 | 2022-12-30 | 青岛海尔科技有限公司 | 网络连接质量的探测方法、装置、存储介质和电子装置 |
CN115914009A (zh) * | 2021-08-10 | 2023-04-04 | ***通信集团江苏有限公司 | ToB专网业务质量测试方法及*** |
CN116089392A (zh) * | 2022-09-17 | 2023-05-09 | 新疆维吾尔自治区信息中心 | 一种信息***评估建库***及方法 |
CN116089392B (zh) * | 2022-09-17 | 2024-03-08 | 新疆维吾尔自治区信息中心 | 一种信息***评估建库***及方法 |
CN116962143A (zh) * | 2023-09-18 | 2023-10-27 | 腾讯科技(深圳)有限公司 | 网络故障检测方法、装置、计算机设备和存储介质 |
CN116962143B (zh) * | 2023-09-18 | 2024-01-26 | 腾讯科技(深圳)有限公司 | 网络故障检测方法、装置、计算机设备和存储介质 |
Also Published As
Publication number | Publication date |
---|---|
CN108306756B (zh) | 2021-03-30 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN108306756A (zh) | 一种基于电力数据网全息评估***及其故障定位方法 | |
Yang et al. | A time efficient approach for detecting errors in big sensor data on cloud | |
CN103714185B (zh) | 主题事件更新方法库及城市多源时空信息并行更新方法 | |
CN102932419B (zh) | 一种用于面向工矿企业的安全生产云服务平台的数据存储*** | |
CN106681300B (zh) | 一种电力设备的数据聚类分析方法和*** | |
CN106104398A (zh) | 过程控制***中的分布式大数据 | |
Hu et al. | Automated structural defects diagnosis in underground transportation tunnels using semantic technologies | |
CN105574593B (zh) | 基于云计算和大数据的轨道状态静态检控***及方法 | |
CN105681298A (zh) | 公共信息平台中的数据安全异常监测方法及*** | |
CN103049365B (zh) | 信息与应用资源运行状态监控及评价方法 | |
CN113347170A (zh) | 一种基于大数据框架的智能分析平台设计方法 | |
CN112463892A (zh) | 一种基于风险态势的预警方法及*** | |
CN115471625A (zh) | 一种云机器人平台大数据智能决策方法和*** | |
CN109063885A (zh) | 一种变电站异常量测数据预测方法 | |
CN102903009B (zh) | 一种用于面向工矿企业的安全生产云服务平台的基于广义规则推理的异常诊断方法 | |
CN112241424A (zh) | 一种基于知识图谱的空管设备应用***及方法 | |
CN116576852A (zh) | 一种融合多源路网数据的森防救援智能导航*** | |
CN117112702A (zh) | 一种用于长大桥隧场景的业务快速处理*** | |
CN110415136B (zh) | 一种电力调度自动化***服务能力评估***与方法 | |
CN114780864B (zh) | 一种基于知识图谱的人-物-空间交互模型构建方法 | |
CN114355969B (zh) | 一种利用无人机巡检的智能供热管网检漏方法和*** | |
Zhao et al. | A framework for group converging pattern mining using spatiotemporal trajectories | |
Cheng et al. | A quality evaluation method for intelligent traffic management system based on business data flow | |
US20230112611A1 (en) | Emulated facility safety with embedded enhanced interface management | |
CN110188245A (zh) | 电力物联网多源数据融合装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant | ||
CF01 | Termination of patent right due to non-payment of annual fee |
Granted publication date: 20210330 Termination date: 20211221 |
|
CF01 | Termination of patent right due to non-payment of annual fee |