CN111125208A - 一种数据采集处理方法、装置及*** - Google Patents

一种数据采集处理方法、装置及*** Download PDF

Info

Publication number
CN111125208A
CN111125208A CN201811279047.0A CN201811279047A CN111125208A CN 111125208 A CN111125208 A CN 111125208A CN 201811279047 A CN201811279047 A CN 201811279047A CN 111125208 A CN111125208 A CN 111125208A
Authority
CN
China
Prior art keywords
data
data acquisition
format
configuration information
network equipment
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201811279047.0A
Other languages
English (en)
Inventor
杨文乐
罗勇
林薇
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Huawei Technologies Co Ltd
Original Assignee
Huawei Technologies Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Huawei Technologies Co Ltd filed Critical Huawei Technologies Co Ltd
Priority to CN201811279047.0A priority Critical patent/CN111125208A/zh
Priority to PCT/CN2019/090314 priority patent/WO2020087926A1/zh
Priority to EP19880508.7A priority patent/EP3851973A4/en
Publication of CN111125208A publication Critical patent/CN111125208A/zh
Priority to US17/245,970 priority patent/US20210250220A1/en
Pending legal-status Critical Current

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L41/00—Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
    • H04L41/08—Configuration management of networks or network elements
    • H04L41/0803—Configuration setting
    • H04L41/0806—Configuration setting for initial configuration or provisioning, e.g. plug-and-play
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/25—Integrating or interfacing systems involving database management systems
    • G06F16/258—Data format conversion from or to a database
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L41/00—Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
    • H04L41/02—Standardisation; Integration
    • H04L41/0213—Standardised network management protocols, e.g. simple network management protocol [SNMP]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L41/00—Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
    • H04L41/02—Standardisation; Integration
    • H04L41/0226—Mapping or translating multiple network management protocols
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L41/00—Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
    • H04L41/04—Network management architectures or arrangements
    • H04L41/052—Network management architectures or arrangements using standardised network management architectures, e.g. telecommunication management network [TMN] or unified network management architecture [UNMA]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L41/00—Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
    • H04L41/08—Configuration management of networks or network elements
    • H04L41/085—Retrieval of network configuration; Tracking network configuration history
    • H04L41/0853—Retrieval of network configuration; Tracking network configuration history by actively collecting configuration information or by backing up configuration information
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L43/00—Arrangements for monitoring or testing data switching networks
    • H04L43/06—Generation of reports
    • H04L43/065—Generation of reports related to network devices
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L2101/00—Indexing scheme associated with group H04L61/00
    • H04L2101/60—Types of network addresses
    • H04L2101/618—Details of network addresses
    • H04L2101/663—Transport layer addresses, e.g. aspects of transmission control protocol [TCP] or user datagram protocol [UDP] ports
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L43/00—Arrangements for monitoring or testing data switching networks
    • H04L43/06—Generation of reports
    • H04L43/067—Generation of reports using time frame reporting

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Databases & Information Systems (AREA)
  • Theoretical Computer Science (AREA)
  • Data Mining & Analysis (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Data Exchanges In Wide-Area Networks (AREA)

Abstract

本申请公开了一种数据采集处理方法、装置及***。该***包括数据处理装置，数据处理装置，用于接收所述网络设备发送的第一机制格式的数据；对所述数据进行预处理；将经过预处理后的数据转换为第二机制格式的数据，并将所述第二机制格式的数据发送给数据采集分析装置；数据采集分析装置，用于在接收到所述数据处理装置发送的数据后，根据所述数据进行分析。在该***中，数据处理装置可以提供统一的北向接口，输出统一格式的数据，降低对管控设备、数据采集分析装置的配置需求，提高上报数据的价值密度。

Description

一种数据采集处理方法、装置及***
技术领域
本申请涉及通信技术领域，尤其涉及一种数据采集处理方法、装置及***。
背景技术
2018年，宽带论坛(broadband forum，BBF)正式发布了云化中心局(cloudcentral office，CloudCO)架构标准。该标准将为运营商重构宽带网络架构提供关键的架构标准参考，是迈向云化网络的关键一步。BBF制定的CloudCO标准以云化架构重新定义了接入和城域网络，意在构建一个具有开放接口的云宽带平台，使运营商可以有效提供新型业务，缩短新业务上线时间。标准对传统网元功能进行了解耦，并将解耦后的网络功能进行云化。同时定义了北向应用程序编程接口(application programming interface，API)，使运营商能够有效对各种业务进行自动化的生命周期管理，具备业务自动化发放、网络自动化部署。CloudCO同时考虑到了现有***平滑演进升级，以实现对现有网络***的有效兼容，并设计了相应的接口。
目前，CloudCO架构还缺乏对网络数据采集、智能分析功能的定义。网络数据采集、智能分析可以实现网络数据统计、监控网络装置、网络模型训练、预测等。在非CloudCO架构中，可以由管理控制(以下简称管控)***向网络设备发送数据采集配置信息(用于请求获取网络数据)，网络设备根据该配置信息将数据发送给数据采集分析***，数据采集分析***对接收到的数据进行统计、分析、模型训练等等，然后输出分析结果，指导网络问题的解决，如故障定位或参数优化等，如图1所示。常见的数据监控机制包括基于简单网络管理协议(simple network management protocol，SNMP)、命令行界面(command lineinterface，CLI)、SYSLOG协议的数据采集机制等，随着未来网络自动化、智能化对大数据的需求，出现了基于谷歌开发的远程过程调用(*** remote procedure call，gRPC)/谷歌开发的协议缓冲区(*** protocol buffers，GPB)的Telemetry高效采集机制。考虑到实际网络部署中，会存在网络设备支持不同采集机制的场景，因此，数据采集配置及数据上报需要兼容多种机制。管控***需要针对每个网络设备，采用其所支持的数据采集机制下发数据采集配置信息；相应地，不同网络设备基于不同数据采集机制上报的数据，是否结构化、结构化的格式也可能不同，数据采集分析***需要支持对不同格式数据的解析处理。
若CloudCO架构中采用如图1所示的数据采集架构，则需要为数据采集分析***配置不同的数据采集机制，从而实现向不同的网络设备采集数据、接收来自不同网络设备发送的数据，配置需求较高、处理过程较为复杂，且海量网络数据直接上送采集分析***，对网络和采集分析***都带来很大压力。尤其是在大数据需求下，数据采集分析***的负荷尤为繁重。
发明内容
本申请提供一种数据采集处理方法、装置及***，用以降低对发送数据采集配置信息的设备、数据采集分析装置的配置需求。
第一方面，本申请提供了一种数据采集处理***，所述***应用于云化中心局CloudCO架构中，包括：
数据处理装置，用于接收所述网络设备发送的第一机制格式的数据；对所述数据进行预处理；将经过预处理后的数据转换为第二机制格式的数据，并将所述第二机制格式的数据发送给数据采集分析装置；
数据采集分析装置，用于在接收到所述数据处理装置发送的数据后，根据所述数据进行分析。
其中，预处理包括以下一种或多种：数据格式转换、数据计算补齐、数据压缩剪裁、数据脱敏、数据序列化、传输控制协议指标计算。
在本申请上述实施例中，数据处理装置可以提供统一的北向接口，输出统一格式的数据，即，第二机制格式的数据，从而简化了与数据采集分析装置的处理过程，降低对管控设备、数据采集分析装置的配置需求。且由于数据处理装置对接收到的数据进行了预处理，有助于提高数据的价值密度，进一步降低了网络和数据采集分析装置的负荷。
在一种可能的实现方式中，所述数据处理装置还用于：接收所述网络设备发送的第二机制格式的数据，对所述数据进行预处理，并将所述经过预处理的第二机制格式的数据发送给所述数据采集分析装置。
在一种可能的实现方式中，所述数据处理装置还用于：接收所述第二机制格式的数据采集配置信息；若确定所述网络设备不支持所述第二机制，将所述第二机制格式的数据采集配置信息转换为所述第一机制格式的数据采集配置信息，并发送给所述网络设备。
在一种可能的实现方式中，所述数据处理装置还用于：接收第二机制格式的数据采集配置信息；若确定所述网络设备支持所述第二机制，将所述第二机制格式的数据采集配置信息发送给所述网络设备。
在一种可能的实现方式中，所述数据采集分析装置，包括：采集器和分析器；所述采集器用于对接收到的第二机制格式的数据进行解码和处理；所述分析器用于对解码后的数据进行分析和决策。
在一种可能的实现方式中，所述采集器包括分布式采集器和/或集中式采集器。
在一种可能的实现方式中，所述数据处理装置，设置于所述网络设备上；或者，设置于CloudCO架构中的宽带接入抽象层上；或者，设置于远端区域DC上。
第二方面，本申请实施例还提供了一种数据采集处理方法，所述方法应用于云化中心局CloudCO架构，包括：
接收所述网络设备发送的第一机制格式的数据；对所述数据进行预处理；将经过预处理后的数据转换为第二机制格式的数据，并将所述第二机制格式的数据发送给数据采集分析装置；所述预处理包括以下一种或多种：数据格式转换、数据计算补齐、数据压缩剪裁、数据脱敏、数据序列化、传输控制协议指标计算。
在一种可能的实现方式中，上述方法还包括：接收所述网络设备发送的第二机制格式的数据，对所述数据进行预处理，并将所述经过预处理的第二机制格式的数据发送给所述数据采集分析装置。
在一种可能的实现方式中，上述方法还包括：接收第二机制格式的数据采集配置信息；若确定所述网络设备不支持所述第二机制，将所述第二机制格式的数据采集配置信息转换为所述第一机制格式的数据采集配置信息，并发送给所述网络设备。
在一种可能的实现方式中，上述方法还包括：接收第二机制格式的数据采集配置信息；若确定所述网络设备支持所述第二机制，将所述第二机制格式的数据采集配置信息发送给所述网络设备。
第三方面，本申请实施例还提供一种数据处理装置，包括：
接收单元，用于收所述网络设备发送的第一机制格式的数据；
预处理单元，用于对所述数据进行预处理；
转换单元，用于将经过预处理后的数据转换为第二机制格式的数据；
发送单元，用于将所述第二机制格式的数据发送给数据采集分析装置；
所述预处理包括以下一种或多种：数据格式转换、数据计算补齐、数据压缩剪裁、数据脱敏、数据序列化、传输控制协议指标计算。
在一种可能的实现方式中，所述接收单元还用于：接收所述网络设备发送的第二机制格式的数据；
所述预处理单元还用于：对所述第二机制格式的数据进行预处理；
所述发送单元还用于：将所述经过预处理的第二机制格式的数据发送给所述数据采集分析装置。
在一种可能的实现方式中，所述接收单元还用于：接收所述第二机制格式的数据采集配置信息；
所述转换单元还用于：若确定所述网络设备不支持所述第二机制，将所述第二机制格式的数据采集配置信息转换为所述第一机制格式的数据采集配置信息；
所述发送单元还用于：将所述第一机制格式的数据采集配置信息发送给所述网络设备。
在一种可能的实现方式中，所述接收单元还用于：接收第二机制格式的数据采集配置信息；
所述发送单元还用于：若确定所述网络设备支持所述第二机制，将所述第二机制格式的数据采集配置信息发送给所述网络设备。
第四方面，本申请实施例提供了一种数据处理装置，包括：处理器和存储器，所述存储器用于存储程序，所述处理器调用存储器存储的程序，如第二方面中任一项所述方法。
第五方面，本申请实施例提供了一种计算机可读存储介质，该计算机可读存储介质存储有计算机指令，当所述指令在计算机上运行时，使得计算机执行如第二方面中任一项所述方法。
第六方面，本申请实施例提供了一种包含指令的计算机程序产品，当其在计算机上运行时，使得计算机执行如第二方面中任一项所述方法。
附图说明
图1为现有技术中的数据采集架构示意图；
图2为本申请实施例提供的数据采集处理***示意图；
图3为本申请实施例提供的数据采集处理方法流程示意图；
图4为本申请实施例提供的数据采集处理***示意图；
图5a和图5b为本申请实施例提供的数据采集处理***示意图；
图6为本申请实施例提供的数据处理装置的结构示意图；
图7为本申请实施例提供的数据处理装置的结构示意图。
具体实施方式
为了使本申请的目的、技术方案和优点更加清楚，下面将结合附图对本申请作进一步地详细描述。
在现有的数据监控架构中，管控***需要针对每个网络设备确定该网络设备支持的数据采集机制，然后，基于该网络设备支持的数据采集机制向网络设备发送数据采集配置信息，网络设备根据该数据采集配置信息上报数据，而不同数据采集机制下上报的数据结构也有所不同。因此，传统的数据监控架构中，管控***和数据采集分析***的处理过程较为繁琐，尤其是在应对大规模网络架构及大数据需求时，面对数量众多的网络设备及大数据采集，管控***和数据采集分析***的负担很大。
常见的部分数据采集机制的特性可以图表1所示。
表1
Figure BDA0001847658130000041
如表1所示，SNMP get数据采集机制的工作模式为“拉模式”，即管控***发送一次数据采集配置信息，网络设备将采集到的数据上报一次，若期望多次获取或周期性获取网络设备采集的数据，则需要管控***多次发送或周期性发送数据采集配置信息。且机制下的数据精度为分钟级，即，管控***以分钟为最小时间单位向网络设备发送数据采集配置信息，网络设备上报的采集数据，以分钟作为最小时间单位，例如，网络设备对5分钟内采集数据的平均值发送进行上报，则上报的数据仅能够反映出该5分钟内的平均状况，对于瞬时突发状况则不能较好的反映。该机制下网络设备上报的数据是基于管理信息库(management information base，MIB)的结构化数据。
SNMP Trap数据采集机制的工作模式为“推模式”，即管控***发送一次数据采集配置信息，可以指示网络设备在触发事件发生时上报数据。该机制的数据精度为秒级，能够较好的反映瞬时情况。但该机制并不能采集全部数据，仅能够采集告警事件，即，网络设备在告警事件发生时上报告警事件的类型、发生告警事件的原因等。该机制下网络设备上报的数据是在MIB结构化数据的基础上由各厂商定义的结构化数据。
CLI数据采集机制的工作模式为“拉模式”，数据精度为分钟级，可以采集全部数据，但该机制下网络设备上报的数据是非结构化数据，而非结构化数据增加了数据接收方的处理难度。
SYSLOG数据采集机制的工作模式为“推模式”，数据精度为秒级，但仅可以采集事件，且该机制下网络设备上报的数据是非结构化数据。
Telemetry数据采集机制的工作模式为“推模式”，数据精度较高，为亚秒级，可以采集全部数据，该机制下网络设备上报的数据为基于YANG模型采用GPB编码的结构化数据。在不同的应用场景下，Telemetry数据采集机制还可以进行相应的扩展。例如，在该机制下，接入网的网络设备与数据处理装置之间可以通过gRPC通道进行数据传输；家庭网络的网络设备于数据处理装置之间可以通过其它连接方式连接以实现数据传输。
由此可见，在大规模网络架构的场景下，若网络设备支持的数据采集机制不同，则数据采集分析***根据网络设备上报的数据进行统计分析时，过程非常繁琐。且网络设备将原始的网络数据直接发送给数据采集分析***，上报的数据价值密度较低，数据采集分析***需要进行大量处理操作，负荷较重。
为了解决上述技术问题，本申请实施例提供了一种数据采集处理***及方法，可应用于CloudCO架构中。
具体地，可以在CloudCO架构中增加数据处理装置，用于接收提供统一格式的数据输出，分担数据采集分析***的负荷，本申请实施例提供的数据采集处理***可以如图2所示，包括数据处理装置201和数据采集分析装置202。应当理解，该数据采集处理***还可以与其他设备相结合使用，图2所示的管控设备、网络设备仅为举例。
其中，数据处理装置201可用于执行如图3所示的数据采集处理方法，该方法可以包括以下步骤：
步骤301、接收网络设备发送的第一机制格式的数据。
其中，第一机制为网络设备支持的数据采集机制，因此，网络设备上报的数据为第一机制格式下的数据。
步骤302、对数据进行预处理。
例如，数据处理装置在接收到网络设备上报的数据后，可以对其进行解析，对解析后的数据进行分析，若确定部分数据为重复数据、无效数据或者受强烈干扰导致偏差较大的数据，则对这部分数据进行剪裁；又或者，数据处理装置确定缺少某个数据，也可以根据其他数据对缺少的数据进行估算，或请求网络设备再次发送，从而实现将数据补齐。然后将经过剪裁和/或补齐后的数据进行统一的结构化，并上报给数据采集分析装置，以使上报给数据采集分析装置的数据为有效数据，使得数据采集分析装置可以简化或省略对数据进行剪裁的步骤。
又例如，数据处理装置还可以对接收到网络设备上报的数据进行格式转换，将不同数据格式转换成统一格式，如，将文本格式的数据转换为二进制格式的数据等等。
再例如，数据处理装置还可以对采集数据中的敏感信息通过脱敏规则进行数据的变形，实现敏感隐私数据的可靠保护，即数据脱敏。
此外，数据处理装置对数据的预处理过程还可以包括对数据进行结构化、序列化、传输控制协议(transmission control protocol，TCP)指标计算等等。应当理解，上述预处理仅为举例，数据处理装置还可以对接收到的数据进行其他预处理，从而提高数据价值密度，降低网络及数据采集分析装置的负荷。
步骤303、将经过预处理后的数据转换为第二机制格式的数据，并发送给数据采集分析装置。
由于不同网络设备支持的数据采集机制可能不同，上报的数据的格式也可能不同。为了降低数据采集分析装置202的负荷，数据处理装置201可以在接收到网络设备上报的数据后，将数据转换为统一格式的数据再发送给数据采集分析装置202。
数据处理装置201确定第一机制格式的数据并非预先设置的统一格式，则将经过预处理后的数据转换为第二机制格式的数据，其中，第二机制为预设的统一格式。
例如，若第二机制为Telemetry数据采集机制，网络设备支持的第一机制为SNMPget数据采集机制；则网络设备向数据处理装置发送的数据为基于MIB的结构化数据，数据处理装置将可以对该基于MIB的结构化数据进行解析，将解析后得到的网络设备的数据信息转换成YANG模型，并进行GPB编码，然后将该新的结构化数据通过gRPC或用户数据报协议(user datagram protocol，UDP)通道发送给数据采集分析装置。
数据处理装置将接收到的网络设备发送的数据转换为基于统一上报机制的数据，并发送给数据采集分析装置，使得数据采集分析装置接收到的来自不同网络设备的数据具有统一的编码格式，因此，数据采集分析装置可以使用一种算法解析来自不同网络设备的数据，简化了数据采集分析装置的处理过程，降低了处理难度。
当然，网络设备也可能支持预设的第二机制，则数据处理装置201在接收到网络设备发送的第二机制格式的数据后，对其进行预处理，并将经过预处理的第二机制格式的数据发送给数据采集分析装置202。
在一种可能的实现方式中，在上述步骤301之前，数据处理装置201还可以接收第二机制格式的数据采集配置信息，用于网络设备根据该数据采集配置信息上报数据。
数据处理装置201可以接收来自管控***或者数据采集分析装置或者其他设备的数据采集配置信息。
在如图2所示的数据采集架构中，由于请求采集数据的管控设备等将数据采集配置信息直接发送给网络设备，因此，需要预先获取网络设备的能力信息，即网络设备支持哪些数据采集机制，然后采用网络设备支持的数据采集机制，向网络设备发送数据采集配置信息。在大规模网络架构中，不同的网络设备可能支持不同的数据采集机制，因而，针对不同的网络设备，管控***可能需要基于不同的数据采集机制发送数据采集配置信息。
在本申请实施例中，若数据处理装置201确定网络设备不支持第二机制，则将第二机制格式的数据采集配置信息转换为该网络设备支持的第一机制格式的数据采集配置信息，并发送给网络设备。
数据处理装置201可以预先获取网络设备的能力信息，确定网络设备支持哪些数据采集机制，在接收到第二机制格式的数据采集配置信息后，即可确定网络设备是否支持该第二机制。若确定网络设备不支持该第二机制，则数据处理装置可以将接收到的数据采集配置信息转换为网络设备支持的第一机制格式的数据采集配置信息，并将转换后的配置信息发送给网络设备，以使网络设备能够识别该数据采集配置信息并根据该数据采集配置信息上报数据。例如，若第二机制为Telemetry数据采集机制，而网络设备1支持SNMP get数据采集机制，数据处理装置可以将Telemetry数据采集机制格式的数据采集配置信息转换为SNMP get数据采集机制格式的数据采集配置信息；网络设备2支持SYSLOG数据采集机制，则数据处理装置将Telemetry数据采集机制格式的数据采集配置信息转换为SYSLOG数据采集机制格式的数据采集配置信息。
若第二机制为“推模式”的数据采集机制，可以用于请求网络设备按周期性地上报数据；而网络设备支持的第一机制为“拉模式”数据采集机制，该机制下的数据采集配置信息无法指示网络设备周期性上报数据。因此，在一种可能的实现方式中，若接收到的数据采集配置信息用于指示网络设备周期性上报数据，而网络设备支持的第一机制不支持“推模式”的数据采集配置信息，则数据处理装置，可以周期性地将转换后的第一机制格式的数据采集配置信息发送给网络设备，以实现网络设备能够周期性上报数据。
例如，第二机制为Telemetry数据采集机制，其工作模式为“推模式”；接收到的数据采集配置信息，指示网络设备按照第一周期、周期性上报网络设备。而网络设备支持的第一机制为SNMP get数据采集机制，其工作模式为“拉模式”，不支持根据采集配置信息周期性上报数据。那么数据处理装置可以在将接收到的Telemetry数据采集机制格式的数据采集配置信息转换为SNMP get数据采集机制格式的数据采集配置信息后，可以按照第一周期、周期性地将转换后的数据采集配置信息发送给网络设备，从而实现网络设备按照第一周期、周期性地上报数据。
在上述实现方式中，发送数据采集配置信息的管控***或其他装置，可以不再考虑网络设备支持的数据采集机制，而采用统一的数据采集机制发送数据采集配置信息，降低了管控***的复杂度。例如，在表1所示的数据采集机制中，Telemetry数据采集机制的综合性能较好，支持“推模式”，避免向网络设备频繁发送数据采集配置信息，数据精度较高，支持全部数据采集，且上报数据为结构化数据，方便数据接收方处理，因此，可以将Telemetry数据采集机制设置为第二机制，即，管控***或其他装置可以基于Telemetry数据采集机制发送数据采集配置信息。应当理解，上述将Telemetry数据采集机制设置为第二机制仅为举例，也可以将其他数据采集机制设置为第二机制，且不限于表1所示的数据采集机制。
而网络设备在接收到第一机制格式的数据采集配置信息后，根据该数据采集配置信息，上报数据。例如，若数据处理装置201接收到的Telemetry数据采集机制格式的数据采集配置信息，请求周期性地获取网络设备的负载信息(如网络设备的中央处理器(CPU)的利用率、资源利用率等等)。而网络设备1支持SNMP get数据采集机制，数据处理装置可以将接收到的数据采集配置信息转换为SNMP get数据采集机制格式的数据采集配置信息，并周期性地发送给网络设备。网络设备接收到数据处理装置发送的SNMP get数据采集机制格式的数据采集配置信息后，向数据处理装置上报该网络设备的负载信息，该负载信息携带在基于MIB的结构化数据中。由于网络设备周期性地接收到数据采集配置信息，该网络设备周期性地上报负载信息，即数据处理装置能够周期性地获取到网络设备的负载信息。
当然，该网络设备也可能支持该第二机制，则数据处理装置201在接收到第二机制格式的数据采集配置信息后，不必再进行格式转换，将该数据采集配置信息发送给网络设备即可。
数据采集分析装置202，用于在接收到数据处理装置发送的数据后，根据数据进行分析。
在现有的数据采集架构中，管控***(或其他有数据采集需求的设备)以及数据采集分析装置，需要配置不同的数据采集机制算法，从而实现向不同的网络设备采集数据、接收来自不同网络设备发送的数据，配置需求较高、处理过程较为复杂。而在本申请上述实施例中，数据处理装置可以提供统一的北向接口，接收统一格式的数据采集配置信息，即，第二机制格式的数据采集配置信息；输出统一格式的数据，即，第二机制格式的数据，从而简化了与其通信的管控***(或其他有数据采集需求的设备)以及数据采集分析装置的处理过程，降低对管控设备、数据采集分析装置的配置需求。
在如图2所示的数据采集架构中，管控***向网络设备发送数据采集配置信息，然后网络设备将采集的数据发送给数据采集分析装置，数据采集分析装置根据接收到的数据进行分析处理，并基于结果对网络进行调整优化等等。
然而，在一些对实时性要求比较高的业务场景中可能需要根据当前状况进行快速响应、调整，即，该业务场景对优化参数、预测结果等的时延要求较高。为了使得CloudCO架构能够应对这种情况，在一些实施例中，数据处理装置201也可以对网络设备发送的数据进行相应分析，并将优化策略发送给网络设备和/或数据采集分析装置，从而满足网络业务对时延的要求。
例如，网络设备2处理的业务对实时性要求较高，为了保证业务需求，则数据处理装置可以对网络设备上报的数据进行分析。数据处理装置根据数据分析发现，在T1时刻该网络设备的业务量突增，为了保证业务的质量不受影响，需要对该网络设备的参数进行优化。该数据处理装置可以向网络设备发送优化参数的请求，或者，数据处理装置可以根据对数据的分析确定该网络设备的优化参数，并将确定出的优化参数发送给网络设备，从而实现快速响应，满足网络设备的实时性需求。
当然，数据处理装置201还可以将分析结果发送给数据采集分析装置，以使数据采集分析装置能够获取到网络设备当前的状况，或者根据该网络设备当前的数据分析结果进行全局的数据分析。
上述数据处理装置可以是分布式地，设置在接入网络设备上，例如，内置在接入网络设备OLT上，如图4所示，数据采集处理装置和管控***之间可交互配置告警、采集策略、调优策略等，设置有数据处理装置的网络设备与数据采集处理装置之间可以由gRPC通道传输数据；或者，该数据处理装置也可以被设置于CloudCO架构中的宽带接入抽象(broadbandaccess abstraction，BAA)层中，或者，还可以被设置于区域数据中心(data center，DC)中。
在另一种可能的实现方式中，在采用统一数据采集机制的场景下，例如网络设备均支持Telemetry数据采集机制，那么数据处理装置也可以不必执行数据采集配置信息的转换以及上报数据的转换，仅对数据进行预处理即可，如图5a所示。
可选地，数据采集分析装置可以进一步包括采集器和分析器，其中，采集器用于对接收到的第二机制格式的数据进行解码及处理，并将解码和处理后的数据发送给分析器；分析器用于对接收到的数据进行分析和决策，如，分析器根据数据进行分析、统计、建立模型、预测等等，然后根据统计结果、预测结果等，确定采集策略、优化策略等。
进一步地，采集器可以是集中式的采集器，也可以是分布式的采集器，当然，也可以既包括集中式采集器和分布式采集器。可选的，集中式的采集器可以与分析器部署在一起，或者，也可以分别部署。可选的，上述数据处理装置可以部署在网络设备与分布式采集器之间，或者，数据处理装置也可以与分布式采集器一同部署，例如，一同部署在网络设备上，或者一同部署在其他设备上。应当理解，上述数据处理装置、分布式采集器和/或集中式采集器可以为逻辑单元，可以单独部署，也可以部署在同一物理设备中。
在一个具体实施例中，本申请上述实施例可以应用于如图5b所示的架构中，该架构应用于CloudCO架构中。如图所示，该架构中可以包括网络基础设施中的多个网络设备，数据处理装置、管控运维***，进一步地，还可以包括上级控制器、运营支持***(operatorspecific service，OSS)以及人工智能(artificial intelligence，AI)离线训练装置。
其中，网络设备可以包括无线接入点(access point，AP)、客户终端设备(customer premise equipment，CPE)、接入网络设备(OLT、ONU等)、宽带网络网关(broadband network gateway，BNG)及其他城域设备、虚拟化场景下的网络功能虚拟化基础设施(network functions virtualization infrastructure，NFVI)以及虚拟网络功能(virtualized network function，VNF)等。
数据处理装置可以包括转换模块，用于实现上述不同机制间的配置信息转换以及数据转换；该装置还可以包括数据预处理模块以及数据分析模块，用于对接收到的数据进行预处理、分析。
管控运维***中可以包括管控***、数据采集分析装置，进一步的，还可以包括协同器，当然，该协调器也可以与管控***部署在一起。管控***可以用于发送数据采集配置信息，以监控当前网络状况、各网络设备的运行状况，根据数据分析***的分析结果确定网络优化参数等等。数据采集分析装置用于对接收到的数据进行统计、分析、模型训练、预测等等。
可选地，该CloudCO架构中还可以包括上级控制器或OSS、AI离线训练装置等，其中，上级控制器进行跨域网络的管理控制；OSS通过该接口可以使用该***提供的资源；另外，该***通过支持对接AI离线训练装置，可以使用公有云离线训练资源，以降低客户投资成本等。
基于相同的技术构思，本申请实施例还提供了一种数据采集处理方法，该方法可以由上述数据处理装置执行。
具体地，数据处理装置接收所述网络设备发送的第一机制格式的数据；对所述数据进行预处理；将经过预处理后的数据转换为第二机制格式的数据，并将所述第二机制格式的数据发送给数据采集分析装置；所述预处理包括以下一种或多种：数据格式转换、数据计算补齐、数据压缩剪裁、数据脱敏、数据序列化、传输控制协议指标计算。
在一种可能的实现方式中，上述方法还包括：接收所述网络设备发送的第二机制格式的数据，对所述数据进行预处理，并将所述经过预处理的第二机制格式的数据发送给所述数据采集分析装置。
在一种可能的实现方式中，上述方法还包括：接收第二机制格式的数据采集配置信息；若确定所述网络设备不支持所述第二机制，将所述第二机制格式的数据采集配置信息转换为所述第一机制格式的数据采集配置信息，并发送给所述网络设备。
在一种可能的实现方式中，上述方法还包括：接收第二机制格式的数据采集配置信息；若确定所述网络设备支持所述第二机制，将所述第二机制格式的数据采集配置信息发送给所述网络设备。
基于相同的技术构思，本申请实施例还提供了一种数据处理装置，可用于实现上述方法实施例。该数据处理装置可以如图6所示，包括：
接收单元601，用于收所述网络设备发送的第一机制格式的数据；
预处理单元602，用于对所述数据进行预处理；
转换单元603，用于将经过预处理后的数据转换为第二机制格式的数据；
发送单元604，用于将所述第二机制格式的数据发送给数据采集分析装置；
所述预处理包括以下一种或多种：数据格式转换、数据计算补齐、数据压缩剪裁、数据脱敏、数据序列化、传输控制协议指标计算。
在一种可能的实现方式中，所述接收单元601还用于：接收所述网络设备发送的第二机制格式的数据；
所述预处理单元602还用于：对所述第二机制格式的数据进行预处理；
所述发送单元604还用于：将所述经过预处理的第二机制格式的数据发送给所述数据采集分析装置。
在一种可能的实现方式中，所述接收单元601还用于：接收所述第二机制格式的数据采集配置信息；
所述转换单元603还用于：若确定所述网络设备不支持所述第二机制，将所述第二机制格式的数据采集配置信息转换为所述第一机制格式的数据采集配置信息；
所述发送单元604还用于：将所述第一机制格式的数据采集配置信息发送给所述网络设备。
在一种可能的实现方式中，所述接收单元601还用于：接收第二机制格式的数据采集配置信息；
所述发送单元604还用于：若确定所述网络设备支持所述第二机制，将所述第二机制格式的数据采集配置信息发送给所述网络设备。
需要说明的是，以上各个单元的划分仅仅是一种逻辑功能的划分，实际实现时可以全部或部分集成到一个物理实体上，也可以物理上分开。且这些单元可以全部以软件通过处理元件调用的形式实现；也可以全部以硬件的形式实现；还可以部分单元通过软件通过处理元件调用的形式实现，部分单元通过硬件的形式实现。接收单元、发送单元可以独立设置，也可以组成一个收发单元。此外，收发单元与处理单元可以集成在一起，也可以独立实现。这里所述的处理元件可以是一种集成电路，具有信号的处理能力。在实现过程中，上述方法的各步骤或以上各个单元可以通过处理器元件中的硬件的集成逻辑电路或者软件形式的指令完成。
本申请实施例提供了一种数据处理装置，该装置的结构可以如图7所示，包括处理器701和存储器702。其中，存储器701用于存储程序，处理器702调用存储器701存储的程序，执行上述数据处理方法。
本申请实施例提供了一种计算机可读存储介质，该计算机可读存储介质存储有计算机指令，当所述指令在计算机上运行时，使得计算机执行如第二方面中任一项所述方法。
本申请实施例提供了一种包含指令的计算机程序产品，当其在计算机上运行时，使得计算机执行如第二方面中任一项所述方法。
本领域内的技术人员应明白，本申请的实施例可提供为方法、***、或计算机程序产品。因此，本申请可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且，本申请可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。
本申请是参照根据本申请的方法、设备(***)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器，使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中，使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品，该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上，使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理，从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
显然，本领域的技术人员可以对本申请进行各种改动和变型而不脱离本申请的精神和范围。这样，倘若本申请的这些修改和变型属于本申请权利要求及其等同技术的范围之内，则本申请也意图包含这些改动和变型在内。

Claims (17)

1.一种数据采集处理***，所述***应用于云化中心局CloudCO架构，其特征在于，包括：
数据处理装置，用于接收所述网络设备发送的第一机制格式的数据；对所述数据进行预处理；将经过预处理后的数据转换为第二机制格式的数据，并将所述第二机制格式的数据发送给数据采集分析装置；
数据采集分析装置，用于在接收到所述数据处理装置发送的数据后，根据所述数据进行分析；
所述预处理包括以下一种或多种：数据格式转换、数据计算补齐、数据压缩剪裁、数据脱敏、数据序列化、传输控制协议指标计算。
2.如权利要求1所述的***，其特征在于，所述数据处理装置还用于：
接收所述网络设备发送的第二机制格式的数据，对所述数据进行预处理，并将所述经过预处理的第二机制格式的数据发送给所述数据采集分析装置。
3.如权利要求1或2所述的***，其特征在于，所述数据处理装置还用于：接收所述第二机制格式的数据采集配置信息；若确定所述网络设备不支持所述第二机制，将所述第二机制格式的数据采集配置信息转换为所述第一机制格式的数据采集配置信息，并发送给所述网络设备。
4.如权利要求1-3中任一项所述的***，其特征在于，所述数据处理装置还用于：接收第二机制格式的数据采集配置信息；若确定所述网络设备支持所述第二机制，将所述第二机制格式的数据采集配置信息发送给所述网络设备。
5.如权利要求1-4中任一项所述的***，其特征在于，所述数据采集分析装置，包括：采集器和分析器；
所述采集器用于对接收到的第二机制格式的数据进行解码和处理；
所述分析器用于对解码后的数据进行分析和决策。
6.如权利要求5所述的***，其特征在于，所述采集器包括分布式采集器和/或集中式采集器。
7.如权利要求1至6中任一项所述的***，其特征在于，所述数据处理装置，设置于所述网络设备上；或者，设置于CloudCO架构中的宽带接入抽象层上；或者，设置于远端区域DC上。
8.一种数据采集处理方法，所述方法应用于云化中心局CloudCO架构，其特征在于，包括：
接收所述网络设备发送的第一机制格式的数据；
对所述数据进行预处理；
将经过预处理后的数据转换为第二机制格式的数据，并将所述第二机制格式的数据发送给数据采集分析装置；
所述预处理包括以下一种或多种：数据格式转换、数据计算补齐、数据压缩剪裁、数据脱敏、数据序列化、传输控制协议指标计算。
9.如权利要求8所述的方法，其特征在于，还包括：
接收所述网络设备发送的第二机制格式的数据，对所述数据进行预处理，并将所述经过预处理的第二机制格式的数据发送给所述数据采集分析装置。
10.如权利要求8或9所述的方法，其特征在于，还包括：
接收第二机制格式的数据采集配置信息；若确定所述网络设备不支持所述第二机制，将所述第二机制格式的数据采集配置信息转换为所述第一机制格式的数据采集配置信息，并发送给所述网络设备。
11.如权利要求8-10中任一项所述的方法，其特征在于，还包括：
接收第二机制格式的数据采集配置信息；若确定所述网络设备支持所述第二机制，将所述第二机制格式的数据采集配置信息发送给所述网络设备。
12.一种数据处理装置，其特征在于，包括：
接收单元，用于收所述网络设备发送的第一机制格式的数据；
预处理单元，用于对所述数据进行预处理；
转换单元，用于将经过预处理后的数据转换为第二机制格式的数据；
发送单元，用于将所述第二机制格式的数据发送给数据采集分析装置；
所述预处理包括以下一种或多种：数据格式转换、数据计算补齐、数据压缩剪裁、数据脱敏、数据序列化、传输控制协议指标计算。
13.如权利要求12所述的装置，其特征在于，所述接收单元还用于：接收所述网络设备发送的第二机制格式的数据；
所述预处理单元还用于：对所述第二机制格式的数据进行预处理；
所述发送单元还用于：将所述经过预处理的第二机制格式的数据发送给所述数据采集分析装置。
14.如权利要求12或13所述的装置，其特征在于，所述接收单元还用于：接收所述第二机制格式的数据采集配置信息；
所述转换单元还用于：若确定所述网络设备不支持所述第二机制，将所述第二机制格式的数据采集配置信息转换为所述第一机制格式的数据采集配置信息；
所述发送单元还用于：将所述第一机制格式的数据采集配置信息发送给所述网络设备。
15.如权利要求12-14中任一项所述的装置，其特征在于，所述接收单元还用于：接收第二机制格式的数据采集配置信息；
所述发送单元还用于：若确定所述网络设备支持所述第二机制，将所述第二机制格式的数据采集配置信息发送给所述网络设备。
16.一种数据处理装置，其特征在于，包括：处理器和存储器，所述存储器用于存储程序，所述处理器调用存储器存储的程序，执行权利要求8至11任一项所述的方法。
17.一种计算机可读存储介质，其上存储有计算机程序，其特征在于，所述计算机程序被处理器执行时实现如权利要求8至11任一项所述的方法。
CN201811279047.0A 2018-10-30 2018-10-30 一种数据采集处理方法、装置及*** Pending CN111125208A (zh)

Priority Applications (4)

Application Number Priority Date Filing Date Title
CN201811279047.0A CN111125208A (zh) 2018-10-30 2018-10-30 一种数据采集处理方法、装置及***
PCT/CN2019/090314 WO2020087926A1 (zh) 2018-10-30 2019-06-06 一种数据采集处理方法、装置及***
EP19880508.7A EP3851973A4 (en) 2018-10-30 2019-06-06 PROCESS, APPARATUS AND SYSTEM FOR COLLECTING AND PROCESSING DATA
US17/245,970 US20210250220A1 (en) 2018-10-30 2021-04-30 Data Collection and Processing Method, Apparatus, and System

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201811279047.0A CN111125208A (zh) 2018-10-30 2018-10-30 一种数据采集处理方法、装置及***

Publications (1)

Publication Number Publication Date
CN111125208A true CN111125208A (zh) 2020-05-08

Family

ID=70461973

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201811279047.0A Pending CN111125208A (zh) 2018-10-30 2018-10-30 一种数据采集处理方法、装置及***

Country Status (4)

Country Link
US (1) US20210250220A1 (zh)
EP (1) EP3851973A4 (zh)
CN (1) CN111125208A (zh)
WO (1) WO2020087926A1 (zh)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112565023A (zh) * 2020-12-28 2021-03-26 广州西麦科技股份有限公司 一种基于Telemetry流量采集技术的流量可视化***和方法
CN113784237A (zh) * 2020-06-09 2021-12-10 中国电信股份有限公司 用于上报采集数据的方法、装置、网络设备和计算机介质
WO2022095785A1 (zh) * 2020-11-03 2022-05-12 中兴通讯股份有限公司 获取采集数据格式文件的方法、装置和***、设备、介质
CN114490535A (zh) * 2022-01-12 2022-05-13 北京齐尔布莱特科技有限公司 数据传输方法、数据传输***、计算设备及存储介质

Families Citing this family (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11928515B2 (en) 2020-12-09 2024-03-12 Dell Products L.P. System and method for managing resource allocations in composed systems
US11934875B2 (en) 2020-12-09 2024-03-19 Dell Products L.P. Method and system for maintaining composed systems
US20220237050A1 (en) * 2021-01-28 2022-07-28 Dell Products L.P. System and method for management of composed systems using operation data
US12026557B2 (en) 2021-07-22 2024-07-02 Dell Products L.P. Method and system for a utilizing a proxy service to generate a composed information handling system
US12013768B2 (en) 2021-07-22 2024-06-18 Dell Products L.P. Method and system for automated healing of hardware resources in a composed information handling system
US11947697B2 (en) 2021-07-22 2024-04-02 Dell Products L.P. Method and system to place resources in a known state to be used in a composed information handling system
US11928506B2 (en) 2021-07-28 2024-03-12 Dell Products L.P. Managing composition service entities with complex networks
US12008412B2 (en) 2021-07-28 2024-06-11 Dell Products Resource selection for complex solutions

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101989928A (zh) * 2010-11-05 2011-03-23 中兴通讯股份有限公司 网络设备信息采集方法、***、管理***和网络设备
CN102821042A (zh) * 2012-07-27 2012-12-12 华为技术有限公司 数据处理方法、装置和***
CN102957551A (zh) * 2011-08-23 2013-03-06 华为终端有限公司 一种批量管理设备的方法和***
WO2013124887A1 (ja) * 2012-02-21 2013-08-29 三菱電機株式会社 設備機器監視装置
US20130318152A1 (en) * 2011-05-04 2013-11-28 Appsfreedom, Inc. Method and system for exchanging information between back-end and front-end systems
CN106998259A (zh) * 2016-01-22 2017-08-01 中兴通讯股份有限公司 一种数据采集方法及装置

Family Cites Families (29)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7155496B2 (en) * 2001-05-15 2006-12-26 Occam Networks Configuration management utilizing generalized markup language
US7460483B2 (en) * 2006-03-24 2008-12-02 At&T Intellectual Property I, L.P. System and method for managing performance of communication lines of a communication network
KR100766586B1 (ko) * 2006-08-16 2007-10-12 포스데이타 주식회사 무선통신망의 구성요소 관리 시스템
EP1947802B1 (en) * 2007-01-22 2014-07-30 Nokia Solutions and Networks GmbH & Co. KG Operating network entities in a communications system
US8612751B1 (en) * 2008-08-20 2013-12-17 Cisco Technology, Inc. Method and apparatus for entitled data transfer over the public internet
US8073816B1 (en) * 2009-04-20 2011-12-06 Netapp, Inc. Volume format conversion
US8502836B2 (en) * 2010-02-26 2013-08-06 Research In Motion Limited Unified visual presenter
EP2678773B1 (en) * 2011-02-23 2019-12-18 Level 3 Communications, LLC Analytics management
KR102029285B1 (ko) * 2013-04-01 2019-10-07 한국전자통신연구원 센서네트워크의 대규모 데이터 수집 장치 및 방법
US8738629B1 (en) * 2013-05-03 2014-05-27 Splunk Inc. External Result Provided process for retrieving data stored using a different configuration or protocol
JP6341763B2 (ja) * 2014-06-04 2018-06-13 東芝テック株式会社 商品販売データ処理装置およびプログラム
US10015057B2 (en) * 2015-01-26 2018-07-03 Ciena Corporation Representative bandwidth calculation systems and methods in a network
US20160322080A1 (en) * 2015-04-30 2016-11-03 Microsoft Technology Licensing, Llc Unified Processing of Multi-Format Timed Data
US10122586B2 (en) * 2015-10-12 2018-11-06 Ciena Corporation Physical adjacency detection systems and methods
US10454777B2 (en) * 2016-04-06 2019-10-22 Omni Ai, Inc. Network data processing driver for a cognitive artifical intelligence system
US20180217910A1 (en) * 2017-01-27 2018-08-02 Ca, Inc. Scalable data logging
US20170187577A1 (en) * 2017-03-14 2017-06-29 Nuviso Networks Inc System for configuring network devices
US20230176669A1 (en) * 2017-04-26 2023-06-08 View, Inc. Device ensembles and coexistence management of devices
US20180324063A1 (en) * 2017-05-02 2018-11-08 Finderscopus, Inc. Cloud-based system for device monitoring and control
KR102316971B1 (ko) * 2017-05-08 2021-10-25 삼성전자 주식회사 소프트웨어 정의 네트워크에서 동적 자원 할당 방법 및 장치
US10698625B2 (en) * 2017-05-15 2020-06-30 Accenture Global Solutions Limited Data pipeline architecture for analytics processing stack
US10778609B2 (en) * 2017-08-10 2020-09-15 Futurewei Technologies, Inc. Interactions between a broadband network gateway and a fifth generation core
CN107911289A (zh) * 2017-12-05 2018-04-13 上海赛印信息技术股份有限公司 一种分析仪器的数据网关
US20190190857A1 (en) * 2017-12-15 2019-06-20 Complete Innovations Inc. Snapshots buffering service
US20200145491A1 (en) * 2018-11-07 2020-05-07 Vector Launch Inc. Logical Observation Sensors For Airborne And Spaceborne Nodes
US11042368B1 (en) * 2019-12-31 2021-06-22 Express Scripts Strategic Development, Inc. Scalable software development and deployment system using inversion of control architecture
US20220303208A1 (en) * 2021-03-17 2022-09-22 At&T Intellectual Property I, L.P. Method for artificial intelligent software defined network enabled border gateway protocol routing disaster recovery
US20230281680A1 (en) * 2022-03-01 2023-09-07 Adobe Inc. System and methods for resource allocation
US12003363B2 (en) * 2022-03-04 2024-06-04 Juniper Networks, Inc. Automatically troubleshooting and remediating network issues via connected neighbors

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101989928A (zh) * 2010-11-05 2011-03-23 中兴通讯股份有限公司 网络设备信息采集方法、***、管理***和网络设备
US20130318152A1 (en) * 2011-05-04 2013-11-28 Appsfreedom, Inc. Method and system for exchanging information between back-end and front-end systems
CN102957551A (zh) * 2011-08-23 2013-03-06 华为终端有限公司 一种批量管理设备的方法和***
WO2013124887A1 (ja) * 2012-02-21 2013-08-29 三菱電機株式会社 設備機器監視装置
CN102821042A (zh) * 2012-07-27 2012-12-12 华为技术有限公司 数据处理方法、装置和***
CN106998259A (zh) * 2016-01-22 2017-08-01 中兴通讯股份有限公司 一种数据采集方法及装置

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
胡杰: "Cloud CO参考架构与中小企业入云的实践" *

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113784237A (zh) * 2020-06-09 2021-12-10 中国电信股份有限公司 用于上报采集数据的方法、装置、网络设备和计算机介质
CN113784237B (zh) * 2020-06-09 2022-08-02 中国电信股份有限公司 用于上报采集数据的方法、装置、网络设备和计算机介质
WO2022095785A1 (zh) * 2020-11-03 2022-05-12 中兴通讯股份有限公司 获取采集数据格式文件的方法、装置和***、设备、介质
CN112565023A (zh) * 2020-12-28 2021-03-26 广州西麦科技股份有限公司 一种基于Telemetry流量采集技术的流量可视化***和方法
CN114490535A (zh) * 2022-01-12 2022-05-13 北京齐尔布莱特科技有限公司 数据传输方法、数据传输***、计算设备及存储介质

Also Published As

Publication number Publication date
WO2020087926A1 (zh) 2020-05-07
EP3851973A4 (en) 2021-11-24
EP3851973A1 (en) 2021-07-21
US20210250220A1 (en) 2021-08-12

Similar Documents

Publication Publication Date Title
CN111125208A (zh) 一种数据采集处理方法、装置及***
CN110572481B (zh) 基于LoRa通信的智能化机电设备数据交互方法
KR102489203B1 (ko) 사물 인터넷 시스템에서 데이터를 전송하는 방법 및 장치, 게이트웨이 디바이스와 이의 저장 매체
US11451452B2 (en) Model update method and apparatus, and system
US10187272B2 (en) Interface management service entity, function service entity, and element management method
RU2567242C2 (ru) Способ и система реализации сетевого управления на основе архитектуры с "тонкими" беспроводными точками доступа
CN114268640B (zh) 云边协同的工业物联网智能路由***
WO2017041406A1 (zh) 一种故障定位方法及装置
EP3780496B1 (en) Feature engineering programming method and apparatus
US20090111382A1 (en) Methods for scheduling collection of key performance indicators from elements in a communications network
CN111385127B (zh) 一种智能化处理***及方法
CN113840317A (zh) 算力上报方法、获取方法、算力网元及算力感知控制网元
CN114050983A (zh) 流量自适应采集方法及装置、存储介质及电子设备
US9621438B2 (en) Network traffic management
US20210216685A1 (en) Data reporting method and related device
WO2019184801A1 (zh) 网络管理方法和装置
CN213126061U (zh) 一种基于控制器的神经网络流量预测装置
CN101917699A (zh) 基于用户的随机上报信令跟踪方法和装置
CN113055223B (zh) 基于aimd算法的虚拟化保信子站***网络通信方法及***
CN114143189B (zh) 一种wifi6设备的批量监管***
WO2024082706A1 (zh) 数据处理方法、设备、***及可读存储介质
WO2022121671A1 (zh) 网络切片子网运维管理方法、装置、***、设备及介质
CN117061350A (zh) 一种白盒交换机的网络切片测试方法及终端
CN116755886A (zh) 算力任务转发计算方法、装置、存储介质及***
CN115514763A (zh) 一种智简无线网络及其运行方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination