CN115439015B - 基于数据中台的局域电网数据管理方法、装置及设备 - Google Patents
基于数据中台的局域电网数据管理方法、装置及设备 Download PDFInfo
- Publication number
- CN115439015B CN115439015B CN202211287819.1A CN202211287819A CN115439015B CN 115439015 B CN115439015 B CN 115439015B CN 202211287819 A CN202211287819 A CN 202211287819A CN 115439015 B CN115439015 B CN 115439015B
- Authority
- CN
- China
- Prior art keywords
- data
- power grid
- management
- service
- processing
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000013523 data management Methods 0.000 title claims abstract description 48
- 238000000034 method Methods 0.000 title claims abstract description 41
- 238000012545 processing Methods 0.000 claims abstract description 93
- 238000007726 management method Methods 0.000 claims abstract description 73
- 230000006870 function Effects 0.000 claims description 17
- 238000007405 data analysis Methods 0.000 claims description 14
- 238000003860 storage Methods 0.000 claims description 12
- 238000013499 data model Methods 0.000 claims description 8
- 230000007246 mechanism Effects 0.000 claims description 4
- 230000005540 biological transmission Effects 0.000 claims description 3
- 238000007689 inspection Methods 0.000 claims description 3
- 230000000007 visual effect Effects 0.000 claims description 2
- 238000010586 diagram Methods 0.000 description 10
- 238000004590 computer program Methods 0.000 description 6
- 238000004519 manufacturing process Methods 0.000 description 5
- 230000000694 effects Effects 0.000 description 4
- 230000003287 optical effect Effects 0.000 description 4
- 238000010248 power generation Methods 0.000 description 4
- 230000008569 process Effects 0.000 description 4
- 238000013500 data storage Methods 0.000 description 3
- 238000005516 engineering process Methods 0.000 description 3
- 230000010354 integration Effects 0.000 description 3
- 238000005065 mining Methods 0.000 description 3
- 238000012986 modification Methods 0.000 description 3
- 230000004048 modification Effects 0.000 description 3
- 238000004458 analytical method Methods 0.000 description 2
- 230000008901 benefit Effects 0.000 description 2
- 238000004422 calculation algorithm Methods 0.000 description 2
- 238000004891 communication Methods 0.000 description 2
- 230000002093 peripheral effect Effects 0.000 description 2
- 230000006978 adaptation Effects 0.000 description 1
- 230000002776 aggregation Effects 0.000 description 1
- 238000004220 aggregation Methods 0.000 description 1
- 230000004075 alteration Effects 0.000 description 1
- 238000003491 array Methods 0.000 description 1
- 238000013475 authorization Methods 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 238000004140 cleaning Methods 0.000 description 1
- 238000013501 data transformation Methods 0.000 description 1
- 238000013079 data visualisation Methods 0.000 description 1
- 238000013135 deep learning Methods 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 238000004146 energy storage Methods 0.000 description 1
- 230000003993 interaction Effects 0.000 description 1
- 238000010801 machine learning Methods 0.000 description 1
- 238000012558 master data management Methods 0.000 description 1
- 238000012544 monitoring process Methods 0.000 description 1
- 238000012856 packing Methods 0.000 description 1
- 230000009467 reduction Effects 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
- 238000012549 training Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q10/00—Administration; Management
- G06Q10/06—Resources, workflows, human or project management; Enterprise or organisation planning; Enterprise or organisation modelling
- G06Q10/063—Operations research, analysis or management
- G06Q10/0631—Resource planning, allocation, distributing or scheduling for enterprises or organisations
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/90—Details of database functions independent of the retrieved data types
- G06F16/903—Querying
- G06F16/9035—Filtering based on additional data, e.g. user or group profiles
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
- G06Q50/06—Energy or water supply
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F2216/00—Indexing scheme relating to additional aspects of information retrieval not explicitly covered by G06F16/00 and subgroups
- G06F2216/03—Data mining
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y04—INFORMATION OR COMMUNICATION TECHNOLOGIES HAVING AN IMPACT ON OTHER TECHNOLOGY AREAS
- Y04S—SYSTEMS INTEGRATING TECHNOLOGIES RELATED TO POWER NETWORK OPERATION, COMMUNICATION OR INFORMATION TECHNOLOGIES FOR IMPROVING THE ELECTRICAL POWER GENERATION, TRANSMISSION, DISTRIBUTION, MANAGEMENT OR USAGE, i.e. SMART GRIDS
- Y04S10/00—Systems supporting electrical power generation, transmission or distribution
- Y04S10/50—Systems or methods supporting the power network operation or management, involving a certain degree of interaction with the load-side end user applications
Landscapes
- Engineering & Computer Science (AREA)
- Business, Economics & Management (AREA)
- Human Resources & Organizations (AREA)
- Economics (AREA)
- Theoretical Computer Science (AREA)
- Strategic Management (AREA)
- General Physics & Mathematics (AREA)
- Physics & Mathematics (AREA)
- Entrepreneurship & Innovation (AREA)
- Health & Medical Sciences (AREA)
- Marketing (AREA)
- Tourism & Hospitality (AREA)
- Databases & Information Systems (AREA)
- General Business, Economics & Management (AREA)
- Educational Administration (AREA)
- Public Health (AREA)
- Development Economics (AREA)
- Primary Health Care (AREA)
- Water Supply & Treatment (AREA)
- Game Theory and Decision Science (AREA)
- Operations Research (AREA)
- Quality & Reliability (AREA)
- Computational Linguistics (AREA)
- General Health & Medical Sciences (AREA)
- Data Mining & Analysis (AREA)
- General Engineering & Computer Science (AREA)
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
Abstract
本公开提出一种基于数据中台的局域电网数据管理方法、装置及设备，该方法包括：搭建可分布式扩展的数据中台，采集多数据源的初始电网数据，其中，初始电网数据为多源异构数据，而后基于数据中台，对初始电网数据进行数据统一化处理，生成目标电网数据，以及基于目标电网数据，对局域电网进行数据协调管理，由于是使用数据中台对电网数据进行统一、标准化得协调管理，能够实现数据共享，有效打破“数据孤岛”，实现数据支撑，保证电网数据资源在线汇聚、有序流动和价值挖掘。
Description
技术领域
本公开涉及电数据处理技术领域，尤其涉及一种基于数据中台的局域电网数据管理方法、装置及设备。
背景技术
现有局域电网，在不同时期建设，存在多个不同的平台与***，处于***状态，每个***均有授权模块、用户管理模块、消息提醒模块等，重复造轮子且无法互通有无，信息重复维护，离“万物互联”的目标越来越远。局域电网内风、光、火、储等各主体信息孤立存在，相互独立，信息“孤岛”，能源“烟囱”等情况严重影响各能源间的协同互补。
现阶段并没有一种有效的手段，对局域电网内各主体数据进行有效的同源统一，相关技术中普遍采用的方法是通过不同的接口，获取自身***专注的功能所需的数据。
这种方式下，使得局域电网内数据更加离散，所得出的数据成果也不能进行递进，为局域电网的数据化进程增添了非常大的阻力。
发明内容
本公开旨在至少在一定程度上解决相关技术中的技术问题之一。
为此，本公开的目的在于提出一种基于数据中台的局域电网数据管理方法、装置及设备，能够实现数据共享，有效打破“数据孤岛”，实现数据支撑，保证电网数据资源在线汇聚、有序流动和价值挖掘。
本公开第一方面实施例提出的基于数据中台的局域电网数据管理方法，包括：搭建可分布式扩展的数据中台；采集多数据源的初始电网数据，其中，初始电网数据为多源异构数据；基于数据中台，对初始电网数据进行数据统一化处理，生成目标电网数据；基于目标电网数据，对局域电网进行数据协调管理。
本公开第一方面实施例提出的基于数据中台的局域电网数据管理方法，通过搭建可分布式扩展的数据中台，采集多数据源的初始电网数据，其中，初始电网数据为多源异构数据，而后基于数据中台，对初始电网数据进行数据统一化处理，生成目标电网数据，以及基于目标电网数据，对局域电网进行数据协调管理，由于是使用数据中台对电网数据进行统一、标准化得协调管理，能够实现数据共享，有效打破“数据孤岛”，实现数据支撑，保证电网数据资源在线汇聚、有序流动和价值挖掘。
本公开第二方面实施例提出的基于数据中台的局域电网数据管理装置，包括：搭建模块，用于搭建可分布式扩展的数据中台；采集模块，用于采集多数据源的初始电网数据，其中，初始电网数据为多源异构数据；处理模块，用于基于数据中台，对初始电网数据进行数据统一化处理，生成目标电网数据；管理模块，用于基于目标电网数据，对局域电网进行数据协调管理。
本公开第二方面实施例提出的基于数据中台的局域电网数据管理装置，通过搭建可分布式扩展的数据中台，采集多数据源的初始电网数据，其中，初始电网数据为多源异构数据，而后基于数据中台，对初始电网数据进行数据统一化处理，生成目标电网数据，以及基于目标电网数据，对局域电网进行数据协调管理，由于是使用数据中台对电网数据进行统一、标准化得协调管理，能够实现数据共享，有效打破“数据孤岛”，实现数据支撑，保证电网数据资源在线汇聚、有序流动和价值挖掘。
本公开第三方面实施例提出了一种电子设备，包括：处理器；用于存储处理器可执行指令的存储器；其中，处理器被配置为执行指令，以实现基于数据中台的局域电网数据管理方法。
本公开第四方面实施例提出了一种计算机可读存储介质，当计算机可读存储介质中的指令由电子设备的处理器执行时，使得电子设备能够执行基于数据中台的局域电网数据管理方法。
本公开第五方面实施例提出了一种计算机程序产品，包括计算机程序，其特征在于，计算机程序被处理器执行基于数据中台的局域电网数据管理方法。
本公开附加的方面和优点将在下面的描述中部分给出，部分将从下面的描述中变得明显，或通过本公开的实践了解到。
附图说明
本公开上述的和/或附加的方面和优点从下面结合附图对实施例的描述中将变得明显和容易理解，其中：
图1是本公开一实施例提出的基于数据中台的局域电网数据管理方法的流程示意图；
图2是本公开一实施例提出的数据中台的结构示意图；
图3是本公开一实施例提出的多数据源的结构示意图；
图4是本公开另一实施例提出的基于数据中台的局域电网数据管理方法的流程示意图；
图5是本公开一实施例提出的基于数据中台的局域电网数据管理装置的结构示意图；
图6是本公开另一实施例提出的基于数据中台的局域电网数据管理装置的结构示意图；
图7示出了适于用来实现本公开实施方式的示例性电子设备的框图。
具体实施方式
下面详细描述本公开的实施例，所述实施例的示例在附图中示出，其中自始至终相同或类似的标号表示相同或类似的元件或具有相同或类似功能的元件。下面通过参考附图描述的实施例是示例性的，仅用于解释本公开，而不能理解为对本公开的限制。相反，本公开的实施例包括落入所附加权利要求书的精神和内涵范围内的所有变化、修改和等同物。
图1是本公开一实施例提出的基于数据中台的局域电网数据管理方法的流程示意图。
如图1所示，该基于数据中台的局域电网数据管理方法，包括：
S101：搭建可分布式扩展的数据中台。
其中，数据中台，是一种支撑多源、异构、多样、海量数据的数据管理中台，数据中台可以用于完整描述业务***的信息构成，构建高效、安全、数据同源共享平台，从而进行多***集中管理，统一视图，开展多源数据图数模一体化设计，将数据互不相通的多个***，通过数据同源的方式，在同一数据中台上进行整合，实现信息化***的统一。
本公开实施例中，可以基于智能化城市信息模型（e-City InformationModeling，e-CIM）构建数据中台，或者，也可以基于物联网技术构建数据中台，或者，还可以使用多种其他任意可能的实现方式构建数据中台，对此不做限制。
在本公开的一些实施例中，如图2所示，图2是本公开一实施例提出的数据中台的结构示意图，数据中台中可以包括数据服务板块、数据集成板块、数据治理板块、数据模型管理板块、数据分析板块、数据资产目录管理板块、六码合一板块，以及数据存储板块，当然，本公开实施例的数据中台还支持多样化的可分布式拓展，对此不做限制。
也即是说，本公开实施例的一种具体的应用场景可以例如为，搭建可分布式扩展的数据中台，并由该数据中台执行后续的电网数据的处理步骤，本公开实施例下述的描述说明将以该应用场景为例进行具体的解释说明，当然，本公开实施例描述的基于数据中台的局域电网数据管理方法也可以应用于其他任意可能的基于数据中台的局域电网数据管理场景中，对此不做限制。
S102：采集多数据源的初始电网数据，其中，初始电网数据为多源异构数据。
其中，初始电网数据，是电网相关的生产、气象、管理等的数据信息，初始电网数据可以包含空间数据、拓扑数据、运行数据、设备数据和业务数据等，可以理解的是，不同类型的初始电网数据可以从不同的数据源中获取，例如从气象***中获取天气数据，从地理信息***中获取地理位置数据等，对此不做限制，因此，初始电网数据可以为多源异构数据。
本公开实施例中，可依据业务需求从实时数据库、气象***以及企业运行管理的各类业务***中获取生产、气象、管理等的数据信息，并将其作为初始电网数据，初始业务数据的获取可以实现多数据源的信息联合分析，数据源与数据源之间的智能化互动，且不影响***原有任务（如网络访问服务、业务处理流程等）的稳定运行。
本公开实施例中，可以使用时序数据采集、结构化数据采集、非结构化数据采集等多种采集方式采集初始电网数据，对此不做限制。
举例而言，图3是本公开一实施例提出的多数据源的结构示意图，如图3所示，多数据源可以包括：调度管理***接入、智能仪表***接入、安全仪表***接入、储能***接入、数据决策***接入、实时数据库接入、降电流管理***接入、视频***接入、地理信息***接入、气象***接入，以及生产管理***接入等。
本公开实施例中，可以基于通信协议搭建数据中台与多数据源之间的会话链路，以基于该会话链路传递初始电网数据，或者，还可以使用物理连接的方式，连接多数据源设备与数据中台的数据存储设备，以使得数据中台能够有效接收多数据源中的初始电网数据，对此不做限制。
S103：基于数据中台，对初始电网数据进行数据统一化处理，生成目标电网数据。
其中，对初始电网数据进行数值治理，以得到数据中台能够有效识别的数据信息，该数据信息可以被称为目标电网数据。
本公开实施例中，可以通过数据中台对接收到的初始电网数据进行数据治理，使其更方便检索、使用和管理。
在本公开的一些实施例中，可以使用多层结构的数据库处理初始电网数据，数据中台将初始电网数据进行整理，并将初始电网数据划分至对应的数据库中，或者，也可以设置关键词检索，以便于及时标记初始电网数据，有效对初始电网数据进行数据统一化处理，得到目标电网数据，对此不做限制。
S104：基于目标电网数据，对局域电网进行数据协调管理。
本公开实施例中，在得到目标电网数据之后，可以对目标电网数据进行数据协调处理，数据协调处理可以包括数据分析与数据探索，以基于目标电网数据确定更全面的数据服务功能。
本公开实施例中的数据协调管理还可以迅速调用目标电网数据，便于多个数据源进行数据交换与数据共享，以保证数据中台能够迅速、稳定进行局域电网的相关业务。
本实施例中，通过搭建可分布式扩展的数据中台，采集多数据源的初始电网数据，其中，初始电网数据为多源异构数据，而后基于数据中台，对初始电网数据进行数据统一化处理，生成目标电网数据，以及基于目标电网数据，对局域电网进行数据协调管理，由于是使用数据中台对电网数据进行统一、标准化得协调管理，能够实现数据共享，有效打破“数据孤岛”，实现数据支撑，保证电网数据资源在线汇聚、有序流动和价值挖掘。
图4是本公开另一实施例提出的基于数据中台的局域电网数据管理方法的流程示意图。
如图4所示，基于数据中台的局域电网数据管理方法，包括：
S401：搭建可分布式扩展的数据中台。
S401的描述说明可以具体参见上述实施例，在此不再赘述。
S402：获取多数据源的局域电网信息。
其中，局域电网信息，是局域电网中的数据信息，局域电网信息可以具体包括。
本公开实施例中，可以从多数据源中获取局域电网相关的信息，并将其作为局域电网信息。
本公开实施例中的局域电网信息可以具体例如为从生产区域的***中获取得到的电力生产相关信息，如风力发电、光伏发电、火力发电，以及电力储能等生产信息，局域电网信息也可以例如为地理信息、气象信息、电厂状态信息等多种，对此不做限制。
本公开实施例中，可以从电网的各***中获取局域电网信息，也可以直接由电网的各***将局域电网信息发送至数据中台的相关数据库中，对此不做限制。
S403：对局域电网信息进行数据标准化处理，得到初始电网数据。
其中，数据标准化处理，是基于数据安全标准处理局域电网信息的方式，可以配置符合数据安全区等级要求的接口架构，以实现对局域电网信息进行数据标准化处理，经过标准化处理得到的数据，可以被称为初始电网数据。
本公开实施例中，数据中台可以存储各数据源所对应的数据采集内容及跨区安全处理机制，明确安全设施的合理配置，以有效对局域电网信息进行数据标准化处理，得到初始电网数据，对此不做限制。
S404：基于数据中台的组件服务，对初始电网数据进行数据治理，生成第一业务数据，其中，组件服务包括：标准管理、数据管理、数据资产管理、业务数据建模，以及质量管理。
其中，标准管理，是用于管理数据中台中存储的、各数据源所对应的安全标准与跨区安全处理机制等。
其中，数据管理服务，是对初始电网数据进行描述、解释、定位，并使其成为更方便检索、使用或管理的第一业务数据的数据服务。
本公开实施例中的数据管理服务可以具体例如为元数据管理服务，元数据管理是数据治理的底层服务功能，可以使用统一的企业级元数据模型，为数据标准、数据质量、数据模型、数据生命周期等数据治理专题提供技术扩展支持，对此不做限制。
其中，数据资产管理服务，可以针对企业海量业务数据，进行高效的管理，通过多视角对数据资产进行查看分析,了解到企业数据资产应用模式、企业数据资产基本信息等具体内容。
在本公开实施例中，数据资产管理服务可以包括：数据生命周期管理、主数据管理、资源目录、数据地图等。
其中，业务数据建模服务可以为各数据源所对应的***提供数据建模工具，依据关系建模以及维度建模理论，在***中建立逻辑数据模型和物理数据模型，从而支持以模型所包含的实体关联关系为基础，建立各种数据服务，以对初始电网数据进行数据治理，生成第一业务数据。
其中，质量管理服务可以根据数据标准，智能生成数据质量规则，通过制定、实施数据质量检验，暴露各***数据质量问题。
本公开实施例中，可以基于数据中台的组件服务，从而有效对初始电网数据进行数据治理，对分散、零碎的初始电网数据进行加工，将海量的初始电网数据整合成为有层次、有业务逻辑、语义一致、关系明确、质量合格的第一业务数据。
S405：对第一业务数据进行数据分析处理，生成目标电网数据。
本公开实施例中，可以对第一业务数据进行进一步的数据分析，以对不同类型的第一业务数据进行计算分析，进而生成更多的数据服务，如数据可视化、数据交换、数据存储、大数据分析等服务。数据分析处理可以提供数据探索、通用计算建模环境等功能，进而提升目标电网数据的处理效果。
可选地，基于数据中台，对第一业务数据进行数据探索，生成第二业务数据；对第二业务数据进行数据分析处理，生成目标电网数据。
其中，对第一业务数据进行数据探索得到的数据，可以被称为第二业务数据，可以理解的是，第二业务数据可以是对第一业务数据进行智能化探索生产的数据信息，如可以预测未来一段时间内的电力负荷情况、气象信息等，并将其作为第二业务数据，或者，也可以对第一业务数据进行数据关系挖掘，记录挖掘得到的第一业务数据间的数据关系，并将其也作为第二业务数据，对此不做限制。
本公开实施例的数据探索，可以用于对第一业务数据进行数据清理、数据集成、数据规约和数据变换等功能，以对第一业务数据进行数据轻度加工，实现数据间的有效共享，提升数据的管理效果。
本公开实施例中，可以使用机器学***台，以基于该智能化大数据处理平台对第一业务数据进行数据探索，得到第二业务数据。
S406：对目标电网数据进行局域电网协同处理。
一些实施例中，可以设置数据协同***，用于对目标电网数据进行局域电网协同处理，数据协同***可以包含局域电网内统一数据资产目录管理以及数据协同功能，实现目标电网数据的管理、接口、传输与交换，并联合任务管理功能，完成整个局域电网协同场景的布局。
另一些实施例中，也可以搭建数据协同网络，以用于处理目标电网数据，实现数据协同，当然，本公开还支持使用多中数据协同方式，以实现对目标电网数据的协调处理，对此不做限制。
S407：整理多类型的数据处理模型，结合目标电网数据对多类型的数据处理模型进行统一管理与应用。
可以理解的是，本公开实施例的数据中台需连接多个数据源，各个数据源可能具有一套或多套电网数据处理模型，多套数据处理模型亦可能分别使用不同的数据处理方式，影响数据的共享，因此，本公开实施例可以整理多类型的数据处理模型，结合目标电网数据对多类型的数据处理模型进行统一管理与应用。
其中，数据处理模型可以具体例如为业务***模型，如电力生产模型、电力负荷模型，以及城市智慧模型等，对此不做限制。
本公开实施例中，数据处理模型的开发和训练可以在电力指挥中心侧完成，在数据中台提供数据处理模型的订阅服务，以便于厂站侧通过发布/订阅方式获取所需的数据处理模型。由此，使用数据中台实现数据处理模型订阅功能、数据处理模型打包和上传功能、数据处理模型发布和管理功能、调度状态监控功能，以及数据处理模型的版本更新通知功能，从而更高效实现数据处理模型的管理与调度。
本实施例中，由于是使用数据中台对电网数据进行统一、标准化得协调管理，能够实现数据共享，有效打破“数据孤岛”，实现数据支撑，保证电网数据资源在线汇聚、有序流动和价值挖掘。由于是对局域电网信息进行数据标准化处理，得到初始电网数据，能够有效提升初始电网数据的安全性，提升数据的汇总效果。由于是对第一业务数据进行数据分析处理，生成目标电网数据，能够对第一业务数据进行描述、解释、定位，并使生成的目标电网数据更方便检索、使用与管理，从而使得目标电网数据能够关系明确，业务逻辑清晰，提升目标电网数据的整合效果。由于是基于数据中台，对第一业务数据进行数据探索，生成第二业务数据，对第二业务数据进行数据分析处理，生成目标电网数据，能够基于已有的第一业务数据，迅速、全面、智能化对数据进行近一步探索，以确定新的目标电网数据与新的数据关系，进而有效提升数据资产的价值。由于是结合目标电网数据对多类型的数据处理模型进行统一管理与应用，从而能够更高效实现数据处理模型的管理与调度。
图5是本公开一实施例提出的基于数据中台的局域电网数据管理装置的结构示意图。
如图5所示，该基于数据中台的局域电网数据管理装置50，包括：
搭建模块501，用于搭建可分布式扩展的数据中台；
采集模块502，用于采集多数据源的初始电网数据，其中，初始电网数据为多源异构数据；
处理模块503，用于基于数据中台，对初始电网数据进行数据统一化处理，生成目标电网数据；
管理模块504，用于基于目标电网数据，对局域电网进行数据协调管理。
在本公开的一些实施例中，如图6所示，图6是本公开另一实施例提出的基于数据中台的局域电网数据管理装置的结构示意图，采集模块502，包括：
获取子模块5021，用于获取多数据源的局域电网信息；
处理子模块5022，用于对局域电网信息进行数据标准化处理，得到初始电网数据。
在本公开的一些实施例中，如图6所示，处理模块503，具体用于：
基于数据中台的组件服务，对初始电网数据进行数据治理，生成第一业务数据，其中，组件服务包括：标准管理、数据管理、数据资产管理、业务数据建模，以及质量管理；
对第一业务数据进行数据分析处理，生成目标电网数据。
在本公开的一些实施例中，如图6所示，处理模块503，具体用于：
基于数据中台，对第一业务数据进行数据探索，生成第二业务数据；
对第二业务数据进行数据分析处理，生成目标电网数据。
在本公开的一些实施例中，如图6所示，管理模块504，具体用于：
对目标电网数据进行局域电网协同处理；
整理多类型的数据处理模型，结合目标电网数据对多类型的数据处理模型进行统一管理与应用。
与上述图1至图4实施例提供的基于数据中台的局域电网数据管理方法相对应，本公开还提供一种基于数据中台的局域电网数据管理装置，由于本公开实施例提供的基于数据中台的局域电网数据管理装置与上述图1至图4实施例提供的基于数据中台的局域电网数据管理方法相对应，因此在基于数据中台的局域电网数据管理方法的实施方式也适用于本公开实施例提供的基于数据中台的局域电网数据管理装置，在本公开实施例中不再详细描述。
本实施例中，通过搭建可分布式扩展的数据中台，采集多数据源的初始电网数据，其中，初始电网数据为多源异构数据，而后基于数据中台，对初始电网数据进行数据统一化处理，生成目标电网数据，以及基于目标电网数据，对局域电网进行数据协调管理，由于是使用数据中台对电网数据进行统一、标准化的协调管理，能够实现数据共享，有效打破“数据孤岛”，实现数据支撑，保证电网数据资源在线汇聚、有序流动和价值挖掘。
为了实现上述实施例，本公开还提出一种非临时性计算机可读存储介质，其上存储有计算机程序，该程序被处理器执行时实现如本公开前述实施例提出的基于数据中台的局域电网数据管理方法。
为了实现上述实施例，本公开还提出一种电子设备，包括：存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，处理器执行程序时，实现如本公开前述实施例提出的基于数据中台的局域电网数据管理方法。
为了实现上述实施例，本公开还提出一种计算机程序产品，当计算机程序产品中的指令处理器执行时，执行如本公开前述实施例提出的基于数据中台的局域电网数据管理方法。
图7示出了适于用来实现本公开实施方式的示例性电子设备的框图。图7显示的电子设备12仅仅是一个示例，不应对本公开实施例的功能和使用范围带来任何限制。
如图7所示，电子设备12以通用计算设备的形式表现。电子设备12的组件可以包括但不限于：一个或者多个处理器或者处理单元16，***存储器28，连接不同***组件（包括***存储器28和处理单元16）的总线18。总线18表示几类总线结构中的一种或多种，包括存储器总线或者存储器控制器，***总线，图形加速端口，处理器或者使用多种总线结构中的任意总线结构的局域总线。举例来说，这些体系结构包括但不限于工业标准体系结构（Industry Standard Architecture；以下简称：ISA）总线，微通道体系结构（MicroChannel Architecture；以下简称：MAC）总线，增强型ISA总线、视频电子标准协会（VideoElectronics Standards Association；以下简称：VESA）局域总线以及***组件互连（Peripheral Component Interconnection；以下简称：PCI）总线。
电子设备12典型地包括多种计算机***可读介质。这些介质可以是任何能够被电子设备12访问的可用介质，包括易失性和非易失性介质，可移动的和不可移动的介质。
存储器28可以包括易失性存储器形式的计算机***可读介质，例如随机存取存储器（Random Access Memory；以下简称：RAM）30和/或高速缓存存储器32。电子设备12可以进一步包括其它可移动/不可移动的、易失性/非易失性计算机***存储介质。仅作为举例，存储***34可以用于读写不可移动的、非易失性磁介质（图7未显示，通常称为“硬盘驱动器”）。
尽管图7中未示出，可以提供用于对可移动非易失性磁盘（例如“软盘”）读写的磁盘驱动器，以及对可移动非易失性光盘（例如：光盘只读存储器（Compact Disc Read OnlyMemory；以下简称：CD-ROM）、数字多功能只读光盘（Digital Video Disc Read OnlyMemory；以下简称：DVD-ROM）或者其它光介质）读写的光盘驱动器。在这些情况下，每个驱动器可以通过一个或者多个数据介质接口与总线18相连。存储器28可以包括至少一个程序产品，该程序产品具有一组（例如至少一个）程序模块，这些程序模块被配置以执行本公开各实施例的功能。
具有一组（至少一个）程序模块42的程序/实用工具40，可以存储在例如存储器28中，这样的程序模块42包括但不限于操作***、一个或者多个应用程序、其它程序模块以及程序数据，这些示例中的每一个或某种组合中可能包括网络环境的实现。程序模块42通常执行本公开所描述的实施例中的功能和/或方法。
电子设备12也可以与一个或多个外部设备14（例如键盘、指向设备、显示器24等）通信，还可与一个或者多个使得用户能与该电子设备12交互的设备通信，和/或与使得该电子设备12能与一个或多个其它计算设备进行通信的任何设备（例如网卡，调制解调器等等）通信。这种通信可以通过输入/输出（I/O）接口22进行。并且，电子设备12还可以通过网络适配器20与一个或者多个网络（例如局域网（Local Area Network；以下简称：LAN），广域网（Wide Area Net work；以下简称：WAN）和/或公共网络，例如因特网）通信。如图所示，网络适配器20通过总线18与电子设备12的其它模块通信。应当明白，尽管图中未示出，可以结合电子设备12使用其它硬件和/或软件模块，包括但不限于：微代码、设备驱动器、冗余处理单元、外部磁盘驱动阵列、RAID***、磁带驱动器以及数据备份存储***等。
处理单元16通过运行存储在***存储器28中的程序，从而执行各种功能应用以及数据处理，例如实现前述实施例中提及的基于数据中台的局域电网数据管理方法。
本领域技术人员在考虑说明书及实践这里公开的发明后，将容易想到本公开的其它实施方案。本公开旨在涵盖本公开的任何变型、用途或者适应性变化，这些变型、用途或者适应性变化遵循本公开的一般性原理并包括本公开未公开的本技术领域中的公知常识或惯用技术手段。说明书和实施例仅被视为示例性的，本公开的真正范围和精神由下面的权利要求指出。
应当理解的是，本公开并不局限于上面已经描述并在附图中示出的精确结构，并且可以在不脱离其范围进行各种修改和改变。本公开的范围仅由所附的权利要求来限制。
需要说明的是，在本公开的描述中，术语“第一”、“第二”等仅用于描述目的，而不能理解为指示或暗示相对重要性。此外，在本公开的描述中，除非另有说明，“多个”的含义是两个或两个以上。
流程图中或在此以其他方式描述的任何过程或方法描述可以被理解为，表示包括一个或更多个用于实现特定逻辑功能或过程的步骤的可执行指令的代码的模块、片段或部分，并且本公开的优选实施方式的范围包括另外的实现，其中可以不按所示出或讨论的顺序，包括根据所涉及的功能按基本同时的方式或按相反的顺序，来执行功能，这应被本公开的实施例所属技术领域的技术人员所理解。
应当理解，本公开的各部分可以用硬件、软件、固件或它们的组合来实现。在上述实施方式中，多个步骤或方法可以用存储在存储器中且由合适的指令执行***执行的软件或固件来实现。例如，如果用硬件来实现，和在另一实施方式中一样，可用本领域公知的下列技术中的任一项或他们的组合来实现：具有用于对数据信号实现逻辑功能的逻辑门电路的离散逻辑电路，具有合适的组合逻辑门电路的专用集成电路，可编程门阵列（PGA），现场可编程门阵列（FPGA）等。
本技术领域的普通技术人员可以理解实现上述实施例方法携带的全部或部分步骤是可以通过程序来指令相关的硬件完成，所述的程序可以存储于一种计算机可读存储介质中，该程序在执行时，包括方法实施例的步骤之一或其组合。
此外，在本公开各个实施例中的各功能单元可以集成在一个处理模块中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个模块中。上述集成的模块既可以采用硬件的形式实现，也可以采用软件功能模块的形式实现。所述集成的模块如果以软件功能模块的形式实现并作为独立的产品销售或使用时，也可以存储在一个计算机可读取存储介质中。
上述提到的存储介质可以是只读存储器，磁盘或光盘等。
在本说明书的描述中，参考术语“一个实施例”、“一些实施例”、“示例”、“具体示例”、或“一些示例”等的描述意指结合该实施例或示例描述的具体特征、结构、材料或者特点包含于本公开的至少一个实施例或示例中。在本说明书中，对上述术语的示意性表述不一定指的是相同的实施例或示例。而且，描述的具体特征、结构、材料或者特点可以在任何的一个或多个实施例或示例中以合适的方式结合。
尽管上面已经示出和描述了本公开的实施例，可以理解的是，上述实施例是示例性的，不能理解为对本公开的限制，本领域的普通技术人员在本公开的范围内可以对上述实施例进行变化、修改、替换和变型。
Claims (5)
1.一种基于数据中台的局域电网数据管理方法，其特征在于，包括：
搭建可分布式扩展的数据中台；
采集多数据源的初始电网数据，其中，所述初始电网数据为多源异构数据；
基于所述数据中台，对所述初始电网数据进行数据统一化处理，生成目标电网数据；
基于所述目标电网数据，对所述局域电网进行数据协调管理；
所述基于所述目标电网数据，对所述局域电网进行数据协调管理，包括：
对所述目标电网数据进行局域电网协同处理，其中，包括：设置数据协同***，所述数据协同***包含局域电网内统一数据资产目录管理以及数据协同功能，实现各***数据的管理、接口、传输与交换；
整理多类型的数据处理模型，结合所述目标电网数据对所述多类型的数据处理模型进行统一管理与应用；
所述采集多数据源的初始电网数据，包括：
获取所述多数据源的局域电网信息；
对所述局域电网信息进行数据标准化处理，得到所述初始电网数据；所述基于所述数据中台，对所述初始电网数据进行数据统一化处理，生成目标电网数据，包括：基于所述数据中台的组件服务，对所述初始电网数据进行数据治理，生成第一业务数据，其中，所述组件服务包括：标准管理、数据管理、数据资产管理、业务数据建模，以及质量管理；
其中，标准管理，用于管理数据中台中存储的、各数据源所对应的安全标准与跨区安全处理机制；
数据管理服务，对初始电网数据进行描述、解释、定位，成为检索、使用或管理的第一业务数据的数据服务；
数据资产管理服务，通过多视角对数据资产进行查看分析，获取企业数据资产应用模式、企业数据资产基本信息；
业务数据建模服务为各数据源所对应的***提供数据建模工具，在***中建立逻辑数据模型和物理数据模型，以模型所包含的实体关联关系为基础，建立各种数据服务，以对初始电网数据进行数据治理，生成第一业务数据；
质量管理服务根据数据标准，智能生成数据质量规则，通过制定、实施数据质量检验，确定各***数据质量；对所述第一业务数据进行数据分析处理，生成目标电网数据。
2.如权利要求1所述的方法，其特征在于，所述对所述第一业务数据进行数据分析处理，生成目标电网数据，包括：
基于所述数据中台，对所述第一业务数据进行数据探索，生成第二业务数据；
对所述第二业务数据进行数据分析处理，生成目标电网数据。
3.一种基于数据中台的局域电网数据管理装置，其特征在于，包括：
搭建模块，用于搭建可分布式扩展的数据中台；
采集模块，用于采集多数据源的初始电网数据，其中，所述初始电网数据为多源异构数据；
处理模块，用于基于所述数据中台，对所述初始电网数据进行数据统一化处理，生成目标电网数据；
管理模块，用于基于所述目标电网数据，对所述局域电网进行数据协调管理；
所述管理模块，用于对所述目标电网数据进行局域电网协同处理，其中，包括：设置数据协同***，所述数据协同***包含局域电网内统一数据资产目录管理以及数据协同功能，实现各***数据的管理、接口、传输与交换；
整理多类型的数据处理模型，结合所述目标电网数据对所述多类型的数据处理模型进行统一管理与应用；
所述采集模块，包括：
获取子模块，用于获取所述多数据源的局域电网信息；
处理子模块，用于对所述局域电网信息进行数据标准化处理，得到所述初始电网数据；
所述处理模块，还用于：基于所述数据中台的组件服务，对所述初始电网数据进行数据治理，生成第一业务数据，其中，所述组件服务包括：标准管理、数据管理、数据资产管理、业务数据建模，以及质量管理；
其中，标准管理，用于管理数据中台中存储的、各数据源所对应的安全标准与跨区安全处理机制；
数据管理服务，对初始电网数据进行描述、解释、定位，成为检索、使用或管理的第一业务数据的数据服务；
数据资产管理服务，通过多视角对数据资产进行查看分析，获取企业数据资产应用模式、企业数据资产基本信息；
业务数据建模服务为各数据源所对应的***提供数据建模工具，在***中建立逻辑数据模型和物理数据模型，支持以模型所包含的实体关联关系为基础，建立各种数据服务，以对初始电网数据进行数据治理，生成第一业务数据；
质量管理服务根据数据标准，智能生成数据质量规则，通过制定、实施数据质量检验，确定各***数据质量；对所述第一业务数据进行数据分析处理，生成目标电网数据。
4.一种电子设备，包括：
至少一个处理器；以及
与所述至少一个处理器通信连接的存储器；其中，
所述存储器存储有可被所述至少一个处理器执行的指令，所述指令被所述至少一个处理器执行，以使所述至少一个处理器能够执行权利要求1-2中任一项所述的基于数据中台的局域电网数据管理方法。
5.一种存储有计算机指令的非瞬时计算机可读存储介质，其中，所述计算机指令用于使所述计算机执行根据权利要求1-2中任一项所述的基于数据中台的局域电网数据管理方法。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202211287819.1A CN115439015B (zh) | 2022-10-20 | 2022-10-20 | 基于数据中台的局域电网数据管理方法、装置及设备 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202211287819.1A CN115439015B (zh) | 2022-10-20 | 2022-10-20 | 基于数据中台的局域电网数据管理方法、装置及设备 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN115439015A CN115439015A (zh) | 2022-12-06 |
| CN115439015B true CN115439015B (zh) | 2023-04-07 |
Family
ID=84253115
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202211287819.1A Active CN115439015B (zh) | 2022-10-20 | 2022-10-20 | 基于数据中台的局域电网数据管理方法、装置及设备 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN115439015B (zh) |
Families Citing this family (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN115952770B (zh) * | 2023-03-15 | 2023-07-25 | 广州汇通国信科技有限公司 | 一种数据标准化的处理方法、装置、电子设备及存储介质 |
Citations (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2021217659A1 (zh) * | 2020-04-30 | 2021-11-04 | 深圳中砼物联网科技有限公司 | 多源异构数据的处理方法、计算机设备、存储介质 |
Family Cites Families (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN112163039A (zh) * | 2020-09-21 | 2021-01-01 | 国家电网有限公司大数据中心 | 基于企业级数据中台分析域的数据资源标准化管理*** |
| CN112163047A (zh) * | 2020-09-21 | 2021-01-01 | 国家电网有限公司大数据中心 | 一种数据中台以及计算设备 |
-
2022
- 2022-10-20 CN CN202211287819.1A patent/CN115439015B/zh active Active
Patent Citations (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2021217659A1 (zh) * | 2020-04-30 | 2021-11-04 | 深圳中砼物联网科技有限公司 | 多源异构数据的处理方法、计算机设备、存储介质 |
Non-Patent Citations (2)
| Title |
|---|
| 李信鹏等.电网企业数据中台方案研究.电力信息与通信技术.2020,全文. * |
| 李志等.基于数据中台的电力企业数据资产管理方法研究.电力信息与通信技术.2020,全文. * |
Also Published As
| Publication number | Publication date |
|---|---|
| CN115439015A (zh) | 2022-12-06 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN107402976B (zh) | 一种基于多元异构模型的电网多源数据融合方法及*** | |
| Finogeev et al. | The convergence computing model for big sensor data mining and knowledge discovery | |
| Zhu et al. | A framework-based approach to utility big data analytics | |
| CN111159180A (zh) | 一种基于数据资源目录构建的数据处理方法及*** | |
| CN106534291A (zh) | 基于大数据处理的电压监测方法 | |
| CN114416855A (zh) | 一种基于电力大数据的可视化平台及方法 | |
| CN110928740A (zh) | 云计算中心运维数据集中可视化方法及其*** | |
| Aranda et al. | Context-aware Edge Computing and Internet of Things in Smart Grids: A systematic mapping study | |
| Duda et al. | Cloud-based IT Infrastructure for “Smart City” Projects | |
| CN109088747A (zh) | 云计算***中资源的管理方法和装置 | |
| CN113822585A (zh) | 一种智能冶炼工厂信息化管理*** | |
| CN115439015B (zh) | 基于数据中台的局域电网数据管理方法、装置及设备 | |
| CN115423429A (zh) | 基于图像和声音信息的多模态一体化配网运营*** | |
| CN115809302A (zh) | 元数据处理方法、装置、设备及存储介质 | |
| CN115374968A (zh) | 一种银行机房管理方法、装置及设备 | |
| Wu et al. | An Auxiliary Decision‐Making System for Electric Power Intelligent Customer Service Based on Hadoop | |
| CN111106968A (zh) | 一种构建信息通信智能调度指挥沙盘的方法 | |
| CN112948353A (zh) | 一种应用于DAstudio的数据分析方法、***及存储介质 | |
| CN113570476A (zh) | 基于自定义告警规则的电网监控***容器服务监控方法 | |
| CN117541217A (zh) | 基于三维可视化电网设备管理业务的运维方法 | |
| CN116629802A (zh) | 一种用于铁路港口站的大数据平台*** | |
| CN116523328A (zh) | 一种航空装备协同制造产业链协作智能决策方法 | |
| CN112148347A (zh) | 一种全流程溯源管理的方法和装置 | |
| CN103023740A (zh) | 一种信息交互总线***及电力数据传输方法 | |
| CN114493262A (zh) | 一种电力大数据的处理***、方法、装置及计算机设备 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant |