CN111158800A - 基于映射关系构建任务dag的方法及装置 - Google Patents
基于映射关系构建任务dag的方法及装置 Download PDFInfo
- Publication number
- CN111158800A CN111158800A CN201911419978.0A CN201911419978A CN111158800A CN 111158800 A CN111158800 A CN 111158800A CN 201911419978 A CN201911419978 A CN 201911419978A CN 111158800 A CN111158800 A CN 111158800A
- Authority
- CN
- China
- Prior art keywords
- task
- stage
- entity
- tasks
- mapping
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000013507 mapping Methods 0.000 title claims abstract description 67
- 238000000034 method Methods 0.000 title claims abstract description 36
- 238000013523 data management Methods 0.000 claims abstract description 19
- 238000010276 construction Methods 0.000 claims abstract description 9
- 238000004590 computer program Methods 0.000 claims description 15
- 238000012545 processing Methods 0.000 claims description 9
- 238000010586 diagram Methods 0.000 description 8
- 230000005540 biological transmission Effects 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 230000004927 fusion Effects 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 238000013459 approach Methods 0.000 description 1
- 238000004140 cleaning Methods 0.000 description 1
- 230000006870 function Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F9/00—Arrangements for program control, e.g. control units
- G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
- G06F9/44—Arrangements for executing specific programs
- G06F9/448—Execution paradigms, e.g. implementations of programming paradigms
- G06F9/4482—Procedural
- G06F9/4484—Executing subprograms
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
- Y02D—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
- Y02D10/00—Energy efficient computing, e.g. low power processors, power management or thermal management
Landscapes
- Engineering & Computer Science (AREA)
- Software Systems (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Stored Programmes (AREA)
Abstract
本发明提供了一种基于映射关系构建任务DAG的方法及装置,该方法包括:根据获取的源表和目标表分别创建源实体和目标实体;建立源实体与目标实体的映射关系,所述映射关系包括表映射和字段映射;生成业务数据治理的各个阶段的任务;通过各个阶段的任务的依赖关系构建任务DAG结构。在本发明中,通过建立源实体与目标实体之间的映射关系,自动构建数据治理各个阶段任务的DAG,并生成每个任务执行需要的信息,从而减少人工参与的工作量,提高DAG构建的效率。
Description
技术领域
本发明涉及数据治理领域,具体而言,涉及一种基于映射关系构建任务DAG的方法及装置。
背景技术
在数据治理过程中,通常会根据数据处理的不同阶段,将任务拆解成若干个子任务,而这些子任务之间有顺序的依赖关系,形成子任务的有向无环图(DAG)结构。任务DAG的构建通常有两种方式,一种是所使用的工具或者技术自动生成的DAG,如spark任务;一种是根据数据处理的的业务流程通过人工构建的DAG,如根据数据治理流程可构DAG采集->转换->映射->融合。针对第二种场景,常用的方式是在工作流画布上创建每一个子任务,配置每个子任务执行命令、参数等信息,然后建立任务间的依赖关系。这种方式对于任务数很多的情况,很显然构建效率是很低的。
发明内容
本发明实施例提供了一种基于映射关系构建任务DAG的方法及装置,以至少解决相关技术中数据治理流程中任务的DAG构建效率低的问题。
根据本发明的一个实施例,提供了一种基于映射关系构建任务DAG的方法,包括:根据获取的源表和目标表分别创建源实体和目标实体;建立源实体与目标实体的映射关系,所述映射关系包括表映射和字段映射;生成业务数据治理的各个阶段的任务;通过各个阶段的任务的依赖关系构建任务DAG结构。
可选地,生成业务数据治理的各个阶段的任务包括:对数据治理过程按照业务处理流程划分每个阶段,并定义每个阶段任务执行的模板信息;根据定义的数据治理阶段,生成源实体到目标实体各个阶段的实体任务,并根据每个阶段任务执行的模板信息,生成任务执行的实例信息。
可选地,通过各个阶段的任务的依赖关系构建任务DAG结构包括:根据生成各阶段任务时所生成的任务依赖关系构建所述任务的DAG结构。
可选地,所述任务依赖关系至少包括以下之一:所述任务与父任务的依赖关系、所述任务为根任务。
根据本发明的另一个实施例,提供了一种基于映射关系构建任务DAG的装置,包括:获取模块,用于根据获取的源表和目标表分别创建源实体和目标实体;映射模块,用于建立源实体与目标实体的映射关系,所述映射关系包括表映射和字段映射;任务模块,用于生成业务数据治理的各个阶段的任务;构建模块,用于通过各个阶段的任务的依赖关系构建任务DAG结构。
可选地,所述任务模块包括:划分单元,用于对数据治理过程按照业务处理流程划分每个阶段,并定义每个阶段任务执行的模板信息;生成单元,用于根据定义的数据治理阶段,生成源实体到目标实体各个阶段的实体任务,并根据每个阶段任务执行的模板信息,生成任务执行的实例信息。
可选地,所述构建模块包括:构建单元,用于根据生成各阶段任务时所生成的任务依赖关系构建所述任务的DAG结构。
可选地,所述任务依赖关系至少包括以下之一:所述任务与父任务的依赖关系、所述任务为根任务
根据本发明的又一个实施例,还提供了一种存储介质,所述存储介质中存储有计算机程序,其中,所述计算机程序被设置为运行时执行上述任一项方法实施例中的步骤。
根据本发明的又一个实施例,还提供了一种电子装置,包括存储器和处理器,所述存储器中存储有计算机程序,所述处理器被设置为运行所述计算机程序以执行上述任一项方法实施例中的步骤。
在本发明的上述实施例中,通过建立源实体与目标实体之间的映射关系,自动构建数据治理各个阶段任务的DAG,并生成每个任务执行需要的信息,从而减少人工参与的工作量,提高DAG构建的效率。
附图说明
此处所说明的附图用来提供对本发明的进一步理解,构成本申请的一部分,本发明的示意性实施例及其说明用于解释本发明,并不构成对本发明的不当限定。在附图中:
图1是根据本发明实施例的基于映射关系构建任务DAG的流程图;
图2是根据本发明实施例的构建任务DAG的流程图;
图3是根据本发明实施例的构建任务DAG的流程图;
图4是根据本发明实施例的任务DAG示意图;
图5是根据本发明实施例的构建任务DAG装置结构示意图;
图6是根据本发明可选实施例的构建任务DAG装置结构示意图。
具体实施方式
下文中将参考附图并结合实施例来详细说明本发明。需要说明的是,在不冲突的情况下,本申请中的实施例及实施例中的特征可以相互组合。
需要说明的是,本发明的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象,而不必用于描述特定的顺序或先后次序。
在本实施例中提供了一种基于映射关系构建任务DAG方法,图1是根据本发明实施例的方法流程图,如图1所示,该流程包括如下步骤:
步骤S102,根据获取的源表和目标表分别创建源实体和目标实体;
步骤S104,建立源实体与目标实体的映射关系,所述映射关系包括表映射和字段映射;
步骤S106,生成业务数据治理的各个阶段的任务;
步骤S108,通过各个阶段的任务的依赖关系构建任务DAG结构。
在本实施例的步骤S106中,可包括以下步骤:对数据治理过程按照业务处理流程划分每个阶段,并定义每个阶段任务执行的模板信息;根据定义的数据治理阶段,生成源实体到目标实体各个阶段的实体任务,并根据每个阶段任务执行的模板信息,生成任务执行的实例信息。
在本实施例的步骤S108中,根据生成各阶段任务时所生成的任务依赖关系构建所述任务的DAG结构。
在本实施例的步骤S108中,所述任务依赖关系至少包括以下之一:所述任务与父任务的依赖关系、所述任务为根任务。
为了便于对本发明所提供的技术方案的理解,下面将结合具体场景的实施例进行详细描述。
本实施例提供了一种基于映射关系自动构建任务DAG的方法。在本实施例中,基于源表和目标表分别创建源实体和目标实体,建立源实体与目标实体之间的映射关系,生成业务数据治理的各个阶段的任务,并构建任务DAG。
如图2所示,本实施例的方法主要包括如下步骤:
步骤S201,创建源实体和目标实体:根据获取的源表和目标表,分别创建源实体和目标实体。
步骤S202,定义数据治理阶段:对数据治理过程按照业务处理流程,划分每个阶段,并定义每个阶段任务执行的模板信息(Template)。
步骤S203,建立映射:建立源实体与目标实体的映射关系(Mapping),包括表映射和字段映射。
步骤S204,生成阶段任务:根据定义的数据治理阶段,通过TaskBuilder生成源实体到目标实体各个阶段的实体任务(Task),并根据每个阶段任务执行的模板信息,生成任务执行的实例信息。
步骤S205,构建任务DAG:在生成阶段任务会生成该任务与父任务的依赖关系,没有父任务的任务是根任务,即数据治理的第一个阶段任务。通过阶段任务的依赖关系,DAGBuilder就构建了任务DAG结构。
下面结合具体的实例进行对上述步骤进行详细描述。在本实施例中,假设有源表A(表字段有a1,a2,a3)、源表B(表字段有b1,b2,b3)和目标表T(表字段有t1,t2,t3)。
如图3所示,主要包括如下具体步骤:
步骤S301,根据源表A、目标表T分别创建源实体EA(a1,a2,a3)、EB(b1,b2,b3),目标实体ET(t1,t2,t3);
步骤S302,假设定义数据治理的每个阶段任务为采集(S1)、预处理(S2)、清洗(S3)、融合(S4)4个阶段;每个阶段的任务执行模板信息分别对应S1-CMD、S2-CMD、S2-CMD、S4-CMD;
步骤S303,建立源实体EA、EB与目标实体ET之间的映射关系,EA-ET(a1-t1,a2-t2,a3-t3)、EB-ET(b1-t1,b2-t2,b3-t3);
步骤S304,对源实体与目标实体映射EA-ET、EB-ET生成步骤S302中定义的4个阶段任务:TASK-EA-S1、TASK-EA-S2、TASK-EA-ET-S3;TASK-EB-S1、TASK-EB-S2、TASK-EB-ET-S3;TASK-ET-S4;
步骤S305,根据阶段任务的依赖关系生成步骤S304中生成的任务的DAG结构,如图4所示。
在本实施例中,通过基于映射关系构建任务DAG,大大降低了人工参与配置的工作量,提高了任务DAG的构建效率,同时也能够保证任务依赖关系的正确性。
通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到根据上述实施例的方法可借助软件加必需的通用硬件平台的方式来实现,当然也可以通过硬件,但很多情况下前者是更佳的实施方式。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质(如ROM/RAM、磁碟、光盘)中,包括若干指令用以使得一台终端设备(可以是手机,计算机,服务器,或者网络设备等)执行本发明各个实施例所述的方法。
在本实施例中还提供了一种基于映射关系构建任务DAG的装置,该装置用于实现上述实施例及优选实施方式,已经进行过说明的不再赘述。如以下所使用的,术语“模块”或“单元”可以实现预定功能的软件和/或硬件的组合。尽管以下实施例所描述的装置较佳地以软件来实现,但是硬件,或者软件和硬件的组合的实现也是可能并被构想的。
图5是根据本发明实施例的一种基于映射关系构建任务DAG的装置结构框图,如图5所示,该装置包括获取模块10、映射模块20、任务模块30和构建模块40。
获取模块10,用于根据获取的源表和目标表分别创建源实体和目标实体。
映射模块20,用于建立源实体与目标实体的映射关系,所述映射关系包括表映射和字段映射。
任务模块30,用于生成业务数据治理的各个阶段的任务。
构建模块40,用于通过各个阶段的任务的依赖关系构建任务DAG结构。
图6是根据本发明实施例的基于映射关系构建任务DAG的装置结构框图,如图6所示,该装置除包括图5所示的所有模块外,任务模块30还包括:划分单元301,用于对数据治理过程按照业务处理流程划分每个阶段,并定义每个阶段任务执行的模板信息;生成单元302,用于根据定义的数据治理阶段,生成源实体到目标实体各个阶段的实体任务,并根据每个阶段任务执行的模板信息,生成任务执行的实例信息。
在本实施例中,构建单元40包括:构建模块401,用于根据生成各阶段任务时所生成的任务依赖关系构建所述任务的DAG结构。
需要说明的是,上述各个模块或单元是可以通过软件或硬件来实现的,对于后者,可以通过以下方式实现,但不限于此:上述模块均位于同一处理器中;或者,上述各个模块以任意组合的形式分别位于不同的处理器中。
本发明的实施例还提供了一种存储介质,该存储介质中存储有计算机程序,其中,该计算机程序被设置为运行时执行上述任一项方法实施例中的步骤。
可选地,在本实施例中,上述存储介质可以被设置为存储用于执行以下步骤的计算机程序:
S1,根据获取的源表和目标表分别创建源实体和目标实体;
S2,建立源实体与目标实体的映射关系,所述映射关系包括表映射和字段映射;
S3,生成业务数据治理的各个阶段的任务;
S4,通过各个阶段的任务的依赖关系构建任务DAG结构。
可选地,在本实施例中,上述存储介质可以包括但不限于:U盘、只读存储器(Read-Only Memory,简称为ROM)、随机存取存储器(Random Access Memory,简称为RAM)、移动硬盘、磁碟或者光盘等各种可以存储计算机程序的介质。
本发明的实施例还提供了一种电子装置,包括存储器和处理器,该存储器中存储有计算机程序,该处理器被设置为运行计算机程序以执行上述任一项方法实施例中的步骤。
可选地,上述电子装置还可以包括传输设备以及输入输出设备,其中,该传输设备和上述处理器连接,该输入输出设备和上述处理器连接。
可选地,在本实施例中,上述处理器可以被设置为通过计算机程序执行以下步骤:
S1,根据获取的源表和目标表分别创建源实体和目标实体;
S2,建立源实体与目标实体的映射关系,所述映射关系包括表映射和字段映射;
S3,生成业务数据治理的各个阶段的任务;
S4,通过各个阶段的任务的依赖关系构建任务DAG结构。
显然,本领域的技术人员应该明白,上述的本发明的各模块或各步骤可以用通用的计算装置来实现,它们可以集中在单个的计算装置上,或者分布在多个计算装置所组成的网络上,可选地,它们可以用计算装置可执行的程序代码来实现,从而,可以将它们存储在存储装置中由计算装置来执行,并且在某些情况下,可以以不同于此处的顺序执行所示出或描述的步骤,或者将它们分别制作成各个集成电路模块,或者将它们中的多个模块或步骤制作成单个集成电路模块来实现。这样,本发明不限制于任何特定的硬件和软件结合。
以上所述仅为本发明的优选实施例而已,并不用于限制本发明,对于本领域的技术人员来说,本发明可以有各种更改和变化。凡在本发明的原则之内,所作的任何修改、等同替换、改进等,均应包含在本发明的保护范围之内。
Claims (10)
1.一种基于映射关系构建任务DAG的方法,其特征在于,包括:
根据获取的源表和目标表分别创建源实体和目标实体;
建立所述源实体与目标实体的映射关系,所述映射关系包括表映射和字段映射;
生成业务数据治理的各个阶段的任务;
通过各个阶段的任务的依赖关系构建任务DAG结构。
2.根据权利要求1所述的方法,其特征在于,生成业务数据治理的各个阶段的任务包括:
对数据治理过程按照业务处理流程划分每个阶段,并定义每个阶段任务执行的模板信息;
根据定义的数据治理阶段,生成源实体到目标实体各个阶段的实体任务,并根据每个阶段任务执行的模板信息,生成任务执行的实例信息。
3.根据权利要求1所述的方法,其特征在于,通过各个阶段的任务的依赖关系构建任务DAG结构包括:
根据生成各阶段任务时所生成的任务依赖关系构建所述任务的DAG结构。
4.根据权利要求1所述的方法,其特征在于,所述任务依赖关系至少包括以下之一:所述任务与父任务的依赖关系、所述任务为根任务。
5.一种基于映射关系构建任务DAG的装置,其特征在于,包括:
获取模块,用于根据获取的源表和目标表分别创建源实体和目标实体;
映射模块,用于建立源实体与目标实体的映射关系,所述映射关系包括表映射和字段映射;
任务模块,用于生成业务数据治理的各个阶段的任务;
构建模块,用于通过各个阶段的任务的依赖关系构建任务DAG结构。
6.根据权利要求5所述的装置,其特征在于,所述任务模块包括:
划分单元,用于对数据治理过程按照业务处理流程划分每个阶段,并定义每个阶段任务执行的模板信息;
生成单元,用于根据定义的数据治理阶段,生成源实体到目标实体各个阶段的实体任务,并根据每个阶段任务执行的模板信息,生成任务执行的实例信息。
7.根据权利要求5所述的装置,其特征在于,所述构建模块包括:
构建单元,用于根据生成各阶段任务时所生成的任务依赖关系构建所述任务的DAG结构。
8.根据权利要求5所述的装置,其特征在于,所述任务依赖关系至少包括以下之一:所述任务与父任务的依赖关系、所述任务为根任务。
9.一种计算机可读存储介质,其特征在于,所述存储介质中存储有计算机程序,其中,所述计算机程序被设置为运行时执行所述权利要求1至4任一项中所述的方法。
10.一种电子装置,包括存储器和处理器,其特征在于,所述存储器中存储有计算机程序,所述处理器被设置为运行所述计算机程序以执行所述权利要求1至4任一项中所述的方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201911419978.0A CN111158800B (zh) | 2019-12-31 | 2019-12-31 | 基于映射关系构建任务dag的方法及装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201911419978.0A CN111158800B (zh) | 2019-12-31 | 2019-12-31 | 基于映射关系构建任务dag的方法及装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN111158800A true CN111158800A (zh) | 2020-05-15 |
CN111158800B CN111158800B (zh) | 2024-02-23 |
Family
ID=70560526
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201911419978.0A Active CN111158800B (zh) | 2019-12-31 | 2019-12-31 | 基于映射关系构建任务dag的方法及装置 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN111158800B (zh) |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN111625692A (zh) * | 2020-05-27 | 2020-09-04 | 北京字节跳动网络技术有限公司 | 特征抽取方法、装置、电子设备和计算机可读介质 |
CN111651460A (zh) * | 2020-06-11 | 2020-09-11 | 上海德易车信息科技有限公司 | 一种数据治理方法、装置、电子设备及可读存储介质 |
CN111753238A (zh) * | 2020-06-05 | 2020-10-09 | 北京有竹居网络技术有限公司 | 数据映射方法、装置和电子设备 |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR20160112830A (ko) * | 2015-03-20 | 2016-09-28 | 한국전자통신연구원 | 최적화된 태스크 기반 데이터 처리 서비스 생성 방법 및 장치 |
CN109800226A (zh) * | 2018-12-25 | 2019-05-24 | 北京明略软件***有限公司 | 一种数据治理中的任务管理方法及装置 |
CN110516081A (zh) * | 2019-09-02 | 2019-11-29 | 北京明略软件***有限公司 | 数据表映射关系的显示方法及装置 |
CN110555038A (zh) * | 2018-03-28 | 2019-12-10 | 阿里巴巴集团控股有限公司 | 一种数据处理***、方法及装置 |
-
2019
- 2019-12-31 CN CN201911419978.0A patent/CN111158800B/zh active Active
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR20160112830A (ko) * | 2015-03-20 | 2016-09-28 | 한국전자통신연구원 | 최적화된 태스크 기반 데이터 처리 서비스 생성 방법 및 장치 |
CN110555038A (zh) * | 2018-03-28 | 2019-12-10 | 阿里巴巴集团控股有限公司 | 一种数据处理***、方法及装置 |
CN109800226A (zh) * | 2018-12-25 | 2019-05-24 | 北京明略软件***有限公司 | 一种数据治理中的任务管理方法及装置 |
CN110516081A (zh) * | 2019-09-02 | 2019-11-29 | 北京明略软件***有限公司 | 数据表映射关系的显示方法及装置 |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN111625692A (zh) * | 2020-05-27 | 2020-09-04 | 北京字节跳动网络技术有限公司 | 特征抽取方法、装置、电子设备和计算机可读介质 |
CN111625692B (zh) * | 2020-05-27 | 2023-08-22 | 抖音视界有限公司 | 特征抽取方法、装置、电子设备和计算机可读介质 |
CN111753238A (zh) * | 2020-06-05 | 2020-10-09 | 北京有竹居网络技术有限公司 | 数据映射方法、装置和电子设备 |
CN111651460A (zh) * | 2020-06-11 | 2020-09-11 | 上海德易车信息科技有限公司 | 一种数据治理方法、装置、电子设备及可读存储介质 |
Also Published As
Publication number | Publication date |
---|---|
CN111158800B (zh) | 2024-02-23 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN109993299B (zh) | 数据训练方法及装置、存储介质、电子装置 | |
CN111158800B (zh) | 基于映射关系构建任务dag的方法及装置 | |
US9477512B2 (en) | Task-based modeling for parallel data integration | |
CN110471754B (zh) | 作业调度中的数据展示方法、装置、设备及存储介质 | |
CN109684319B (zh) | 数据清洗***、方法、装置及存储介质 | |
US20140156849A1 (en) | Map-reduce workflow processing apparatus and method, and storage media storing the same | |
CN110532559B (zh) | 规则的处理方法及装置 | |
CN103678591A (zh) | 自动执行多业务单据统计处理的装置和方法 | |
CN114924858A (zh) | 任务调度方法及装置、存储介质及电子设备 | |
CN108536429B (zh) | 一种开发软件的方法、装置、存储介质及电子设备 | |
CN111435329A (zh) | 一种自动化测试方法和装置 | |
US9323509B2 (en) | Method and system for automated process distribution | |
Kotthoff et al. | Distributed solving through model splitting | |
CN112130849B (zh) | 代码自动生成方法及装置 | |
CN111552545A (zh) | 任务的执行处理方法、装置、电子设备及存储介质 | |
CN111160403A (zh) | 一种api接口复用发现的方法及装置 | |
CN110597786A (zh) | 结构化数据治理方法及装置 | |
CN116032928B (zh) | 数据协同计算方法、装置、***、电子装置和存储介质 | |
CN110858806B (zh) | 节点部署文件的生成方法及装置、节点部署方法及装置、电子设备 | |
CN113760489B (zh) | 一种资源配置方法和装置 | |
CN111930718B (zh) | 配置管理数据库的节点调整方法及装置 | |
CN113742052B (zh) | 批量任务处理方法和装置 | |
CN106557359B (zh) | 一种任务调度方法及*** | |
EP2599006A1 (en) | Configuration management | |
CN108614731B (zh) | 一种运行MapReduce作业的方法、装置及*** |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |