CN114791837A - 一种数据库多中心的数据处理的方法、装置、设备及介质 - Google Patents
一种数据库多中心的数据处理的方法、装置、设备及介质 Download PDFInfo
- Publication number
- CN114791837A CN114791837A CN202210414578.6A CN202210414578A CN114791837A CN 114791837 A CN114791837 A CN 114791837A CN 202210414578 A CN202210414578 A CN 202210414578A CN 114791837 A CN114791837 A CN 114791837A
- Authority
- CN
- China
- Prior art keywords
- center
- data processing
- database
- processing request
- data
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Withdrawn
Links
- 238000012545 processing Methods 0.000 title claims abstract description 162
- 238000000034 method Methods 0.000 title claims abstract description 50
- 230000006870 function Effects 0.000 claims abstract description 43
- 230000004044 response Effects 0.000 claims abstract description 29
- 230000008569 process Effects 0.000 claims abstract description 16
- 238000004590 computer program Methods 0.000 claims description 11
- 230000008901 benefit Effects 0.000 abstract description 5
- 238000013508 migration Methods 0.000 abstract description 5
- 230000005012 migration Effects 0.000 abstract description 5
- 238000010586 diagram Methods 0.000 description 7
- 230000003287 optical effect Effects 0.000 description 4
- 238000004364 calculation method Methods 0.000 description 3
- 238000013461 design Methods 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 239000000835 fiber Substances 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 241000251468 Actinopterygii Species 0.000 description 1
- 238000004458 analytical method Methods 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 238000004422 calculation algorithm Methods 0.000 description 1
- 238000004891 communication Methods 0.000 description 1
- 238000007418 data mining Methods 0.000 description 1
- 238000012217 deletion Methods 0.000 description 1
- 230000037430 deletion Effects 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 238000003780 insertion Methods 0.000 description 1
- 230000037431 insertion Effects 0.000 description 1
- 230000010354 integration Effects 0.000 description 1
- 238000003032 molecular docking Methods 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
- 238000012546 transfer Methods 0.000 description 1
- 239000002699 waste material Substances 0.000 description 1
- XLYOFNOQVPJJNP-UHFFFAOYSA-N water Substances O XLYOFNOQVPJJNP-UHFFFAOYSA-N 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F9/00—Arrangements for program control, e.g. control units
- G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
- G06F9/44—Arrangements for executing specific programs
- G06F9/445—Program loading or initiating
- G06F9/44505—Configuring for program initiating, e.g. using registry, configuration files
- G06F9/4451—User profiles; Roaming
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/21—Design, administration or maintenance of databases
- G06F16/211—Schema design and management
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Software Systems (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Databases & Information Systems (AREA)
- Data Mining & Analysis (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本发明提供了一种数据库多中心的数据处理的方法、装置、设备及可读介质,方法包括:响应于接收到用户发起数据处理请求,判断当前数据库是否开启多级中心部署功能;响应于当前数据库开启了多级中心部署功能,加载多级中心配置文件并解析多级中心配置文件以获取每个中心的数据库连接信息;根据每个中心的数据库连接信息将数据处理请求并行下发到每个中心中进行数据处理;响应于每个中心数据处理成功,结束当前数据处理并将结果返回给用户。通过使用本发明的方案,能够使得开发人员或用户在数据库多中心处理数据时,不需要开发复杂的数据迁移、同步逻辑,能够充分利用MPP数据库并行计算的优势,提高了数据库部署的灵活性,提高了用户的体验度。
Description
技术领域
本发明涉及计算机领域,并且更具体地涉及一种数据库多中心的数据处理的方法、装置、设备及可读介质。
背景技术
在大数据时代,现有采用MPP架构(Massively Parallel Processing,大规模并行处理,将任务并行的分散到多个服务器和节点上,在每个节点上计算完成后,将各自部分的结果汇总在一起得到最终的结果)的分布式数据库Greenplum(是开源分布式数据库,采用无共享的MPP架构,主要用于大规模数据处理、数据仓库、数据挖掘等应用),具有海量数据分析的能力,可以提供实时处理、弹性扩容、混合负载、并行存储和计算等强大功能的大数据引擎。这使得用户在海量数据的分析场景下如鱼得水。随着数字信息化时代的发展,数据统一管理的需求越来越明确,甚至已经逐渐化身为基础,通过将不同地方的业务***的整合,可以避免不必要的冗余数据的存储浪费。对于不同地点的数据库业务的整合,需要使用多级中心部署,且每个中心的数据要一致。这使得不同中心的数据库之间需要定时进行数据迁移、数据同步等,延迟较高,而且由于涉及多个数据中心,它们之间相互处理的逻辑很复杂,很难实现无缝对接。另外,数据同步一般对不同数据库集群有严格的限制要求,例如必须是同构数据库,即不同的集群的配置要相同。这无形中会给多级中心部署的灵活性带来很大的不便。因此,需要在多个中心之间保证数据的严格一致性且延迟要低,它们之间的数据高效处理就是一个迫切需要面临解决的问题。
发明内容
有鉴于此,本发明实施例的目的在于提出一种数据库多中心的数据处理的方法、装置、设备及可读介质,通过使用本发明的技术方案,能够使得开发人员或用户在数据库多中心处理数据时,不需要开发复杂的数据迁移、同步逻辑,能够充分利用MPP数据库并行计算的优势,提高了数据库部署的灵活性,提高了用户的体验度。
基于上述目的,本发明的实施例的一个方面提供了一种数据库多中心的数据处理的方法,包括以下步骤:
响应于接收到用户发起数据处理请求,判断当前数据库是否开启多级中心部署功能;
响应于当前数据库开启了多级中心部署功能,加载多级中心配置文件并解析多级中心配置文件以获取每个中心的数据库连接信息;
根据每个中心的数据库连接信息将数据处理请求并行下发到每个中心中进行数据处理;
响应于每个中心数据处理成功,结束当前数据处理并将结果返回给用户。
根据本发明的一个实施例,响应于接收到用户发起数据处理请求,判断当前数据库是否开启多级中心部署功能包括:
在数据库中新增1个全局***参数enable_multi_center;
响应于接收到用户发起数据处理请求,获取新增的全局***参数enable_multi_center的值;
响应于新增的全局***参数enable_multi_center的值为ture,确定当前数据库开启了多级中心部署功能。
根据本发明的一个实施例,根据每个中心的数据库连接信息将数据处理请求并行下发到每个中心中进行数据处理包括:
根据每个中心的数据库连接信息将数据处理请求并行下发到每个中心;
响应于中心接受到数据处理请求,对数据处理请求中的行数据进行数据处理,并对处理的行数据添加行锁以使得不同中心同时处理数据处理请求中不同行的数据。
根据本发明的一个实施例,还包括:
对数据处理请求开启一个事务以使每个中心进行数据处理在同一事务中进行。
本发明的实施例的另一个方面,还提供了一种数据库多中心的数据处理的装置,装置包括:
判断模块,判断模块配置为响应于接收到用户发起数据处理请求,判断当前数据库是否开启多级中心部署功能;
获取模块,获取模块配置为响应于当前数据库开启了多级中心部署功能,加载多级中心配置文件并解析多级中心配置文件以获取每个中心的数据库连接信息;
处理模块,处理模块配置为根据每个中心的数据库连接信息将数据处理请求并行下发到每个中心中进行数据处理;
反馈模块,反馈模块配置为响应于每个中心数据处理成功,结束当前数据处理并将结果返回给用户。
根据本发明的一个实施例,判断模块还配置为:
在数据库中新增1个全局***参数enable_multi_center;
响应于接收到用户发起数据处理请求,获取新增的全局***参数enable_multi_center的值;
响应于新增的全局***参数enable_multi_center的值为ture,确定当前数据库开启了多级中心部署功能。
根据本发明的一个实施例,处理模块还配置为:
根据每个中心的数据库连接信息将数据处理请求并行下发到每个中心;
响应于中心接受到数据处理请求,对数据处理请求中的行数据进行数据处理,并对处理的行数据添加行锁以使得不同中心同时处理数据处理请求中不同行的数据。
根据本发明的一个实施例,还包括创建模块,创建模块配置为:
对数据处理请求开启一个事务以使每个中心进行数据处理在同一事务中进行。
本发明的实施例的另一个方面,还提供了一种计算机设备,该计算机设备包括:
至少一个处理器;以及
存储器,存储器存储有可在处理器上运行的计算机指令,指令由处理器执行时实现上述任意一项方法的步骤。
本发明的实施例的另一个方面,还提供了一种计算机可读存储介质,计算机可读存储介质存储有计算机程序,计算机程序被处理器执行时实现上述任意一项方法的步骤。
本发明具有以下有益技术效果:本发明实施例提供的数据库多中心的数据处理的方法,通过响应于接收到用户发起数据处理请求,判断当前数据库是否开启多级中心部署功能;响应于当前数据库开启了多级中心部署功能,加载多级中心配置文件并解析多级中心配置文件以获取每个中心的数据库连接信息;根据每个中心的数据库连接信息将数据处理请求并行下发到每个中心中进行数据处理;响应于每个中心数据处理成功,结束当前数据处理并将结果返回给用户的技术方案,能够使得开发人员或用户在数据库多中心处理数据时,不需要开发复杂的数据迁移、同步逻辑,能够充分利用MPP数据库并行计算的优势,提高了数据库部署的灵活性,提高了用户的体验度。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的实施例。
图1为根据本发明一个实施例的数据库多中心的数据处理的方法的示意性流程图;
图2为根据本发明一个实施例的数据库多中心的数据处理的装置的示意图;
图3为根据本发明一个实施例的计算机设备的示意图;
图4为根据本发明一个实施例的计算机可读存储介质的示意图。
具体实施方式
为使本发明的目的、技术方案和优点更加清楚明白,以下结合具体实施例,并参照附图,对本发明实施例进一步详细说明。
基于上述目的,本发明的实施例的第一个方面,提出了一种数据库多中心的数据处理的方法的一个实施例。图1示出的是该方法的示意性流程图。
如图1中所示,该方法可以包括以下步骤:
S1响应于接收到用户发起数据处理请求,判断当前数据库是否开启多级中心部署功能。
在数据库中新增1个全局***参数enable_multi_center,当该值为true时,表示数据库***开启多级中心部署功能;当该值为false时,表示数据库***未开启多级中心部署功能。当用户发起数据处理请求(比如数据***、更新或删除)时,检查当前数据库是否开启多级中心部署功能,即检查新增的数据库全局***参数enable_multi_center的值,如果该值为true,则表示已开启多级中心功能,如果该值为false,则只在本中心的数据库中处理数据。
S2响应于当前数据库开启了多级中心部署功能,加载多级中心配置文件并解析多级中心配置文件以获取每个中心的数据库连接信息。
在数据库中新增1个多级中心配置文件,该文件按行存储,每行为1个中心的数据库连接信息,内容为:主机IP地址或主机名、数据库端口号、用户和密码。如果当前数据库开启多级中心部署,则数据库会加载多级中心配置文件,并解析该文件以获取每个中心的数据库连接信息。
S3根据每个中心的数据库连接信息将数据处理请求并行下发到每个中心中进行数据处理。
根据每个中心的数据库连接信息,把本次数据处理操作请求并行下发到各个中心,使其各自进行本次操作,而且通过给本次操作的行数据添加行锁,使得可以同时处理每个数据表的不同行的数据,即并行处理多个请求,提高了并发度,加快了工作效率,也可以防止存在多个任务数据请求是多个中心对同一行的数据进行操作,如果任何一个中心的数据处理失败,则还原此次数据处理操作,使得每个中心的数据库恢复至原状态。
S4响应于每个中心数据处理成功,结束当前数据处理并将结果返回给用户。
只有在所有的中心都处理成功,才认为本次发起的数据处理请求处理成功,如果有一个中心处理失败,则需要进行所有中心的数据回滚。
通过本发明的技术方案,能够使得开发人员或用户在数据库多中心处理数据时,不需要开发复杂的数据迁移、同步逻辑,能够充分利用MPP数据库并行计算的优势,提高了数据库部署的灵活性,提高了用户的体验度。
在本发明的一个优选实施例中,响应于接收到用户发起数据处理请求,判断当前数据库是否开启多级中心部署功能包括:
在数据库中新增1个全局***参数enable_multi_center;
响应于接收到用户发起数据处理请求,获取新增的全局***参数enable_multi_center的值;
响应于新增的全局***参数enable_multi_center的值为ture,确定当前数据库开启了多级中心部署功能。如果该值为false,则只在本中心的数据库中处理数据。
在本发明的一个优选实施例中,根据每个中心的数据库连接信息将数据处理请求并行下发到每个中心中进行数据处理包括:
根据每个中心的数据库连接信息将数据处理请求并行下发到每个中心;
响应于中心接受到数据处理请求,对数据处理请求中的行数据进行数据处理,并对处理的行数据添加行锁以使得不同中心同时处理数据处理请求中不同行的数据。例如,第一中心处理第一行数据时,对第一行数据加锁,则其他中心就不能够同时处理第一行数据。
在本发明的一个优选实施例中,还包括:
对数据处理请求开启一个事务以使每个中心进行数据处理在同一事务中进行,使得数据在多个中心保持一致性。相当于每个中心都处理该事务中的一部分,每个中心都处理成功,则该事务处理成功。
需要说明的是,本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程,可以通过计算机程序来指令相关硬件来完成,上述的程序可存储于计算机可读取存储介质中,该程序在执行时,可包括如上述各方法的实施例的流程。其中存储介质可为磁碟、光盘、只读存储器(Read-Only Memory,ROM)或随机存取存储器(Random AccessMemory,RAM)等。上述计算机程序的实施例,可以达到与之对应的前述任意方法实施例相同或者相类似的效果。
此外,根据本发明实施例公开的方法还可以被实现为由CPU执行的计算机程序,该计算机程序可以存储在计算机可读存储介质中。在该计算机程序被CPU执行时,执行本发明实施例公开的方法中限定的上述功能。
基于上述目的,本发明的实施例的第二个方面,提出了一种数据库多中心的数据处理的装置,如图2所示,装置200包括:
判断模块,判断模块配置为响应于接收到用户发起数据处理请求,判断当前数据库是否开启多级中心部署功能;
获取模块,获取模块配置为响应于当前数据库开启了多级中心部署功能,加载多级中心配置文件并解析多级中心配置文件以获取每个中心的数据库连接信息;
处理模块,处理模块配置为根据每个中心的数据库连接信息将数据处理请求并行下发到每个中心中进行数据处理;
反馈模块,反馈模块配置为响应于每个中心数据处理成功,结束当前数据处理并将结果返回给用户。
在本发明的一个优选实施例中,判断模块还配置为:
在数据库中新增1个全局***参数enable_multi_center;
响应于接收到用户发起数据处理请求,获取新增的全局***参数enable_multi_center的值;
响应于新增的全局***参数enable_multi_center的值为ture,确定当前数据库开启了多级中心部署功能。
在本发明的一个优选实施例中,处理模块还配置为:
根据每个中心的数据库连接信息将数据处理请求并行下发到每个中心;
响应于中心接受到数据处理请求,对数据处理请求中的行数据进行数据处理,并对处理的行数据添加行锁以使得不同中心同时处理数据处理请求中不同行的数据。
在本发明的一个优选实施例中,还包括创建模块,创建模块配置为:
对数据处理请求开启一个事务以使每个中心进行数据处理在同一事务中进行。
基于上述目的,本发明实施例的第三个方面,提出了一种计算机设备。图3示出的是本发明提供的计算机设备的实施例的示意图。如图3所示,本发明实施例包括如下装置:至少一个处理器21;以及存储器22,存储器22存储有可在处理器上运行的计算机指令23,指令由处理器执行时实现以下方法:
响应于接收到用户发起数据处理请求,判断当前数据库是否开启多级中心部署功能;
响应于当前数据库开启了多级中心部署功能,加载多级中心配置文件并解析多级中心配置文件以获取每个中心的数据库连接信息;
根据每个中心的数据库连接信息将数据处理请求并行下发到每个中心中进行数据处理;
响应于每个中心数据处理成功,结束当前数据处理并将结果返回给用户。
在本发明的一个优选实施例中,响应于接收到用户发起数据处理请求,判断当前数据库是否开启多级中心部署功能包括:
在数据库中新增1个全局***参数enable_multi_center;
响应于接收到用户发起数据处理请求,获取新增的全局***参数enable_multi_center的值;
响应于新增的全局***参数enable_multi_center的值为ture,确定当前数据库开启了多级中心部署功能。
在本发明的一个优选实施例中,根据每个中心的数据库连接信息将数据处理请求并行下发到每个中心中进行数据处理包括:
根据每个中心的数据库连接信息将数据处理请求并行下发到每个中心;
响应于中心接受到数据处理请求,对数据处理请求中的行数据进行数据处理,并对处理的行数据添加行锁以使得不同中心同时处理数据处理请求中不同行的数据。
在本发明的一个优选实施例中,还包括:
对数据处理请求开启一个事务以使每个中心进行数据处理在同一事务中进行。
基于上述目的,本发明实施例的第四个方面,提出了一种计算机可读存储介质。图4示出的是本发明提供的计算机可读存储介质的实施例的示意图。如图4所示,计算机可读存储介质31存储有被处理器执行时执行如下方法的计算机程序32:
响应于接收到用户发起数据处理请求,判断当前数据库是否开启多级中心部署功能;
响应于当前数据库开启了多级中心部署功能,加载多级中心配置文件并解析多级中心配置文件以获取每个中心的数据库连接信息;
根据每个中心的数据库连接信息将数据处理请求并行下发到每个中心中进行数据处理;
响应于每个中心数据处理成功,结束当前数据处理并将结果返回给用户。
在本发明的一个优选实施例中,响应于接收到用户发起数据处理请求,判断当前数据库是否开启多级中心部署功能包括:
在数据库中新增1个全局***参数enable_multi_center;
响应于接收到用户发起数据处理请求,获取新增的全局***参数enable_multi_center的值;
响应于新增的全局***参数enable_multi_center的值为ture,确定当前数据库开启了多级中心部署功能。
在本发明的一个优选实施例中,根据每个中心的数据库连接信息将数据处理请求并行下发到每个中心中进行数据处理包括:
根据每个中心的数据库连接信息将数据处理请求并行下发到每个中心;
响应于中心接受到数据处理请求,对数据处理请求中的行数据进行数据处理,并对处理的行数据添加行锁以使得不同中心同时处理数据处理请求中不同行的数据。
在本发明的一个优选实施例中,还包括:
对数据处理请求开启一个事务以使每个中心进行数据处理在同一事务中进行。
此外,根据本发明实施例公开的方法还可以被实现为由处理器执行的计算机程序,该计算机程序可以存储在计算机可读存储介质中。在该计算机程序被处理器执行时,执行本发明实施例公开的方法中限定的上述功能。
此外,上述方法步骤以及***单元也可以利用控制器以及用于存储使得控制器实现上述步骤或单元功能的计算机程序的计算机可读存储介质实现。
本领域技术人员还将明白的是,结合这里的公开所描述的各种示例性逻辑块、模块、电路和算法步骤可以被实现为电子硬件、计算机软件或两者的组合。为了清楚地说明硬件和软件的这种可互换性,已经就各种示意性组件、方块、模块、电路和步骤的功能对其进行了一般性的描述。这种功能是被实现为软件还是被实现为硬件取决于具体应用以及施加给整个***的设计约束。本领域技术人员可以针对每种具体应用以各种方式来实现的功能,但是这种实现决定不应被解释为导致脱离本发明实施例公开的范围。
在一个或多个示例性设计中,功能可以在硬件、软件、固件或其任意组合中实现。如果在软件中实现,则可以将功能作为一个或多个指令或代码存储在计算机可读介质上或通过计算机可读介质来传送。计算机可读介质包括计算机存储介质和通信介质,该通信介质包括有助于将计算机程序从一个位置传送到另一个位置的任何介质。存储介质可以是能够被通用或专用计算机访问的任何可用介质。作为例子而非限制性的,该计算机可读介质可以包括RAM、ROM、EEPROM、CD-ROM或其它光盘存储设备、磁盘存储设备或其它磁性存储设备,或者是可以用于携带或存储形式为指令或数据结构的所需程序代码并且能够被通用或专用计算机或者通用或专用处理器访问的任何其它介质。此外,任何连接都可以适当地称为计算机可读介质。例如,如果使用同轴线缆、光纤线缆、双绞线、数字用户线路(DSL)或诸如红外线、无线电和微波的无线技术来从网站、服务器或其它远程源发送软件,则上述同轴线缆、光纤线缆、双绞线、DSL或诸如红外线、无线电和微波的无线技术均包括在介质的定义。如这里所使用的,磁盘和光盘包括压缩盘(CD)、激光盘、光盘、数字多功能盘(DVD)、软盘、蓝光盘,其中磁盘通常磁性地再现数据,而光盘利用激光光学地再现数据。上述内容的组合也应当包括在计算机可读介质的范围内。
以上是本发明公开的示例性实施例,但是应当注意,在不背离权利要求限定的本发明实施例公开的范围的前提下,可以进行多种改变和修改。根据这里描述的公开实施例的方法权利要求的功能、步骤和/或动作不需以任何特定顺序执行。此外,尽管本发明实施例公开的元素可以以个体形式描述或要求,但除非明确限制为单数,也可以理解为多个。
应当理解的是,在本文中使用的,除非上下文清楚地支持例外情况,单数形式“一个”旨在也包括复数形式。还应当理解的是,在本文中使用的“和/或”是指包括一个或者一个以上相关联地列出的项目的任意和所有可能组合。
上述本发明实施例公开实施例序号仅仅为了描述,不代表实施例的优劣。
本领域普通技术人员可以理解实现上述实施例的全部或部分步骤可以通过硬件来完成,也可以通过程序来指令相关的硬件完成,程序可以存储于一种计算机可读存储介质中,上述提到的存储介质可以是只读存储器,磁盘或光盘等。
所属领域的普通技术人员应当理解:以上任何实施例的讨论仅为示例性的,并非旨在暗示本发明实施例公开的范围(包括权利要求)被限于这些例子;在本发明实施例的思路下,以上实施例或者不同实施例中的技术特征之间也可以进行组合,并存在如上的本发明实施例的不同方面的许多其它变化,为了简明它们没有在细节中提供。因此,凡在本发明实施例的精神和原则之内,所做的任何省略、修改、等同替换、改进等,均应包含在本发明实施例的保护范围之内。
Claims (10)
1.一种数据库多中心的数据处理的方法,其特征在于,包括以下步骤:
响应于接收到用户发起数据处理请求,判断当前数据库是否开启多级中心部署功能;
响应于当前数据库开启了多级中心部署功能,加载多级中心配置文件并解析多级中心配置文件以获取每个中心的数据库连接信息;
根据每个中心的数据库连接信息将所述数据处理请求并行下发到每个中心中进行数据处理;
响应于每个中心数据处理成功,结束当前数据处理并将结果返回给用户。
2.根据权利要求1所述的方法,其特征在于,响应于接收到用户发起数据处理请求,判断当前数据库是否开启多级中心部署功能包括:
在数据库中新增1个全局***参数enable_multi_center;
响应于接收到用户发起数据处理请求,获取新增的全局***参数enable_multi_center的值;
响应于新增的全局***参数enable_multi_center的值为ture,确定当前数据库开启了多级中心部署功能。
3.根据权利要求1所述的方法,其特征在于,根据每个中心的数据库连接信息将所述数据处理请求并行下发到每个中心中进行数据处理包括:
根据每个中心的数据库连接信息将所述数据处理请求并行下发到每个中心;
响应于中心接受到所述数据处理请求,对数据处理请求中的行数据进行数据处理,并对处理的行数据添加行锁以使得不同中心同时处理数据处理请求中不同行的数据。
4.根据权利要求1所述的方法,其特征在于,还包括:
对所述数据处理请求开启一个事务以使每个中心进行数据处理在同一事务中进行。
5.一种数据库多中心的数据处理的装置,其特征在于,所述装置包括:
判断模块,所述判断模块配置为响应于接收到用户发起数据处理请求,判断当前数据库是否开启多级中心部署功能;
获取模块,所述获取模块配置为响应于当前数据库开启了多级中心部署功能,加载多级中心配置文件并解析多级中心配置文件以获取每个中心的数据库连接信息;
处理模块,所述处理模块配置为根据每个中心的数据库连接信息将所述数据处理请求并行下发到每个中心中进行数据处理;
反馈模块,所述反馈模块配置为响应于每个中心数据处理成功,结束当前数据处理并将结果返回给用户。
6.根据权利要求5所述的装置,其特征在于,所述判断模块还配置为:
在数据库中新增1个全局***参数enable_multi_center;
响应于接收到用户发起数据处理请求,获取新增的全局***参数enable_multi_center的值;
响应于新增的全局***参数enable_multi_center的值为ture,确定当前数据库开启了多级中心部署功能。
7.根据权利要求5所述的装置,其特征在于,所述处理模块还配置为:
根据每个中心的数据库连接信息将所述数据处理请求并行下发到每个中心;
响应于中心接受到所述数据处理请求,对数据处理请求中的行数据进行数据处理,并对处理的行数据添加行锁以使得不同中心同时处理数据处理请求中不同行的数据。
8.根据权利要求5所述的装置,其特征在于,还包括创建模块,所述创建模块配置为:
对所述数据处理请求开启一个事务以使每个中心进行数据处理在同一事务中进行。
9.一种计算机设备,其特征在于,包括:
至少一个处理器;以及
存储器,所述存储器存储有可在所述处理器上运行的计算机指令,所述指令由所述处理器执行时实现权利要求1-4任意一项所述方法的步骤。
10.一种计算机可读存储介质,所述计算机可读存储介质存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现权利要求1-4任意一项所述方法的步骤。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202210414578.6A CN114791837A (zh) | 2022-04-20 | 2022-04-20 | 一种数据库多中心的数据处理的方法、装置、设备及介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202210414578.6A CN114791837A (zh) | 2022-04-20 | 2022-04-20 | 一种数据库多中心的数据处理的方法、装置、设备及介质 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN114791837A true CN114791837A (zh) | 2022-07-26 |
Family
ID=82462798
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202210414578.6A Withdrawn CN114791837A (zh) | 2022-04-20 | 2022-04-20 | 一种数据库多中心的数据处理的方法、装置、设备及介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN114791837A (zh) |
-
2022
- 2022-04-20 CN CN202210414578.6A patent/CN114791837A/zh not_active Withdrawn
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN111338766B (zh) | 事务处理方法、装置、计算机设备及存储介质 | |
CN102682052B (zh) | 过滤数据存储上的查询数据 | |
CN104065636B (zh) | 数据处理方法和*** | |
CN111736964B (zh) | 事务处理方法、装置、计算机设备及存储介质 | |
CN111708615B (zh) | 事务处理方法、装置、计算机设备及存储介质 | |
CN111444027B (zh) | 事务处理方法、装置、计算机设备及存储介质 | |
CN112434000B (zh) | 一种基于hdfs的小文件合并方法、装置及设备 | |
CN106569896A (zh) | 一种数据分发及并行处理方法和*** | |
CN111917834A (zh) | 一种数据同步方法、装置、存储介质及计算机设备 | |
CN115712670A (zh) | 一种数据源管理*** | |
CN115858467A (zh) | 针对键值数据库的文件处理方法、装置、电子设备和介质 | |
CN111309750A (zh) | 图数据库的数据更新方法和装置 | |
CN112948025B (zh) | 数据加载方法、装置及存储介质、计算设备、计算*** | |
CN112632116B (zh) | 一种k-db数据库多节点集群调度的方法、***、设备及介质 | |
CN108733477B (zh) | 数据集群化处理的方法、装置及设备 | |
CN114791837A (zh) | 一种数据库多中心的数据处理的方法、装置、设备及介质 | |
CN115098228B (zh) | 事务处理方法、装置、计算机设备及存储介质 | |
CN115022307A (zh) | 一种文件下载方法及装置、存储介质及电子设备 | |
CN111339245B (zh) | 数据存储方法、装置、存储介质及设备 | |
US20020174111A1 (en) | System and method for managing resources stored in a relational database system | |
CN114268540B (zh) | 规则引擎的优化方法、装置及设备 | |
Alrahwan et al. | ASCF: Optimization of the Apriori Algorithm Using Spark‐Based Cuckoo Filter Structure | |
CN116680277B (zh) | 信息核验方法、装置、设备及存储介质 | |
CN116521633A (zh) | 文件清理方法、装置、电子设备与存储介质 | |
Abawajy et al. | Supporting disconnected operations in mobile computing |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
WW01 | Invention patent application withdrawn after publication |
Application publication date: 20220726 |
|
WW01 | Invention patent application withdrawn after publication |