CN115905270B - 数据库中主用数据节点的确定方法、装置及存储介质 - Google Patents
数据库中主用数据节点的确定方法、装置及存储介质 Download PDFInfo
- Publication number
- CN115905270B CN115905270B CN202310017431.8A CN202310017431A CN115905270B CN 115905270 B CN115905270 B CN 115905270B CN 202310017431 A CN202310017431 A CN 202310017431A CN 115905270 B CN115905270 B CN 115905270B
- Authority
- CN
- China
- Prior art keywords
- data
- data node
- target
- nodes
- node
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
- Y02D—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
- Y02D10/00—Energy efficient computing, e.g. low power processors, power management or thermal management
Landscapes
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本申请涉及一种数据库中主用数据节点的确定方法、装置及存储介质,该方法包括:在数据库中的主用数据节点出现故障的情况下,从N个数据节点中筛选出M个准新主用数据节点,数据库中包括N个数据节点,N个数据节点包括一个主用数据节点和L个备用数据节点;从M个准新主用数据节点中选择出目标数据节点;目标数据节点为回放已完成的准新主用数据节点;基于目标数据节点,从目标区域内确定新的主用数据节点,其中,新的主用数据节点上的数据与目标数据节点上的数据一致,数据库中的N个数据节点分布在多个区域内。通过本申请,解决了现有技术中在主用数据节点发生故障后,进行主备数据节点的切换的方式无法保证切换前后数据的一致性的问题。
Description
技术领域
本申请涉及数据处理领域,尤其涉及一种数据库中主用数据节点的确定方法、装置及存储介质。
背景技术
长期以来,金融级分布式数据库中各组件多采用一主及一备,或一主及多备的架构来保证其服务的稳定可靠性。
这里以数据节点(Data Node,简称为DN)。正常情况下,计算节点下发的数据业务写入主DN,剩余的一个或多个备DN承担数据业务的读操作。此种业务处理方式实现了主备机读写分离以及负载均衡,大大提高了数据库的业务处理能力和访问性能。当主DN发生故障时,则要求在其上的业务能够顺利并快速地切换到备DN执行,即在保证数据一致性的同时还要尽可能地降低对业务的影响。由于切换是数据库的基本功能,因此,主备DN间的切换效率直接影响着数据库的高可用特性,是衡量数据库是否能提供稳定服务的一个重要因素。
目前针对数据库中数据节点的主备切换,均是基于数据库的回放线程来比较各个DN上的数据量,这种比较方法是存在问题的,因为回放线程仅能反映DN节点的回放情况,无法准确反映同步情况。在数据库中,回放和同步是两个概念。回放指的是备机依次执行从主上同步过来的事务日志的过程,备机的回放线程决定回放的快慢;同步指的是主机上的事务执行日志发送到备机上的过程,同步线程决定同步的快慢。如DN1和DN2,DN1同步较快,但回放慢,DN2同步较慢,但回放快。实际等所有节点完全回放完成后,DN1上的数据量应大于DN2。而按照之前基于回放线程的切换逻辑,DN2最后升主,因此之前的切换逻辑会造成切换后数据丢失。
发明内容
本申请提供了一种数据库中主用数据节点的确定方法、装置及存储介质,以解决现有技术中在主用数据节点发生故障后,进行主备数据节点的切换的方式无法保证切换前后数据的一致性的问题。
第一方面,本申请提供了一种数据库中主用数据节点的确定方法,包括:在所述数据库中的主用数据节点出现故障的情况下,从N个数据节点中筛选出M个准新主用数据节点,其中,所述数据库中包括所述N个数据节点,所述N个数据节点包括一个主用数据节点和L个备用数据节点,所述M和所述L为小于所述N的正整数;从所述M个准新主用数据节点中选择出目标数据节点;其中,所述目标数据节点为回放已完成的准新主用数据节点;基于所述目标数据节点,从目标区域内确定新的主用数据节点,其中,所述新的主用数据节点上的数据与所述目标数据节点上的数据一致,所述数据库中的N个数据节点分布在多个区域内,所述目标区域为所述多个区域内的任一区域。
第二方面,本申请提供了一种数据库中主用数据节点的确定装置,包括:筛选模块,用于在所述数据库中的主用数据节点出现故障的情况下,从N个数据节点中筛选出M个准新主用数据节点,其中,所述数据库中包括所述N个数据节点,所述N个数据节点包括一个主用数据节点和L个备用数据节点,所述M和所述L为小于所述N的正整数;选择模块,用于从所述M个准新主用数据节点中选择出目标数据节点;其中,所述目标数据节点为回放已完成的准新主用数据节点;确定模块,用于基于所述目标数据节点,从目标区域内确定新的主用数据节点,其中,所述新的主用数据节点上的数据与所述目标数据节点上的数据一致,所述数据库中的N个数据节点分布在多个区域内,所述目标区域为所述多个区域内的任一区域。
第三方面,提供了一种电子设备,包括处理器、通信接口、存储器和通信总线,其中,处理器,通信接口,存储器通过通信总线完成相互间的通信;
存储器,用于存放计算机程序;
处理器,用于执行存储器上所存放的程序时,实现第一方面任一项实施例所述的方法步骤。
第四方面,提供了一种计算机可读存储介质,其上存储有计算机程序,所述计算机程序被处理器执行时实现如第一方面任一项实施例所述的方法步骤。
本申请实施例提供的上述技术方案与现有技术相比具有如下优点:
本申请实施例提供的该方法,可以先选择出M个准新主用数据节点,进而从M个准新主用数据节点中将回放已完成的准新主用数据节点作为确定新的主用数据节点的依据,即新的主用数据节点上的数据与目标数据节点上的数据一致,从而保证了新的主用数据节点与出现故障的旧的主用数据节点的数据一致性,从而解决了现有技术中在主用数据节点发生故障后,进行主备数据节点的切换的方式无法保证切换前后数据的一致性的问题。
附图说明
此处的附图被并入说明书中并构成本说明书的一部分,示出了符合本发明的实施例,并与说明书一起用于解释本发明的原理。
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,对于本领域普通技术人员而言,在不付出创造性劳动性的前提下,还可以根据这些附图获得其他的附图。
图1为本申请实施例提供的一种数据库中主备数据节点的切换方法的流程示意图;
图2为本申请实施例提供的一种基于同步线程的数据库数据节点切换优化方法的流程示意图;
图3为本申请实施例提供的一种数据库中主备数据节点的切换装置的结构示意图;
图4为本申请实施例提供的一种电子设备的结构示意图。
具体实施方式
为使本申请实施例的目的、技术方案和优点更加清楚,下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本申请的一部分实施例,而不是全部的实施例。基于本申请中的实施例,本领域普通技术人员在没有做出创造性劳动的前提下所获得的所有其他实施例,都属于本申请保护的范围。
图1为本申请实施例提供的一种数据库中主备数据节点的切换方法的流程示意图,如图1所示,该方法的步骤包括:
步骤101,在数据库中的主用数据节点出现故障的情况下,从N个数据节点中筛选出M个准新主用数据节点,其中,数据库中包括N个数据节点,N个数据节点包括一个主用数据节点和L个备用数据节点,M和L为小于N的正整数;
在本申请实施例中该M个准新主用数据节点优先为从出现故障的主用数据节点同步事务最多的数据节点,也就是说,如果当前备用节点中如果只有一个数据节点同步的事务最多则该准新主用数据节点的数量是一个,如果当前备用节点中如果有多个数据节点同步的事务同时,则该准新主用数据节点的数量也可以是多个。例如当前N的取值为10,其中数据节点1为主用数据节点,且该主用数据节点出现了故障,而此时对于剩下的9个数据节点,如果数据节点2,数据节点5和数据节点8从数据节点1同步的事务是一样多,且高于其他数据节点同步的事务,则该M的取值为3,则准新主用数据节点为数据节点2,数据节点5和数据节点8。当然,上述仅仅是举例说明,具体可以根据实际情况进行相应的设置。
步骤102,从M个准新主用数据节点中选择出目标数据节点,其中,目标数据节点为回放已完成的准新主用数据节点;
步骤103,基于目标数据节点,从目标区域内确定新的主用数据节点,其中,新的主用数据节点上的数据与目标数据节点上的数据一致,数据库中的N个数据节点分布在多个区域内,目标区域为多个区域内的任一区域。
需要说明的是,本申请实施例中的区域在实际场景中区域可以是以机房进行划分,也可以是以实际地域进行划分,例如以省为单位,又例如以南方区域,北方区域为单位。在具体应用场景可以根据实际情况进行相应的设置。
通过上述步骤101至步骤103可知,在本申请实施例中可以先选择出M个准新主用数据节点,进而从M个准新主用数据节点中将回放已完成的准新主用数据节点作为确定新的主用数据节点的依据,即新的主用数据节点上的数据与目标数据节点上的数据一致,从而保证了新的主用数据节点与出现故障的旧的主用数据节点的数据一致性,从而解决了现有技术中在主用数据节点发生故障后,进行主备数据节点的切换的方式无法保证切换前后数据的一致性的问题。
在本申请实施例中,对于本申请实施例中的上述步骤101中涉及到的从N个数据节点中筛选出M个准新主用数据节点的方式,进一步可以包括:
步骤11,向N个数据节点发送查询同步状态的请求,以查询N个数据节点的同步位点;
步骤12,将同步位点字段最大的数据节点确定为M个准新主用数据节点中的数据节点,其中,M个准新主用数据节点分布在一个或多个区域。
需要说明的是,同步位点所对应的字段是备用数据节点中已经接收到的主用数据节点的事务编号,也即表示备用数据节点的同步线程已经同步过来的主用数据节点事务集合,基于此,同步位点越大,则表示备用数据节点从主用数据节点上同步过来的事务越多。可见,如果备用数据节点的同步点位中存在多个最大同步点位,则该主新主用数据节点的数量也是多个。而且该多个准新主用数据节点可以分布一个或多个区域,在具体示例中可以是一个或多个机房中。也就是说,在本申请中可以回放事务最多的数据节点作为准新主用数据节点,即确定出来的准新主用数据节点其回放事务也是最先完成的,从而保证了后续基于目标数据节点,从目标区域内确定新的主用数据节点,以使得新的主用数据节点上的数据与目标数据节点上的数据一致,在保证数据一致性前提下还提升了切换新的主用数据节点的效率,节省了切换时间。
在本申请实施例中,如果该数据库中的N个数据点分布在多个区域,而根据实际需求可以将其中之一的区域中的数据节点作为新的主用数据节点,则在本申请实施例中步骤103中涉及到的基于目标数据节点,从目标区域内确定新的主用数据节点的方式,进一步可以包括:
步骤21,向M个准新主用数据节点发送等回放的请求;
步骤22,在M个准新主用数据节点中存在回放完成的第一目标数据节点的情况下,确定第一目标数据节点是否在目标区域内;其中,目标区域为待设置新的主用数据节点的区域;
步骤23,在第一目标数据节点在目标区域的情况下,将第一目标数据节点确定为新的主用数据节点;
步骤24,在第一目标数据节点不在目标区域,且目标区域不存在准新主用数据节点的情况下,基于目标区域内的第二目标数据节点从第一目标数据节点中追数据,并在追数据成功后将第二目标数据节点确定为新的主用数据节点;
步骤25,在第一目标数据节点不在目标区域,且目标区域存在准新主用数据节点的情况下,等待目标区域内准新主用数据节点回放完成后,将目标区域内准新主用数据节点确定为新的主用数据节点。
通过上述步骤21至步骤25可知,如果当前已完成回放的准新主用数据节点在设置新的主用数据节点的区域中,则可以直接将其作为新的主用数据节点,在保证数据一致性前提下还提升了切换新的主用数据节点的效率,节省了切换时间。如果当前已完成回放的准新主用数据节点未在设置新的主用数据节点的区域中,且该目标区域中有准新主用数据节点,则等待该目标区域中的准新主用数据节点回放完成,在保证数据一致性的前提下,节省了需要从当前已完成回放的准新主用数据节点中追数据的过程,如果该目标区域中不存在准新主用数据节点,从需要从该目标区域中选择状态正常的数据节点从已完成回放的准新主用数据节点追数据,直到追平数据,从而保证了数据的一致性。可见,在本申请实施例中如果要将某一区域作为新的主用数据节点的区域,也可以保证新旧主用数据节点之间的数据一致性。
在本申请实施例的可选实施方式中,对于上述步骤24中涉及到的基于目标区域内的第二目标数据节点从第一目标数据节点中追数据的方式,进一步可以包括:
步骤31,从目标区域内的数据节点中查询一台状态正常的数据节点作为第二目标数据节点;
需要说明的是,本申请实施例中涉及到的状态正常的数据节点是指数据节点接收和发送数据均是正常,且未出现其他异常的状况。在本申请实施例中由于是想在目标区域内确定出新的主用数据节点,因此在目标区域内没有准新主用数据节点,因此需要从该目标区域内确定出一台状态正常的数据节点。
步骤32,将第一目标数据节点确定为临时主用数据节点;
步骤33,基于第二目标数据节点从临时主用数据节点追数据。
在本申请实施例中,第二目标数据节点从临时主用数据节点追数据,第二目标数据节点从所述临时主用数据节点同步数据,直到第二目标数据节点中的数据与该临时主用数据节点中的数据一致,由于临时主用数据节点是从出现故障的旧的主用数据节点回放数据已完成的数据节点,因此,在基于第二目标数据节点从临时主用数据节点追数据,相当于是第二目标数据节点从出现故障的旧的主用数据节点同步数据,从而保证了新旧主用数据节点的数据一致。
在本申请实施例中,在从N个数据节点中筛选出M个准新主用数据节点之前,本申请实施例中的方法还可以包括:控制数据库中N个数据节点停止服务,并将N个数据节点设置为只读状态。
通过将数据库中的N个数据节点停止服务,从而可以使得数据节点侧业务和原主用数据节点上的所有业务被断开,保证了原主用数据节点上的业务不再增加,以便后续在新旧主用数据节点切换后能够保证数据一致。
在本申请实施例中,在基于目标数据节点,从目标区域内确定新的主用数据节点之后,本申请实施例的方法还可以包括:
步骤41,在数据库中执行主备数据节点的切换操作;
步骤42,控制数据库中N个数据节点启动服务,并将新的主用数据节点设置为读写状态。
在确定出新的主用数据节点后,则可以进行主备数据节点的切换操作,进而控制数据库中N个数据节点启动服务,并将新的主用数据节点设置为读写状态,在新旧主用数据节点一致的情况下,重新启动服务,保证数据库中的数据节点正常运行。
下面结合本申请实施例的具体实施方式,对本申请进行解释说明。该具体实施方式提供了一种基于同步线程的数据库数据节点切换优化方法,该方法的步骤可以包括:
步骤201,集群管理器(ClusterManager,CM)探测到分片中主机心跳丢失及同步/回放线程异常,判定主机异常,触发故障切换选主流程;
步骤202,CM向计算节点管理器(ProxyManager,PM)发送业务停服请求;
可见,对于该步骤202CM向PM发送业务停服请求用于将所有的DN节点设置成只读状态以使所有业务被断开。
步骤203,CM向各备机数据库监控代理(DBAgent)发送查询同步状态的请求;
步骤204,各备机DBAgent连接其上数据库查询同步位点等字段,返回给CM;
可见,CM向各备机DBAgent发送查询同步状态的请求,基于此,DBAgent收到请求后连接数据库执行相关命令查询同步位点等字段而后返回给CM。
步骤205,CM由同步位点等字段比较筛选出准新主列表;
对于步骤205进一步可以是:CM通过比较各备用数据节点的同步位点筛选出准新主列表,认为各个准新主是原主机的一致性副本,而后向各准新主的DBAgent发送等回放请求。DBAgent收到请求后不断连接其上数据库执行相关命令查看该准新主是否回放完成,若回放完成则给CM发送成功回复。
步骤206,CM向各准新主DBAgent发送等回放请求;
步骤207,若目标机房中有准新主,则等目标机房中的准新主回放完成后将其切主,其余备机切备;
可见,如果有准新主回放完成,且该准新主在目标机房内,则CM直接向其发送升主请求,向其余备机发送切备请求。由此降低切换耗时,减少因等所有准新主回放造成的时间浪费。
步骤208,若目标机房中无准新主,则在目标机房中选状态正常的备机,以回放完成的准新主作为临时主机去追数据。追数据成功后将其切主,其余备机切备;
可见,如果有准新主回放完成,且目标机房内没有准新主,则在目标机房中选状态正常的备机,以该回放完成的准新主作为临时主机去追数据,追数据成功后CM向该追数据的备机发送升主请求,向其余备机发送切备请求。由此满足用户指定主机房的定制化需求,同时最大限度保证数据不丢失。
步骤209,主备切换成功后CM向PM发送业务启服请求。
可见,CM是整个故障切换流程中的协调者,先识别到主机心跳丢失及同步/回放线程异常,判定主机异常,触发故障切换选主流程,然后根据选主策略选出新主并向新主和其余备机发送升主/切备请求以完成切换过程。PM在故障切换过程中为透传者,用于将CM发送的停服启服请求解析透传给计算节点去处理,同时将计算节点执行停服启服动作的结果响应回复给CM。DBAgent在故障切换过程中为执行者,用于执行CM发来的查询同步状态,等回放及追数据请求,其本质是连接其上数据库执行相应的SQL语句,而后反馈结果响应给CM。
可见,通过本申请实施例中的方式,可以减少数据丢失,即在主用数据节点宕机时通过查询比较各备用数据节点的同步情况筛选出同步最快的备用数据节点作为准新主,而后等准新主回放或者以准新主作为参照进行追数据,使得最后筛选出的新主必是所有备机中数据最多的,保证切换前后数据的一致性。而且通过本申请实施例,可以节省切换时间,即现有技术中的切换逻辑中是等所有备机回放完成后才进行切主或切备,此种方式会造成时间的浪费。而本本申请实施例中中只要有一个准新主回放完成即可进行切换,由此缩短了原主故障宕机到新主启服的时间,降低切换对业务的影响。此外,本申请实施例中的方式适用性广泛,可应用到数据库中各种主备数据节点的切换流程中,具有普适性。
下面结合本申请实施例的具体示例再进一步进行解释说明,如图2所示,该具体示例的方法步骤包括:
步骤301,CM探测到原主故障宕机时通知PM停服并将所有DN节点设置成只读状态;
基于此,数据节点侧业务和原主上的所有业务被断开;
步骤301,CM向所有备机发送查询同步状态的请求;
步骤303,备机DBAgent收到请求后连接其上数据库执行相关回放查询同步位点等字段并将结果反馈给CM;
步骤304,CM比较筛选出同步位点字段最大的备机作为准新主,其中,筛选出的准新主可能有多个并且分布在不同的机房;
步骤305,CM向所有准新主发送等回放的请求;
步骤306,准新主DBAgent收到请求后不断连接其上数据库执行相关回放查询该节点是否回放结束,若回放完成则将结果反馈给CM;
步骤307,CM判断回放完成的准新主是否在目标机房内,若在目标机房内则直接进行切主切备流程;
步骤308,若目标机房没有准新主,则在目标机房内找一台状态正常的备机,以该准新主作为临时主机去追数据;
步骤309,CM向回放完成的准新主或追数据成功的备机发送升主请求,向其余备机发送切备请求;
步骤310,升主/切备完成后,CM通知PM启服,并设置新主DN读写状态。
可见,在本申请实施例中,采用基于同步线程的切换优化方案,与现有技术中的基于回放线程的切换方案相比,选主策略更加合理,切换前后数据不一致的概率更低。现有技术中切换方案的核心是认为回放快的DN数据量更大,而本申请实施例中先确认同步快的DN数据量大,而后等该DN回放结束后再将其升主。由于回放和同步是两个概念,同步快的DN在回放结束后数据量更多,因此通过本申请实施例更能保证切换前后数据的一致性。同时与现有技术中的一些方案中需等待所有备机回放结束后再切主的不同点是本方案在锁定准新主后,只要有一个准新主回放结束即将其升主,此举节省了切换耗时,降低故障情况下对业务的影响。本申请实施例中可应用到数据库中各种主备数据节点的切换流程中,采用本申请实施例可以提升数据节点的切换性能,继而提升分布式数据库的可靠性和高可用性。
对应于上述图1,本申请实施例还提供了一种数据库中主用数据节点的确定装置,如图3所示,该装置包括:
筛选模块42,用于在数据库中的主用数据节点出现故障的情况下,从N个数据节点中筛选出M个准新主用数据节点,其中,数据库中包括N个数据节点,N个数据节点包括一个主用数据节点和L个备用数据节点,M和L为小于N的正整数;
选择模块44,用于从M个准新主用数据节点中选择出目标数据节点;其中,目标数据节点为回放已完成的准新主用数据节点;
确定模块46,用于基于目标数据节点,从目标区域内确定新的主用数据节点,其中,新的主用数据节点上的数据与目标数据节点上的数据一致,数据库中的N个数据节点分布在多个区域内,目标区域为多个区域内的任一区域。
可选地,本申请实施例中的筛选模块42进一步可以包括:第一发送单元,用于向N个数据节点发送查询同步状态的请求,以查询N个数据节点的同步位点;第一确定单元,用于将同步位点字段最大的数据节点确定为M个准新主用数据节点中的数据节点,其中,M个准新主用数据节点分布在一个或多个区域。
可选地,本申请实施例中的确定模块46进一步可以包括:第二发送单元,用于向M个准新主用数据节点发送等回放的请求;第二确定单元,用于在M个准新主用数据节点中存在回放完成的第一目标数据节点的情况下,确定第一目标数据节点是否在目标区域内;其中,目标区域为待设置新的主用数据节点的区域;第三确定单元,用于在第一目标数据节点在目标区域的情况下,将第一目标数据节点确定为新的主用数据节点;第四确定单元,用于在第一目标数据节点不在目标区域,且目标区域不存在准新主用数据节点的情况下,基于目标区域内的第二目标数据节点从第一目标数据节点中追数据,并在追数据成功后将第二目标数据节点确定为新的主用数据;第五确定单元,用于在第一目标数据节点不在目标区域,且目标区域存在准新主用数据节点的情况下,等待目标区域内准新主用数据节点回放完成后,将目标区域内准新主用数据节点确定为新的主用数据。
可选地,本申请实施例中的第四确定单元进一步可以包括:查询子单元,用于从目标区域内的数据节点中查询一台状态正常的数据节点作为第二目标数据节点;确定子单元,用于将第一目标数据节点确定为临时主用数据节点;处理子单元,用于基于第二目标数据节点从临时主用数据节点追数据。
可选地,本申请实施例中的装置还可以包括:第一处理模块,用于在从N个数据节点中筛选出M个准新主用数据节点之前,控制数据库中N个数据节点停止服务,并将N个数据节点设置为只读状态。
可选地,本申请实施例中的装置还可以包括:执行模块,用于在基于目标数据节点,从目标区域内确定新的主用数据节点之后,在数据库中执行主备数据节点的切换操作;第二处理模块,用于控制数据库中N个数据节点启动服务,并将新的主用数据节点设置为读写状态。
如图4所示,本申请实施例提供了一种电子设备,包括处理器111、通信接口112、存储器113和通信总线114,其中,处理器111,通信接口112,存储器113通过通信总线114完成相互间的通信,
存储器113,用于存放计算机程序;
在本申请一个实施例中,处理器111,用于执行存储器113上所存放的程序时,实现前述任意一个方法实施例提供的数据库中主用数据节点的确定方法,其所起到的作用也是一致的,在此不再赘述。
本申请实施例还提供了一种计算机可读存储介质,其上存储有计算机程序,所述计算机程序被处理器执行时实现如前述任意一个方法实施例提供的数据库中主用数据节点的确定方法的步骤。
需要说明的是,在本文中,诸如“第一”和“第二”等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来,而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
以上所述仅是本发明的具体实施方式,使本领域技术人员能够理解或实现本发明。对这些实施例的多种修改对本领域的技术人员来说将是显而易见的,本文中所定义的一般原理可以在不脱离本发明的精神或范围的情况下,在其它实施例中实现。因此,本发明将不会被限制于本文所示的这些实施例,而是要符合与本文所申请的原理和新颖特点相一致的最宽的范围。
Claims (10)
1.一种数据库中主用数据节点的确定方法,其特征在于,包括:
在所述数据库中的主用数据节点出现故障的情况下,从N个数据节点中筛选出M个准新主用数据节点,其中,所述数据库中包括所述N个数据节点,所述N个数据节点包括一个主用数据节点和L个备用数据节点,所述M和所述L为小于所述N的正整数;
从所述M个准新主用数据节点中选择出目标数据节点;其中,所述目标数据节点为回放已完成的准新主用数据节点;
基于所述目标数据节点,从目标区域内确定新的主用数据节点,其中,所述新的主用数据节点上的数据与所述目标数据节点上的数据一致,所述数据库中的N个数据节点分布在多个区域内,所述目标区域为所述多个区域内的任一区域。
2.根据权利要求1所述的方法,其特征在于,所述从N个数据节点中筛选出M个准新主用数据节点,包括:
向所述N个数据节点发送查询同步状态的请求,以查询所述N个数据节点的同步位点;
将同步位点字段最大的数据节点确定为所述M个准新主用数据节点中的数据节点,其中,所述M个准新主用数据节点分布在一个或多个区域。
3.根据权利要求1所述的方法,其特征在于,所述基于所述目标数据节点,从目标区域内确定新的主用数据节点,包括:
向所述M个准新主用数据节点发送等回放的请求;
在所述M个准新主用数据节点中存在回放完成的第一目标数据节点的情况下,确定所述第一目标数据节点是否在目标区域内;其中,所述目标区域为待设置所述新的主用数据节点的区域;
在所述第一目标数据节点在目标区域的情况下,将所述第一目标数据节点确定为所述新的主用数据节点;
在所述第一目标数据节点不在目标区域,且所述目标区域不存在准新主用数据节点的情况下,基于所述目标区域内的第二目标数据节点从所述第一目标数据节点中追数据,并在追数据成功后将所述第二目标数据节点确定为所述新的主用数据节点;
在所述第一目标数据节点不在目标区域,且所述目标区域存在准新主用数据节点的情况下,等待所述目标区域内准新主用数据节点回放完成后,将所述目标区域内准新主用数据节点确定为所述新的主用数据节点。
4.根据权利要求3所述的方法,其特征在于,所述基于所述目标区域内的第二目标数据节点从所述第一目标数据节点中追数据,包括:
从所述目标区域内的数据节点中查询一台状态正常的数据节点作为所述第二目标数据节点;
将所述第一目标数据节点确定为临时主用数据节点;
基于所述第二目标数据节点从所述临时主用数据节点追数据。
5.根据权利要求1所述的方法,其特征在于,在从N个数据节点中筛选出M个准新主用数据节点之前,所述方法还包括:
控制所述数据库中所述N个数据节点停止服务,并将所述N个数据节点设置为只读状态。
6.根据权利要求5所述的方法,其特征在于,在基于所述目标数据节点,从目标区域内确定新的主用数据节点之后,所述方法还包括:
在所述数据库中执行主备数据节点的切换操作;
控制所述数据库中所述N个数据节点启动服务,并将所述新的主用数据节点设置为读写状态。
7.一种数据库中主用数据节点的确定装置,其特征在于,包括:
筛选模块,用于在所述数据库中的主用数据节点出现故障的情况下,从N个数据节点中筛选出M个准新主用数据节点,其中,所述数据库中包括所述N个数据节点,所述N个数据节点包括一个主用数据节点和L个备用数据节点,所述M和所述L为小于所述N的正整数;
选择模块,用于从所述M个准新主用数据节点中选择出目标数据节点;其中,所述目标数据节点为回放已完成的准新主用数据节点;
确定模块,用于基于所述目标数据节点,从目标区域内确定新的主用数据节点,其中,所述新的主用数据节点上的数据与所述目标数据节点上的数据一致,所述数据库中的N个数据节点分布在多个区域内,所述目标区域为所述多个区域内的任一区域。
8.根据权利要求7所述的装置,其特征在于,所述筛选模块包括:
第一发送单元,用于向所述N个数据节点发送查询同步状态的请求,以查询所述N个数据节点的同步位点;
第一确定单元,用于将同步位点字段最大的数据节点确定为所述M个准新主用数据节点中的数据节点,其中,所述M个准新主用数据节点分布在一个或多个区域。
9.一种电子设备,其特征在于,包括处理器、通信接口、存储器和通信总线,其中,处理器,通信接口,存储器通过通信总线完成相互间的通信;
存储器,用于存放计算机程序;
处理器,用于执行存储器上所存放的程序时,实现权利要求1-6任一项所述的方法步骤。
10.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现如权利要求1-6任一项所述的方法步骤。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202310017431.8A CN115905270B (zh) | 2023-01-06 | 2023-01-06 | 数据库中主用数据节点的确定方法、装置及存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202310017431.8A CN115905270B (zh) | 2023-01-06 | 2023-01-06 | 数据库中主用数据节点的确定方法、装置及存储介质 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN115905270A CN115905270A (zh) | 2023-04-04 |
CN115905270B true CN115905270B (zh) | 2023-06-09 |
Family
ID=86472815
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202310017431.8A Active CN115905270B (zh) | 2023-01-06 | 2023-01-06 | 数据库中主用数据节点的确定方法、装置及存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN115905270B (zh) |
Family Cites Families (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN111028902A (zh) * | 2019-12-09 | 2020-04-17 | 天津开心生活科技有限公司 | 基于节点切换的请求处理方法及装置、设备和介质 |
CN113868028A (zh) * | 2020-06-30 | 2021-12-31 | 华为技术有限公司 | 一种在数据节点上回放日志的方法、数据节点及*** |
CN113987078B (zh) * | 2021-12-24 | 2022-04-19 | 中兴通讯股份有限公司 | 数据同步方法、设备及计算机可读存储介质 |
-
2023
- 2023-01-06 CN CN202310017431.8A patent/CN115905270B/zh active Active
Also Published As
Publication number | Publication date |
---|---|
CN115905270A (zh) | 2023-04-04 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US11360854B2 (en) | Storage cluster configuration change method, storage cluster, and computer system | |
WO2017177941A1 (zh) | 主备数据库切换方法和装置 | |
WO2016070375A1 (zh) | 一种分布式存储复制***和方法 | |
EP2434729A2 (en) | Method for providing access to data items from a distributed storage system | |
WO2012071920A1 (zh) | 分布式内存数据库的实现方法、***、令牌控制器及内存数据库 | |
WO2021136422A1 (zh) | 状态管理方法、主备应用服务器的切换方法及电子设备 | |
CN111049928B (zh) | 数据同步方法、***、电子设备及计算机可读存储介质 | |
CN113987064A (zh) | 数据处理方法、***及设备 | |
TWI677797B (zh) | 主備資料庫的管理方法、系統及其設備 | |
CN115794499B (zh) | 一种用于分布式块存储集群间双活复制数据的方法和*** | |
WO2024008156A1 (zh) | 数据库***、主库选举方法及装置 | |
CN116107828A (zh) | 主节点选择方法、分布式数据库及存储介质 | |
CN110635941A (zh) | 一种数据库节点集群故障迁移方法与装置 | |
CN110196859A (zh) | 基于jdbc分发器的数据库读写分离集群实时一致性方法 | |
CN110377664B (zh) | 数据同步方法、装置、服务器及存储介质 | |
CN105323271B (zh) | 一种云计算***以及云计算***的处理方法和装置 | |
CN115905270B (zh) | 数据库中主用数据节点的确定方法、装置及存储介质 | |
CN111130896A (zh) | 一种nfs故障的切换方法、***及双控存储*** | |
CN115658245B (zh) | 一种基于分布式数据库***的事务提交***、方法及装置 | |
CN113905054B (zh) | 基于RDMA的Kudu集群数据同步方法、装置、*** | |
CN110362428A (zh) | 在线自动恢复数据库块的方法和*** | |
CN117389771A (zh) | 数据库***的故障处理方法及计算设备 | |
CN112650629B (zh) | 区块链索引数据恢复方法、装置、设备和计算机存储介质 | |
CN117389772A (zh) | 数据库***的故障处理方法及计算设备 | |
CN118093250B (zh) | 一种故障处理方法、装置及电子设备和存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |