CN110750392A - 提高双活从节点写入带宽的方法、***、终端及存储介质 - Google Patents
提高双活从节点写入带宽的方法、***、终端及存储介质 Download PDFInfo
- Publication number
- CN110750392A CN110750392A CN201910820054.5A CN201910820054A CN110750392A CN 110750392 A CN110750392 A CN 110750392A CN 201910820054 A CN201910820054 A CN 201910820054A CN 110750392 A CN110750392 A CN 110750392A
- Authority
- CN
- China
- Prior art keywords
- write
- data
- node
- operation instruction
- execution
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Withdrawn
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/07—Responding to the occurrence of a fault, e.g. fault tolerance
- G06F11/16—Error detection or correction of the data by redundancy in hardware
- G06F11/20—Error detection or correction of the data by redundancy in hardware using active fault-masking, e.g. by switching out faulty elements or by switching in spare elements
- G06F11/2053—Error detection or correction of the data by redundancy in hardware using active fault-masking, e.g. by switching out faulty elements or by switching in spare elements where persistent mass storage functionality or persistent mass storage control functionality is redundant
- G06F11/2056—Error detection or correction of the data by redundancy in hardware using active fault-masking, e.g. by switching out faulty elements or by switching in spare elements where persistent mass storage functionality or persistent mass storage control functionality is redundant by mirroring
- G06F11/2082—Data synchronisation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F9/00—Arrangements for program control, e.g. control units
- G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
- G06F9/46—Multiprogramming arrangements
- G06F9/50—Allocation of resources, e.g. of the central processing unit [CPU]
- G06F9/5061—Partitioning or combining of resources
- G06F9/5072—Grid computing
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Software Systems (AREA)
- Quality & Reliability (AREA)
- Mathematical Physics (AREA)
- Hardware Redundancy (AREA)
Abstract
本发明提供一种提高双活从节点写入带宽的方法、***、终端及存储介质,包括:将主机下发的写IO数据同步至主节点;获取主节点返回的对所述写IO数据的操作指令;执行所述操作指令。本发明能够大大减少IO同步链路上的带宽占用,从而提高了从节点写IO的带宽。
Description
技术领域
本发明设计数据存储技术领域,具体涉及一种提高双活从节点写入带宽的方法、***、终端及存储介质。
背景技术
存储双活***是一种传统存储阵列的一种容灾备份***,同时也是一种负载均衡的***,存储双***的两个节点分为主从节点,主从节点都可以接收处理来自主机端的写IO,当IO从主节点接收时,主节点把数据同步一份到从节点,待收到从节点应答后主从节点开始把数据写入到存储***中,当IO从从节点接收时,从节点先把数据同步一份到主节点,主节点应答从节点后,主节点再把数据同步到从节点做一次数据同步,之前步骤和主节点接收IO数据的处理方法一致,这样的好处是实现逻辑简单,但是当IO数据从从节点接入时,由于数据在双活节点间同步了两次,导致性能比较低。
发明内容
针对现有技术的上述不足,本发明提供一种提高双活从节点写入带宽的方法、***、终端及存储介质,以解决上述技术问题。
第一方面,本发明提供一种提高双活从节点写入带宽的方法,包括:
将主机下发的写IO数据同步至主节点;
获取主节点返回的对所述写IO数据的操作指令;
执行所述操作指令。
进一步的,所述获取主节点返回的对所述写IO数据的操作指令,包括:
获取所述操作指令中的写IO数据地址;
获取所述操作指令中的写入方式。
进一步的,所述执行操作指令,包括:
根据写入方式将写IO数据写入所述写IO数据地址。
进一步的,在所述执行操作指令之前,所述方法还包括:
向主节点发送执行启动提示,主节点根据所述执行启动提示与从节点保持同步将写IO数据写入存储***。
第二方面,本发明提供一种提高双活从节点写入带宽的***,包括:
数据同步单元,配置用于将主机下发的写IO数据同步至主节点;
指令获取单元,配置用于获取主节点返回的对所述写IO数据的操作指令;
指令执行单元,配置用于执行所述操作指令。
进一步的,所述指令获取单元包括:
地址获取模块,配置用于获取主节点返回的写IO数据地址;
方式获取模块,配置用于获取所述操作指令中的写入方式。
进一步的,所述指令执行单元包括:
数据写入模块,配置用于根据写入方式将写IO数据写入所述写IO数据地址。
进一步的,所述***还包括:
执行反馈模块,配置用于向主节点发送执行启动提示,主节点根据所述执行启动提示与从节点保持同步将写IO数据写入存储***。
第三方面,提供一种终端,包括:
处理器、存储器,其中,
该存储器用于存储计算机程序,
该处理器用于从存储器中调用并运行该计算机程序,使得终端执行上述的终端的方法。
第四方面,提供了一种计算机存储介质,所述计算机可读存储介质中存储有指令,当其在计算机上运行时,使得计算机执行上述各方面所述的方法。
本发明的有益效果在于,
本发明提供的提高双活从节点写入带宽的方法、***、终端及存储介质,通过在从节点接收到主机IO后,先把数据同步一份到主节点,主节点在应答从节点时,不再同步数据到从节点,只发送写IO操作指令到从节点,指令携带写IO地址即可,一般一个IO地址大小在64字节左右,而一个数据IO大小在8K字节大小,大大减少了IO同步链路上的带宽占用,从而提高了从节点写IO的带宽。
此外,本发明设计原理可靠,结构简单,具有非常广泛的应用前景。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,对于本领域普通技术人员而言,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1是本发明一个实施例的方法的示意性流程图。
图2是本发明一个实施例的***的示意性框图。
图3为本发明实施例提供的一种终端的结构示意图。
具体实施方式
为了使本技术领域的人员更好地理解本发明中的技术方案,下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都应当属于本发明保护的范围。
下面对本发明中出现的关键术语进行解释。
图1是本发明一个实施例的方法的示意性流程图。其中,图1执行主体可以为一种提高双活从节点写入带宽的***。
如图1所示,该方法100包括:
步骤110,将主机下发的写IO数据同步至主节点;
步骤120,获取主节点返回的对所述写IO数据的操作指令;
步骤130,执行所述操作指令。
可选地,作为本发明一个实施例,所述获取主节点返回的对所述写IO数据的操作指令,包括:
获取所述操作指令中的写IO数据地址;
获取所述操作指令中的写入方式。
可选地,作为本发明一个实施例,所述执行操作指令,包括:
根据写入方式将写IO数据写入所述写IO数据地址。
可选地,作为本发明一个实施例,所述方法还包括:
向主节点发送执行启动提示,主节点根据所述执行启动提示与从节点保持同步将写IO数据写入存储***。
为了便于对本发明的理解,下面以本发明提高双活从节点写入带宽的方法的原理,结合实施例中对从节点写入带宽进行提高的过程,对本发明提供的提高双活从节点写入带宽的方法做进一步的描述。
具体的,所述提高双活从节点写入带宽的方法包括:
S1、将主机下发的写IO数据同步至主节点。
从节点接收到主机下发的写IO数据后,立即对写IO数据进行备份,并将备份数据发送至主节点,从而实现写IO数据的主从节点同步。
S2、获取主节点返回的对所述写IO数据的操作指令。
主节点接收到来自从节点的同步数据后,生成对写IO数据的操作指令,操作指令包括写入地址和写入方式,其中写入方式包括缓存和写盘。主节点将操作指令下发至从节点。从节点接收到操作指令后,读取操作指令中的写入地址和写入方式。
S3、执行所述操作指令。
根据步骤S2中读取的写入方式和写入地址将写IO数据写入存储***。例如,写入方式为缓存,写入地址为相应的缓存地址X,从节点定位缓存地址X,将写IO数据缓存至定位的缓存地址X。
S4、从节点在开始执行写IO数据的操作指令前,生成执行启动提示并将执行启动提示发送至主节点,主节点接收到执行启动提示后立即将写IO数据写入存储***,从而保证主节点和从节点同时将数据写入存储***。
如图2示,该***200包括:
数据同步单元210,配置用于将主机下发的写IO数据同步至主节点;
指令获取单元220,配置用于获取主节点返回的对所述写IO数据的操作指令;
指令执行单元230,配置用于执行所述操作指令。
可选地,作为本发明一个实施例,所述指令获取单元包括:
地址获取模块,配置用于获取主节点返回的写IO数据地址;
方式获取模块,配置用于获取所述操作指令中的写入方式。
可选地,作为本发明一个实施例,所述指令执行单元包括:
数据写入模块,配置用于根据写入方式将写IO数据写入所述写IO数据地址。
可选地,作为本发明一个实施例,所述***还包括:
执行反馈模块,配置用于向主节点发送执行启动提示,主节点根据所述执行启动提示与从节点保持同步将写IO数据写入存储***。
图3为本发明实施例提供的一种终端***300的结构示意图,该终端***300可以用于执行本发明实施例提供的提高双活从节点写入带宽的方法。
其中,该终端***300可以包括:处理器310、存储器320及通信单元330。这些组件通过一条或多条总线进行通信,本领域技术人员可以理解,图中示出的服务器的结构并不构成对本发明的限定,它既可以是总线形结构,也可以是星型结构,还可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件布置。
其中,该存储器320可以用于存储处理器310的执行指令,存储器320可以由任何类型的易失性或非易失性存储终端或者它们的组合实现,如静态随机存取存储器(SRAM),电可擦除可编程只读存储器(EEPROM),可擦除可编程只读存储器(EPROM),可编程只读存储器(PROM),只读存储器(ROM),磁存储器,快闪存储器,磁盘或光盘。当存储器320中的执行指令由处理器310执行时,使得终端300能够执行以下上述方法实施例中的部分或全部步骤。
处理器310为存储终端的控制中心,利用各种接口和线路连接整个电子终端的各个部分,通过运行或执行存储在存储器320内的软件程序和/或模块,以及调用存储在存储器内的数据,以执行电子终端的各种功能和/或处理数据。所述处理器可以由集成电路(Integrated Circuit,简称IC)组成,例如可以由单颗封装的IC所组成,也可以由连接多颗相同功能或不同功能的封装IC而组成。举例来说,处理器310可以仅包括中央处理器(Central Processing Unit,简称CPU)。在本发明实施方式中,CPU可以是单运算核心,也可以包括多运算核心。
通信单元330,用于建立通信信道,从而使所述存储终端可以与其它终端进行通信。接收其他终端发送的用户数据或者向其他终端发送用户数据。
本发明还提供一种计算机存储介质,其中,该计算机存储介质可存储有程序,该程序执行时可包括本发明提供的各实施例中的部分或全部步骤。所述的存储介质可为磁碟、光盘、只读存储记忆体(英文:read-only memory,简称:ROM)或随机存储记忆体(英文:random access memory,简称:RAM)等。
因此,本发明通过在从节点接收到主机IO后,先把数据同步一份到主节点,主节点在应答从节点时,不再同步数据到从节点,只发送写IO操作指令到从节点,指令携带写IO地址即可,一般一个IO地址大小在64字节左右,而一个数据IO大小在8K字节大小,大大减少了IO同步链路上的带宽占用,从而提高了从节点写IO的带宽,本实施例所能达到的技术效果可以参见上文中的描述,此处不再赘述。
本领域的技术人员可以清楚地了解到本发明实施例中的技术可借助软件加必需的通用硬件平台的方式来实现。基于这样的理解,本发明实施例中的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中如U盘、移动硬盘、只读存储器(ROM,Read-Only Memory)、随机存取存储器(RAM,Random Access Memory)、磁碟或者光盘等各种可以存储程序代码的介质,包括若干指令用以使得一台计算机终端(可以是个人计算机,服务器,或者第二终端、网络终端等)执行本发明各个实施例所述方法的全部或部分步骤。
本说明书中各个实施例之间相同相似的部分互相参见即可。尤其,对于终端实施例而言,由于其基本相似于方法实施例,所以描述的比较简单,相关之处参见方法实施例中的说明即可。
在本发明所提供的几个实施例中,应该理解到,所揭露的***、***和方法,可以通过其它的方式实现。例如,以上所描述的***实施例仅仅是示意性的,例如,所述单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个单元或组件可以结合或者可以集成到另一个***,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口,***或单元的间接耦合或通信连接,可以是电性,机械或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外,在本发明各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。
尽管通过参考附图并结合优选实施例的方式对本发明进行了详细描述,但本发明并不限于此。在不脱离本发明的精神和实质的前提下,本领域普通技术人员可以对本发明的实施例进行各种等效的修改或替换,而这些修改或替换都应在本发明的涵盖范围内/任何熟悉本技术领域的技术人员在本发明揭露的技术范围内,可轻易想到变化或替换,都应涵盖在本发明的保护范围之内。因此,本发明的保护范围应所述以权利要求的保护范围为准。
Claims (10)
1.一种提高双活从节点写入带宽的方法,其特征在于,包括:
将主机下发的写IO数据同步至主节点;
获取主节点返回的对所述写IO数据的操作指令;
执行所述操作指令。
2.根据权利要求1所述的方法,其特征在于,所述获取主节点返回的对所述写IO数据的操作指令,包括:
获取所述操作指令中的写IO数据地址;
获取所述操作指令中的写入方式。
3.根据权利要求2所述的方法,其特征在于,所述执行操作指令,包括:
根据写入方式将写IO数据写入所述写IO数据地址。
4.根据权利要求1所述的方法,其特征在于,在所述执行操作指令,所述方法还包括:
向主节点发送执行启动提示,主节点根据所述执行启动提示与从节点保持同步将写IO数据写入存储***。
5.一种提高双活从节点写入带宽的***,其特征在于,包括:
数据同步单元,配置用于将主机下发的写IO数据同步至主节点;
指令获取单元,配置用于获取主节点返回的对所述写IO数据的操作指令;
指令执行单元,配置用于执行所述操作指令。
6.根据权利要求5所述的***,其特征在于,所述指令获取单元包括:
地址获取模块,配置用于获取主节点返回的写IO数据地址;
方式获取模块,配置用于获取所述操作指令中的写入方式。
7.根据权利要求6所述的***,其特征在于,所述指令执行单元包括:
数据写入模块,配置用于根据写入方式将写IO数据写入所述写IO数据地址。
8.根据权利要求5所述的***,其特征在于,所述***还包括:
执行反馈模块,配置用于向主节点发送执行启动提示,主节点根据所述执行启动提示与从节点保持同步将写IO数据写入存储***。
9.一种终端,其特征在于,包括:
处理器;
用于存储处理器的执行指令的存储器;
其中,所述处理器被配置为执行权利要求1-4任一项所述的方法。
10.一种存储有计算机程序的计算机可读存储介质,其特征在于,该程序被处理器执行时实现如权利要求1-4中任一项所述的方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910820054.5A CN110750392A (zh) | 2019-08-31 | 2019-08-31 | 提高双活从节点写入带宽的方法、***、终端及存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910820054.5A CN110750392A (zh) | 2019-08-31 | 2019-08-31 | 提高双活从节点写入带宽的方法、***、终端及存储介质 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN110750392A true CN110750392A (zh) | 2020-02-04 |
Family
ID=69276020
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201910820054.5A Withdrawn CN110750392A (zh) | 2019-08-31 | 2019-08-31 | 提高双活从节点写入带宽的方法、***、终端及存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN110750392A (zh) |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN107797945A (zh) * | 2017-10-31 | 2018-03-13 | 郑州云海信息技术有限公司 | 一种存储***及其数据存储方法、装置、***及设备 |
CN109445992A (zh) * | 2018-11-01 | 2019-03-08 | 郑州云海信息技术有限公司 | 一种双活***数据管理方法及相关装置 |
-
2019
- 2019-08-31 CN CN201910820054.5A patent/CN110750392A/zh not_active Withdrawn
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN107797945A (zh) * | 2017-10-31 | 2018-03-13 | 郑州云海信息技术有限公司 | 一种存储***及其数据存储方法、装置、***及设备 |
CN109445992A (zh) * | 2018-11-01 | 2019-03-08 | 郑州云海信息技术有限公司 | 一种双活***数据管理方法及相关装置 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN108121782B (zh) | 查询请求的分配方法、数据库中间件***以及电子设备 | |
CN109558215A (zh) | 虚拟机的备份方法、恢复方法、装置及备份服务器集群 | |
CN108509462B (zh) | 一种同步活动事务表的方法及装置 | |
CN112235136B (zh) | 一种网络文件***备份方法、***、终端及存储介质 | |
CN111124277A (zh) | 一种深度学习数据集缓存方法、***、终端及存储介质 | |
CN111880956B (zh) | 一种数据同步方法和装置 | |
CN109445690B (zh) | 一种raid卡性能优化方法、装置、终端及存储介质 | |
CN112636992B (zh) | 一种动态路由方法、装置、设备及存储介质 | |
CN111338862B (zh) | 一种gpu模式切换稳定性测试方法、***、终端及存储介质 | |
CN113094430B (zh) | 一种数据处理方法、装置、设备以及存储介质 | |
CN111639132B (zh) | 日志同步方法及设备 | |
CN105302489B (zh) | 一种异构多核远程嵌入式存储器***与方法 | |
CN115129249A (zh) | Sas链路拓扑识别管理方法、***、终端及存储介质 | |
CN114020340B (zh) | 一种服务器***及其数据处理方法 | |
CN114448972A (zh) | 分布式存储日志压缩下载方法、***、终端及存储介质 | |
CN112003730A (zh) | 一种集群快速部署的方法、***、终端及存储介质 | |
CN110554992B (zh) | 一种分布式元数据路径管理方法、***、终端及存储介质 | |
CN117435569A (zh) | 缓存***动态扩容方法、装置、设备、介质和程序产品 | |
US20230137609A1 (en) | Data synchronization method and apparatus | |
CN110750392A (zh) | 提高双活从节点写入带宽的方法、***、终端及存储介质 | |
CN110990207A (zh) | 基于Whitley平台的BPS内存测试方法、***、终端及存储介质 | |
CN111752907A (zh) | 一种集群日志集中管控方法、***、终端及存储介质 | |
CN110703988B (zh) | 一种分布式存储的存储池创建方法、***、终端及存储介质 | |
CN110175096B (zh) | 一种gpu加压测试方法、***、终端及存储介质 | |
CN112463399A (zh) | 一种服务器bmc信息管理方法、***、终端及存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
WW01 | Invention patent application withdrawn after publication | ||
WW01 | Invention patent application withdrawn after publication |
Application publication date: 20200204 |