CN107577561A - 一种数据恢复方法、装置、设备及计算机可读存储介质 - Google Patents

Abstract

本申请公开了一种数据恢复方法，包括获取存储节点设备的资源占用率；根据资源占用率设定存储节点设备的最大可执行数据恢复指令个数；获取当前所执行的数据恢复指令的个数；判断当前所执行的数据恢复指令的个数是否小于最大可执行数据恢复指令个数；若是，则从未执行数据恢复指令队列中释放相应数量的数据恢复指令，并执行释放的数据恢复指令进行数据恢复。本申请根据存储节点设备的资源占用率来设定最大可执行数据恢复指令个数，以便控制当前所执行的数据恢复指令的个数，有效保证分布式存储***的业务运行不受数据恢复的影响，持续保持稳定性。本申请还公开了一种数据恢复装置、设备及计算机可读存储介质，同样具有上述有益效果。

Description

一种数据恢复方法、装置、设备及计算机可读存储介质

技术领域

本申请涉及分布式存储技术领域，特别涉及一种数据恢复方法、装置、设备及计算机可读存储介质。

背景技术

随着分布式存储***的技术发展和广泛应用，分布式存储***中的数据恢复操作也越来越得到重视。

在现有技术中，当分布式存储***检测到故障时，例如主存储节点读取备存储节点的存储数据后，通过与本地存储数据进行比较发现本地存储数据异常时，就会自动即时进行数据恢复。

但是，由于数据恢复需要一定的过程并会占用***资源，在其尚未完成期间势必会对业务运行造成影响。尤其是在一些高稳定性要求的业务领域中，如广播电视媒体和安防监控等，数据恢复若影响到业务***访问，很可能会造成严重的损失或妨害。因此，如何适当调整并控制数据恢复的进行，以避免对分布式存储***业务的影响，是本领域技术人员亟待解决的技术问题。

发明内容

本申请的目的在于提供一种数据恢复方法、装置、设备及计算机可读存储介质，以便有效地避免数据恢复对分布式存储***业务的影响，提高***的持续稳定性。

为解决上述技术问题，本申请提供一种数据恢复方法，包括：

获取存储节点设备的资源占用率；

根据所述资源占用率设定所述存储节点设备的最大可执行数据恢复指令个数；

获取当前所执行的数据恢复指令的个数；

判断所述当前所执行的数据恢复指令的个数是否小于所述最大可执行数据恢复指令个数；

若是，则从未执行数据恢复指令队列中释放相应数量的数据恢复指令，并执行释放的所述数据恢复指令进行数据恢复；

其中，所述相应数量不大于所述最大可执行数据恢复指令个数与所述当前所执行的数据恢复指令的个数之差。

可选地，所述存储节点设备为主存储节点设备；

所述数据恢复指令由所述主存储节点设备在检测到本地的存储数据与备存储节点设备的备用存储数据不一致后生成。

可选地，所述存储节点设备为备存储节点设备；

所述数据恢复指令由所述主存储节点设备在检测到本地的存储数据与备存储节点设备的备用存储数据不一致后生成、并发送给所述备存储节点设备。

可选地，所述资源占用率包括以下任意一种或者任意组合：

CPU占用率、内存占用率和磁盘占用率。

可选地，还包括：

若所述当前所执行的数据恢复指令的个数不小于所述最大可执行数据恢复指令个数，则转至所述获取当前所执行的数据恢复指令的个数的步骤。

本申请还提供了一种数据恢复装置，包括：

第一获取模块：用于获取存储节点设备的资源占用率；

设定模块：用于根据所述资源占用率设定所述存储节点设备的最大可执行数据恢复指令个数；

第二获取模块：用于获取当前所执行的数据恢复指令的个数；

判断模块：用于判断所述当前所执行的数据恢复指令的个数是否小于所述最大可执行数据恢复指令个数；

执行模块：用于当所述判断模块判定所述当前所执行的数据恢复指令的个数小于所述最大可执行数据恢复指令个数时，从未执行数据恢复指令队列中释放相应数量的数据恢复指令，并执行释放的所述数据恢复指令进行数据恢复；其中，所述相应数量不大于所述最大可执行数据恢复指令个数与所述当前所执行的数据恢复指令的个数之差。

可选地，所述资源占用率包括以下任意一种或者任意组合：

CPU占用率、内存占用率和磁盘占用率。

可选地，所述第二判断模块还用于：

当所述判断模块判定所述当前所执行的数据恢复指令的个数不小于所述最大可执行数据恢复指令个数时，继续获取当前所执行的数据恢复指令的个数。

本申请还提供了一种数据恢复设备，包括：

存储器：用于存储计算机程序；

处理器：用于执行所述计算机程序以实现如以上所述的数据恢复方法的步骤。

本申请还提供了一种计算机可读存储介质，所述计算机可读存储介质存储有计算机程序，所述计算机程序被处理器执行时实现如以上所述的数据恢复方法的步骤。

本申请所提供的数据恢复方法包括：获取存储节点设备的资源占用率；根据所述资源占用率设定所述存储节点设备的最大可执行数据恢复指令个数；获取当前所执行的数据恢复指令的个数；判断所述当前所执行的数据恢复指令的个数是否小于所述最大可执行数据恢复指令个数；若是，则从未执行数据恢复指令队列中释放相应数量的数据恢复指令，并执行释放的所述数据恢复指令进行数据恢复；其中，所述相应数量不大于所述最大可执行数据恢复指令个数与所述当前所执行的数据恢复指令的个数之差。

可见，相比于现有技术，本申请所提供的数据恢复方法中，通过根据存储节点设备的资源占用率来设定最大可执行数据恢复指令个数，进而时刻控制当前所执行的数据恢复指令的个数，使其不大于最大可执行数据恢复指令个数，从而有效地保证了分布式存储***的业务运行不受到数据恢复的影响，提高持续稳定性。本申请所提供的数据恢复装置、设备及计算机可读存储介质可以实现上述数据恢复方法，同样具有上述有益效果。

附图说明

为了更清楚地说明现有技术和本申请实施例中的技术方案，下面将对现有技术和本申请实施例描述中需要使用的附图作简要的介绍。当然，下面有关本申请实施例的附图描述的仅仅是本申请中的一部分实施例，对于本领域普通技术人员来说，在不付出创造性劳动的前提下，还可以根据提供的附图获得其他的附图，所获得的其他附图也属于本申请的保护范围。

图1为本申请实施例所提供的一种数据恢复方法的流程图；

图2为本申请实施例所提供的一种数据恢复装置的结构框图。

具体实施方式

本申请的核心在于提供一种数据恢复方法、装置、设备及计算机可读存储介质，以便有效地避免数据恢复对分布式存储***业务的影响，提高***的持续稳定性。

为了对本申请实施例中的技术方案进行更加清楚、完整地描述，下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行介绍。显然，所描述的实施例仅仅是本申请一部分实施例，而不是全部的实施例。基于本申请中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本申请保护的范围。

请参考图1，图1为本申请实施例所提供的一种数据恢复方法的流程图，主要包括以下步骤：

步骤1：获取存储节点设备的资源占用率。

本申请所提供的数据恢复方法，为了避免数据恢复抢占存储节点设备的资源，进而对业务运行造成影响，因此，在进行数据恢复之前，首先获取该存储节点设备的资源占用率，以便对数据恢复指令的执行进行控制和调节。这里所述的资源占用率，可由本领域技术人员自行选择并设置，例如CPU占用率等，本申请实施例对此并不进行限定。

步骤2：根据资源占用率设定存储节点设备的最大可执行数据恢复指令个数。

所谓的最大可执行数据恢复指令个数，顾名思义，即该存储节点设备当前最多能同时执行的数据恢复指令的个数，是根据资源占用率进行设定的。容易理解的是，如果当前的资源占用率较低，应当适量增大最大可执行数据恢复指令个数；如果当前的资源占用率较高，则应当适当减小最大可执行数据恢复指令个数。具体的设定值可由本领域技术人员自行选择并设置，本申请实施例对此并不进行限定，只要设定的标准或者目的是：即使当前所执行的数据恢复指令的个数等于最大可执行数据恢复指令个数时，该存储节点设备的业务运行也不会受到影响即可。

步骤3：获取当前所执行的数据恢复指令的个数。

步骤4：判断当前所执行的数据恢复指令的个数是否小于最大可执行数据恢复指令个数；若是，进入步骤5。

将步骤3中获取到的当前所执行的数据恢复指令的个数与步骤2中设定的最大可执行数据恢复指令个数进行比较，若前者小于后者，说明该存储节点设备还有富余的能力继续同时对更多的数据恢复指令进行处理，因此可以进入步骤5。

步骤5：从未执行数据恢复指令队列中释放相应数量的数据恢复指令，并执行释放的数据恢复指令进行数据恢复。

其中，所说的相应数量不大于最大可执行数据恢复指令个数与当前所执行的数据恢复指令的个数之差。

未执行数据恢复指令队列是存放所有未执行数据恢复指令的队列，事实上，当该存储节点一旦生成或者接收到数据恢复指令后，即将数据恢复指令存入未执行数据恢复指令队列中，等待合适的时间执行。由此，只要未执行数据恢复指令队列中还存在未执行的数据恢复指令，就可以在判断需要释放新的数据恢复指令后，释放相应数量的数据恢复指令，以便进行数据恢复。

易理解的是，这里所说的相应数量，应当令新释放的数据恢复指令的个数与当前所执行的数据恢复指令的个数的和，仍然小于或等于设定的最大可执行数据恢复指令个数。当然，具体释放的个数可由本领域技术人员自行选择并设置，本申请实施例对此并不进行限定。

可见，本申请实施例所提供的数据恢复方法中，通过根据存储节点设备的资源占用率来设定最大可执行数据恢复指令个数，进而时刻控制当前所执行的数据恢复指令的个数，使其不大于最大可执行数据恢复指令个数，从而有效地保证了分布式存储***的业务运行不受到数据恢复的影响，提高持续稳定性。

本申请所提供的数据恢复方法，在上述实施例的基础上：

作为一种优选实施例，存储节点设备为主存储节点设备；

数据恢复指令由主存储节点设备在检测到本地的存储数据与备存储节点设备的备用存储数据不一致后生成。

具体地，对于分布式存储***中的主存储节点设备来说，其可以定时获取备存储节点设备中的备用存储数据，并与本地的存储数据进行算法检测，若存在故障，则可以生成数据恢复指令，以对故障数据进行恢复。

其中，当发现主存储节点设备本地数据有误时，可以生成对本地的故障数据进行恢复的数据恢复指令；而当发现是备存储节点设备的备用存储数据故障时，可以生成令备存储节点设备对故障的备用存储数据进行恢复的数据恢复指令，并连同正确的存储数据一起发送给备存储节点设备。

作为一种优选实施例，存储节点设备为备存储节点设备；

数据恢复指令由主存储节点设备在检测到本地的存储数据与备存储节点设备的备用存储数据不一致后生成、并发送给备存储节点设备。

作为一种优选实施例，资源占用率包括以下任意一种或者任意组合：

CPU占用率、内存占用率和磁盘占用率。

作为一种优选实施例，还包括：

若当前所执行的数据恢复指令的个数不小于最大可执行数据恢复指令个数，则转至获取当前所执行的数据恢复指令的个数的步骤。

具体地，如果当前所执行的数据恢复指令的个数不小于最大可执行数据恢复指令个数时，说明此时已经不能再释放新的数据恢复指令了，即可令未执行数据恢复指令的释放进入等待状态，并继续获取更新后的当前所执行的数据恢复指令的个数，直至某些数据恢复指令执行结束，使得当前所执行的数据恢复指令的个数发生变化而再次满足“小于最大可执行数据恢复指令个数”的条件。

下面对本申请实施例所提供的数据恢复装置进行介绍。

请参阅图2，图2为本申请所提供的一种数据恢复装置的结构框图；包括第一获取模块1、设定模块2、第二获取模块3、判断模块4和执行模块5：

第一获取模块1用于获取存储节点设备的资源占用率；

设定模块2用于根据资源占用率设定存储节点设备的最大可执行数据恢复指令个数；

第二获取模块3用于获取当前所执行的数据恢复指令的个数；

判断模块4用于判断当前所执行的数据恢复指令的个数是否小于最大可执行数据恢复指令个数；

执行模块5用于当判断模块4判定当前所执行的数据恢复指令的个数小于最大可执行数据恢复指令个数时，从未执行数据恢复指令队列中释放相应数量的数据恢复指令，并执行释放的数据恢复指令进行数据恢复；其中，相应数量不大于最大可执行数据恢复指令个数与当前所执行的数据恢复指令的个数之差。

可见，本申请所提供的数据恢复装置，通过设定模块2根据存储节点设备的资源占用率来设定最大可执行数据恢复指令个数，并由执行模块5时刻控制当前所执行的数据恢复指令的个数，使其不大于最大可执行数据恢复指令个数，从而有效地保证了分布式存储***的业务运行不受到数据恢复的影响，提高持续稳定性。

本申请所提供的数据恢复装置，在上述实施例的基础上：

作为一种优选实施例，资源占用率包括以下任意一种或者任意组合：

CPU占用率、内存占用率和磁盘占用率。

作为一种优选实施例，第二获取模块还用于：

当判断模块4判定当前所执行的数据恢复指令的个数不小于最大可执行数据恢复指令个数时，继续获取当前所执行的数据恢复指令的个数。

本申请所提供的数据恢复装置的具体实施方式与上文所描述的数据恢复方法可相互对应参照，这里就不再赘述。

本申请还提供了一种数据恢复设备，包括：

存储器：用于存储计算机程序；

处理器：用于执行计算机程序以实现如以上实施例所述的数据恢复方法的步骤。

本申请还提供了一种计算机可读存储介质，计算机可读存储介质中存储有计算机程序，计算机程序被处理器执行时实现如以上实施例所述的数据恢复方法的步骤。

本申请中各个实施例采用递进的方式描述，每个实施例重点说明的都是与其他实施例的不同之处，各个实施例之间相同相似部分互相参见即可。对于实施例公开的装置、设备及计算机可读存储介质而言，由于其与实施例公开的方法相对应，所以描述的比较简单，相关之处参见方法部分说明即可。

还需说明的是，在本申请文件中，诸如“第一”和“第二”之类的关系术语，仅仅用来将一个实体或者操作与另一个实体或者操作区分开来，而不一定要求或者暗示这些实体或者操作之间存在任何这种实际的关系或者顺序。此外，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。

以上对本申请所提供的技术方案进行了详细介绍。本文中应用了具体个例对本申请的原理及实施方式进行了阐述，以上实施例的说明只是用于帮助理解本申请的方法及其核心思想。应当指出，对于本技术领域的普通技术人员来说，在不脱离本申请原理的前提下，还可以对本申请进行若干改进和修饰，这些改进和修饰也落入本申请权利要求的保护范围内。

Claims (10)

1.一种数据恢复方法，其特征在于，包括：

获取存储节点设备的资源占用率；

根据所述资源占用率设定所述存储节点设备的最大可执行数据恢复指令个数；

获取当前所执行的数据恢复指令的个数；

判断所述当前所执行的数据恢复指令的个数是否小于所述最大可执行数据恢复指令个数；

若是，则从未执行数据恢复指令队列中释放相应数量的数据恢复指令，并执行释放的所述数据恢复指令进行数据恢复；

其中，所述相应数量不大于所述最大可执行数据恢复指令个数与所述当前所执行的数据恢复指令的个数之差。

2.根据权利要求1所述的数据恢复方法，其特征在于，所述存储节点设备为主存储节点设备；

所述数据恢复指令由所述主存储节点设备在检测到本地的存储数据与备存储节点设备的备用存储数据不一致后生成。

3.根据权利要求1所述的数据恢复方法，其特征在于，所述存储节点设备为备存储节点设备；

所述数据恢复指令由所述主存储节点设备在检测到本地的存储数据与备存储节点设备的备用存储数据不一致后生成、并发送给所述备存储节点设备。

4.根据权利要求1至3任一项所述的数据恢复方法，其特征在于，所述资源占用率包括以下任意一种或者任意组合：

CPU占用率、内存占用率和磁盘占用率。

5.根据权利要求4所述的数据恢复方法，其特征在于，还包括：

若所述当前所执行的数据恢复指令的个数不小于所述最大可执行数据恢复指令个数，则转至所述获取当前所执行的数据恢复指令的个数的步骤。

6.一种数据恢复装置，其特征在于，包括：

第一获取模块：用于获取存储节点设备的资源占用率；

设定模块：用于根据所述资源占用率设定所述存储节点设备的最大可执行数据恢复指令个数；

第二获取模块：用于获取当前所执行的数据恢复指令的个数；

判断模块：用于判断所述当前所执行的数据恢复指令的个数是否小于所述最大可执行数据恢复指令个数；

执行模块：用于当所述判断模块判定所述当前所执行的数据恢复指令的个数小于所述最大可执行数据恢复指令个数时，从未执行数据恢复指令队列中释放相应数量的数据恢复指令，并执行释放的所述数据恢复指令进行数据恢复；其中，所述相应数量不大于所述最大可执行数据恢复指令个数与所述当前所执行的数据恢复指令的个数之差。

7.根据权利要求6所述的数据恢复装置，其特征在于，所述资源占用率包括以下任意一种或者任意组合：

CPU占用率、内存占用率和磁盘占用率。

8.根据权利要求7所述的数据恢复装置，其特征在于，所述第二获取模块还用于：

当所述判断模块判定所述当前所执行的数据恢复指令的个数不小于所述最大可执行数据恢复指令个数时，继续获取当前所执行的数据恢复指令的个数。

9.一种数据恢复设备，其特征在于，包括：

存储器：用于存储计算机程序；

处理器：用于执行所述计算机程序以实现如权利要求1至5任一项所述的数据恢复方法的步骤。

10.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质存储有计算机程序，所述计算机程序被处理器执行时实现如权利要求1至5任一项所述的数据恢复方法的步骤。