CN113641298A - 数据存储方法、设备和计算机程序产品 - Google Patents

数据存储方法、设备和计算机程序产品 Download PDF

Info

Publication number
CN113641298A
CN113641298A CN202010345657.7A CN202010345657A CN113641298A CN 113641298 A CN113641298 A CN 113641298A CN 202010345657 A CN202010345657 A CN 202010345657A CN 113641298 A CN113641298 A CN 113641298A
Authority
CN
China
Prior art keywords
restriping
slice
file system
raid
rrs
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202010345657.7A
Other languages
English (en)
Inventor
高健
刘友生
徐鑫磊
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
EMC Corp
Original Assignee
EMC IP Holding Co LLC
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by EMC IP Holding Co LLC filed Critical EMC IP Holding Co LLC
Priority to CN202010345657.7A priority Critical patent/CN113641298A/zh
Priority to US16/994,903 priority patent/US11620080B2/en
Publication of CN113641298A publication Critical patent/CN113641298A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0628—Interfaces specially adapted for storage systems making use of a particular technique
    • G06F3/0655—Vertical data movement, i.e. input-output transfer; data movement between one or more hosts and one or more storage devices
    • G06F3/0659—Command handling arrangements, e.g. command buffers, queues, command scheduling
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0602—Interfaces specially adapted for storage systems specifically adapted to achieve a particular effect
    • G06F3/061—Improving I/O performance
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0602—Interfaces specially adapted for storage systems specifically adapted to achieve a particular effect
    • G06F3/0614—Improving the reliability of storage systems
    • G06F3/0619—Improving the reliability of storage systems in relation to data integrity, e.g. data losses, bit errors
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0602—Interfaces specially adapted for storage systems specifically adapted to achieve a particular effect
    • G06F3/0614—Improving the reliability of storage systems
    • G06F3/0616—Improving the reliability of storage systems in relation to life time, e.g. increasing Mean Time Between Failures [MTBF]
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0628—Interfaces specially adapted for storage systems making use of a particular technique
    • G06F3/0629—Configuration or reconfiguration of storage systems
    • G06F3/0631—Configuration or reconfiguration of storage systems by allocating resources to storage systems
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0628—Interfaces specially adapted for storage systems making use of a particular technique
    • G06F3/0638—Organizing or formatting or addressing of data
    • G06F3/064—Management of blocks
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0628—Interfaces specially adapted for storage systems making use of a particular technique
    • G06F3/0638—Organizing or formatting or addressing of data
    • G06F3/0643—Management of files
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0628—Interfaces specially adapted for storage systems making use of a particular technique
    • G06F3/0638—Organizing or formatting or addressing of data
    • G06F3/0644—Management of space entities, e.g. partitions, extents, pools
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0628—Interfaces specially adapted for storage systems making use of a particular technique
    • G06F3/0646—Horizontal data movement in storage systems, i.e. moving data in between storage devices or systems
    • G06F3/065—Replication mechanisms
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0628—Interfaces specially adapted for storage systems making use of a particular technique
    • G06F3/0653—Monitoring storage devices or systems
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0668—Interfaces specially adapted for storage systems adopting a particular infrastructure
    • G06F3/0671—In-line storage system
    • G06F3/0683—Plurality of storage devices
    • G06F3/0689—Disk arrays, e.g. RAID, JBOD

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Security & Cryptography (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本公开的实施例涉及一种数据存储方法、设备和计算机程序产品。在此描述的方法包括确定独立盘冗余阵列(RAID)条带中用于重新条带化的源切片，并从用于文件***检查的预留容量中分配用于重新条带化的目的地切片。方法还包括通过将源切片中的数据拷贝到目的地切片，来执行针对RAID条带的重新条带化。根据本公开的实施例，将文件***检查(FSCK)的预留容量用作重新条带化的目的地切片，能够减轻重新条带化期间对于映射器可用容量的影响，由此提高存储***的性能。

Description

数据存储方法、设备和计算机程序产品
技术领域
本公开的实施例总体上涉及计算机领域，并且更具体地涉及数据存储方法、设备以及计算机程序产品。
背景技术
独立盘冗余阵列(RAID)是一种数据备份技术，其能够把多个独立的物理盘按不同的方式组合起来形成一个盘的阵列，从而提供比单个盘更好的存储性能和可靠性能。为了在RAID中的某个盘发生故障时对数据进行恢复，RAID中通常设置一个奇偶校验信息块(例如RAID 5)或多个奇偶校验信息块(例如RAID 6)。
通常，在一个RAID中，可以存在等于或者大于RAID宽度的多个盘，其中每个盘被划分成多个切片，每个切片可以具有预定大小(例如4GB等)。RAID通常是通过条带来存储数据的，例如，在RAID 5中，可以组合5个盘上的5个切片以形成一个RAID条带。当RAID中的某个盘发生故障时，能够通过校验信息来进行重建，使得数据能够被恢复并且不会被丢失。
发明内容
本公开的实施例提供了一种数据存储方法、设备和计算机程序产品。
在本公开的一个方面，提供了一种数据存储方法。方法包括确定RAID条带中用于重新条带化(restripe)的源切片，并从用于文件***检查的预留容量中分配用于重新条带化的目的地切片。方法还包括通过将源切片中的数据拷贝到目的地切片，来执行针对RAID条带的重新条带化。
在本公开的另一方面，提供了一种电子设备。该设备包括处理单元以及存储器，其中存储器被耦合至处理单元并且存储有指令。所述指令在由处理单元执行时执行以下动作：确定RAID条带中用于重新条带化的源切片；从用于文件***检查的预留容量中分配用于重新条带化的目的地切片；以及通过将源切片中的数据拷贝到目的地切片，来执行针对RAID条带的重新条带化。
在本公开的又一方面，提供了一种计算机程序产品。该计算机程序产品被有形地存储在非瞬态计算机可读介质上并且包括计算机可执行指令，所述计算机可执行指令在被执行时使得计算机执行根据本公开的实施例的方法或过程。
提供发明内容部分是为了简化的形式来介绍对概念的选择，它们在下文的具体实施方式中将被进一步描述。本发明内容部分无意标识本公开的关键特征或主要特征，也无意限制本公开的各个实施例的范围。
附图说明
通过结合附图对本公开示例性实施例进行更详细的描述，本公开的上述以及其它目的、特征和优势将变得更加明显，其中在本公开示例性实施例中，相同的附图标记通常代表相同的元素。
图1示出了根据本公开的实施例的存储***的示例环境的示意图；
图2示出了根据本公开的实施例的数据存储方法的流程图；
图3示出了根据本公开的实施例的重新条带化过程的示意图；
图4示出了根据本公开的实施例的重新条带化的记录信息的示意图；
图5示出了根据本公开的实施例的重新条带化的预留空间的示意图；
图6示出了根据本公开的实施例的重新条带化的终止的示意图；以及
图7示出了可以用来实施本公开的实施例的设备的示意性块图。
具体实施例
下面将参照附图更详细地描述本公开的优选实施例。虽然附图中显示了本公开的一些具体实施例，然而应该理解，可以以各种形式实现本公开内容，而不应被这里阐述的实施例所限制。相反，提供这些实施例是为了使本公开更加透彻和完整，并且能够将本公开的范围完整地传达给本领域的技术人员。
在本文中使用的术语“包括”及其变形表示开放性包括，即“包括但不限于”。除非特别申明，术语“或”表示“和/或”。术语“基于”表示“至少部分地基于”。术语“一个示例实施例”和“一个实施例”表示“至少一个示例实施例”。术语“另一实施例”表示“至少一个另外的实施例”。术语“第一”、“第二”等可以指代不同的或相同的对象，除非明确指示不同。
在存储***中的重新条带化期间，通常需要为目的地切片分配额外的空间，而所分配的目的地切片在重新条带化过程中对外不可用，从而造成存储***提供的存储容量的下降，由此影响了存储***的性能。
为此，本公开的实施例提出了用于为重新条带化分配目的地切片的新方案。根据本公开的实施例，将文件***检查的预留容量用作重新条带化的目的地切片，能够减轻重新条带化期间对于映射器可用容量的影响，由此提高存储***的性能。在未执行文件***检查操作的时候，文件***检查的预留容量是空闲的，因此可以通过从该预留容量借用空间来执行重新条带化。
应当理解，虽然本公开的一些实施例中使用RAID 5作为包括RAID的示例，然而，任何已知的或者将来开发的其他类型的RAID可以与本公开的实施例结合使用。以下参考图1至图7来说明本公开的基本原理和若干示例实现方式。应当理解，给出这些示例性实施例仅是为了使本领域技术人员能够更好地理解进而实现本公开的实施例，而并非以任何方式限制本公开的范围。
图1示出了根据本公开的实施例的存储***的示例环境100的示意图。如图1的示例环境100所示，存储池110包括多个RAID弹性集(RRS)111、112、113和114，每个RRS组成一个故障域，其意味着如果某个RRS中的一个盘驱动器发生故障，不会影响其他RRS的可靠性。存储池110管理着存储***中的所有盘。在本公开的实施例中，每个RRS可以包括多个盘，例如可以在阈值下限与阈值上限之间的任何数目。
每个盘可以被划分成预定大小的盘切片，例如可以被划分成4GB大小的切片。不同盘上的多个切片可以组成一个RAID条带，多个RAID条带可以组成一个映射器层。例如，可以从存储池110中分配RAID条带，如果是RAID 5类型的RAID，则创建一个RAID条带需要分配来自5个盘的5个空闲切片，以便组成一个RAID 5条带。如果是RAID 6类型的RAID，则创建一个RAID条带需要分配来自6个盘的6个空闲切片，以便组成一个RAID 6条带。此外，需要保证每个条带中所包括的所有切片需要来自同一个RRS。
存储池110将对外暴露一些层(例如用户数据层130、元数据层140等)，以供其他部件使用，每个层可以包括多个条带。每个层中都基于其数据类型而应用各自的RAID策略，一个层中所有条带应用相同的RAID策略，例如相同的RAID宽度和RAID类型。层可以按需扩展，因而可以动态分配新的条带并且分配给相应层。
如示例环境100所示，可以构建RAID数据库(DB)层120、用户数据层130以及元数据层140等，其中一些层被映射器150分别映射到命名空间160中，以供外部主机使用。其中存储池110、RAID数据库层120、用户数据层130、元数据层140、映射器150等可以构成RAID***。RAID DB层120仅包括单个条带并且不会被暴露，其仅由RAID内容消耗。用户数据层130可以采用RAID 5和/或RAID 6，RAID的类型和宽度取决于***中的盘类型和盘数。例如，通常可以支持4+1、8+1、或16+1的RAID 5，以及支持4+2、8+2、或16+2的RAID 6等。一般来说，可以为各个层设置多份镜像，这取决于具体数据的保护水平。
映射器150是RAID***中的核心组件，其将每一层都视为一个平面线性物理地址空间，此外，其还将单个平面线性逻辑地址空间暴露给命名空间160。例如，逻辑地址空间可能很大。在一些实施例中，映射器150使用B+树来维护4K页面粒度中逻辑地址和物理地址之间的映射。命名空间160消耗并管理映射器150暴露的线性逻辑空间，命名空间160将创建卷并将卷暴露给外部主机。映射器150消耗启动层(未示出)、用户数据层130、元数据层140。其中启动层采用3份镜像，映射器150在启动层存储在启动路径上将加载的一些重要配置。元数据层140可以采用2份镜像，元数据可以通过例如B+树节点来存储。用户数据层130采用RAID 5和/或RAID 6，所有的主机用户数据将被存储在用户数据层130。
此外，虽然未示出，存储***中还可以包括高速缓存、日志记录器、日志数据层、日志元数据层等模块和部件，其中高速缓存提供了存储器中缓存功能，其在***中有2个实例，一个实例用于用户数据，另一个实例用于元数据，其为映射器150提供事务操作功能，以便加快数据的访问速度。提交事务时，如果事务修改了一些页以防止数据丢失，其将通过日志记录组件对RAID暴露的某些特殊层保留所有修改。日志用户数据层和日志元数据层是在一些特殊驱动器上创建的。日志记录组件消耗并管理日志用户数据层和日志元数据层的空间，高速缓存将使用日志记录组件暴露的API来加载和保留脏页。
图2示出了根据本公开的实施例的数据存储方法200的流程图。在202，确定RAID条带中用于重新条带化的源切片。例如，如果需要对一个或多个RAID条带进行重新条带化，则可以由用户选择或者自动选择要被拷出数据的一个或多个源切片。在一些实施例中，可以在RRS中添加新盘时判断是要执行RRS拆分还是RRS合并，并且相应地执行一些条带的重新条带化过程。
在204，从用于文件***检查的预留容量中分配用于重新条带化的目的地切片。文件***检查(FSCK)用于检测并修复文件***中的数据故障，存储***通常已经为文件***检查已经预留了一部分容量(例如，预留了存储***总容量的2.5％)，其中预留容量对于映射器是不可用的。文件***检查可以扫描全盘以找到文件的存储地址，由此实现故障数据的恢复。本公开的实施例在RAID条带的重新条带化的过程中，从空闲的文件***检查的预留容量中借用一部分容量来用作重新条带化的目的地切片。通过这种方式，能够减少重新条带化对于存储***的可用容量的影响。
在206，通过将源切片中的数据拷贝到目的地切片，来执行针对RAID条带的重新条带化。例如，将数据从条带中所选择的源切片拷贝到新的盘的目的地切片中，由此完成RAID条带的重新条带化。因此，根据本公开的方法200，将文件***检查的预留容量用作重新条带化的目的地切片，能够减轻重新条带化期间对于映射器可用容量的影响，由此提高存储***的性能。
在一些实施例中，可以同时选择多个RAID条带进行重新条带化，例如最多可以一次选择64个RAID条带，而如果为这些条带都分配额外的存储空间，则需要为目的地切片分配很大的额外空间，这将导致整个重新条带化期间对映射器可用容量的较大影响。因此，在多个RAID条带的并行的重新条带化期间，本公开的实施例通过从用于文件***检查的预留容量借用存储容量，更能够减少对于存储***的可用容量的影响。
在存储***中，在用户利用新盘扩展了存储池之后，需要对RRS进行重新组织，同时需要重新组织RRS中的条带以便为了性能和稳定的目的而适配新的架构。存在两种重新条带化类型，跨RRS重新条带化和单个RRS内的重排，其中跨RRS重新条带化能够消除条带跨RRS的问题，而重排能够解决数据在单个RRS中的所有盘之间数据分布不均匀的问题。
在一些实施例中，在RRS中添加新盘时，首先判断是需要拆分还是合并，如果加入新盘之后，RRS中的盘数超过上限，则需要将RRS拆分成两个RRS，否则将新盘合并到RRS中。
根据本公开的实施例，触发基于切片拷贝的重新条带化，以消除条带跨RRS存在和/或使得数据更均匀地分布在RRS中的所有盘之间，由此实现存储***的更好IO性能。在执行重新条带化之前，需要为条带分配重新条带化的目的地切片。因此，本公开的实施例将文件***检查的预留容量借用为重新条带化的目的地切片，并且在需要通过文件***检查恢复数据时，可以通过终止重新条带化过程来释放目的地切片。通过这种方式，使得重新条带化的目的地切片不会影响映射器容量，同时不影响文件***检查的正常过程。
图3示出了根据本公开的实施例的基于切片拷贝的重新条带化的示意图。如图3所示，RRS 310中开始包括8个盘，即盘D0、D1、D2、D3、D4、D5、D6、D7和D8，其中一个示例条带320由盘D2上的切片A1、盘D3上的切片A2、盘D4上的切片A3、盘D5上的切片A4以及盘D6上的切片A5组成。随着存储池容量的扩张，RRS310中新加入了盘D8，而新加入的盘中没有存储数据。为了使得数据在RRS 310中的所有盘之间更均匀地分布，可以执行重新条带化算法。例如，可以选择需要被拷贝数据的源切片A5，因而条带320中的源切片A5中的数据要被拷贝到新盘D8中的目的地切片A5’上。在完成数据的拷贝之后，由切片A1、A2、A3、A4以及A5’组成新的条带，并且更新条带的切片的位置，例如几何位置。应当理解，任何已知的或者将来开发的重新条带化算法可以与本公开的实施例结合使用，以执行存储***中的重新条带化操作。根据本公开的实施例，切片A5’可以是为文件***一致性检查而预留的容量，通过这种方式，重新条带化过程不会影响存储***的可用容量。
图4示出了根据本公开的实施例的重新条带化的记录信息的示意图。图4图示了重新条带化的条带信息以及数据拷贝信息。如图4所示，5个盘上的5个切片411、412、413、414和415构成一个RAID条带，在重新条带化的过程中，表示第8盘的第2切片的源切片412中的数据被拷贝到表示第5盘的第1切片的目的地切片416中，如420所示。因此，重新条带化之后的条带包括切片411、416、413、414和415。此外，还可以记录条带中的数据的生成代号、重建位图、拷贝标志等信息。
图5示出了根据本公开的实施例的重新条带化的预留空间的示意图。如图5所示，RRS 510包括盘13个盘，RRS 510中通过RAID构建了多个RAID条带，例如盘D0-D4中的切片组成的RAID条带，RRS510能够为映射器520输出存储服务，例如提供RAID条带或者条带集(也称为“uber”)，例如条带521、522、523、524、525、526。为了最小化重新条带化操作对于映射器可用容量的影响，需要避免或减小所分配的目的地切片对于输出给映射器的可用容量的影响，从而使得重新条带化的目的地切片对于映射器可用容量是透明的。
图5示出了针对盘D0上的条带进行重新条带化的过程，选择盘D0中的RAID条带中的一些源切片，如515所示。然后，可以将源切片中的数据拷贝到所分配的目的地切片中，如518所示出的目的地切片位置。在数据拷贝期间，可以将518处的目的地切片标记为已使用，并且可以使得存储***的映射器520可用容量保持不变。根据本公开的实施例，518处的目的地切片是从用于文件***检查的保留容量中借用的存储空间，通过这种方式，重新条带化过程不会影响存储***的可用容量。
图6示出了根据本公开的实施例的重新条带化的终止的示意图。如图6所示，在重新条带化的执行期间，存储***可能发生数据故障(例如软件故障)或者添加了新的盘，需要启动针对存储***的文件***检查以用于数据恢复等目的。由于文件***检查的优先级高于重新条带化的优先级，因此，需要终止当前的重新条带化的执行，然后释放从用于文件***检查的预留容量中借用的目的地切片。如618所示，预留容量响应于重新条带化的终止而被释放，其中的数据被清空，并且数据拷贝操作被终止。接下来，使用预留容量来执行针对存储***的文件***检查，直到完成检查。通过这种方式，能够及时地将预留容量归还给文件***检查服务，使得不仅重新条带化的目的地切片不会影响映射器容量，而且不影响文件***检查的正常操作。
在一些实施例中，可以周期性地确定是否完成针对存储***的文件***检查，并且在完成针对存储***的文件***检查之后，重新启动重新条带化的执行。然后，在完成重新条带化之后，更新所述RAID条带的信息，例如各个RAID条带中的切片的位置。通过这种方式，使得重新条带化能够在不影响文件***检查的时间借用用于文件***检查的预留容量而执行，由此提高了预留空间的资源利用率。此外，通过保证文件***检查的优先级，使得重新条带化对于预留容量的借用不会影响文件***检查的正常操作。
图7示出了可以用来实施本公开的实施例的电子设备700的示意性块图，设备700可以为本公开的实施例所描述的设备或装置。如图7所示，设备700包括中央处理单元(CPU)701，其可以根据存储在只读存储器(ROM)702中的计算机程序指令或者从存储单元708加载到随机访问存储器(RAM)703中的计算机程序指令，来执行各种适当的动作和处理。在RAM703中，还可存储设备700操作所需的各种程序和数据。CPU 701、ROM 702以及RAM 703通过总线704彼此相连。输入/输出(I/O)接口705也连接至总线704。
设备700中的多个部件连接至I/O接口705，包括：输入单元706，例如键盘、鼠标等；输出单元707，例如各种类型的显示器、扬声器等；存储单元708，例如磁盘、光盘等；以及通信单元709，例如网卡、调制解调器、无线通信收发机等。通信单元709允许设备700通过诸如因特网的计算机网络和/或各种电信网络与其他设备交换信息/数据。
上文所描述的各个方法或过程可由处理单元701来执行。例如，在一些实施例中，方法可被实现为计算机软件程序，其被有形地包含于机器可读介质，例如存储单元708。在一些实施例中，计算机程序的部分或者全部可以经由ROM 702和/或通信单元709而被载入和/或安装到设备700上。当计算机程序被加载到RAM 703并由CPU 701执行时，可以执行上文描述的方法或过程中的一个或多个步骤或动作。
在一些实施例中，以上所描述的方法和过程可以被实现为计算机程序产品。计算机程序产品可以包括计算机可读存储介质，其上载有用于执行本公开的各个方面的计算机可读程序指令。
计算机可读存储介质可以是可以保持和存储由指令执行设备使用的指令的有形设备。计算机可读存储介质例如可以是但不限于电存储设备、磁存储设备、光存储设备、电磁存储设备、半导体存储设备或者上述的任意合适的组合。计算机可读存储介质的更具体的例子(非穷举的列表)包括：便携式计算机盘、硬盘、随机存取存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、静态随机存取存储器(SRAM)、便携式压缩盘只读存储器(CD-ROM)、数字多功能盘(DVD)、记忆棒、软盘、机械编码设备、例如其上存储有指令的打孔卡或凹槽内凸起结构、以及上述的任意合适的组合。这里所使用的计算机可读存储介质不被解释为瞬时信号本身，诸如无线电波或者其他自由传播的电磁波、通过波导或其他传输媒介传播的电磁波(例如，通过光纤电缆的光脉冲)、或者通过电线传输的电信号。
本文所描述的计算机可读程序指令可以从计算机可读存储介质下载到各个计算/处理设备，或者通过网络、例如因特网、局域网、广域网和/或无线网下载到外部计算机或外部存储设备。网络可以包括铜传输电缆、光纤传输、无线传输、路由器、防火墙、交换机、网关计算机和/或边缘服务器。每个计算/处理设备中的网络适配卡或者网络接口从网络接收计算机可读程序指令，并转发该计算机可读程序指令，以供存储在各个计算/处理设备中的计算机可读存储介质中。
用于执行本公开操作的计算机程序指令可以是汇编指令、指令集架构(ISA)指令、机器指令、机器相关指令、微代码、固件指令、状态设置数据、或者以一种或多种编程语言的任意组合编写的源代码或目标代码，所述编程语言包括面向对象的编程语言，以及常规的过程式编程语言。计算机可读程序指令可以完全地在用户计算机上执行、部分地在用户计算机上执行、作为一个独立的软件包执行、部分在用户计算机上部分在远程计算机上执行、或者完全在远程计算机或服务器上执行。在涉及远程计算机的情形中，远程计算机可以通过任意种类的网络—包括局域网(LAN)或广域网(WAN)—连接到用户计算机，或者，可以连接到外部计算机(例如利用因特网服务提供商来通过因特网连接)。在一些实施例中，通过利用计算机可读程序指令的状态信息来个性化定制电子电路，例如可编程逻辑电路、现场可编程门阵列(FPGA)或可编程逻辑阵列(PLA)，该电子电路可以执行计算机可读程序指令，从而实现本公开的各个方面。
这些计算机可读程序指令可以提供给通用计算机、专用计算机或其它可编程数据处理装置的处理单元，从而生产出一种机器，使得这些指令在通过计算机或其它可编程数据处理装置的处理单元执行时，产生了实现流程图和/或块图中的一个或多个方块中规定的功能/动作的装置。也可以把这些计算机可读程序指令存储在计算机可读存储介质中，这些指令使得计算机、可编程数据处理装置和/或其他设备以特定方式工作，从而存储有指令的计算机可读介质则包括一个制造品，其包括实现流程图和/或块图中的一个或多个方块中规定的功能/动作的各个方面的指令。
可以把计算机可读程序指令加载到计算机、其它可编程数据处理装置、或其它设备上，使得在计算机、其它可编程数据处理装置或其它设备上执行一系列操作步骤，以产生计算机实现的过程，从而使得在计算机、其它可编程数据处理装置、或其它设备上执行的指令实现流程图和/或块图中的一个或多个方块中规定的功能/动作。
附图中的流程图和块图显示了根据本公开的多个实施例的设备、方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上，流程图或块图中的每个方块可以代表一个模块、程序段或指令的一部分，所述模块、程序段或指令的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。在有些作为替换的实现中，方块中所标注的功能也可以以不同于附图中所标注的顺序发生。例如，两个连续的方块实际上可以基本并行地执行，它们有时也可以按相反的顺序执行，这取决于所涉及的功能。也要注意的是，块图和/或流程图中的每个方块、以及块图和/或流程图中的方块的组合，可以用执行规定的功能或动作的专用的基于硬件的***来实现，或者可以用专用硬件与计算机指令的组合来实现。
以上已经描述了本公开的各实施例，上述说明是示例性的，并非穷尽性的，并且也不限于所披露的各实施例。在不偏离所说明的各实施例的范围和精神的情况下，对于本技术领域的普通技术人员来说许多修改和变更都是显而易见的。本文中所用术语的选择，旨在最好地解释各实施例的原理、实际应用或对市场中技术的技术改进，或者使得本技术领域的其它普通技术人员能理解本文披露的各实施例。

Claims (17)

1.一种数据存储方法，包括：
确定独立盘冗余阵列(RAID)条带中用于重新条带化的源切片；
从用于文件***检查的预留容量中分配用于重新条带化的目的地切片；以及
通过将所述源切片中的数据拷贝到所述目的地切片，来执行针对所述RAID条带的重新条带化。
2.根据权利要求1所述的方法，其中确定用于重新条带化的源切片包括：
根据确定存储池中添加新盘，确定是否要拆分RAID弹性集(RRS)；以及
根据确定要拆分所述RRS，接收对所述源切片的选择，以用于跨RRS的重新条带化。
3.根据权利要求2所述的方法，其中确定用于重新条带化的源切片还包括：
根据确定无需拆分所述RRS，将所述新盘合并到所述RRS以生成新的RRS；以及
接收对所述源切片的选择，以用于所述新的RRS内的重新条带化。
4.根据权利要求1所述的方法，还包括在所述重新条带化的执行期间，
将所述目的地切片标记为已使用；以及
保持存储***的映射器可用容量不变。
5.根据权利要求4所述的方法，还包括：
在所述重新条带化的执行期间，响应于数据故障而启动针对所述存储***的文件***检查。
6.根据权利要求5所述的方法，其中启动针对所述存储***的文件***检查包括：
终止所述重新条带化的执行；
释放从用于文件***检查的预留容量中分配的所述目的地切片；以及
使用所述预留容量来执行针对所述存储***的文件***检查。
7.根据权利要求6所述的方法，还包括：
确定是否完成针对存储***的文件***检查；
根据确定完成针对存储***的文件***检查，重新启动所述重新条带化的执行；以及
在完成所述重新条带化之后更新所述RAID条带的信息。
8.根据权利要求4所述的方法，还包括：
从存储***的总容量中分配预订比例的容量作为用于文件***一致性检查的预留容量，所述预留容量对于所述映射器不可用。
9.一种电子设备，包括：
处理单元；以及
存储器，其耦合至所述处理单元并且存储有指令，所述指令在由所述处理单元执行时执行以下动作：
确定独立盘冗余阵列(RAID)条带中用于重新条带化的源切片；
从用于文件***检查的预留容量中分配用于重新条带化的目的地切片；以及
通过将所述源切片中的数据拷贝到所述目的地切片，来执行针对所述RAID条带的重新条带化。
10.根据权利要求9所述的设备，其中确定用于重新条带化的源切片包括：
根据确定存储池中添加新盘，确定是否要拆分RAID弹性集(RRS)；以及
根据确定要拆分所述RRS，接收对所述源切片的选择，以用于跨RRS的重新条带化。
11.根据权利要求10所述的设备，其中确定用于重新条带化的源切片还包括：
根据确定无需拆分所述RRS，将所述新盘合并到所述RRS以生成新的RRS；以及
接收对所述源切片的选择，以用于所述新的RRS内的重新条带化。
12.根据权利要求9所述的设备，还包括在所述重新条带化的执行期间，
将所述目的地切片标记为已使用；以及
保持存储***的映射器可用容量不变。
13.根据权利要求12所述的设备，所述的动作还包括：
在所述重新条带化的执行期间，响应于数据故障而启动针对所述存储***的文件***检查。
14.根据权利要求13所述的设备，其中启动针对所述存储***的文件***检查包括：
终止所述重新条带化的执行；
释放从用于文件***检查的预留容量中分配的所述目的地切片；以及
使用所述预留容量来执行针对所述存储***的文件***检查。
15.根据权利要求14所述的设备，所述动作还包括：
确定是否完成针对存储***的文件***检查；
根据确定完成针对存储***的文件***检查，重新启动所述重新条带化的执行；以及
在完成所述重新条带化之后更新所述RAID条带的信息。
16.根据权利要求12所述的设备，所述动作还包括：
从存储***的总容量中分配预订比例的容量作为用于文件***一致性检查的预留容量，所述预留容量对于所述映射器不可用。
17.一种计算机程序产品，所述计算机程序产品被有形地存储在非瞬态计算机可读介质上并且包括计算机可执行指令，所述计算机可执行指令在被执行时使计算机执行根据权利要求1至8中任一项所述的方法。
CN202010345657.7A 2020-04-27 2020-04-27 数据存储方法、设备和计算机程序产品 Pending CN113641298A (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN202010345657.7A CN113641298A (zh) 2020-04-27 2020-04-27 数据存储方法、设备和计算机程序产品
US16/994,903 US11620080B2 (en) 2020-04-27 2020-08-17 Data storage method, device and computer program product

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010345657.7A CN113641298A (zh) 2020-04-27 2020-04-27 数据存储方法、设备和计算机程序产品

Publications (1)

Publication Number Publication Date
CN113641298A true CN113641298A (zh) 2021-11-12

Family

ID=78222187

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010345657.7A Pending CN113641298A (zh) 2020-04-27 2020-04-27 数据存储方法、设备和计算机程序产品

Country Status (2)

Country Link
US (1) US11620080B2 (zh)
CN (1) CN113641298A (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108733311B (zh) * 2017-04-17 2021-09-10 伊姆西Ip控股有限责任公司 用于管理存储***的方法和设备

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102200935A (zh) * 2011-04-27 2011-09-28 烽火通信科技股份有限公司 一种流媒体***数据存储方法
CN105556967A (zh) * 2013-07-22 2016-05-04 高通股份有限公司 用于视频信息的可缩放译码的装置和方法
CN108228086A (zh) * 2016-12-21 2018-06-29 伊姆西Ip控股有限责任公司 Raid重建的方法和设备
US10126988B1 (en) * 2017-07-28 2018-11-13 EMC IP Holding Company LLC Assigning RAID extents and changing drive extent allocations within RAID extents when splitting a group of storage drives into partnership groups in a data storage system
CN110058792A (zh) * 2018-01-18 2019-07-26 伊姆西Ip控股有限责任公司 扩大存储空间的方法、设备以及计算机程序产品

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6073209A (en) * 1997-03-31 2000-06-06 Ark Research Corporation Data storage controller providing multiple hosts with access to multiple storage subsystems
CA2505049C (en) * 2005-04-22 2014-05-27 Nuhn Industries Ltd. Mobile vacuum apparatus for collection of liquid or semi-liquid materials
JP2014203285A (ja) * 2013-04-05 2014-10-27 株式会社東芝 ドライブアレイ装置、コントローラ、データ記憶ドライブ及び方法
US9477675B1 (en) * 2013-09-30 2016-10-25 EMC IP Holding Company LLC Managing file system checking in file systems
US10229022B1 (en) * 2017-04-27 2019-03-12 EMC IP Holding Company LLC Providing Raid-10 with a configurable Raid width using a mapped raid group
CN109725838B (zh) 2017-10-27 2022-02-25 伊姆西Ip控股有限责任公司 用于管理多个盘的方法、装置以及计算机可读介质
CN110413201B (zh) 2018-04-28 2023-06-27 伊姆西Ip控股有限责任公司 用于管理存储***的方法、设备和计算机程序产品
US11341010B2 (en) 2020-01-15 2022-05-24 EMC IP Holding Company LLC Dynamic reclamation of storage stripes

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102200935A (zh) * 2011-04-27 2011-09-28 烽火通信科技股份有限公司 一种流媒体***数据存储方法
CN105556967A (zh) * 2013-07-22 2016-05-04 高通股份有限公司 用于视频信息的可缩放译码的装置和方法
CN108228086A (zh) * 2016-12-21 2018-06-29 伊姆西Ip控股有限责任公司 Raid重建的方法和设备
US10126988B1 (en) * 2017-07-28 2018-11-13 EMC IP Holding Company LLC Assigning RAID extents and changing drive extent allocations within RAID extents when splitting a group of storage drives into partnership groups in a data storage system
CN110058792A (zh) * 2018-01-18 2019-07-26 伊姆西Ip控股有限责任公司 扩大存储空间的方法、设备以及计算机程序产品

Also Published As

Publication number Publication date
US11620080B2 (en) 2023-04-04
US20210334042A1 (en) 2021-10-28

Similar Documents

Publication Publication Date Title
CN108733314B (zh) 用于独立冗余阵列(raid)重建的方法、设备和计算机可读存储介质
US11281536B2 (en) Method, device and computer program product for managing storage system
CN109725822B (zh) 用于管理存储***的方法、设备和计算机程序产品
CN109213619B (zh) 用于管理存储***的方法、设备和计算机程序产品
CN110058953B (zh) 用于改变存储***的类型的方法、设备和存储介质
CN108733311B (zh) 用于管理存储***的方法和设备
US11449400B2 (en) Method, device and program product for managing data of storage device
US11263080B2 (en) Method, apparatus and computer program product for managing cache
CN113377569B (zh) 用于恢复数据的方法、设备和计算机程序产品
CN110413694A (zh) 元数据管理方法及相关装置
US10585765B2 (en) Selective mirroring of predictively isolated memory
CN112764661A (zh) 用于管理存储***的方法、设备和计算机程序产品
US20200341674A1 (en) Method, device and computer program product for restoring data
US11422909B2 (en) Method, device, and storage medium for managing stripe in storage system
CN111857557B (zh) Raid类型转换的方法、设备和计算机程序产品
CN112748849A (zh) 用于存储数据的方法、设备和计算机程序产品
US11481275B2 (en) Managing reconstruction of a malfunctioning disk slice
US11269521B2 (en) Method, device and computer program product for processing disk unavailability states
US11561859B2 (en) Method, device and computer program product for managing data
US11269745B2 (en) Two-node high availability storage system
CN111506450B (zh) 用于数据处理的方法、设备和计算机程序产品
CN113641298A (zh) 数据存储方法、设备和计算机程序产品
CN113391937A (zh) 用于存储管理的方法、电子设备以及计算机程序产品
US11429287B2 (en) Method, electronic device, and computer program product for managing storage system
CN115639945A (zh) 用于扩展存储***的方法、设备和程序产品

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination