CN102483688A - 扩展数据存储*** - Google Patents

扩展数据存储*** Download PDF

Info

Publication number
CN102483688A
CN102483688A CN2010800378782A CN201080037878A CN102483688A CN 102483688 A CN102483688 A CN 102483688A CN 2010800378782 A CN2010800378782 A CN 2010800378782A CN 201080037878 A CN201080037878 A CN 201080037878A CN 102483688 A CN102483688 A CN 102483688A
Authority
CN
China
Prior art keywords
data
metadata
storer
level
growth
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN2010800378782A
Other languages
English (en)
Inventor
S·A·艾哈迈德
S·O·布鲁姆
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
International Business Machines Corp
Original Assignee
International Business Machines Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by International Business Machines Corp filed Critical International Business Machines Corp
Publication of CN102483688A publication Critical patent/CN102483688A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0628—Interfaces specially adapted for storage systems making use of a particular technique
    • G06F3/0638—Organizing or formatting or addressing of data
    • G06F3/0643—Management of files
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0602—Interfaces specially adapted for storage systems specifically adapted to achieve a particular effect
    • G06F3/061—Improving I/O performance
    • G06F3/0611—Improving I/O performance in relation to response time
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0668—Interfaces specially adapted for storage systems adopting a particular infrastructure
    • G06F3/0671—In-line storage system
    • G06F3/0683—Plurality of storage devices
    • G06F3/0685—Hybrid storage combining heterogeneous device types, e.g. hierarchical storage, hybrid arrays

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

在一个实施例中，扩展数据存储***采用第一数据存储器和扩展数据存储器。针对来自使用实体的数据建立第一级别的元数据，在所述第一数据存储器中提供所述第一级别的元数据。将来自所述使用实体的数据存储在所述扩展数据存储器中。还建立将所述数据至少描述为存储在所述扩展数据存储器中的第二级别的元数据，其中所述第二级别的元数据与所存储数据的所述第一级别的元数据关联。在所述第一数据存储器处使所述第一级别的元数据可由所述使用实体访问；以及使所述第二级别的元数据不可用于所述使用实体。因此，所述数据存储在所述扩展数据存储器中并且少量元数据存储在所述第一数据存储器中。

Description

扩展数据存储***
技术领域
本发明涉及数据存储，更具体地说，涉及具有多个数据存储装置的数据存储***。
背景技术
要存储的数据量不断地增加。数据存储装置的范围可以从各种形式的电子存储器到诸如RAID(独立磁盘冗余阵列)、JBOD(简单磁盘捆绑)之类的盘驱动器，到光盘以及磁带驱动器和库。数据存储可用于单个主机或者例如通过网络连接存储(NAS)用于整个网络。
通常，数据以与数据检索需要相关的方式存储在装置上。例如，包括主计算机处理器***的应用或由主计算机处理器***的应用使用的数据存储在提供高速访问的装置(如电子存储器或盘驱动器)中。不太可能被访问的数据通常存储到光盘或磁带。光盘或磁带还可以从***中移除并被归档。
一般来说，高速数据存储装置的单位数据量的存储成本高于低速数据存储。因此，在典型数据处理***中，提供较少量的高速数据存储，大量数据存储在低速数据存储中。典型过程是只要数据被频繁使用，便将数据存储在高速数据存储中，然后例如使用最近最少使用(LRU)算法将数据离台到诸如磁带之类的低速数据存储。通常，首先前往高速数据存储或存储服务器检索数据，如果数据不在该处，则随后将数据从低速数据存储登台(staging)回高速数据存储以便访问。
发明内容
提供了用于数据存储***的方法、数据处理***、数据存储***和计算机程序产品以便存储数据。
在一个实施例中，扩展数据存储***包括第一数据存储器和扩展数据存储器。一种用于存储来自使用实体的数据的方法包括以下步骤：针对来自所述使用实体的数据在所述第一数据存储器中建立第一级别的元数据，所述第一级别的元数据标识所述数据以便由所述使用实体访问；将来自所述使用实体的所述数据存储在所述扩展数据存储器中；建立将所述数据至少描述为存储在所述扩展数据存储器中的第二级别的元数据，所述第二级别的元数据与所存储数据的所述第一级别的元数据关联；在所述第一数据存储器处使所述第一级别的元数据可由所述使用实体访问；以及使所述第二级别的元数据不可用于所述使用实体。
因此，所述数据存储在所述扩展数据存储器中，少量元数据存储在所述第一数据存储器中。
在进一步的实施例中，所述第一级别的元数据与存储器中的数据相关并根据需要为所述使用实体提供信息；以及所述第二级别的元数据将所述数据描述为物理地存储在所述扩展数据存储器中。
另一个实施例还包括将所述第二级别的元数据存储在所述第一数据存储器和所述扩展数据存储器中的步骤。
在进一步的实施例中，其中以数据文件的形式存储所述数据，至少以所述数据的标头的形式将所述第二级别的元数据存储在所述扩展数据存储器中。
在另一个实施例中，将所述第一级别的元数据的副本存储在所述扩展数据存储器中。
在又一个实施例中，所述第一级别的元数据与指向所述数据的所述第二级别的元数据的指针关联，并且所述方法还包括使所述指针不可用于所述使用实体的步骤。
在又一个实施例中，在用于数据存储***的数据处理***中，其中所述数据存储***包括第一数据存储器和扩展数据存储器，所述数据处理***包括：到至少一个使用实体的至少一个主机接口；到所述第一数据存储器和所述扩展数据存储器的至少一个数据存储接口；以及被配置为通过所述主机接口(多个)处理数据以便通过所述数据存储接口(多个)存储的计算机处理***。所述计算机处理***被配置为执行以下步骤：针对来自使用实体的数据在所述第一数据存储器中通过所述数据存储接口(多个)建立第一级别的元数据，所述第一级别的元数据标识所述数据以便由所述使用实体访问；将通过所述主机接口(多个)接收的所述使用实体的数据通过所述数据存储接口(多个)存储在所述扩展数据存储器中；建立将所述数据至少描述为存储在所述扩展数据存储器中的第二级别的元数据，所述第二级别的元数据与所存储数据的所述第一级别的元数据关联；在所述第一数据存储器处通过所述主机接口(多个)使所述第一级别的元数据可由所述使用实体访问；以及使所述第二级别的元数据不可用于所述使用实体。
又一个实施例包括数据存储***，所述数据存储***包括被配置为存储数据的第一数据存储器；被配置为存储数据的扩展数据存储器；以及被配置为针对所述第一数据存储器和所述扩展数据存储器处理和传输至少一个使用实体的数据的数据处理***。所述数据处理***被配置为执行以下步骤：针对来自使用实体的数据在所述第一数据存储器中建立第一级别的元数据，所述第一级别的元数据标识所述数据以便由所述使用实体访问；将从所述使用实体接收的数据存储在所述扩展数据存储器中；建立将所述数据至少描述为存储在所述扩展数据存储器中的第二级别的元数据，所述第二级别的元数据与所存储数据的所述第一级别的元数据关联；在所述第一数据存储器处使所述第一级别的元数据可由所述使用实体访问；以及使所述第二级别的元数据不可用于所述使用实体。
另一个实施例包括一种用于将来自使用实体的数据存储在扩展数据存储***中的计算机程序产品，所述扩展数据存储***包括第一数据存储器和扩展数据存储器。所述计算机程序产品包括具有计算机可读程序代码的计算机可读存储介质，其中在计算机处理***上执行所述计算机可读程序代码时，导致所述计算机处理***执行以下步骤：针对来自使用实体的数据在所述第一数据存储器中建立第一级别的元数据，所述第一级别的元数据标识所述数据以便由所述使用实体访问；将来自所述使用实体的所述数据存储在所述扩展数据存储器中；建立将所述数据至少描述为存储在所述扩展数据存储器中的第二级别的元数据，所述第二级别的元数据与所存储数据的所述第一级别的元数据关联；在所述第一数据存储器处使所述第一级别的元数据可由所述使用实体访问；以及使所述第二级别的元数据不可用于所述使用实体。
附图说明
现在将仅通过实例的方式参考附图描述本发明的优选实施例，这些附图是：
图1是主机和可以实施本发明的数据存储***的示意图；
图2是示出图1的数据存储***中的示例性数据流的数据流图；
图3是用于操作图1和2的数据存储***的示例性数据处理***的方块图；
图4是存储在图1和2的数据存储***中的数据的实例的示意图；
图5A和5B是图4的数据的数据表项的示意图；
图6是示出用于操作图1和2的数据存储***以存储数据的示例性方法的流程图；以及
图7是示出用于操作图1和2的数据存储***以检索数据的示例性方法的流程图。
具体实施方式
在以下描述中，参考附图在优选实施例中描述本发明，其中相同的编号表示相同或相似的元素。尽管按照用于实现本发明目标的最佳方式描述本发明，但本领域的技术人员将理解，可以根据这些教导实现改变而不偏离本发明的精神或范围。
参考图1，其中示出了存储主机105的数据的数据存储***100的一个实例。主机105可以直接或可以借助网络107(例如通过网络连接存储(NAS))连接到数据存储***100。
一般来说，高速数据存储装置的单位数据量的存储成本高于低速数据存储。因此，在典型数据处理***中，提供较少量的高速数据存储，大量数据存储在低速数据存储中。典型过程是只要数据被频繁使用，便将数据存储在高速数据存储中，然后例如使用最近最少使用(LRU)算法将数据离台到诸如磁带之类的低速数据存储。通常，首先前往高速数据存储或存储服务器检索数据，如果数据不在该处，则随后将数据从低速数据存储登台回高速数据存储以便访问。
参考图1和2，数据存储***100实际上将数据108直接存储到诸如磁带之类的扩展数据存储器110。采用高速数据存储器120(在此称为第一数据存储器)存储与所存储数据关联的元数据。
扩展数据存储器110可以包括磁带数据存储器，其实例包括磁带驱动器和自动库。磁带驱动器的一个实例是基于LTO技术的IBM 3580Ultrium磁带驱动器。自动数据存储库的一个实例是IBM 3584UltraScalable TapeLibrary。扩展数据存储器可以备选地包括其他技术，例如光盘、光盘库等。
高速第一数据存储器120可以包括盘驱动器，所述盘驱动器可以是单个驱动器，或者可以使用RAID(独立磁盘冗余阵列)协议，或者可以包括JBOD(简单磁盘捆绑)。高速数据存储器120的备选实例包括布置为SSD(固态驱动器)的闪存。还可以布置闪存以提供诸如RAID布置之类的冗余。第一数据存储器与扩展数据存储器之间的速度差别是相对的，与成本一样。
数据存储***100针对来自使用实体或主机105的数据108建立第一或访问级别的元数据、将数据108直接存储在扩展数据存储器110中，并建立将数据108描述为存储在扩展数据存储器110中的第二级别的元数据，所述第二级别的元数据与所存储数据的所述第一级别的元数据关联。形成(125)第一和第二级别的元数据以便与存储在扩展数据存储器110中的数据108相关。
第一或访问级别的元数据是具有标识数据以便由使用实体访问的表项的数据库，并根据需要为使用实体提供信息(例如，作为整体数据存储的文件***视图)。第二级别的元数据将数据描述为物理地存储在扩展数据存储器110中，例如，描述为物理文件***。至少第一级别的元数据存储在第一数据存储器120上。第二级别的元数据还可以存储在(但不一定与第一级别的元数据一起)第一数据存储器中和/或存储在扩展数据存储器110中。作为一个实例，第二级别的元数据以数据的标头的形式存储在扩展数据存储器110中。作为另一个实例，第二级别的元数据存储在扩展数据存储器内的元数据存储库中。可以与第一级别的元数据一起提供指向第一数据存储器或第二级别的存储器或两者中的第二级别的元数据的位置的指针。
在第一数据存储器处使第一级别的元数据可由主机或使用实体105访问(例如，通过使主机或使用实体可查看文件***表项)。使第二级别的元数据不可用于使用实体，与指针(如果有)一样。术语“不可用”意味着主机无法直接访问元数据以便访问数据。可以出于其他目的(例如数据恢复)而许可访问。
因此，数据108存储在扩展数据存储器110中，而少量元数据125存储在第一数据存储器120中。主机或使用实体105只能使用第一级别的元数据的访问信息访问所存储的数据。存储***表面上具有很大容量，并可在高速数据存储器120处提供元数据访问而不必经历离台和登台过程。实际访问延迟介于存储在高速数据存储器中的数据的即时性与必须登台的数据的延迟之间。
此外，可以备份第一级别的元数据128的副本并将其存储在扩展数据存储器中。还可以备份第二级别的元数据的另一个副本并将其存储在扩展数据存储器110中。元数据的副本可以用于错误恢复或重新构建第一数据存储器120的元数据。在一个实例中，第一级别的元数据的备份副本与第二级别的元数据一起存储在数据的标头或元数据存储库或两者中。存储库可以跨扩展数据存储器110、可以针对第一和第二级别的元数据包括单独的存储库，或者可以包含所有数据或数据分区的一个或多个标头。在此，术语“标头”包括扩展数据存储器110中的任何元数据位置。
为了从数据存储***100访问所存储的数据，主机或使用实体105使用第一级别的元数据的访问信息，第一和第二级别的元数据由数据存储***100使用指针(如果需要)提取(130)，并用于从扩展数据存储器110直接检索数据138。
参考图3，图1和2的数据存储***100包括数据处理***140以控制数据和元数据的处理和形成。数据处理***包括被配置为操作数据存储***的计算机处理器***145，计算机处理器***具有被配置为操作数据存储***的计算机处理器(多个)147和被配置为存储用于操作计算机处理器(多个)的信息和计算机可读程序信息的存储器(多个)148。在此，“计算机处理器”、“计算机处理***”或“控制”可以包括任何适合的逻辑、可编程逻辑、微处理器以及关联或内部的存储器以响应程序指令，并且关联或内部的存储器可以包括固定或可重写存储器或数据存储设备。程序信息可以从主机或通过数据存储驱动器或盘阵列，或通过来自软盘或光盘的输入，或通过从磁带盒读取，或通过Web用户界面或其他网络连接，或通过任何其他适合的手段提供给子***控件或存储器。因此，程序信息可以包括一个或多个包括计算机可用存储介质的程序产品，所述计算机可用存储介质具有存储在其中的计算机可用程序代码以操作数据存储***100或类似类型的***或设备。
主机接口150、154可包括一个或多个主机适配器、光纤通道端口、一个或多个FICON端口、一个或多个ESCON端口、一个或多个SCSI端口或其他适合的端口。每个主机接口被配置为与图1的主机***105或网络107通信以便数据处理***可以处理来自任何主机或使用实体的I/O。在一个实例中，接口150、154通过标准TCP/IP协议连接到基于以太网的网络107，并允许用户在虚拟环境中有效地将数据直接发送到磁带。
数据存储接口160、164可以包括通信链路以便与第一数据存储器120和扩展数据存储器110通信。通信链路可以包括设备适配器，例如用于串行互连(例如RS-232或RS-422)、以太网连接、SCSI互连、ESCON互连、FICON互连、局域网(LAN)、专用广域网(WAN)、公共广域网、存储区域网络(SAN)、传输控制协议/网际协议(TCP/IP)、因特网以及它们的组合。
数据处理子***140的实例包括
Figure BDA0000138420730000081
Enterprise Storage Server、
Figure BDA0000138420730000082
Model DS 8000或其他同类***。
数据可以布置在各种不变或可变大小的数据单元中。在一个实例中，数据布置在称为“文件”的数据单元中。在其他实例中，数据布置在称为“数据集”或“盘区(extents)”或“扇区”的数据单元中。另一个实例与寻址相关并称为逻辑单元的“LUN”。其他实例对本领域的技术人员是公知的。因此，在此使用的通用术语是“数据”或“数据文件”。在一个实施例中，参考图3、4、5A、5B和6，在步骤500，主机105提供一个命令以将数据文件200存储在数据存储***100中，在数据处理***140的主机接口150、154处接收该命令。数据处理***140通过执行若干功能而响应该命令，这些功能在图6中以顺序形式说明。如本领域技术人员公知的，可以全部在一个事件分组中以任何适合的顺序有效地执行所述功能。
在步骤505，数据处理***140针对数据文件200建立第一或访问级别的元数据(其包括数据库300中的表项301的至少一部分)，并通过数据存储接口160、164将表项301存储到第一数据存储器120。在步骤507，数据处理***140通过主机接口150、154和数据存储接口160、164将数据文件200直接存储到扩展数据存储器110。在步骤509，数据处理***140建立将数据文件200描述为存储在扩展数据存储器110中的第二级别的元数据，第二级别的元数据与所存储数据的第一或访问级别的元数据关联。第二级别的元数据包括表项401的一部分。第二级别的元数据通过数据存储接口160、164例如作为数据库400中的表项400a存储在扩展数据存储器110中。备选地或额外地，在根据步骤513的一个实施例中，表项401可以包括数据文件的标头400a，其中包括第二级别的元数据和所存储的数据文件200。将共同形成第一和第二级别的元数据以便与存储在扩展数据存储器110中的数据文件200相关。数据库400可以与扩展数据存储器110相称，或者备选地，扩展数据存储器能够存储除了数据库的数据以外的额外数据。如上所述，数据库400和扩展数据存储器可以包括被示为“带上存储”或“SoT”的磁带数据存储，或可以包括备选技术。
数据库300的表项301中的第一级别的元数据表项300a标识数据文件200以便由使用实体访问，并根据需要为使用实体提供信息(例如作为整体数据存储的文件***视图)。表项300a包括与存储中的文件相关的数据，但从用户或用户客户端的角度，包括例如文件名、文件大小、修改日期、所有者、访问权限等，如本领域技术人员所公知的。
第二级别的元数据表项400a将数据文件200描述为例如由物理文件***物理地存储在扩展数据存储器110中。表项400a与数据文件的实际存储相关，并可以包括卷、卷块位置等，如本领域的技术人员所公知的。
至少将第一或访问级别的元数据300a存储在第一数据存储器120中。第二级别的元数据400a还可以作为表项301的一部分存储在(但不一定与第一或访问级别的元数据300a一起)第一数据存储器中。作为一个实例，如果第二级别的元数据与第一或访问级别元数据分离地存储在第一数据存储器120或扩展数据存储器110中，则在步骤515，可以与第一或访问级别的元数据表项300a一起提供指针，指向第一数据存储器或第二级别存储器或两者中的第二级别的元数据400a的位置。
在步骤520，例如通过使主机或使用实体可查看数据库300的文件***表项300a，而使主机或使用实体105可访问第一或访问级别的元数据300a。使第二级别的元数据400a不可用于使用实体，如指针(如果有)一样，即使第二级别的元数据400a和/或指针是数据库300的相同表项301的部分。
因此，数据108存储在扩展数据存储器110中，而少量元数据300存储在第一数据存储器120中。在步骤525，通过到主机或使用实体105的返回指示将数据存储指示为完成。
此外，在步骤530，可以备份第一级别元数据300a的副本并将其存储在扩展数据存储器110中，例如存储到扩展数据存储器中的单独数据文件中或添加到表项401中。还可以备份第二级别元数据的另一个副本并将其存储在扩展数据存储器110中。元数据副本可以用于错误恢复或恢复并重建第一数据存储器120的元数据。
在一个实施例中，不会将元数据300以外的数据存储在第一数据存储器120中。存储在数据存储***100中的所有数据都存储在扩展数据存储器110中。
参考图3、4、5A、5B和7，在一个实施例中，在步骤600，主机105提供一个命令以从数据存储***100检索数据文件。为了访问所存储的数据，主机或使用实体105使用第一级别的元数据300a的访问信息。在数据处理***140的主机接口150、154处接收具有访问信息的命令。数据处理***140通过执行若干功能响应该命令，在一个实施例中，从步骤605开始，访问第一级别的元数据300a以获得与所需数据相关的元数据表项301。在一个实施例中，在步骤607，数据处理***使用所述指针访问和提取例如扩展数据存储器110的表项401的关联第二级别的元数据400a。备选地，关联的第二级别的元数据400a还位于第一数据存储器120中的所需数据的表项301中，由数据处理***140提取第一和第二级别的元数据。
在一个实施例中，在步骤610，使用所提取的第二级别的元数据400a从扩展数据存储器110检索数据文件200，并使用第一或访问级别元数据通过数据存储接口160、164和主机接口150、154将所述数据文件直接发送到主机或使用实体105。
所述实施方式可以包括软件、固件、微代码、硬件和/或它们的任意组合。所述实施方式可以采取在介质(例如图3的存储器148、图2的存储120和/或图3的电路147)中实现的代码或逻辑的形式，其中所述介质可以包括硬件逻辑(例如集成电路芯片、可编程门阵列[PGA]、专用集成电路[ASIC]或其他电路、逻辑或器件)或诸如磁存储介质之类的计算机可读存储介质(例如电、磁、光、电磁、红外线或半导体***、半导体或固态存储器、磁带、可移动计算机软盘、随机存取存储器[RAM]、只读存储器[ROM]、硬磁盘、光盘、光盘只读存储器(CD-ROM)、光盘读/写存储器[CD-R/W]和DVD)。
本领域的技术人员将理解，可以对上面讨论的方法进行更改，其中包括对步骤顺序的更改。此外，本领域的技术人员将理解，可以采用与在此所示不同的特定组件布置。
尽管详细示出了本发明的优选实施例，但是显而易见的是，本领域技术人员可想到对这些实施例的修改和改变而不偏离在以下权利要求中阐述的本发明的范围。

Claims (14)

1.一种用于将来自使用实体的数据存储在扩展数据存储***中的方法，所述扩展数据存储***包括第一数据存储器和扩展数据存储器，所述方法包括以下步骤：
针对来自所述使用实体的数据在所述第一数据存储器中建立第一级别的元数据，所述第一级别的元数据标识所述数据以便由所述使用实体访问；
将来自所述使用实体的所述数据存储在所述扩展数据存储器中；
建立将所述数据至少描述为存储在所述扩展数据存储器中的第二级别的元数据，所述第二级别的元数据与所存储数据的所述第一级别的元数据关联；
在所述第一数据存储器处使所述第一级别的元数据可由所述使用实体访问；以及
使所述第二级别的元数据不可用于所述使用实体。
2.如权利要求1中所述的方法，其中所述第一级别的元数据与存储器中的数据相关并根据需要为所述使用实体提供信息；以及其中所述第二级别的元数据将所述数据描述为物理地存储在所述扩展数据存储器中。
3.如权利要求1或2中所述的方法，还包括将所述第二级别的元数据存储在所述第一数据存储器和所述扩展数据存储器中的步骤。
4.如权利要求3中所述的方法，其中以数据文件的形式存储所述数据，并且至少以所述数据的标头的形式将所述第二级别的元数据存储在所述扩展数据存储器中。
5.如权利要求3中所述的方法，还包括将所述第一级别的元数据的副本存储在所述扩展数据存储器中的步骤。
6.如上述任一权利要求中所述的方法，其中所述第一级别的元数据与指向所述数据的所述第二级别的元数据的指针关联，并且还包括使所述指针不可用于所述使用实体的步骤。
7.一种数据存储***，包括：
第一数据存储器，配置为存储数据；
扩展数据存储器，配置为存储数据；以及
数据处理***，配置为针对所述第一数据存储器和所述扩展数据存储器处理和传输至少一个使用实体的数据，所述数据处理***配置为执行以下步骤：
针对来自使用实体的数据在所述第一数据存储器中建立第一级别的元数据，所述第一级别的元数据标识所述数据以便由所述使用实体访问；
将从所述使用实体接收的数据存储在所述扩展数据存储器中；
建立将所述数据至少描述为存储在所述扩展数据存储器中的第二级别的元数据，所述第二级别的元数据与所存储数据的所述第一级别的元数据关联；
在所述第一数据存储器处使所述第一级别的元数据可由所述使用实体访问；以及
使所述第二级别的元数据不可用于所述使用实体。
8.如权利要求7中所述的数据存储***，其中所述第一级别的元数据与存储器中的数据相关并根据需要为所述使用实体提供信息；以及其中所述第二级别的元数据将所述数据描述为物理地存储在所述扩展数据存储器中。
9.如权利要求7中所述的数据存储***，其中所述数据处理***还配置为执行将所述第二级别的元数据存储在所述第一数据存储器和所述扩展数据存储器中的步骤。
10.如权利要求9中所述的数据存储***，其中以数据文件的形式存储所述数据，并且至少以所述数据的标头的形式将所述第二级别的元数据存储在所述扩展数据存储器中。
11.如权利要求10中所述的数据存储***，其中所述数据处理***还配置为执行将所述第一级别的元数据的副本存储在所述扩展数据存储器中的步骤。
12.如权利要求7至11中的任一权利要求中所述的数据存储***，其中所述第一级别的元数据与指向所述数据的所述第二级别的元数据的指针关联，以及其中所述数据处理***还配置为执行使所述指针不可用于所述使用实体的步骤。
13.如权利要求7至12中的任一权利要求中所述的数据存储***，其中所述扩展数据存储器包括磁带。
14.一种存储在计算机可读介质上并包括计算机程序代码的计算机程序，当所述计算机程序代码被载入计算机***并在其上执行时，将导致所述计算机***执行如权利要求1至6中的任一权利要求所述的方法的所有步骤。
CN2010800378782A 2009-08-28 2010-08-19 扩展数据存储*** Pending CN102483688A (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US12/550,305 2009-08-28
US12/550,305 US8229972B2 (en) 2009-08-28 2009-08-28 Extended data storage system
PCT/EP2010/062079 WO2011023619A1 (en) 2009-08-28 2010-08-19 Extended data storage system

Publications (1)

Publication Number Publication Date
CN102483688A true CN102483688A (zh) 2012-05-30

Family

ID=42727515

Family Applications (1)

Application Number Title Priority Date Filing Date
CN2010800378782A Pending CN102483688A (zh) 2009-08-28 2010-08-19 扩展数据存储***

Country Status (5)

Country Link
US (2) US8229972B2 (zh)
CN (1) CN102483688A (zh)
DE (1) DE112010003460T5 (zh)
GB (1) GB2485074B (zh)
WO (1) WO2011023619A1 (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103218462A (zh) * 2013-05-13 2013-07-24 深圳市中博科创信息技术有限公司 一种数据处理方法
CN106547918A (zh) * 2016-11-30 2017-03-29 长城计算机软件与***有限公司 一种统计数据的整合方法及***

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8954688B2 (en) * 2010-10-06 2015-02-10 International Business Machines Corporation Handling storage pages in a database system
US20120317339A1 (en) * 2011-06-13 2012-12-13 International Business Machines Corporation System and method for caching data in memory and on disk
US20150363274A1 (en) * 2013-02-01 2015-12-17 Mandar Govind NANIVADEKAR Storing backup data separate from catalog data
US10839093B2 (en) 2018-04-27 2020-11-17 Nutanix, Inc. Low latency access to physical storage locations by implementing multiple levels of metadata
US10831521B2 (en) 2018-04-27 2020-11-10 Nutanix, Inc. Efficient metadata management

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6718427B1 (en) * 2000-10-23 2004-04-06 International Business Machines Corporation Method and system utilizing data fragments for efficiently importing/exporting removable storage volumes
EP1462927A2 (en) * 2003-03-27 2004-09-29 Hitachi, Ltd. Storage system
US20050262512A1 (en) * 2004-05-20 2005-11-24 Oliver Schmidt Sharing objects in runtime systems
CN1766845A (zh) * 2005-11-30 2006-05-03 吴晓栋 一种实现***高度安全和可恢复的文件***的方法
CN101183383A (zh) * 2007-12-17 2008-05-21 中国科学院计算技术研究所 一种快照***及其使用方法

Family Cites Families (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5537585A (en) * 1994-02-25 1996-07-16 Avail Systems Corporation Data storage management for network interconnected processors
US5987506A (en) * 1996-11-22 1999-11-16 Mangosoft Corporation Remote access and geographically distributed computers in a globally addressable storage environment
AU771959B2 (en) * 1999-08-13 2004-04-08 Fujitsu Limited File processing method, data processing device and storage medium
JP2004005066A (ja) * 2002-05-30 2004-01-08 Internatl Business Mach Corp <Ibm> 複数の記録装置に記録されたデータのバックアップ技術
JP4124331B2 (ja) * 2002-09-17 2008-07-23 株式会社日立製作所 Ｄｂｍｓ向け仮想ボリューム作成・管理方法
EP1723564A2 (en) * 2004-02-11 2006-11-22 Storage Technology Corporation Clustered hierarchical file services
US7487288B2 (en) * 2004-05-14 2009-02-03 International Business Machines Corporation Dynamic loading of virtual volume data in a virtual tape server
US7584201B2 (en) * 2005-08-10 2009-09-01 Qwest Communications International, Inc Management of mobile-device data
US7574579B2 (en) * 2005-09-30 2009-08-11 Cleversafe, Inc. Metadata management system for an information dispersed storage system
US7721044B1 (en) * 2005-10-20 2010-05-18 American Megatrends, Inc. Expanding the storage capacity of a virtualized data storage system
US20080154907A1 (en) * 2006-12-22 2008-06-26 Srikiran Prasad Intelligent data retrieval techniques for synchronization
US8704849B2 (en) * 2008-07-01 2014-04-22 Canon Kabushiki Kaisha Display control apparatus and display control method
US20100106654A1 (en) * 2008-10-16 2010-04-29 Hntb Holdings Ltd Managing and memorializing design requirements of a building project

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6718427B1 (en) * 2000-10-23 2004-04-06 International Business Machines Corporation Method and system utilizing data fragments for efficiently importing/exporting removable storage volumes
EP1462927A2 (en) * 2003-03-27 2004-09-29 Hitachi, Ltd. Storage system
US20050262512A1 (en) * 2004-05-20 2005-11-24 Oliver Schmidt Sharing objects in runtime systems
CN1766845A (zh) * 2005-11-30 2006-05-03 吴晓栋 一种实现***高度安全和可恢复的文件***的方法
CN101183383A (zh) * 2007-12-17 2008-05-21 中国科学院计算技术研究所 一种快照***及其使用方法

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103218462A (zh) * 2013-05-13 2013-07-24 深圳市中博科创信息技术有限公司 一种数据处理方法
CN103218462B (zh) * 2013-05-13 2016-12-28 深圳市中博科创信息技术有限公司 一种数据处理方法
CN106547918A (zh) * 2016-11-30 2017-03-29 长城计算机软件与***有限公司 一种统计数据的整合方法及***
CN106547918B (zh) * 2016-11-30 2020-06-09 长城计算机软件与***有限公司 一种统计数据的整合方法及***

Also Published As

Publication number Publication date
GB2485074A (en) 2012-05-02
WO2011023619A1 (en) 2011-03-03
US8229972B2 (en) 2012-07-24
US8468176B2 (en) 2013-06-18
US20120233223A1 (en) 2012-09-13
GB2485074B (en) 2016-03-09
GB201119042D0 (en) 2011-12-14
US20110055272A1 (en) 2011-03-03
DE112010003460T5 (de) 2012-06-14

Similar Documents

Publication Publication Date Title
US9965216B1 (en) Targetless snapshots
KR100968318B1 (ko) 데이터 저장 디바이스 및 이로부터의 정보 획득 방법 및 시스템과 컴퓨터 판독가능 저장 매체
CN102483688A (zh) 扩展数据存储***
CN100416508C (zh) 一种存储网络中的数据备份方法
US7464235B2 (en) Storage system and control method thereof, and computer program product
US8200631B2 (en) Snapshot reset method and apparatus
US9189494B2 (en) Object file system
US8793226B1 (en) System and method for estimating duplicate data
CN100524235C (zh) 存储网络中的恢复操作
WO2013160942A2 (en) File storage system and file cloning method
US8725945B2 (en) Method and system for governing an enterprise level green storage system drive technique
EP4139802B1 (en) Methods for managing input-ouput operations in zone translation layer architecture and devices thereof
WO2015061594A1 (en) Data management in distributed file systems
US20070168398A1 (en) Permanent Storage Appliance
US20110107045A1 (en) Hybrid storage data migration by selective data removal
JP2006268398A (ja) 計算機システム、データ管理方法およびプログラム
JP2021168138A (ja) 複合集合体アーキテクチャー
US20150081981A1 (en) Generating predictive cache statistics for various cache sizes
JP2019028954A (ja) ストレージ制御装置、プログラム、及び重複排除方法
US10642508B2 (en) Method to limit impact of partial media failure of disk drive and detect/report the loss of data for objects due to partial failure of media
US10621059B2 (en) Site recovery solution in a multi-tier storage environment
US9229814B2 (en) Data error recovery for a storage device
US8499132B1 (en) Software module for using flash memory as a secondary permanent storage device
CN100421062C (zh) 控制对逻辑卷的访问的设备和方法
US9785682B1 (en) Fast dependency mining using access patterns in a storage system

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C05 Deemed withdrawal (patent law before 1993)
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20120530