CN111831222B - 一种分布式对象存储方法及*** - Google Patents
一种分布式对象存储方法及*** Download PDFInfo
- Publication number
- CN111831222B CN111831222B CN202010542876.4A CN202010542876A CN111831222B CN 111831222 B CN111831222 B CN 111831222B CN 202010542876 A CN202010542876 A CN 202010542876A CN 111831222 B CN111831222 B CN 111831222B
- Authority
- CN
- China
- Prior art keywords
- data
- hot
- storage
- archive
- cold
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000003860 storage Methods 0.000 title claims abstract description 102
- 238000000034 method Methods 0.000 title claims abstract description 23
- 238000007726 management method Methods 0.000 claims abstract description 32
- 238000013500 data storage Methods 0.000 claims abstract description 22
- 230000003287 optical effect Effects 0.000 claims description 9
- 230000008569 process Effects 0.000 claims description 4
- 238000005265 energy consumption Methods 0.000 abstract description 5
- 230000014759 maintenance of location Effects 0.000 abstract description 3
- 238000000926 separation method Methods 0.000 abstract description 3
- 230000004048 modification Effects 0.000 description 5
- 238000012986 modification Methods 0.000 description 5
- 238000004458 analytical method Methods 0.000 description 2
- 238000011161 development Methods 0.000 description 2
- 238000010586 diagram Methods 0.000 description 2
- 230000005012 migration Effects 0.000 description 2
- 238000013508 migration Methods 0.000 description 2
- 238000005457 optimization Methods 0.000 description 2
- 230000004075 alteration Effects 0.000 description 1
- 238000013459 approach Methods 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 238000004134 energy conservation Methods 0.000 description 1
- 238000004146 energy storage Methods 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 239000002360 explosive Substances 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 230000007774 longterm Effects 0.000 description 1
- 230000000737 periodic effect Effects 0.000 description 1
- 238000012545 processing Methods 0.000 description 1
- 238000010223 real-time analysis Methods 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
- G06F3/0601—Interfaces specially adapted for storage systems
- G06F3/0602—Interfaces specially adapted for storage systems specifically adapted to achieve a particular effect
- G06F3/0625—Power saving in storage systems
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
- G06F3/0601—Interfaces specially adapted for storage systems
- G06F3/0628—Interfaces specially adapted for storage systems making use of a particular technique
- G06F3/0646—Horizontal data movement in storage systems, i.e. moving data in between storage devices or systems
- G06F3/0647—Migration mechanisms
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
- G06F3/0601—Interfaces specially adapted for storage systems
- G06F3/0668—Interfaces specially adapted for storage systems adopting a particular infrastructure
- G06F3/067—Distributed or networked storage systems, e.g. storage area networks [SAN], network attached storage [NAS]
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本发明实施例提供一种分布式对象存储方法及***，其中，所述方法包括：智能数据生命周期管理子***获取标准数据存储子***中的数据；智能数据生命周期管理子***按照预先设定的规则对所述数据按照冷热程度进行分类，并将分类后的数据按类别分别存储至对应的介质存储***，包括：数据在创建时，将数据分为热数据、低频数据或者归档数据；以及，对于可访问的数据，根据数据实时日志记录的访问量，将数据分为热数据、低频数据或者归档数据。据本方案，将数据按冷热程度，分别存储至不同的存储中，实现数据的冷热分离，及多种介质混合存储，从而提高了存储效率及数据安全性，同时也大幅降低了能耗及存储成本。
Description
技术领域
本发明涉及数据处理领域，具体涉及一种分布式对象存储方法及***。
背景技术
随着互联网的飞速发展，尤其移动互联网、物联网IoT、云计算、5G、IPv6等技术的飞速发展与普及，数据呈爆发式增长，如何更高效、更安全的存储海量数据成为了一项新挑战。
现有技术中通常采用磁存储如机械硬盘、磁带等，电存储如固态硬盘、高速闪存等的磁电混合存储架构对海量数据进行存储。
在实现本发明过程中，发明人发现现有技术中至少存在如下问题：
目前企业级存储***中磁、电介质存储***提供实时在线服务，提供高可靠、高可用、高性能的数据存储服务。但目前的磁电混合存储架构，因数据实时在线的同时也带来了大量的电能消耗；同时也由于磁、电存储介质寿命短(3-5年)，导致数据需周期性迁移等诸多问题。面对日益增长的数据，现有存储架构面临新的挑战，已无法同时满足海量数据的高可靠、高可用、高性能、长期存储、低成本、绿色节能的存储需求。
发明内容
本发明实施例提供一种分布式对象存储方法及***，将数据按冷热程度，分别存储至不同的存储中，实现数据的冷热分离，及多种介质混合存储，从而提高了存储效率及数据安全性，同时也大幅降低了能耗及存储成本。
为达到上述目的，一方面，本发明实施例提供了一种分布式对象存储方法，所述方法包括：
智能数据生命周期管理子***获取标准数据存储子***中的数据；
智能数据生命周期管理子***按照预先设定的规则对所述数据按照冷热程度进行分类，并将分类后的数据按类别分别存储至对应的介质存储***，其中，所述按照预先设定的规则对所述数据按照冷热程度进行分类，包括：
数据在创建时，将数据分为热数据、低频数据或者归档数据；以及，
对于可访问的数据，根据数据实时日志记录的访问量，将数据分为热数据、低频数据或者归档数据。
另一方面，本发明实施例提供了一种分布式对象存储***，所述装置包括：
标准数据存储子***，用于存储数据；
智能数据生命周期管理子***，用于获取标准数据存储子***中的数据；按照预先设定的规则对所述数据按照冷热程度进行分类，并将分类后的数据按类别分别存储至对应的介质存储***；
其中，所述智能数据生命周期管理子***具体用于：
数据在创建时，将数据分为热数据、低频数据或者归档数据；以及，
对于可访问的数据，根据数据实时日志记录的访问量，将数据分为热数据、低频数据或者归档数据。
上述技术方案具有如下有益效果：
本发明的技术方案所述分布式对象存储的分层冷热混合存储方案，是通过预先设定的规则将数据按冷热程度，分别存储至不同的存储中，实现数据的冷热分离，及多种介质混合存储，从而提高了存储效率及数据安全性，同时也大幅降低了能耗及存储成本。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
图1是本发明实施例一种分布式对象存储方法的流程图；
图2是本发明实施例一种分布式对象存储***的结构示意图。
具体实施方式
下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
如图1所示，是本发明实施例一种分布式对象存储方法的流程图，所述方法包括：
S101：智能数据生命周期管理子***获取标准数据存储子***中的数据；优选地，所述标准数据存储子***中的数据为业务应用程序生产的数据，所述业务应用程序生产的数据通过分布式对象存储SDK或API存储至所述标准数据存储子***。
S102：智能数据生命周期管理子***按照预先设定的规则对所述数据按照冷热程度进行分类，并将分类后的数据按类别分别存储至对应的介质存储***，其中，所述按照预先设定的规则对所述数据按照冷热程度进行分类，包括：数据在创建时，将数据分为热数据、低频数据或者归档数据；以及，对于可访问的数据，根据数据实时日志记录的访问量，将数据分为热数据、低频数据或者归档数据。
优选地，所述数据在创建时，将数据分为热数据、低频数据或者归档数据，包括：
数据在创建时，用户端根据***默认或自定义对数据自身进行分类，将数据分为热数据、低频数据或者归档数据；或者，用户端根据***默认或自定义对数据对应的存储空间进行分类，将数据分为热数据、低频数据或者归档数据；或者，用户端根据***默认或自定义对数据所在的文件进行分类，将数据分为热数据、低频数据或者归档数据。具体包括：
1.User级规则：支持User创建时数据冷热分层存储设置。如，A1用户创建时默认数据策略为归档数据，则数据存储时默认为归档数据，存储至光存储***。
2.存储空间Bucket级规则：支持Bucket创建时数据冷热分层存储设置。如，B1Bucket创建时默认为热数据，则数据存储时默认为热数据，存储至电存储***。
3.Object级规则：支持Object创建时数据冷热分层存储设置。如，File1创建时默认为低频数据，则该数据默认为低频数据，存储至磁存储***。
4.TTL规则：支持以天为维度的生命周期管理(按对象最后修改时间来计算)。如，过期日期，指定一个过期日期，如2018.01.01，可删除该日期之前或之后所有最后修改时间符合的文件对象。
5.文件类别规则：支持按文件类别的生命周期管理。如，删除.exe结尾的所有文件。
6.文件名规则：支持以文件名为规则的生命周期管理。
优选地，所述根据数据实时日志记录的访问量，将数据分为热数据、低频数据或者归档数据，包括：根据数据实时日志记录的访问量，将在设定时间段内访问量达到第一设定阈值的数据标记为热数据；将在设定时间段内访问量达到第二设定阈值且未达到第一阈值的数据标记为低频数据；将在设定时间段内访问量达到第三设定阈值且未达到第二阈值的数据标记为归档数据；其中，所述第一设定阈值大于第二设定阈值，所述第二设定阈值大于第三设定阈值。
具体地，通过日志实时分析，统计数据对象Object的GET、HEAD、PUT、POST、ClientIP访问，将单位时间内访问量达到一定阈值的Object由标准数据分别标记为热数据、冷数据、归档数据。如，将每分钟GET访问达1000次的数据标记为热数据；将每天GET、HEAD访问小于100次的数据标记为冷数据；将每月访问小于1次的数据标记为归档数据。
优选地，所述将分类后的数据按类别分别存储至对应的介质存储***，包括：
当数据的类别为热数据时，将数据存储至电存储***；
当数据的类别为低频数据时，将数据存储至磁存储***；
当数据的类别为归档数据时，将数据存储至光存储***。
总的来说，本技术方案具体结构为，业务应用程序生产的数据，通过分布式对象存储SDK或API将数据存储至分布式对象存储***，数据首先存储至分布式对象存储-标准数据存储子***，同时分布式对象存储-智能数据生命管理子***通过对用户、业务、Bucket、Object、访问日志等多个维度进行综合分析，对数据进行冷热分析，将标准数据调整分别调整为对应的热数据、低频数据、归档数据，实现冷热分层，并存储至对应介质存储***，从而实现数据存储最优化，综合提升存储效率以及存储成本最优化。
对应于上述方法，如图2所示，是本发明实施例一种分布式对象存储***的结构示意图，所述装置包括：
标准数据存储子***21，用于存储数据；
智能数据生命周期管理子***22，用于获取标准数据存储子***中的数据；按照预先设定的规则对所述数据按照冷热程度进行分类，并将分类后的数据按类别分别存储至对应的介质存储***；
其中，所述智能数据生命周期管理子***具体用于：
数据在创建时，将数据分为热数据、低频数据或者归档数据；以及，
对于可访问的数据，根据数据实时日志记录的访问量，将数据分为热数据、低频数据或者归档数据。
优选地，所述标准数据存储子***中的数据为业务应用程序生产的数据，所述业务应用程序生产的数据通过分布式对象存储SDK或API存储至所述标准数据存储子***。
优选地，所述智能数据生命周期管理子***22具体还用于：
数据在创建时，用户端根据***默认或自定义对数据自身进行分类，将数据分为热数据、低频数据或者归档数据；或者，
用户端根据***默认或自定义对数据对应的存储空间进行分类，将数据分为热数据、低频数据或者归档数据；或者，
用户端根据***默认或自定义对数据所在的文件进行分类，将数据分为热数据、低频数据或者归档数据。
优选地，所述智能数据生命周期管理子***22具体还用于：
根据数据实时日志记录的访问量，将在设定时间段内访问量达到第一设定阈值的数据标记为热数据；
将在设定时间段内访问量达到第二设定阈值且未达到第一阈值的数据标记为低频数据；
将在设定时间段内访问量达到第三设定阈值且未达到第二阈值的数据标记为归档数据；其中，
所述第一设定阈值大于第二设定阈值，所述第二设定阈值大于第三设定阈值。
优选地，所述智能数据生命周期管理子***22具体还用于：
当数据的类别为热数据时，将数据存储至电存储***；
当数据的类别为低频数据时，将数据存储至磁存储***；
当数据的类别为归档数据时，将数据存储至光存储***。
本技术方案中智能数据生命周期管理功能，会将归档数据存储至光存储***，数据由低频存储迁至光存储***时，同时更新分布式对象***中对应的元数据。同时为保障数据安全性，这里还会将归档数据转换为归档EC数据。主要有以下优势：
1.数据保护，高可用性。使用混合存储，极大提升了数据的高可用性，尤其是光存储***的引入，降低了归档数据的周期性迁移工作，对冷数据与归档数据的安全性有较大幅度提升。
2.数据的冷热分层、分介质存储，提升了热数据的读性能，提升了综合存储效率。
3.混合存储架构满足了海量数据的存储需求，尤其光存储***的引入，极大的提升了数据存储安全性，同时降低了能耗与成本。
应该明白，公开的过程中的步骤的特定顺序或层次是示例性方法的实例。基于设计偏好，应该理解，过程中的步骤的特定顺序或层次可以在不脱离本公开的保护范围的情况下得到重新安排。所附的方法权利要求以示例性的顺序给出了各种步骤的要素，并且不是要限于所述的特定顺序或层次。
在上述的详细描述中，各种特征一起组合在单个的实施方案中，以简化本公开。不应该将这种公开方法解释为反映了这样的意图，即，所要求保护的主题的实施方案需要比清楚地在每个权利要求中所陈述的特征更多的特征。相反，如所附的权利要求书所反映的那样，本发明处于比所公开的单个实施方案的全部特征少的状态。因此，所附的权利要求书特此清楚地被并入详细描述中，其中每项权利要求独自作为本发明单独的优选实施方案。
为使本领域内的任何技术人员能够实现或者使用本发明，上面对所公开实施例进行了描述。对于本领域技术人员来说；这些实施例的各种修改方式都是显而易见的，并且本文定义的一般原理也可以在不脱离本公开的精神和保护范围的基础上适用于其它实施例。因此，本公开并不限于本文给出的实施例，而是与本申请公开的原理和新颖性特征的最广范围相一致。
上文的描述包括一个或多个实施例的举例。当然，为了描述上述实施例而描述部件或方法的所有可能的结合是不可能的，但是本领域普通技术人员应该认识到，各个实施例可以做进一步的组合和排列。因此，本文中描述的实施例旨在涵盖落入所附权利要求书的保护范围内的所有这样的改变、修改和变型。此外，就说明书或权利要求书中使用的术语“包含”，该词的涵盖方式类似于术语“包括”，就如同“包括，”在权利要求中用作衔接词所解释的那样。此外，使用在权利要求书的说明书中的任何一个术语“或者”是要表示“非排它性的或者”。
以上所述的具体实施方式，对本发明的目的、技术方案和有益效果进行了进一步详细说明，所应理解的是，以上所述仅为本发明的具体实施方式而已，并不用于限定本发明的保护范围，凡在本发明的精神和原则之内，所做的任何修改、等同替换、改进等，均应包含在本发明的保护范围之内。
Claims (8)
1.一种分布式对象存储方法，其特征在于，包括：
智能数据生命周期管理子***获取标准数据存储子***中的数据；
智能数据生命周期管理子***按照预先设定的规则对所述数据按照冷热程度进行分类，并将分类后的数据按类别分别存储至对应的介质存储***，其中，所述按照预先设定的规则对所述数据按照冷热程度进行分类，包括：
数据在创建时，将数据分为热数据、低频数据或者归档数据；以及，
对于可访问的数据，根据数据实时日志记录的访问量，将数据分为热数据、低频数据或者归档数据；
所述数据在创建时，将数据分为热数据、低频数据或者归档数据，包括：
数据在创建时，用户端根据***默认或自定义对数据自身进行分类，将数据分为热数据、低频数据或者归档数据；或者，用户端根据***默认或自定义对数据对应的存储空间进行分类，将数据分为热数据、低频数据或者归档数据；或者，用户端根据***默认或自定义对数据所在的文件进行分类，将数据分为热数据、低频数据或者归档数据；
其中，所述数据在创建时，将数据分为热数据、低频数据或者归档数据所采用的规则，具体包括如下至少之一：
User级规则，支持User创建时数据冷热分层存储设置；
存储空间Bucket级规则，支持Bucket创建时数据冷热分层存储设置；
Object级规则，支持Object创建时数据冷热分层存储设置；
TTL规则，支持以天为维度的生命周期管理；
文件类别规则，支持按文件类别的生命周期管理；
文件名规则，支持以文件名为规则的生命周期管理。
2.如权利要求1所述的分布式对象存储方法，其特征在于，所述标准数据存储子***中的数据为业务应用程序生产的数据，所述业务应用程序生产的数据通过分布式对象存储SDK或API存储至所述标准数据存储子***。
3.如权利要求1所述的分布式对象存储方法，其特征在于，所述根据数据实时日志记录的访问量，将数据分为热数据、低频数据或者归档数据，包括：
根据数据实时日志记录的访问量，将在设定时间段内访问量达到第一设定阈值的数据标记为热数据；
将在设定时间段内访问量达到第二设定阈值且未达到第一阈值的数据标记为低频数据；
将在设定时间段内访问量达到第三设定阈值且未达到第二阈值的数据标记为归档数据；其中，
所述第一设定阈值大于第二设定阈值，所述第二设定阈值大于第三设定阈值。
4.如权利要求3所述的分布式对象存储方法，其特征在于，所述将分类后的数据按类别分别存储至对应的介质存储***，包括：
当数据的类别为热数据时，将数据存储至电存储***；
当数据的类别为低频数据时，将数据存储至磁存储***；
当数据的类别为归档数据时，将数据存储至光存储***。
5.一种分布式对象存储***，其特征在于，包括：
标准数据存储子***，用于存储数据；
智能数据生命周期管理子***，用于获取标准数据存储子***中的数据；按照预先设定的规则对所述数据按照冷热程度进行分类，并将分类后的数据按类别分别存储至对应的介质存储***；
其中，所述智能数据生命周期管理子***具体用于：
数据在创建时，将数据分为热数据、低频数据或者归档数据；以及，
对于可访问的数据，根据数据实时日志记录的访问量，将数据分为热数据、低频数据或者归档数据；
所述智能数据生命周期管理子***，具体用于：数据在创建时，用户端根据***默认或自定义对数据自身进行分类，将数据分为热数据、低频数据或者归档数据；或者，用户端根据***默认或自定义对数据对应的存储空间进行分类，将数据分为热数据、低频数据或者归档数据；或者，用户端根据***默认或自定义对数据所在的文件进行分类，将数据分为热数据、低频数据或者归档数据；
所述数据在创建时，将数据分为热数据、低频数据或者归档数据所采用的规则，具体包括如下至少之一：
User级规则，支持User创建时数据冷热分层存储设置；
存储空间Bucket级规则，支持Bucket创建时数据冷热分层存储设置；
Object级规则，支持Object创建时数据冷热分层存储设置；
TTL规则，支持以天为维度的生命周期管理；
文件类别规则，支持按文件类别的生命周期管理；
文件名规则，支持以文件名为规则的生命周期管理。
6.如权利要求5所述的分布式对象存储***，其特征在于，所述标准数据存储子***中的数据为业务应用程序生产的数据，所述业务应用程序生产的数据通过分布式对象存储SDK或API存储至所述标准数据存储子***。
7.如权利要求5所述的分布式对象存储***，其特征在于，所述智能数据生命周期管理子***具体还用于：
根据数据实时日志记录的访问量，将在设定时间段内访问量达到第一设定阈值的数据标记为热数据；
将在设定时间段内访问量达到第二设定阈值且未达到第一阈值的数据标记为低频数据；
将在设定时间段内访问量达到第三设定阈值且未达到第二阈值的数据标记为归档数据；其中，
所述第一设定阈值大于第二设定阈值，所述第二设定阈值大于第三设定阈值。
8.如权利要求7所述的分布式对象存储***，其特征在于，所述智能数据生命周期管理子***具体还用于：
当数据的类别为热数据时，将数据存储至电存储***；
当数据的类别为低频数据时，将数据存储至磁存储***；
当数据的类别为归档数据时，将数据存储至光存储***。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202010542876.4A CN111831222B (zh) | 2020-06-15 | 2020-06-15 | 一种分布式对象存储方法及*** |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202010542876.4A CN111831222B (zh) | 2020-06-15 | 2020-06-15 | 一种分布式对象存储方法及*** |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN111831222A CN111831222A (zh) | 2020-10-27 |
| CN111831222B true CN111831222B (zh) | 2024-06-04 |
Family
ID=72898766
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202010542876.4A Active CN111831222B (zh) | 2020-06-15 | 2020-06-15 | 一种分布式对象存储方法及*** |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN111831222B (zh) |
Families Citing this family (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN112286465B (zh) * | 2020-11-03 | 2023-02-21 | 浪潮云信息技术股份公司 | 一种rados gateway归档存储方法及*** |
| CN113157414B (zh) * | 2021-04-19 | 2023-11-21 | 北京星辰天合科技股份有限公司 | 任务处理方法、装置、非易失性存储介质及处理器 |
| CN113900597A (zh) * | 2021-11-30 | 2022-01-07 | 深圳市安信达存储技术有限公司 | 一种数据存储方法、***、设备及存储介质 |
| CN116303233A (zh) * | 2022-12-19 | 2023-06-23 | 广州市玄武无线科技股份有限公司 | 一种数据存储的管理方法、装置、设备和计算机存储介质 |
Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN105892947A (zh) * | 2016-03-31 | 2016-08-24 | 华中科技大学 | 一种节能存储***的ssd与hdd混合缓存管理方法及*** |
| CN107807796A (zh) * | 2017-11-17 | 2018-03-16 | 北京联想超融合科技有限公司 | 一种基于超融合存储***的数据分层方法、终端及*** |
| CN107908367A (zh) * | 2017-11-16 | 2018-04-13 | 郑州云海信息技术有限公司 | 存储***中数据存储的方法、装置、设备及存储介质 |
| CN107979636A (zh) * | 2017-11-10 | 2018-05-01 | 上海华讯网络***有限公司 | 冷热数据分介质存储平台设计***及方法 |
| CN109491618A (zh) * | 2018-11-20 | 2019-03-19 | 上海科技大学 | 基于混合存储的数据管理***、方法、终端及介质 |
| CN110765192A (zh) * | 2019-10-18 | 2020-02-07 | 广东省城乡规划设计研究院 | 一种基于云平台的gis数据管理及处理方法 |
-
2020
- 2020-06-15 CN CN202010542876.4A patent/CN111831222B/zh active Active
Patent Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN105892947A (zh) * | 2016-03-31 | 2016-08-24 | 华中科技大学 | 一种节能存储***的ssd与hdd混合缓存管理方法及*** |
| CN107979636A (zh) * | 2017-11-10 | 2018-05-01 | 上海华讯网络***有限公司 | 冷热数据分介质存储平台设计***及方法 |
| CN107908367A (zh) * | 2017-11-16 | 2018-04-13 | 郑州云海信息技术有限公司 | 存储***中数据存储的方法、装置、设备及存储介质 |
| CN107807796A (zh) * | 2017-11-17 | 2018-03-16 | 北京联想超融合科技有限公司 | 一种基于超融合存储***的数据分层方法、终端及*** |
| CN109491618A (zh) * | 2018-11-20 | 2019-03-19 | 上海科技大学 | 基于混合存储的数据管理***、方法、终端及介质 |
| CN110765192A (zh) * | 2019-10-18 | 2020-02-07 | 广东省城乡规划设计研究院 | 一种基于云平台的gis数据管理及处理方法 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN111831222A (zh) | 2020-10-27 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN111831222B (zh) | 一种分布式对象存储方法及*** | |
| JP6515172B2 (ja) | 共有に基づくコンテンツアイテム同期の優先付け | |
| EP2757461B1 (en) | Storage control device, data archival storage system and data access method | |
| US8914412B2 (en) | Determining file ownership of active and inactive files based on file access history | |
| US20140156793A1 (en) | Generating prefetching profiles for prefetching data in a cloud based file system | |
| CN110018788A (zh) | 分级存储方法、装置、电子设备及计算机可读存储介质 | |
| CN103605585B (zh) | 一种基于数据发现的智能备份方法 | |
| CN112989156A (zh) | 一种基于大数据的政策与企业匹配的方法和*** | |
| US11625412B2 (en) | Storing data items and identifying stored data items | |
| US9148392B1 (en) | Systems and methods for aggregating event information | |
| WO2019104977A1 (zh) | 业务资料存储方法、应用服务器及计算机存储介质 | |
| CN104158858A (zh) | 一种访问分布式集群文件***方法及*** | |
| CN109885577B (zh) | 数据处理方法、装置、终端及存储介质 | |
| CN109726175A (zh) | 一种基于HBase的海量文件离线分区管理方法 | |
| CN110727406A (zh) | 一种数据存储调度方法及装置 | |
| CN104123237A (zh) | 海量小文件分级存储方法及*** | |
| CN107241444B (zh) | 一种分布式缓存数据管理***、方法及装置 | |
| CN106708912B (zh) | 垃圾文件识别及管理方法、识别装置、管理装置和终端 | |
| US20180203636A1 (en) | Likelihood of access based object storage in a cloud environment | |
| WO2021056243A1 (zh) | 管理分区表的数据的方法、装置、管理节点及存储介质 | |
| CN110019017B (zh) | 一种基于访问特征的高能物理文件存储方法 | |
| US11455111B2 (en) | Adaptive storage management policies for computing devices | |
| US9020902B1 (en) | Reducing head and tail duplication in stored data | |
| US8983910B1 (en) | Systems and methods for adaptively selecting file-recall modes | |
| CN112269530A (zh) | 一种数据存储管理方法及相关装置 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| TA01 | Transfer of patent application right | ||
| TA01 | Transfer of patent application right |
Effective date of registration: 20230407 Address after: Room 501-502, 5/F, Sina Headquarters Scientific Research Building, Block N-1 and N-2, Zhongguancun Software Park, Dongbei Wangxi Road, Haidian District, Beijing, 100193 Applicant after: Sina Technology (China) Co.,Ltd. Address before: 100193 7th floor, scientific research building, Sina headquarters, plot n-1, n-2, Zhongguancun Software Park, Dongbei Wangxi Road, Haidian District, Beijing, 100193 Applicant before: Sina.com Technology (China) Co.,Ltd. |
|
| GR01 | Patent grant | ||
| GR01 | Patent grant |