CN100476742C - 基于对象存储设备的负载平衡方法 - Google Patents
基于对象存储设备的负载平衡方法 Download PDFInfo
- Publication number
- CN100476742C CN100476742C CNB2007100515099A CN200710051509A CN100476742C CN 100476742 C CN100476742 C CN 100476742C CN B2007100515099 A CNB2007100515099 A CN B2007100515099A CN 200710051509 A CN200710051509 A CN 200710051509A CN 100476742 C CN100476742 C CN 100476742C
- Authority
- CN
- China
- Prior art keywords
- load
- device node
- information
- copy
- load factor
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Images
Landscapes
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
基于对象存储设备的负载平衡方法,属于计算机存储技术领域,目的在于通过合理调度I/O负载和热点数据迁移,使***负载均衡分布于各存储节点间,以充分发挥各高性能存储设备节点的性能优势。本发明顺序包括:(1)主动负载检测步骤;(2)设备负载统计步骤;(3)对象迁移和副本管理步骤;(4)对象属性扩展步骤;(5)I/O请求处理步骤。本发明对对象存储设备(OSD)的SCSI协议标准进行了扩展,借助对象存储模式的优点,为I/O调度提供决策依据,充分利用所有存储设备节点的处理能力,达到负载均衡,降低存储***响应时间,提高存储***吞吐率。
Description
技术领域
本发明属于计算机存储技术领域,具体涉及一种基于对象存储设备的负载平衡方法。
背景技术
随着计算机技术和网络通信技术的飞速发展,全球信息存储量以每年超过30%的速度急剧增长,存储在硬盘上的数据增长率更是高达114%。面对数据量的***性增长以及人们对存储***的容量、安全性、可扩展性和可用性等方面的需求,传统的直接存储模式(Direct Access Storage,DAS)已显得力不从心,这使得网络存储成为存储技术领域必然的趋势。当前网络存储的主要架构有附网存储(NAS,Network Attached Storage)和存储区域网(SAN,Storage Area Network)。NAS和SUN虽然解决了直接存储的许多问题,但是也有其自身的局限性,在一定程度上不能完全满足存储技术发展的要求。面向对象存储技术(OBS,Object Basedstorage)是以数据为中心网络存储模式,采用了对象作为基本传输单位,使数据存储和元数据管理分离,突破了NAS中常见的数据路径瓶颈和SAN的文件共享限制,并在安全性、跨平台性、可用性和可扩展性等特性中更胜一筹,可能成为下一代互联网络存储的标准。
对象存储***(OBSS,Object-Based Storage System)将对象接口和智能存储设备相结合,可达到PB级的存储规模。而随着存储***规模的扩大和使用频率的增强,存储节点间负载不均衡的现象不可避免的会显现,成为整个***的瓶颈,严重时甚至会导致整个***的性能急剧下降。
发明内容
本发明提供一种基于对象存储设备的负载平衡方法,目的在于通过合理调度I/O负载和热点数据迁移,使***负载均衡分布于各存储节点间,以充分发挥各高性能存储设备节点的性能优势。
本发明的一种基于对象存储设备的负载平衡方法,顺序包括下述步骤:
(1)主动负载检测步骤,各设备节点主动进行自身的负载检测,并将负载因子发送到元数据服务器;
(2)设备负载统计步骤,按照归一化方法计算各设备节点的负载,并依据负载情况对各设备节点进行排序;
(3)对象迁移和副本管理步骤,对负载值超过迁移阈值的设备节点作为热点对象并对其进行迁移和副本管理;
(4)对象属性扩展步骤,对OSD SCSI协议标准的属性页进行了扩展,自定义一个负载属性页,预定义负载值、热度、主副本判断、副本信息和负载权值这五个属性项,将需要的各设备节点的负载信息、迁移信息以对象属性的方式保存;
(5)I/O请求处理步骤,依据对象的分布信息,在各设备节点间调度I/O请求,使得各设备节点负载均衡。
所述的基于对象存储设备的负载平衡方法,其特征在于所述主动负载检测步骤顺序包括下述过程:
(1)各设备节点从/proc虚拟文件***中读取***队列长度以及磁盘、CPU、内存和网络的负载信息;
(2)计算各设备节点负载因子;
(3)对各设备节点负载因子进行判断,负载因子≤30,延时10秒;若30<负载因子≤60,延时30秒;负载因子>60,延时60秒;
(4)再次从/proc虚拟文件***中读取***队列长度以及磁盘、CPU、内存和网络的负载信息;
(5)向元数据服务器发送各设备节点负载因子,转过程(1)。
所述的基于对象存储设备的负载平衡方法,其特征在于所述设备负载统计步骤顺序包括下述过程:
(1)定义负载因子,将各设备节点负载因子LOAD定义为:
LOAD=W1*Lrql+W2*Ldisk+W3*Lcpu+W4*Lmem+W5*Lnet
进行归一化管理,Lrql、Ldisk、Lcpu、Lmem和Lnet分别为对象存储设备的***队列长度、磁盘负载、CPU负载、内存负载和网络负载,W1、W2、W3、W4、W5为对应的权值,且∑Wi(i=1,2,3,4,5)=1;
(2)设定初始负载权值,以文件***标准测试程序Iozone对各设备节点的负载全面测试后得到的负载值为依据设置Wi初始值;
(3)判断单项负载状况;
(4)根据负载信息修正负载权值Wi,连续五次检测单项负载值均大于80或小于20,则其对应权值增加或降低10%,否则不变;
(5)计算各设备节点负载因子;
(6)向元数据服务器发送各设备节点负载因子;
(7)元数据服务器按各设备节点负载因子大小进行排序,维护升序设备队列,转过程(3)。
所述的基于对象存储设备的负载平衡方法,其特征在于所述对象迁移和副本管理步骤顺序包括下述过程:
(1)设定迁移阈值,该迁移阈值为进行迁移的临界条件;
(2)检测负载,检测各设备节点负载,并统计各设备节点最近十次的负载均值;
(3)判断负载均值,对各设备节点最近十次负载均值进行判断,若该均值大于迁移阈值,转过程(4),否则转过程(5);
(4)元数据服务器从邻近选择负载因子最小的设备节点作为迁移目标,对对象进行迁移;迁移完成后元数据服务器更新副本信息;
(5)若最近十次负载均值小于阈值的一半,删除副本,更新对象元数据信息,否则,转过程(2)。
所述的基于对象存储设备的负载平衡方法,其特征在于所述对象属性扩展步骤顺序包括下述过程:
(1)确定扩展方式,确定使用临时属性扩展方式;
(2)规定各设备节点的属性页码,各设备节点的属性页码为C000 0000h到EFFF FFFFh,即D=C000 0000h,则D+5h表示C000 0005h;
(3)定义负载属性页结构,定义负载值、热度、主副本判断、副本信息和负载权值这五个属性项。
所述的基于对象存储设备的负载平衡方法,其特征在于所述I/O请求处理步骤顺序包括下述过程:
(1)判断用户请求类型,读请求,进行过程(2);写请求,进行过程(3);更新请求,进行过程(4);
(2)判断请求的对象是否存在副本,存在则选择轻负载副本读取,转过程(5);否则直接从该对象读取,转过程(5);
(3)根据文件大小决定分片数目N,元数据服务器选择***中负载因子最低的N个设备节点进行写操作,转过程(5);
(4)判断对象的主副本信息后,对对象主本进行更新操作,更新完成后,再更新对象所有副本,进行下一过程;
(5)更新元数据信息和对象属性信息。
本发明适用于基于对象的大规模存储***,具有以下特点:
(1)对象存储设备主动获取各项负载、发送负载值;
(2)各项负载的权值依据实测数据,并可动态修正;
(3)通过扩展对象的负载值属性、热度属性、主副本判断属性和副本信息属性提供决策信息;
(4)通过负载检测和属性扩展为元数据服务器进行I/O操作的流程进行优化调度提供决策依据;
(5)根据动态负载信息实现热点数据的负载迁移;
本发明不仅可以实现***的负载均衡,同样适用于重要数据的备份选择以及元数据服务器的后备节点选择等需要动态选择设备的应用。
附图说明
图1为本发明的流程框图;
图2为本发明的主动负载检测步骤流程图;
图3为本发明的负载统计步骤流程图;
图4为本发明对象迁移和副本管理步骤流程图;
图5为本发明的对象属性扩展步骤流程图;
图6为本发明的扩展属性页结构示意图;
图7为本发明的I/O请求处理步骤流程图。
具体实施方式
下面结合附图和实施例对本发明进一步详细说明。
图1为本发明的流程框图。本发明包括:(1)主动负载检测步骤;(2)设备负载统计步骤;(3)对象迁移和副本管理步骤;(4)对象属性扩展步骤;(5)I/O请求处理步骤。
图2为本发明的主动负载检测步骤流程图。从/proc虚拟文件***中读取的负载信息;计算负载因子,对各设备节点负载因子进行判断,若负载因子较高,则说明设备处于忙碌状态,应减少负载统计的次数,否则说明设备处于空闲状态,可以增加负载统计次数,设定负载因子≤30,延时10秒;若30<负载因子≤60,延时30秒;负载因子>60,延时60秒;再次从/proc虚拟文件***中读取***队列长度、磁盘、CPU、内存和网络的负载信息;向元数据服务器发送各设备节点的负载因子;再次依据负载因子判断延时,如此循环。
图3为本发明的负载统计步骤流程图。将存储设备的负载因子LOAD定义为:
LOAD=W1*Lrql+W2*Ldisk+W3*Lcpu+W4*Lmem+W5*Lnet
进行归一化管理,Lrql、Ldisk、Lcpu、Lmem和Lnet分别为对象存储设备的***队列长度、磁盘负载、CPU负载、内存负载和网络负载,W1、W2、W3、W4、W5为对应的权值,且∑ Wi(i=1,2,3,4,5)=1;计算负载值时将五项负载均转换为以100为单位所占的比例,由∑ Wi=1可知负载值LOAD大于等于零小于等于一百。以Iozone对各设备节点的负载全面测试后得到***请求队列长度的均值为3.280,最大值为7.806,CPU、内存、网络带宽的使用率均值分别为33.0781%、58.0078%、24.4531%,磁盘I/O吞吐量均值为46.1016MB/S,使用率均值为76.836%。选定W1为0.4,可得一组具有普适性的负载初始权值[0.4,0.2406,0.1032,0.1812,0.075];判断单项负载状况后,根据负载信息修正负载权值Wi,若某项负载在连续的五次检测中负载值均大于80或小于20,则其对应权值增加或降低10%,否则不变;计算各设备节点负载因子后向元数据服务器发送各设备节点负载因子;元数据服务器按各设备节点负载因子大小进行排序,维护升序设备队列。
图4为本发明的对象迁移和副本管理步骤流程图。热点对象定义为频繁进行读/写操作的对象,对象的频繁读/写必然导致对应存储设备节点负载的提升,对各设备节点设定迁移阈值,该迁移阈值为进行迁移的临界条件;检测各设备节点的负载情况,并统计、计算各设备节点最近十次的负载均值;判断负载均值,对各设备节点进行判断,若该均值大于迁移阈值,进行对象的迁移,对象迁移时元数据服务器从邻近选择负载因子最小的设备节点作为迁移目标,对对象进行迁移;迁移完成后元数据服务器更新副本信息;若最近十次负载均值小于阈值的一半,删除副本,更新对象元数据信息。
热点对象定义为频繁进行读/写操作的对象,阈值为进行迁移的临界条件,热度为对象操作的频繁程度,对对象的每一次读/写操作,热度加1,1分钟内没有读/写操作,热度减1;检测热度,若热度大于迁移阈值,则元数据服务器从邻近设备节点中选择负载因子最小的节点作为迁移目标,对其进行迁移;迁移完成后元数据服务器更新副本信息;若是读操作,将读请求迁移到轻载节点的对象副本,若是写操作,则需要更新所有副本;检测热度,若热度小于阈值的一半,则删除副本,更新元数据信息。
图5为本发明的对象属性扩展步骤流程图。功能为将本发明需要的负载信息、迁移信息以对象属性的方式保存。在OSD SCSI协议标准中,对象属性用许多个属性页来描述,每个属性页又由许多具体的属性项组成,属性页由属性页号Page Number来确定,属性项对应有属性号AttributeNumber,这样,具体一个属性项用二元组(Page Number,Attribute Number)来索引。对象属性按照存在时间的相对长短,可分为永久属性和临时属性,本发明中负载属性页中的各属性项均体现的是一段时间内的对象访问特征,适合用临时属性来描述;规定负载属性页的页码为C000 0000h到C000 FFFFh,即D=C000 0000h,则D+5h表示C000 0005h。
图6为本发明的负载属性页结构。对OSD SCSI协议标准的属性页进行扩展,自定义一个负载属性页,根据本发明的需求,预定义负载值、热度、主副本判断、副本信息和负载权值这五个属性项,其余属性项保留做今后扩展。
负载值属性项保存本发明设备负载统计步骤所得负载因子,由一个整型数据来描述,占四个字节。
热度属性项保存热度,由一个整型数据来描述,占四个字节,热度大表示操作频繁,由于热点数据主要由大量读并发产生,故可以通过副本策略来分散热度。热度超过设定阈值后,将对象的一个副本迁移到轻载节点上,若进行一次迁移后热度仍然较大,则进行第二次迁移。
主副本判断属性项用来判断对象是主本还是副本,由于只进行单一的判断,故设置为字符型数据,占用一个子节。写操作只在主本上进行,完成后再跟新副本信息。
副本信息属性项保存了对象是否存在副本,存在多少副本等信息,占用二十个字节。对于由于热点数据产生的副本,若一段时间后热点数据的热度下降至某一阈值,根据局部性原理,可认为热点已经消失,可删除副本。
负载权值属性项保存了本发明统计的五项负载对应的负载权值,每个权值由一个浮点型变量描述,占四个字节,五项负载占用二十个字节,并保留二十个字节作扩展使用。
图7为本发明的I/O请求处理步骤流程图。对象存储***中,热点数据的产生几乎是由大量读操作并发而产生的,***中保持多个副本后读/写负载可以分离,读操作可以在任何副本上进行,而更新操作只能应用于主本,且更新操作进行时所有读操作需要失效,待主本的更新操作完成并更新副本后,读操作才能重新开始。重要数据因可靠性的要求会存在多个副本,副本的大量存在为负载平衡和利用对象属性信息提供了很好的应用基础。I/O请求到达后,首先判断请求类型,请求类型可以分为读请求、写请求和更新请求。I/O为读请求时,判断是否存在副本,存在副本情况下,元数据服务器依据当前负载记录找出拥有副本的对象存储设备中负载最低的设备,将I/O请求引导至该设备;否则,不考虑负载状况,直接从拥有对象的存储设备中读取。I/O为写请求时,元数据服务器首先根据文件大小决定对象的分片数目N,再依据当前负载记录和历史负载记录从所有设备节点中选择负载最低的N个作为对象的存储节点,存储对象。I/O请求为更新请求时,更新操作只能应用于主本,主本的更新操作完成后再进行副本的更新。所有操作完成后更新元数据和对象属件信息。
Claims (1)
1.一种基于对象存储设备的负载平衡方法,顺序包括下述步骤:
(1)主动负载检测步骤,各设备节点主动进行自身的负载检测,并将负载因子发送到元数据服务器;顺序包括下述过程:
(1.1)各设备节点从/proc虚拟文件***中读取***队列长度以及磁盘、CPU、内存和网络的负载信息;
(1.2)计算各设备节点负载因子;
(1.3)对各设备节点负载因子进行判断,负载因子≤30,延时10秒;若30<负载因子≤60,延时30秒;负载因子>60,延时60秒;
(1.4)再次从/proc虚拟文件***中读取***队列长度以及磁盘、CPU、内存和网络的负载信息;
(1.5)向元数据服务器发送各设备节点负载因子,转过程(1.1);
(2)设备负载统计步骤,按照归一化方法计算各设备节点的负载,并依据负载情况对各设备节点进行排序;顺序包括下述过程:
(2.1)定义负载因子,将各设备节点负载因子LOAD定义为:LOAD=W1*Lrql+W2*Ldisk+W3*Lcpu+W4*Lmem+W5*Lnet进行归一化管理,Lrql、Ldisk、Lcpu、Lmem和Lnet分别为对象存储设备的***队列长度、磁盘负载、CPU负载、内存负载和网络负载,W1、W2、W3、W4、W5为对应的权值,且∑Wi(i=1,2,3,4,5)=1;
(2.2)设定初始负载权值,以文件***标准测试程序Iozone对各设备节点的负载全面测试后得到的负载值为依据设置Wi初始值;
(2.3)判断单项负载状况;
(2.4)根据负载信息修正负载权值Wi,连续五次检测单项负载值均大于80或小于20,则其对应权值增加或降低10%,否则不变;
(2.5)计算各设备节点负载因子;
(2.6)向元数据服务器发送各设备节点负载因子;
(2.7)元数据服务器按各设备节点负载因子大小进行排序,维护升序设备队列,转过程(2.3);
(3)对象迁移和副本管理步骤,对负载值超过迁移阈值的设备节点作为热点对象并对其进行迁移和副本管理;顺序包括下述过程:
(3.1)设定迁移阈值,该迁移阈值为进行迁移的临界条件;
(3.2)检测负载,检测各设备节点负载,并统计各设备节点最近十次的负载均值;
(3.3)判断负载均值,对各设备节点最近十次负载均值进行判断,若该均值大于迁移阈值,转过程(3.4),否则转过程(3.5);
(3.4)元数据服务器从邻近选择负载因子最小的设备节点作为迁移目标,对对象进行迁移;迁移完成后元数据服务器更新副本信息;
(3.5)若最近十次负载均值小于阈值的一半,删除副本,更新对象元数据信息,否则,转过程(3.2);
(4)对象属性扩展步骤,对OSD SCSI协议标准的属性页进行了扩展,自定义一个负载属性页,预定义负载值、热度、主副本判断、副本信息和负载权值这五个属性项,将需要的各设备节点的负载信息、迁移信息以对象属性的方式保存;顺序包括下述过程:
(4.1)确定扩展方式,确定使用临时属性扩展方式;
(4.2)规定各设备节点的属性页码,各设备节点的属性页码为C000 0000h到EFFF FFFFh,即D=C000 0000h,则D+5h表示C000 0005h;
(4.3)定义负载属性页结构,定义负载值、热度、主副本判断、副本信息和负载权值这五个属性项;
(5)I/O请求处理步骤,依据对象的分布信息,在各设备节点间调度I/O请求,使得各设备节点负载均衡;顺序包括下述过程:
(5.1)判断用户请求类型,读请求,进行过程(5.2);写请求,进行过程(5.3);更新请求,进行过程(5.4);
(5.2)判断请求的对象是否存在副本,存在则选择轻负载副本读取,转过程(5.5);否则直接从该对象读取,转过程(5.5);
(5.3)根据文件大小决定分片数目N,元数据服务器选择***中负载因子最低的N个设备节点进行写操作,转过程(5.5);
(5.4)判断对象的主副本信息后,对对象主本进行更新操作,更新完成后,再更新对象所有副本,进行下一过程;
(5.5)更新元数据信息和对象属性信息。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CNB2007100515099A CN100476742C (zh) | 2007-02-09 | 2007-02-09 | 基于对象存储设备的负载平衡方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CNB2007100515099A CN100476742C (zh) | 2007-02-09 | 2007-02-09 | 基于对象存储设备的负载平衡方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN101013387A CN101013387A (zh) | 2007-08-08 |
CN100476742C true CN100476742C (zh) | 2009-04-08 |
Family
ID=38700918
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CNB2007100515099A Expired - Fee Related CN100476742C (zh) | 2007-02-09 | 2007-02-09 | 基于对象存储设备的负载平衡方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN100476742C (zh) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102541460A (zh) * | 2010-12-20 | 2012-07-04 | ***通信集团公司 | 一种多磁盘场景下的磁盘管理方法和设备 |
Families Citing this family (42)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101562626B (zh) * | 2008-04-15 | 2013-08-07 | 华为技术有限公司 | 一种媒体分发方法、***和装置 |
CN101442435B (zh) * | 2008-12-25 | 2012-04-04 | 华为技术有限公司 | 分布式***的业务数据管理方法、装置及分布式*** |
CN101887440B (zh) * | 2009-05-13 | 2012-05-30 | 财团法人资讯工业策进会 | 热点分析***及方法 |
CN101610287B (zh) * | 2009-06-16 | 2012-03-14 | 浙江大学 | 一种应用于分布式海量存储***的负载均衡方法 |
CN101662495B (zh) * | 2009-09-16 | 2012-09-05 | 成都市华为赛门铁克科技有限公司 | 备份方法、主服务器、备份服务器以及备份*** |
CN102055650B (zh) * | 2009-10-29 | 2012-10-17 | 华为技术有限公司 | 负载均衡方法及***和管理服务器 |
CN101854398B (zh) * | 2010-06-07 | 2014-12-10 | 中兴通讯股份有限公司 | 文件副本均衡分布的方法、装置及*** |
CN102622185B (zh) * | 2011-01-27 | 2015-09-23 | 北京东方广视科技股份有限公司 | 在多个存储单元中存储文件的方法以及存储分配方法 |
CN102117334A (zh) * | 2011-03-14 | 2011-07-06 | 浪潮(北京)电子信息产业有限公司 | 云存储***中文件存储的管理方法和*** |
US8365023B2 (en) | 2011-04-29 | 2013-01-29 | International Business Machines Corporation | Runtime dynamic performance skew elimination |
AU2011380288B2 (en) | 2011-10-31 | 2015-09-17 | Fraunhofer-Gesellschaft Zur Foerderung Der Angewandten Forschung E.V. | Apparatus and method for transferring event detector processes |
CN103229487B (zh) * | 2012-12-27 | 2015-09-09 | 华为技术有限公司 | 分布式存储***中的分区平衡方法、装置及服务器 |
CN103049559A (zh) * | 2012-12-29 | 2013-04-17 | 深圳先进技术研究院 | 一种海量数据自动放置方法和装置 |
CN103150215B (zh) * | 2013-02-04 | 2016-03-02 | 浙江大学 | 虚拟环境下细粒度的cpu资源使用预测方法 |
CN103246716B (zh) * | 2013-04-26 | 2016-02-24 | 中国传媒大学 | 基于对象集群文件***的对象副本高效管理方法及*** |
CN104144127A (zh) * | 2013-05-08 | 2014-11-12 | 华为软件技术有限公司 | 负载均衡方法和负载均衡器 |
CN104579996A (zh) * | 2013-10-17 | 2015-04-29 | 中国电信股份有限公司 | 一种集群负载均衡方法和*** |
US9813335B2 (en) * | 2014-08-05 | 2017-11-07 | Amdocs Software Systems Limited | System, method, and computer program for augmenting a physical system utilizing a network function virtualization orchestrator (NFV-O) |
CN103761059B (zh) * | 2014-01-24 | 2017-02-08 | 中国科学院信息工程研究所 | 一种用于海量数据管理的多盘位存储方法及*** |
CN103823639A (zh) * | 2014-02-19 | 2014-05-28 | 曙光信息产业(北京)有限公司 | 迁移对象的方法和*** |
CN103916467B (zh) * | 2014-03-25 | 2017-02-08 | 中国科学院计算技术研究所 | 一种元数据集群中负载转移方法及*** |
CN104202434A (zh) * | 2014-09-28 | 2014-12-10 | 北京奇虎科技有限公司 | 节点访问方法和装置 |
CN105900061B (zh) | 2014-10-22 | 2018-01-16 | 华为技术有限公司 | 对象存储***中的业务流控制方法、控制器和*** |
CN104331253B (zh) * | 2014-10-30 | 2017-12-15 | 浪潮电子信息产业股份有限公司 | 一种对象存储***中对象迁移的计算方法 |
CN105700951B (zh) * | 2014-11-25 | 2021-01-26 | 中兴通讯股份有限公司 | 一种实现cpu业务迁移的方法及装置 |
CN105740077B (zh) * | 2016-01-29 | 2020-02-07 | 中国联合网络通信集团有限公司 | 一种适用于云计算的任务分配方法 |
CN108063780B (zh) * | 2016-11-08 | 2021-02-19 | 中国电信股份有限公司 | 用于动态复制数据的方法和*** |
CN107239544A (zh) * | 2017-06-05 | 2017-10-10 | 山东浪潮云服务信息科技有限公司 | 一种分布式存储的实现方法及装置 |
CN107465729B (zh) * | 2017-07-25 | 2020-09-22 | 北京计算机技术及应用研究所 | 基于访问次数排名的虚拟节点副本调整***及方法 |
CN107688625A (zh) * | 2017-08-18 | 2018-02-13 | 郑州云海信息技术有限公司 | 一种基于分布式存储***的存储小文件的方法及*** |
CN107506491B (zh) * | 2017-09-26 | 2021-03-09 | 苏州浪潮智能科技有限公司 | 一种分布式文件***的osd数据分发方法及装置 |
CN109936473B (zh) * | 2017-12-19 | 2022-04-08 | 北京华耀科技有限公司 | 基于深度学习预测的分布计算***及其运行方法 |
CN108197229A (zh) * | 2017-12-29 | 2018-06-22 | 北京搜狐新媒体信息技术有限公司 | 一种磁盘数据的平衡方法及*** |
US11816043B2 (en) * | 2018-06-25 | 2023-11-14 | Alibaba Group Holding Limited | System and method for managing resources of a storage device and quantifying the cost of I/O requests |
CN109189578B (zh) * | 2018-09-06 | 2022-04-12 | 北京京东尚科信息技术有限公司 | 存储服务器分配方法、装置、管理服务器以及存储*** |
CN109358816B (zh) * | 2018-10-19 | 2022-05-20 | 网宿科技股份有限公司 | 一种分布式存储***的流控方法及装置 |
CN109800204B (zh) * | 2018-12-27 | 2021-03-05 | 深圳云天励飞技术有限公司 | 数据分配方法及相关产品 |
CN111177154B (zh) * | 2019-12-27 | 2023-07-25 | 掌迅亿通(北京)信息科技有限公司 | 分布式数据库缓存方法及其哈希环优化 |
CN111444040B (zh) * | 2020-01-20 | 2022-05-27 | 新华三大数据技术有限公司 | 一种元数据备份方法及装置 |
US11379269B2 (en) * | 2020-08-26 | 2022-07-05 | International Business Machines Corporation | Load balancing based on utilization percentage of CPU cores |
CN113553179A (zh) * | 2021-07-16 | 2021-10-26 | 北京东方国信科技股份有限公司 | 分布式键值存储负载均衡方法及*** |
CN116185643A (zh) * | 2023-04-23 | 2023-05-30 | 南京芯驰半导体科技有限公司 | 一种硬件资源的负载均衡方法、装置、设备及存储介质 |
-
2007
- 2007-02-09 CN CNB2007100515099A patent/CN100476742C/zh not_active Expired - Fee Related
Non-Patent Citations (2)
Title |
---|
"基于对象存储***的动态负载均衡算法". 覃灵军,冯丹,曾令仿,刘群.计算机科学,第Vol.33卷第No.5期. 2006 |
"基于对象存储***的动态负载均衡算法". 覃灵军,冯丹,曾令仿,刘群.计算机科学,第Vol.33卷第No.5期. 2006 * |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102541460A (zh) * | 2010-12-20 | 2012-07-04 | ***通信集团公司 | 一种多磁盘场景下的磁盘管理方法和设备 |
CN102541460B (zh) * | 2010-12-20 | 2014-10-08 | ***通信集团公司 | 一种多磁盘场景下的磁盘管理方法和设备 |
Also Published As
Publication number | Publication date |
---|---|
CN101013387A (zh) | 2007-08-08 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN100476742C (zh) | 基于对象存储设备的负载平衡方法 | |
CN104025054B (zh) | 虚拟环境中的动态存储分层 | |
US11245774B2 (en) | Cache storage for streaming data | |
KR100954624B1 (ko) | 개인 선호도에 따라서 콘텐츠를 제공하기 위한 방법 및시스템 | |
CN107302561B (zh) | 一种云存储***中热点数据副本放置方法 | |
JP4728717B2 (ja) | 自律ストレージ装置、自律ストレージシステム、分散ストレージシステム、負荷分散プログラム及び負荷分散方法 | |
CN111381928B (zh) | 一种虚拟机迁移方法、云计算管理平台和存储介质 | |
CN110096350B (zh) | 基于集群节点负载状态预测的冷热区域划分节能存储方法 | |
CN108183947A (zh) | 分布式缓存方法及*** | |
CN106648456A (zh) | 基于用户访问量以及预测机制的动态副本文件访问方法 | |
CN103077197A (zh) | 一种数据存储方法装置 | |
CN106610903A (zh) | 层级化存储器***、存储器控制器和去重及存储器层级化方法 | |
CN108519856B (zh) | 基于异构Hadoop集群环境下的数据块副本放置方法 | |
CN102857560A (zh) | 一种面向多业务应用的云存储数据分布方法 | |
CN113608876B (zh) | 基于负载类型感知的分布式文件***元数据负载均衡方法 | |
CN111857592A (zh) | 基于对象存储***的数据存储方法及装置、电子设备 | |
CN109446114A (zh) | 一种空间数据缓存方法、装置和存储介质 | |
CN102999444A (zh) | 一种用于替换缓存模块中数据的方法及装置 | |
CN107623732A (zh) | 一种基于云平台的数据存储方法、装置、设备及存储介质 | |
CN103631537A (zh) | 一种虚拟磁盘的管理方法及装置 | |
CN113835616A (zh) | 应用的数据管理方法、***和计算机设备 | |
CN109154933B (zh) | 分布式数据库***以及分布和访问数据的方法 | |
KR20180046078A (ko) | 데이터베이스 리밸런싱 방법 | |
CN111930305A (zh) | 数据的存储方法和装置、存储介质、电子装置 | |
CN109597707A (zh) | 克隆卷数据拷贝方法、装置及计算机可读存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
C14 | Grant of patent or utility model | ||
GR01 | Patent grant | ||
CF01 | Termination of patent right due to non-payment of annual fee | ||
CF01 | Termination of patent right due to non-payment of annual fee |
Granted publication date: 20090408 Termination date: 20220209 |