CN107087031A - 一种存储资源负载均衡方法及装置 - Google Patents

一种存储资源负载均衡方法及装置 Download PDF

Info

Publication number
CN107087031A
CN107087031A CN201710323984.0A CN201710323984A CN107087031A CN 107087031 A CN107087031 A CN 107087031A CN 201710323984 A CN201710323984 A CN 201710323984A CN 107087031 A CN107087031 A CN 107087031A
Authority
CN
China
Prior art keywords
storage
task
physical memory
memory resources
node
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201710323984.0A
Other languages
English (en)
Other versions
CN107087031B (zh
Inventor
韩磊
吕志明
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Xi'an Yu Vision Mdt Infotech Ltd
Original Assignee
Zhejiang Uniview Technologies Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Zhejiang Uniview Technologies Co Ltd filed Critical Zhejiang Uniview Technologies Co Ltd
Priority to CN201710323984.0A priority Critical patent/CN107087031B/zh
Publication of CN107087031A publication Critical patent/CN107087031A/zh
Application granted granted Critical
Publication of CN107087031B publication Critical patent/CN107087031B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/10—Protocols in which an application is distributed across nodes in the network
    • H04L67/1001—Protocols in which an application is distributed across nodes in the network for accessing one among a plurality of replicated servers
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44—Arrangements for executing specific programs
    • G06F9/455—Emulation; Interpretation; Software simulation, e.g. virtualisation or emulation of application or operating system execution engines
    • G06F9/45533—Hypervisors; Virtual machine monitors
    • G06F9/45558—Hypervisor-specific management and integration aspects
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/10—Protocols in which an application is distributed across nodes in the network
    • H04L67/1097—Protocols in which an application is distributed across nodes in the network for distributed storage of data in networks, e.g. transport arrangements for network file system [NFS], storage area networks [SAN] or network attached storage [NAS]
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44—Arrangements for executing specific programs
    • G06F9/455—Emulation; Interpretation; Software simulation, e.g. virtualisation or emulation of application or operating system execution engines
    • G06F9/45533—Hypervisors; Virtual machine monitors
    • G06F9/45558—Hypervisor-specific management and integration aspects
    • G06F2009/4557—Distribution of virtual machine instances; Migration and load balancing

Landscapes

  • Engineering & Computer Science (AREA)
  • Software Systems (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本发明公开了一种存储资源负载均衡方法及装置，应用于数据存储***中的存储管理服务器，存储管理服务器获取应用设备写任务中携带的设备信息，根据所述设备信息计算所述写任务对应的任务哈希值，将所述任务哈希值与存储虚拟化组件中的各虚拟节点的节点哈希值进行比较，根据比较结果，选择满足设定规则的虚拟节点所对应的物理存储资源作为所述写任务的物理存储资源进行存储。本发明对应的装置包括任务接收模块和任务分配模块。本发明的方法及装置，通过保证负载的稳定性及均衡性，提高了读写检索等业务的性能。

Description

一种存储资源负载均衡方法及装置
技术领域
本发明属于数据存储技术领域，尤其涉及一种存储资源负载均衡方法及装置。
背景技术
随着监控业务的发展，监控规模越来越大，对存储资源的承压是一种考验。为了提高监控业务的读写性能，需要对存储资源的负载进行均衡，降低单个资源的压力。例如如图1所示的云存储***，一般在CDV上挂载多个SAN存储资源，需要对每个CDV上的业务均匀分摊到每个存储资源上来提供各种业务性能。
现有技术方案，往往根据单个存储资源上的读写任务数和容量来做负载均衡，在容量足够时，选取任务数最少的存储资源来使用。该方案简单易用，一般情况下负载比较均衡，在每个存储资源上维护一个任务计数，每个存储资源上的任务数能根据读写任务打开关闭及时更新。但该方案随着存储业务的增加，网络环境的复杂，具有比较明显的缺点：
在瞬时密集业务时，无法完全保证任务数均衡，达到负载均衡；
网络环境的复杂，比如关闭文件失败时，可能导致任务数残留，这时候根据任务数最少来选择资源，实际并不均衡；
根据任务数来选资源，即文件的分布具有很大的随机性，会增加资源上目录数，降低检索读取业务的性能。
发明内容
本发明的目的是提供一种存储资源负载均衡方法及装置，避免根据任务数进行负载均衡时所具有的上述缺点。
为了实现上述目的，本发明技术方案如下：
一种存储资源负载均衡方法，应用于数据存储***中的存储管理服务器，所述数据存储***还包括应用设备和存储虚拟化组件，所述存储虚拟化组件包括至少两个物理存储资源，每个物理存储资源虚拟出至少两个虚拟节点，每个虚拟节点对应有一个被存储管理服务器管理的虚拟节点信息，以及根据该虚拟节点信息计算出的节点哈希值，所述存储资源负载均衡方法包括：
存储管理服务器获取应用设备写任务中携带的设备信息，根据所述设备信息计算所述写任务对应的任务哈希值；
将所述任务哈希值与存储虚拟化组件中的各虚拟节点的节点哈希值进行比较，根据比较结果，选择满足设定规则的虚拟节点所对应的物理存储资源作为所述写任务的物理存储资源进行存储。
优选地，所述设备信息为所述写任务对应的用户目录编码。
优选地，所述选择满足设定规则的虚拟节点所对应的物理存储资源作为所述写任务的物理存储资源进行存储，包括：
从按照节点哈希值排序的虚拟节点中，选择第一个节点哈希值比任务哈希值大的虚拟节点；
将该虚拟节点所在的物理存储资源作为该写任务的物理存储资源进行存储。
进一步地，所述存储资源负载均衡方法还包括：
如果所选择的物理存储资源不可用或者容量不足，则计算所有可用并且容量足够的物理存储资源上的写任务数，选择写任务数最小的物理存储资源作为该写任务的物理存储资源进行存储。
优选地，所述单个存储虚拟化组件下的物理存储资源虚拟出的虚拟节点总数不小于单个存储虚拟化组件的最大存储路数。
本发明还提出了一种存储资源负载均衡装置，应用于数据存储***中的存储管理服务器，所述数据存储***还包括应用设备和存储虚拟化组件，所述存储虚拟化组件包括至少两个物理存储资源，每个物理存储资源虚拟出至少两个虚拟节点，每个虚拟节点对应有一个被存储管理服务器管理的虚拟节点信息，以及根据该虚拟节点信息计算出的节点哈希值，所述存储资源负载均衡装置包括：
任务接收模块，用于获取应用设备写任务中携带的设备信息，根据所述设备信息计算所述写任务对应的任务哈希值；
任务分配模块，用于将所述任务哈希值与存储虚拟化组件中的各虚拟节点的节点哈希值进行比较，根据比较结果，选择满足设定规则的虚拟节点所对应的物理存储资源作为所述写任务的物理存储资源进行存储。
优选地，所述设备信息为所述写任务对应的用户目录编码。
优选地，所述任务分配模块选择满足设定规则的虚拟节点所对应的物理存储资源作为所述写任务的物理存储资源进行存储，执行如下操作：
从按照节点哈希值排序的虚拟节点中，选择第一个节点哈希值比任务哈希值大的虚拟节点；
将该虚拟节点所在的物理存储资源作为该写任务的物理存储资源进行存储。
进一步地，所述任务分配模块还用于：
如果所选择的物理存储资源不可用或者容量不足，则计算所有可用并且容量足够的物理存储资源上的写任务数，选择写任务数最小的物理存储资源作为该写任务的物理存储资源进行存储。
优选地，所述单个存储虚拟化组件下的物理存储资源虚拟出的虚拟节点总数不小于单个存储虚拟化组件的最大存储路数。
本发明提出的一种存储资源负载均衡方法及装置，存储管理服务器根据写任务对应的任务哈希值，将任务哈希值与存储虚拟化组件中的虚拟节点的节点哈希值进行比较，根据比较结果，从虚拟节点中选择满足设定规则的虚拟节点所在的物理存储资源作为该写任务的物理存储资源进行存储。由于写任务对应的任务哈希值是固定的，保证了负载均衡的稳定性，使单个应用设备尽量存储在某个物理存储资源上。通过增加虚拟节点，使物理存储资源尽量分散开，增加负载的均衡性，使多个应用设备尽量分散存储在多个物理存储资源上，在异常情况下，通过计算物理存储资源上的写任务数进行负载均衡调整。并通过保证负载的稳定性及均衡性，提高了读写检索等业务的性能。
附图说明
图1为视频监控中常用的云存储***结构示意图；
图2为存储虚拟化组件的结构示意图；
图3为本发明存储资源负载均衡方法流程图；
图4为实验数据分布图；
图5为本发明存储资源负载均衡装置结构示意图。
具体实施方式
下面结合附图和实施例对本发明技术方案做进一步详细说明，以下实施例不构成对本发明的限定。
如图1所示，为一种视频监控中常用的云存储CDS(Cloud Direct Storage)方案，在该云存储***中，应用设备包括网络摄像机IPC、编码器EC或其他数据源设备，IPC拍摄的视频数据需要存储到存储资源中。云存储管理服务器CDM(Cloud Direct Management)集中统一管理底层的存储虚拟化组件CDV(Cloud Direct Virtual)，构成全局统一的虚拟存储空间。一般在一个CDV上挂载多个IP SAN/FC SAN/NAS存储设备，本实施例将一个IP SAN/FCSAN/NAS存储设备称为一个物理存储资源，即一个CDV上挂载多个物理存储资源。
在如图1所示的云存储***中，当应用设备要进行读写时，首先向CDM请求可以访问的存储空间，并将视频数据离散存储到各底层标准的物理存储资源上去，当某一物理存储资源发生故障时，CDM会自动重新分配一个新的存储空间给应用设备进行访问，从而实现业务不停顿的读写，支持动态扩容和缩容，提供不间断的视频和图片存储服务。同时也能提供视频实况、视频点播回放、报警管理、布防撤防、地图应用等多种视频业务。
本实施例以图1所示的视频监控中常用的云存储为例，来详细阐述本发明的存储资源负载均衡方法，应用于数据存储***中的存储管理服务器。本技术方案中数据存储***还包括应用设备和存储虚拟化组件，存储虚拟化组件包括至少两个物理存储资源，每个物理存储资源虚拟出至少两个虚拟节点，每个虚拟节点对应有一个被存储管理服务器管理的虚拟节点信息，以及根据该虚拟节点信息计算出的节点哈希值。
例如，如图2所示，物理存储资源有三个Res1、Res2和Res3，Res1对应有虚拟节点Res1-1、Res1-2和Res1-3，Res2对应有虚拟节点Res2-1、Res2-2和Res2-3，Res3对应有虚拟节点Res3-1、Res3-2和Res3-3。假设Res1-1、Res1-2、Res1-3、Res2-1、Res2-2、Res2-3、Res3-1、Res3-2、Res3-3为各虚拟节点对应的节点哈希值，在图2中按照节点哈希值的大小顺序排列。
在实际监控***中，假设单个CDV最大存储路数为512路，本实施例将每个物理存储资源虚拟出32个虚拟节点，当所有虚拟节点的总数不大于512时，则增加每个物理存储资源的虚拟节点数，例如有5个物理存储资源，每个物理存储资源虚拟出32个虚拟节点，虚拟节点的总数才160，这时候需要增加每个物理存储资源虚拟出的虚拟节点数，例如增加到每个物理存储资源的虚拟节点数为105个，使得虚拟节点的总数大于512。这样的设置，使得单个存储虚拟化组件下的物理存储资源虚拟出的虚拟节点总数不小于单个存储虚拟化组件的最大存储路数，对于每一路存储总有虚拟节点可以进行选择，便于后续的负载均衡。
图2中仅示出了3个物理存储资源，虚拟节点放在一条虚线上表示其节点哈希值顺序性，从小到大排列，这样在后续进行虚拟节点选择时更加容易选择。根据需要可以配置更多的物理存储资源，这里不再赘述。由于单个CDV最大存储路数有限，本实施例中单个存储虚拟化组件下的物理存储资源虚拟出的虚拟节点总数不小于单个存储虚拟化组件的最大存储路数，对于每一路存储总有虚拟节点可以进行选择，便于后续的负载均衡。
本实施例中，存储管理服务器可以管理多个存储虚拟化组件，每个存储虚拟化组件包括至少两个物理存储资源，每个物理存储资源虚拟出至少两个虚拟节点，虚拟节点的总数不小于存储虚拟化组件的存储路数，每个虚拟节点对应有一个被存储管理服务器管理的虚拟节点信息，该虚拟节点信息通常是该虚拟节点的名称，或者虚拟路径等其他有代表性且唯一的信息，其中虚拟路径是指虚拟节点带有的，用来指向对应的物理存储资源的路径，存储管理服务器可以根据虚拟节点的虚拟路径来找到对应的物理存储资源。例如根据虚拟节点的虚拟路径，通过哈希(HASH)函数计算出一个对应的节点哈希值，每个虚拟节点记录有自己的虚拟节点的虚拟路径和节点哈希值。
如图3所示，本实施例一种存储资源负载均衡方法，包括：
存储管理服务器获取应用设备写任务中携带的设备信息，根据设备信息计算写任务对应的任务哈希值；
将任务哈希值与存储虚拟化组件中的各虚拟节点的节点哈希值进行比较；
根据比较结果，选择满足设定规则的虚拟节点所对应物理存储资源作为该写任务的物理存储资源进行存储。
以图1中的视频监控中常用的云存储CDS为例，IPC输出的视频数据需要写入物理存储资源，写任务发送到CDM，CDM通过设定的哈希函数计算出其对应的任务哈希值。例如采用的哈希函数为MD5、SHA等，本实施例选择MD5算法，MD5具有很低的碰撞概率及较好的散列均匀性。对写任务对应的设备信息进行计算得到任务哈希值，设备信息可以是IPC的名称、序列号等信息，或用户目录编码等具有唯一性的信息。例如在视频监控***中每个任务都对应有各自的用户目录编码，且该用户目录编码唯一，采用用户目录编码来计算得到任务哈希值。
例如一个典型的用户目录编码如下：
256GB001#1885365065_47640
由于在视频监控***中每个用户目录编码都是唯一的，通过hash函数能得到不同的哈希值，在一般规模(每个CDV最大存储数为512路，物理存储资源最大数为128个)的业务中，能够保证写任务分散到每个物理存储资源上。并且用户目录是固定不变，稳定的，通过hash函数得到的任务哈希值每次都一样，在物理存储资源可用的情况下保证了每次都能选择到该物理存储资源，当物理存储资源从异常状态恢复正常时，能再次选择到该资源。这样就保证了资源选择的稳定性，即同一个写任务都写入同一个物理存储资源。从而也便于后续进行回放等其他业务在读取的时候更加方便，提高了***中的业务性能。
假设计算出的任务哈希值为hash(UsrDirCode)，将任务哈希值与存储虚拟化组件中的虚拟节点的节点哈希值进行比较，按照设定规则选择进行写任务的虚拟节点，例如从按照节点哈希值排序的虚拟节点中，选择第一个节点哈希值比hash(UsrDirCode)大的虚拟节点，虚拟节点根据节点哈希值大小排序，方便查找。假设此节点为res2-2，对应的物理存储资源为res2，则在res2上进行写入操作。选择时设定规则可以进行调整，不限于选择第一个节点哈希值比hash(UsrDirCode)大的虚拟节点，也可以是选择第一个节点哈希值比hash(UsrDirCode)小的虚拟节点。
进一步地，如果该物理存储资源不可用或者容量不足，则计算所有可用并且容量足够的物理存储资源上的写任务数，选择写任务数最小的物理存储资源作为该写任务的物理存储资源进行存储，保证异常情况下能动态调整均衡性。另外，如果该物理存储资源不可用或者容量不足，也可以计算所有可用并且容量足够的物理存储资源上的写任务数，选择写任务数低于设定阈值的物理存储资源上的虚拟节点。一般物理存储资源的容量都能够自动检测并上报到存储管理服务器，当物理存储资源的容量小于设定的阈值时，认为该物理存储资源的容量不足，或者当物理存储资源的容量小于该写任务所需要的存储空间容量时，认为该物理存储资源的容量不足，否则就认为容量足够。具体的选择根据均分的原则，在可用并且容量足够的物理存储资源上选择，这里不再赘述。
需要说明的是，本实施例的技术方案对于其他存储***中存储资源的负载均衡同样适用，例如在电视节目存储***中，应用设备为各电台的录制前端，其存储管理服务器不是本实施例中的CDM，而是对存储资源进行管理的存储管理服务器。即本技术方案适合于所有进行数据存储管理的数据存储***。
如图4所示，在一个实施例中，配置92路存储，物理存储资源数为20个，得到的存储分布结果，纵轴表示物理存储资源上的存储写任务数，横轴表示物理存储资源。存储结果符合预期所有资源上的存储写任务数数偏差(最大存储数-最小存储数)在5以内，总体均衡分布。
如图5所示，本实施例一种存储资源负载均衡装置，应用于数据存储***中的存储管理服务器。本实施例数据存储***还包括应用设备和存储虚拟化组件，所述存储虚拟化组件包括至少两个物理存储资源，每个物理存储资源虚拟出至少两个虚拟节点，每个虚拟节点对应有一个被存储管理服务器管理的虚拟节点信息，以及根据该虚拟节点信息计算出的节点哈希值。本实施例存储资源负载均衡装置包括：
任务接收模块，用于获取应用设备写任务中携带的设备信息，根据所述设备信息计算所述写任务对应的任务哈希值；
任务分配模块，用于将所述任务哈希值与存储虚拟化组件中的各虚拟节点的节点哈希值进行比较，根据比较结果，选择满足设定规则的虚拟节点所对应的物理存储资源作为所述写任务的物理存储资源进行存储。
与上述图3的存储资源负载均衡方法对应，本实施例的存储资源负载均衡装置：
优选地，所述设备信息为所述写任务对应的用户目录编码。
优选地，任务分配模块选择满足设定规则的虚拟节点所对应的物理存储资源作为所述写任务的物理存储资源进行存储，执行如下操作：
从按照节点哈希值排序的虚拟节点中，选择第一个节点哈希值比任务哈希值大的虚拟节点；
将该虚拟节点所在的物理存储资源作为该写任务的物理存储资源进行存储。
优选地，在所选择的物理存储资源不可用或者容量不足时，任务分配模块还用于：
如果所选择的物理存储资源不可用或者容量不足，则计算所有可用并且容量足够的物理存储资源上的写任务数，选择写任务数最小的物理存储资源该写任务的物理存储资源进行存储。
同样，本实施例单个存储虚拟化组件下的物理存储资源虚拟出的虚拟节点总数不小于单个存储虚拟化组件的最大存储路数，从而对于每一路存储总有虚拟节点可以进行选择，便于根据写任务的任务哈希值选择到虚拟节点，实现负载均衡。
以上实施例仅用以说明本发明的技术方案而非对其进行限制，在不背离本发明精神及其实质的情况下，熟悉本领域的技术人员当可根据本发明作出各种相应的改变和变形，但这些相应的改变和变形都应属于本发明所附的权利要求的保护范围。

Claims (10)

1.一种存储资源负载均衡方法，应用于数据存储***中的存储管理服务器，所述数据存储***还包括应用设备和存储虚拟化组件，其特征在于，所述存储虚拟化组件包括至少两个物理存储资源，每个物理存储资源虚拟出至少两个虚拟节点，每个虚拟节点对应有一个被存储管理服务器管理的虚拟节点信息，以及根据该虚拟节点信息计算出的节点哈希值，所述存储资源负载均衡方法包括：
存储管理服务器获取应用设备写任务中携带的设备信息，根据所述设备信息计算所述写任务对应的任务哈希值；
将所述任务哈希值与存储虚拟化组件中的各虚拟节点的节点哈希值进行比较，根据比较结果，选择满足设定规则的虚拟节点所对应的物理存储资源作为所述写任务的物理存储资源进行存储。
2.根据权利要求1所述的存储资源负载均衡方法，其特征在于，所述设备信息为所述写任务对应的用户目录编码。
3.根据权利要求1所述的存储资源负载均衡方法，其特征在于，所述选择满足设定规则的虚拟节点所对应的物理存储资源作为所述写任务的物理存储资源进行存储，包括：
从按照节点哈希值排序的虚拟节点中，选择第一个节点哈希值比任务哈希值大的虚拟节点；
将该虚拟节点所在的物理存储资源作为该写任务的物理存储资源进行存储。
4.根据权利要求1所述的存储资源负载均衡方法，其特征在于，所述存储资源负载均衡方法还包括：
如果所选择的物理存储资源不可用或者容量不足，则计算所有可用并且容量足够的物理存储资源上的写任务数，选择写任务数最小的物理存储资源作为该写任务的物理存储资源进行存储。
5.根据权利要求1所述的存储资源负载均衡方法，其特征在于，所述单个存储虚拟化组件下的物理存储资源虚拟出的虚拟节点总数不小于单个存储虚拟化组件的最大存储路数。
6.一种存储资源负载均衡装置，应用于数据存储***中的存储管理服务器，所述数据存储***还包括应用设备和存储虚拟化组件，其特征在于，所述存储虚拟化组件包括至少两个物理存储资源，每个物理存储资源虚拟出至少两个虚拟节点，每个虚拟节点对应有一个被存储管理服务器管理的虚拟节点信息，以及根据该虚拟节点信息计算出的节点哈希值，所述存储资源负载均衡装置包括：
任务接收模块，用于获取应用设备写任务中携带的设备信息，根据所述设备信息计算所述写任务对应的任务哈希值；
任务分配模块，用于将所述任务哈希值与存储虚拟化组件中的各虚拟节点的节点哈希值进行比较，根据比较结果，选择满足设定规则的虚拟节点所对应的物理存储资源作为所述写任务的物理存储资源进行存储。
7.根据权利要求6所述的存储资源负载均衡装置，其特征在于，所述设备信息为所述写任务对应的用户目录编码。
8.根据权利要求6所述的存储资源负载均衡装置，其特征在于，所述任务分配模块选择满足设定规则的虚拟节点所对应的物理存储资源作为所述写任务的物理存储资源进行存储，执行如下操作：
从按照节点哈希值排序的虚拟节点中，选择第一个节点哈希值比任务哈希值大的虚拟节点；
将该虚拟节点所在的物理存储资源作为该写任务的物理存储资源进行存储。
9.根据权利要求6所述的存储资源负载均衡装置，其特征在于，所述任务分配模块还用于：
如果所选择的物理存储资源不可用或者容量不足，则计算所有可用并且容量足够的物理存储资源上的写任务数，选择写任务数最小的物理存储资源作为该写任务的物理存储资源进行存储。
10.根据权利要求6所述的存储资源负载均衡装置，其特征在于，所述单个存储虚拟化组件下的物理存储资源虚拟出的虚拟节点总数不小于单个存储虚拟化组件的最大存储路数。
CN201710323984.0A 2017-05-10 2017-05-10 一种存储资源负载均衡方法及装置 Active CN107087031B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201710323984.0A CN107087031B (zh) 2017-05-10 2017-05-10 一种存储资源负载均衡方法及装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201710323984.0A CN107087031B (zh) 2017-05-10 2017-05-10 一种存储资源负载均衡方法及装置

Publications (2)

Publication Number Publication Date
CN107087031A true CN107087031A (zh) 2017-08-22
CN107087031B CN107087031B (zh) 2020-07-28

Family

ID=59612762

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201710323984.0A Active CN107087031B (zh) 2017-05-10 2017-05-10 一种存储资源负载均衡方法及装置

Country Status (1)

Country Link
CN (1) CN107087031B (zh)

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109669775A (zh) * 2018-12-10 2019-04-23 平安科技（深圳）有限公司 分布式任务调度方法、***及存储介质
CN109684080A (zh) * 2018-12-10 2019-04-26 平安科技（深圳）有限公司 集中式任务调度方法、***及存储介质
CN110086840A (zh) * 2018-01-26 2019-08-02 浙江宇视科技有限公司 图像数据存储方法、装置及计算机可读存储介质
CN111031567A (zh) * 2020-01-14 2020-04-17 南通先进通信技术研究院有限公司 一种核心网设备的流量统计方法
CN111708606A (zh) * 2020-06-16 2020-09-25 杨海朝 一种虚拟计算机存储服务***及其使用方法
CN112291292A (zh) * 2019-07-26 2021-01-29 浙江宇视科技有限公司 数据存储方法、装置、设备和介质
CN112468590A (zh) * 2020-11-27 2021-03-09 杭州海康威视***技术有限公司 一种存储资源挂载方法和装置
CN117194439A (zh) * 2023-11-07 2023-12-08 杭州优云科技有限公司 一种资源存储***的创建方法、电子设备及存储介质

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102291452A (zh) * 2011-08-09 2011-12-21 北京星网锐捷网络技术有限公司 基于云策略的虚拟机管理方法、云管理服务器及云***
CN102938790A (zh) * 2012-11-20 2013-02-20 无锡城市云计算中心有限公司 云计算***中的资源分配方法
CN104023058A (zh) * 2014-06-03 2014-09-03 浙江宇视科技有限公司 一种存储资源的管理和分配方法和***
CN105404469A (zh) * 2015-10-22 2016-03-16 浙江宇视科技有限公司 一种视频数据的存储方法和***
CN105930545A (zh) * 2016-06-29 2016-09-07 浙江宇视科技有限公司 一种文件迁移的方法和装置

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102291452A (zh) * 2011-08-09 2011-12-21 北京星网锐捷网络技术有限公司 基于云策略的虚拟机管理方法、云管理服务器及云***
CN102938790A (zh) * 2012-11-20 2013-02-20 无锡城市云计算中心有限公司 云计算***中的资源分配方法
CN104023058A (zh) * 2014-06-03 2014-09-03 浙江宇视科技有限公司 一种存储资源的管理和分配方法和***
CN105404469A (zh) * 2015-10-22 2016-03-16 浙江宇视科技有限公司 一种视频数据的存储方法和***
CN105930545A (zh) * 2016-06-29 2016-09-07 浙江宇视科技有限公司 一种文件迁移的方法和装置

Cited By (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110086840A (zh) * 2018-01-26 2019-08-02 浙江宇视科技有限公司 图像数据存储方法、装置及计算机可读存储介质
CN109684080A (zh) * 2018-12-10 2019-04-26 平安科技（深圳）有限公司 集中式任务调度方法、***及存储介质
CN109669775A (zh) * 2018-12-10 2019-04-23 平安科技（深圳）有限公司 分布式任务调度方法、***及存储介质
CN109669775B (zh) * 2018-12-10 2024-06-25 平安科技（深圳）有限公司 分布式任务调度方法、***及存储介质
CN109684080B (zh) * 2018-12-10 2024-06-25 平安科技（深圳）有限公司 集中式任务调度方法、***及存储介质
CN112291292B (zh) * 2019-07-26 2023-04-07 浙江宇视科技有限公司 数据存储方法、装置、设备和介质
CN112291292A (zh) * 2019-07-26 2021-01-29 浙江宇视科技有限公司 数据存储方法、装置、设备和介质
CN111031567A (zh) * 2020-01-14 2020-04-17 南通先进通信技术研究院有限公司 一种核心网设备的流量统计方法
CN111031567B (zh) * 2020-01-14 2022-06-24 南通先进通信技术研究院有限公司 一种核心网设备的流量统计方法
CN111708606A (zh) * 2020-06-16 2020-09-25 杨海朝 一种虚拟计算机存储服务***及其使用方法
CN112468590B (zh) * 2020-11-27 2023-02-07 杭州海康威视***技术有限公司 一种存储资源挂载方法和装置
CN112468590A (zh) * 2020-11-27 2021-03-09 杭州海康威视***技术有限公司 一种存储资源挂载方法和装置
CN117194439A (zh) * 2023-11-07 2023-12-08 杭州优云科技有限公司 一种资源存储***的创建方法、电子设备及存储介质
CN117194439B (zh) * 2023-11-07 2024-03-22 杭州优云科技有限公司 一种资源存储***的创建方法、电子设备及存储介质

Also Published As

Publication number Publication date
CN107087031B (zh) 2020-07-28

Similar Documents

Publication Publication Date Title
CN107087031A (zh) 一种存储资源负载均衡方法及装置
CN107807796B (zh) 一种基于超融合存储***的数据分层方法、终端及***
US10637916B2 (en) Method and device for storage resource allocation for video cloud storage
CN104937584B (zh) 基于共享资源的质量向经优先级排序的虚拟机和应用程序提供优化的服务质量
CN107395659A (zh) 一种业务受理及共识的方法及装置
US9020893B2 (en) Asynchronous namespace maintenance
JP5160408B2 (ja) サービス要求を満足するためのリソース・マネージャを選択するための方法、システム、およびコンピュータ・プログラム
US9860317B1 (en) Throughput throttling for distributed file storage services with varying connection characteristics
US10356150B1 (en) Automated repartitioning of streaming data
CN103167026B (zh) 一种云存储环境数据处理方法、***及设备
US10516732B2 (en) Disconnected ingest in a distributed storage system
US9313270B2 (en) Adaptive asynchronous data replication in a data storage system
US10684996B1 (en) Distributing data of multiple logically independent file systems in distributed storage systems including physically partitioned disks
CN104301671B (zh) Hdfs中基于事件密集度的交通监控视频存储方法
US10764165B1 (en) Event-driven framework for filtering and processing network flows
JP6388339B2 (ja) 分散キャッシングおよびキャッシュ分析
US9756117B2 (en) Retrieval of a file from multiple storage nodes
US20170262463A1 (en) Method and system for managing shrinking inode file space consumption using file trim operations
CN108347459A (zh) 一种云端数据快速存储方法及装置
CN105224244A (zh) 一种文件存储的方法和装置
Gill et al. Dynamic cost-aware re-replication and rebalancing strategy in cloud system
CN101419600A (zh) 基于面向对象文件***的数据副本映射方法及装置
CN115756955A (zh) 一种数据备份、数据恢复的方法、装置及计算机设备
US20160070721A1 (en) Parallel processing of a keyed index file system
US10545677B2 (en) Volatile account identification and isolation and resource management in distributed data storage systems

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
TR01 Transfer of patent right

Effective date of registration: 20221111

Address after: 15 / F, Zhongchuang Plaza, 385 Hangtian Middle Road, national civil aerospace industrial base, Xi'an City, Shaanxi Province 710100

Patentee after: Xi'an Yu vision Mdt InfoTech Ltd.

Address before: 310051 Zhejiang Jiangling Hangzhou Road, Binjiang District, Jiangling, 88, No. 10 South Block 1-11.

Patentee before: ZHEJIANG UNIVIEW TECHNOLOGIES Co.,Ltd.

TR01 Transfer of patent right