CN108111628A - 一种动态扩容存储方法及*** - Google Patents

Abstract

本发明属于数据存储技术领域，具体涉及一种动态扩容存储方法及***，包括以下步骤：注册服务器接收用户端发送的注册请求,为所述注册请求分配注册UID,并通过负载均衡服务器将注册请求和注册UID发送给存储代理服务器；存储代理服务器通过存储路由将注册请求和注册UID发送到数据库服务器进行存储，同时将注册UID上报给存储管理中心；存储管理中心接收到注册UID后计算数据库的剩余存储容量，当剩余存储容量小于阈值容量时，向运维端申请存储节点以扩大数据库服务器的容量，并将申请到的存储节点增加到存储路由。本发明能动态扩充存储容量，不仅满足了日益增长的用户数据存储需求，而且节省了人工成本，避免了人工扩容的失误，使存储更高效。

Description

一种动态扩容存储方法及***

技术领域

本发明属于数据存储技术领域，具体涉及一种动态扩容存储方法及***。

背景技术

随着互联网的发展，互联网进入了人们生活的方方面面，应用于生活中的各种app相继出现，注册的用户数据日益膨胀，日新增注册量可达到几千万，因而对数据的存储要求也原来越高。

传统的存储方案中，存储服务扩展困难，需要很早就提供充足的存储，一次性进行扩容，尽量避免后续变动。一般通过人为的手工操作进行扩容，过多的人工干预，不仅增加了人工成本，而且因为人为的因素，不可避免的可能会引入一些问题。对于这些问题，轻则花费较长时间来定位排查，重则可能会导致数据丢失。

发明内容

针对现有技术中的缺陷，本发明提供了一种动态扩容存储方法及***，相比于传统的存储方案，能动态扩充存储容量，不仅满足了日益增长的用户数据存储需求，而且节省了人工成本，避免了人工扩容的失误，使存储更高效。

第一方面，本发明提供了一种动态扩容存储方法，包括以下步骤：

注册服务器接收用户端发送的注册请求,为所述注册请求分配注册UID,并通过负载均衡服务器将注册请求和注册UID发送给存储代理服务器；

存储代理服务器通过存储路由将注册请求和注册UID发送到数据库服务器进行存储，同时将注册UID上报给存储管理中心；

存储管理中心接收到注册UID后计算数据库的剩余存储容量，当剩余存储容量小于阈值容量时，向运维端申请存储节点以扩大数据库服务器的容量，并将申请到的存储节点增加到存储路由。

优选地，所述注册服务器接收用户端发送的注册请求，并通过负载均衡服务器将注册请求发送给存储代理服务器，具体为：

注册服务器接收用户端发送的注册请求，将所述注册请求发送给缓存服务器，并接收缓存服务器反馈的新用户判断结果；

注册服务器根据新用户判断结果确定为新用户后，通过负载均衡服务器将注册请求发送给存储代理服务器。

优选地，所述存储管理中心接收到注册UID后计算数据库的剩余存储容量和阈值容量，当剩余存储容量小于阈值容量时，向运维端申请存储节点以扩大数据库服务器的容量，并将申请到的存储节点增加到存储路由，具体为：

存储管理中心接收到注册UID后，计算数据库服务器被使用的占用存储容量；

存储管理中心根据数据库服务器的总存储容量减去占用存储容量，得到剩余存储容量；

存储管理中心判断剩余存储容量是否小于阈值容量，若是，发送存储节点申请给运维端，并接收运维端反馈的存储节点分配信息；

存储管理中心根据存储节点分配信息，将新分配的数据设备进行库表初始化操作，并将初始化的库表信息作为存储节点增加到存储路由；

存储管理中心根据存储节点分配信息得到新增存储容量，根据新增存储容量更新总存储容量。

第二方面，本发明提供了一种动态扩容存储***，适用于第一方面所述的动态存储方法，包括注册服务器、负载均衡服务器、存储代理服务器、存储路由、数据库服务器和存储管理中心；

注册服务器，用于接收用户端发送的注册请求,为所述注册请求分配注册UID,并通过负载均衡服务器将注册请求和注册UID发送给存储代理服务器；

存储代理服务器，用于通过存储路由将注册请求和注册UID发送到数据库服务器进行存储，同时将注册UID上报给存储管理中心；

存储管理中心，用于接收到注册UID后计算数据库的剩余存储容量，当剩余存储容量小于阈值容量时，向运维端申请存储节点以扩大数据库服务器的容量，并将申请到的存储节点增加到存储路由。

优选地，所述注册服务器具体用于：

接收用户端发送的注册请求，将所述注册请求发送给缓存服务器，并接收缓存服务器反馈的新用户判断结果；

根据新用户判断结果确定为新用户后，为所述注册请求分配注册UID；

通过负载均衡服务器将注册请求和注册UID发送给存储代理服务器。

优选地，所述存储管理中心具体用于：

接收到注册UID后，计算数据库服务器被使用的占用存储容量；

根据数据库服务器的总存储容量减去占用存储容量，得到剩余存储容量；

判断剩余存储容量是否小于阈值容量，若是，发送存储节点申请给运维端，并接收运维端反馈的存储节点分配信息；

根据存储节点分配信息，将新分配的数据设备进行库表初始化操作，并将初始化的库表信息作为存储节点增加到存储路由；

根据存储节点分配信息得到新增存储容量，根据新增存储容量更新总存储容量。

本发明的有益效果为：相比于传统的存储方案，能动态扩充存储容量，不仅满足了日益增长的用户数据存储需求，而且节省了人工成本，避免了人工扩容的失误，使存储更高效。

附图说明

为了更清楚地说明本发明具体实施方式或现有技术中的技术方案，下面将对具体实施方式或现有技术描述中所需要使用的附图作简单地介绍。在所有附图中，类似的元件或部分一般由类似的附图标记标识。附图中，各元件或部分并不一定按照实际的比例绘制。

图1为本实施例中动态扩容存储方法的流程图；

图2为本实施例中动态扩容存储***的结构框图。

具体实施方式

下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。

应当理解，当在本说明书和所附权利要求书中使用时，术语“包括”和“包含”指示所描述特、整体、步骤、操作、元素和/或组件的存在，但并不排除一个或多个其它特征、整体、步骤、操作、元素、组件和/或其集合的存在或添加。

还应当理解，在此本发明说明书中所使用的术语仅仅是出于描述特定实施例的目的而并不意在限制本发明。如在本发明说明书和所附权利要求书中所使用的那样，除非上下文清楚地指明其它情况，否则单数形式的“一”、“一个”及“该”意在包括复数形式。

还应当进一步理解，在本发明说明书和所附权利要求书中使用的术语“和/或”是指相关联列出的项中的一个或多个的任何组合以及所有可能组合，并且包括这些组合。

实施例一：

本实施例提供了一种动态扩容存储方法，本方法基于动态扩容存储***运行，所述动态扩容存储***包括注册服务器、负载均衡服务器、存储代理服务器、存储路由、数据库服务器、存储管理中心等。如图1所示，本方法包括以下步骤：

S1，注册服务器接收用户端发送的注册请求,为所述注册请求分配注册UID,并通过负载均衡服务器将注册请求和注册UID发送给存储代理服务器。负载均衡服务器用于进行负载均衡分配，将用户的注册请求和注册UID均衡分配到存储代理服务器，从而保证整个***的响应速度。

所述步骤S1具体为：

注册服务器接收用户端发送的注册请求，将所述注册请求发送给缓存服务器，并接收缓存服务器反馈的新用户判断结果；缓存服务器属于数据库服务器的一部分，存储了部分用户信息，例如用户ID。缓存服务器用于识别发送该注册请求的用户端是否为新用户，若已经存储有该用户端的用户ID，则表明该用户端已注册过，若没存储有该用户端的用户ID，则表明该用户端没注册过。

注册服务器根据新用户判断结果确定为新用户后，通过负载均衡服务器将注册请求和注册UID发送给存储代理服务器，存储代理服务器再发送给后端进行存储，若不是新用户，则反馈已注册信息给用户端。如此避免了重复存储用户注册数据，浪费存储空间。

S2，存储代理服务器通过存储路由将注册请求和注册UID发送到数据库服务器进行存储，同时将注册UID上报给存储管理中心。数据库服务器包括若干用于存储数据的数据设备，存储路由里有每个数据设备相对应的存储节点，存储路由根据存储节点将注册请求发送到数据设备进行存储。注册UID为本***为注册请求分配的一个身份信息。

S3，存储管理中心接收到注册UID后计算数据库的剩余存储容量，当剩余存储容量小于阈值容量时，向运维端申请存储节点以扩大数据库服务器的容量，并将申请到的存储节点增加到存储路由。

所述步骤S3具体为：

存储管理中心接收到注册UID后，计算数据库服务器被使用的占用存储容量。

存储管理中心根据数据库服务器的总存储容量减去占用存储容量，得到剩余存储容量。例如当前数据库服务器被分配的总存储容量为100亿，当前分配的uid已经到90亿了，那么管理中心就可以算出当前剩余10亿的存储空间。

存储管理中心判断剩余存储容量是否小于阈值容量，若是，发送存储节点申请给运维端，并接收运维端反馈的存储节点分配信息；运维端接收到存储节点申请后，将冗余的数据设备分配给数据库服务器以扩大数据库服务器的容量，于是将该数据设备的存储节点分配信息发送给存储管理中心。

存储管理中心根据存储节点分配信息，将新分配的数据设备进行库表初始化操作，并将初始化的库表信息作为存储节点增加到存储路由；新增的数据设备的存储节点增加到存储路由后，存储代理服务器就可通过存储路由将数据存储到该新增的数据设备。

存储管理中心根据存储节点分配信息得到新增存储容量，根据新增存储容量更新总存储容量。及将以前的总存储容量加上新增存储容量就可得到新的总存储容量，以便下次进行计算。

综上，本实施例相比于传统的存储方案具有以下优点：

一、无需人工扩容，更高效。节省了人工成本，避免了人工扩容的失误，使存储更高效。

二、提高了硬件的利用价值，避免了硬件的早期浪费。传统手工扩容，需要很早就提供充足的存储，一次性进行扩容导致前期硬件的闲置；动态扩容处理在于存储即将到达最大存储之前，进行存储申请，并进行必要的初始化之后，将存储投入使用，带来的硬件充分使用。

实施例二：

本实施例提供了一种动态扩容存储***，适用于实施例一所述的动态存储方法，如图2所示，包括注册服务器、负载均衡服务器、存储代理服务器、存储路由、数据库服务器和存储管理中心；

注册服务器，用于接收用户端发送的注册请求,为所述注册请求分配注册UID,并通过负载均衡服务器将注册请求和注册UID发送给存储代理服务器。负载均衡服务器用于进行负载均衡分配，将用户的注册请求均衡分配到存储代理服务器，从而保证整个***的响应速度。

具体为，注册服务器接收用户端发送的注册请求，将所述注册请求发送给缓存服务器，并接收缓存服务器反馈的新用户判断结果；缓存服务器属于数据库服务器的一部分，存储了部分用户信息，例如用户ID。缓存服务器用于识别发送该注册请求的用户端是否为新用户，若已经存储有该用户端的用户ID，则表明该用户端已注册过，若没存储有该用户端的用户ID，则表明该用户端没注册过。

注册服务器根据新用户判断结果确定为新用户后，通过负载均衡服务器将注册请求和注册UID发送给存储代理服务器，存储代理服务器再发送给后端进行存储，若不是新用户，则反馈已注册信息给用户端。如此避免了重复存储用户注册数据，浪费存储空间。

所述存储代理服务器，用于通过存储路由将注册请求和注册UID发送到数据库服务器进行存储，同时将注册UID上报给存储管理中心。数据库服务器包括若干用于存储数据的数据设备，存储路由里有每个数据设备相对应的存储节点，存储路由根据存储节点将注册请求发送到数据设备进行存储。注册UID为本***为注册请求分配的一个身份信息。

存储管理中心，用于接收到注册UID后计算数据库的剩余存储容量，当剩余存储容量小于阈值容量时，向运维端申请存储节点以扩大数据库服务器的容量，并将申请到的存储节点增加到存储路由。

具体为，存储管理中心接收到注册UID后，计算数据库服务器被使用的占用存储容量。

存储管理中心根据数据库服务器的总存储容量减去占用存储容量，得到剩余存储容量。例如当前数据库服务器被分配的总存储容量为100亿，当前分配的uid已经到90亿了，那么管理中心就可以算出当前剩余10亿的存储空间。

存储管理中心判断剩余存储容量是否小于阈值容量，若是，发送存储节点申请给运维端，并接收运维端反馈的存储节点分配信息；。

存储管理中心根据存储节点分配信息，将新分配的数据设备进行库表初始化操作，并将初始化的库表信息作为存储节点增加到存储路由。新增的数据设备的存储节点增加到存储路由后，存储代理服务器就可通过存储路由将数据存储到该新增的数据设备。

存储管理中心根据存储节点分配信息得到新增存储容量，根据新增存储容量更新总存储容量。及将以前的总存储容量加上新增存储容量就可得到新的总存储容量，以便下次进行计算。

综上，本实施例相比于传统的存储方案具有以下优点：

一、无需人工扩容，更高效。节省了人工成本，避免了人工扩容的失误，使存储更高效。

二、提高了硬件的利用价值，避免了硬件的早期浪费。传统手工扩容，需要很早就提供充足的存储，一次性进行扩容导致前期硬件的闲置；动态扩容处理在于存储即将到达最大存储之前，进行存储申请，并进行必要的初始化之后，将存储投入使用，带来的硬件充分使用。

本领域普通技术人员可以意识到，结合本文中所公开的实施例描述的各示例的单元及方法步骤，能够以电子硬件、计算机软件或者二者的结合来实现，为了清楚地说明硬件和软件的可互换性，在上述说明中已经按照功能一般性地描述了各示例的组成及步骤。这些功能究竟以硬件还是软件方式来执行，取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能，但是这种实现不应认为超出本发明的范围。

在本申请所提供的几个实施例中，应该理解到，所揭露的方法和***，可以通过其它的方式实现。例如，以上所述单元的划分，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式，例如多个单元或组件可以结合或者可以集成到另一个***，或一些特征可以忽略，或不执行。上述单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本发明实施例方案的目的。

另外，在本发明各个实施例中的各功能单元可以集成在一个处理单元中，也可以是各个单元单独物理存在，也可以是两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现，也可以采用软件功能单元的形式实现。

最后应说明的是：以上各实施例仅用以说明本发明的技术方案，而非对其限制；尽管参照前述各实施例对本发明进行了详细的说明，本领域的普通技术人员应当理解：其依然可以对前述各实施例所记载的技术方案进行修改，或者对其中部分或者全部技术特征进行等同替换；而这些修改或者替换，并不使相应技术方案的本质脱离本发明各实施例技术方案的范围，其均应涵盖在本发明的权利要求和说明书的范围当中。

Claims (6)

1.一种动态扩容存储方法，其特征在于，包括以下步骤：

注册服务器接收用户端发送的注册请求,为所述注册请求分配注册UID,并通过负载均衡服务器将注册请求和注册UID发送给存储代理服务器；

存储代理服务器通过存储路由将注册请求和注册UID发送到数据库服务器进行存储，同时将注册UID上报给存储管理中心；

存储管理中心接收到注册UID后计算数据库的剩余存储容量，当剩余存储容量小于阈值容量时，向运维端申请存储节点以扩大数据库服务器的容量，并将申请到的存储节点增加到存储路由。

2.根据权利要求1所述的一种动态扩容存储方法，其特征在于，所述注册服务器接收用户端发送的注册请求,为所述注册请求分配注册UID,并通过负载均衡服务器将注册请求和注册UID发送给存储代理服务器，具体为：

注册服务器接收用户端发送的注册请求，将所述注册请求发送给缓存服务器，并接收缓存服务器反馈的新用户判断结果；

注册服务器根据新用户判断结果确定为新用户后，为所述注册请求分配注册UID；

注册服务器通过负载均衡服务器将注册请求和注册UID发送给存储代理服务器。

3.根据权利要求1所述的一种动态扩容存储方法，其特征在于，所述存储管理中心接收到注册UID后计算数据库的剩余存储容量，当剩余存储容量小于阈值容量时，向运维端申请存储节点以扩大数据库服务器的容量，并将申请到的存储节点增加到存储路由，具体为：

存储管理中心接收到注册UID后，计算数据库服务器被使用的占用存储容量；

存储管理中心根据数据库服务器的总存储容量减去占用存储容量，得到剩余存储容量；

存储管理中心判断剩余存储容量是否小于阈值容量，若是，发送存储节点申请给运维端，并接收运维端反馈的存储节点分配信息；

存储管理中心根据存储节点分配信息，将新分配的数据设备进行库表初始化操作，并将初始化的库表信息作为存储节点增加到存储路由；

存储管理中心根据存储节点分配信息得到新增存储容量，根据新增存储容量更新总存储容量。

4.一种动态扩容存储***，适用于权利要求1所述的动态存储方法，其特征在于，包括注册服务器、负载均衡服务器、存储代理服务器、存储路由、数据库服务器和存储管理中心；

注册服务器，用于接收用户端发送的注册请求,为所述注册请求分配注册UID,并通过负载均衡服务器将注册请求和注册UID发送给存储代理服务器；

存储代理服务器，用于通过存储路由将注册请求和注册UID发送到数据库服务器进行存储，同时将注册UID上报给存储管理中心；

存储管理中心，用于接收到注册UID后计算数据库的剩余存储容量，当剩余存储容量小于阈值容量时，向运维端申请存储节点以扩大数据库服务器的容量，并将申请到的存储节点增加到存储路由。

5.根据权利要求4所述的一种动态扩容存储***，其特征在于，所述注册服务器具体用于：

接收用户端发送的注册请求，将所述注册请求发送给缓存服务器，并接收缓存服务器反馈的新用户判断结果；

根据新用户判断结果确定为新用户后，为所述注册请求分配注册UID；

通过负载均衡服务器将注册请求和注册UID发送给存储代理服务器。

6.根根据权利要求5所述的一种动态扩容存储***，其特征在于，所述存储管理中心具体用于：

接收到注册UID后，计算数据库服务器被使用的占用存储容量；

根据数据库服务器的总存储容量减去占用存储容量，得到剩余存储容量；

判断剩余存储容量是否小于阈值容量，若是，发送存储节点申请给运维端，并接收运维端反馈的存储节点分配信息；

根据存储节点分配信息，将新分配的数据设备进行库表初始化操作，并将初始化的库表信息作为存储节点增加到存储路由；

根据存储节点分配信息得到新增存储容量，根据新增存储容量更新总存储容量。