CN104461404A - 元数据存储方法、装置以及*** - Google Patents

元数据存储方法、装置以及*** Download PDF

Info

Publication number
CN104461404A
CN104461404A CN201410836887.8A CN201410836887A CN104461404A CN 104461404 A CN104461404 A CN 104461404A CN 201410836887 A CN201410836887 A CN 201410836887A CN 104461404 A CN104461404 A CN 104461404A
Authority
CN
China
Prior art keywords
metadata
data
storing
server
compression
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201410836887.8A
Other languages
English (en)
Inventor
黄睿
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Chengdu Chi Chi Technology Co., Ltd.
Original Assignee
CHENGDU ZHIYUN SCIENCE & TECHNOLOGY Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by CHENGDU ZHIYUN SCIENCE & TECHNOLOGY Co Ltd filed Critical CHENGDU ZHIYUN SCIENCE & TECHNOLOGY Co Ltd
Priority to CN201410836887.8A priority Critical patent/CN104461404A/zh
Publication of CN104461404A publication Critical patent/CN104461404A/zh
Pending legal-status Critical Current

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0668—Interfaces specially adapted for storage systems adopting a particular infrastructure
    • G06F3/067—Distributed or networked storage systems, e.g. storage area networks [SAN], network attached storage [NAS]
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0602—Interfaces specially adapted for storage systems specifically adapted to achieve a particular effect
    • G06F3/0608—Saving storage space on storage systems

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本发明提供了一种元数据存储方法、装置以及***，属于分布式存储领域，所述元数据存储方法包括获得欲存储数据的存储请求指令；根据所述存储请求指令为所述欲存储数据创建元数据，所述元数据包括欲存储数据的存储节点的地址信息；压缩所述元数据；将压缩后的所述元数据存储到所述元数据服务器。本元数据存储方法，通过把元数据服务器上创建的欲存储数据的元数据进行压缩后再存储的方式，使元数据服务器上的存储空间得到极大的节约，极大的提升了元数据服务器的存储能力。

Description

元数据存储方法、装置以及***
技术领域
本发明涉及分布式存储***领域，具体而言，涉及一种元数据存储方法、装置以及***。
背景技术
分布式存储***是云计算基础架构中重要的组成部分。一款优秀的分布式存储***解决方案架构能够帮助用户实现高效、合理、自动化的使用存储资源，也是衡量云计算基础架构是否成功的一大标识。然而在当今这个信息膨胀的时代，数据的容量和复杂度比以往任何时刻都要大。因此，面对日渐复杂的数据环境，构建一个高效性、扩展性和灵活性的分布式存储***解决方案就成为用户IT基础架构建设的必需。在现有的分布式储过程中，需要存储的数据量较大，使***需要消耗过多的资源去存储和传输数据，造成***工作效率不高。
发明内容
本发明的目的在于提供一种元数据存储方法、装置以及***，以改善现有的分布式存储***的元数据过程中，需要存储的数据量较大，使***需要消耗过多的资源去存储和传输数据，造成***工作效率不高的问题。
本发明是这样实现的：
第一方面，本发明实施例提供了一种元数据存储方法，应用于分布式存储***，所述分布式存储***包括元数据存储装置以及元数据服务器，所述存储方法包括：
所述元数据存储装置获得欲存储数据的存储请求指令；
根据所述存储请求指令为所述欲存储数据创建元数据，所述元数据包括欲存储数据的存储节点的地址信息；
压缩所述元数据；
将压缩后的所述元数据存储到所述元数据服务器。
结合第一方面，本发明实施例提供了第一方面的第一种实施方式，其中，所述存储请求指令包括所述欲存储数据的数据量大小，所述根据所述存储请求指令为所述欲存储数据创建元数据，包括：
所述元数据存储装置获得所述欲存储数据的数据量大小；
为所述欲存储数据分配目标存储节点，所述目标存储节点上剩余存储空间大于所述欲存储数据的数据量大小的存储节点。
结合第一方面或第一方面的第一种实施方式，本发明实施例提供了第一方面的第二种实施方式，其中，所述元数据服务器中存储有数据压缩规则，所述压缩所述元数据，包括：
所述元数据存储装置获得元数据服务器上存储的数据压缩规则；
根据所述数据压缩规则，对所述元数据进行压缩。
结合第一方面或第一方面的第一种实施方式，本发明实施例提供了第一方面的第三种实施方式，其中，所述分布式存储***还包括元数据备份服务器，所述存储压缩后的所述元数据，包括：
所述元数据存储装置把压缩后的所述元数据传输到所述元数据备份服务器并存储。
第二方面，本发明实施例提供了一种元数据存储装置，应用于分布式存储***，所述分布式存储***包括元数据服务器，所述元数据存储装置包括：
存储请求指令获得单元，用于获得欲存储数据的存储请求指令；
元数据创建单元，用于根据所述存储请求指令为所述欲存储数据创建元数据，所述元数据包括欲存储数据的存储节点的地址信息；
元数据压缩单元，用于压缩所述元数据；
元数据存储单元，用于将压缩后的所述元数据存储到所述元数据服务器。
结合第二方面，本发明实施例提供了第二方面的第一种实施方式，其中，所述存储请求指令包括所述欲存储数据的数据量大小，所述存储请求指令获得单元。包括：
数据量获得子单元，用于获得所述欲存储数据的数据量大小。
结合第二方面或第二方面的第一种实施方式，本发明实施例提供了第二方面的第二种实施方式，其中，所述元数据服务器中存储有数据压缩规则，所述元数据压缩单元，包括：
压缩规则获得子单元，用于获得元数据服务器上存储的数据压缩规则。
结合第二方面或第二方面的第一种实施方式，本发明实施例提供了第二方面的第三种实施方式，其中，所述分布式存储***还包括元数据备份服务器，所述元数据存储单元，包括：
元数据备份传输子单元，用于把压缩后的所述元数据传输到所述元数据备份服务器并存储。
第三方面，本发明实施例提供了一种分布式存储***，所述分布式存储***包括元数据存储装置以及元数据服务器，
所述元数据服务器，用于存储元数据；
所述元数据存储装置，用于获得欲存储数据的存储请求指令；
根据所述存储请求指令为所述欲存储数据创建元数据，所述元数据包括欲存储数据的存储节点的地址信息；压缩所述元数据；将压缩后的所述元数据存储到所述元数据服务器。
结合第三方面，本发明实施例提供了第三方面的第一种实施方式，其中，所述分布式存储***还包括元数据备份服务器，
所述元数据备份服务器，用于对所述元数据服务器中的元数据进行备份。
本发明实施例提供的一种元数据存储方法吗，通过把元数据服务器上创建的欲存储数据的元数据进行压缩后再存储的方式，使元数据服务器上的存储空间得到极大的节约，极大的提升了元数据服务器的存储能力，同时也改善了现有的分布式存储过程中，需要存储的数据量较大，使***需要消耗过多的资源去存储和传输数据，造成***工作效率不高的问题。
附图说明
图1为本发明实施例提供的分布式存储***的结构框图；
图2为本发明实施例提供的元数据存储方法的流程图；
图3为本发明实施例提供的一种元数据存储装置的结构框图；
图4为本发明实施例提供的另一种元数据存储装置的结构框图。
具体实施方式
下面将结合本发明实施例中附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。通常在此处附图中描述和示出的本发明实施例的组件可以以各种不同的配置来布置和设计。因此，以下对在附图中提供的本发明的实施例的详细描述并非旨在限制要求保护的本发明的范围，而是仅仅表示本发明的选定实施例。基于本发明的实施例，本领域技术人员在没有做出创造性劳动的前提下所获得的所有其他实施例，都属于本发明保护的范围。
参见图1，本发明实施例所提供的元数据存储方法，应用于如图1所示的分布式存储***中，所述分布式存储***中包括元数据存储装置、存储节点以及元数据服务器。
请参阅图2，本发明实施例提供的一种元数据存储方法，应用于分布式存储***，所述分布式存储***包括元数据存储装置，所述方法包括：
步骤S101：所述元数据存储装置获得欲存储数据的存储请求指令。
当用户需要存储数据时，需要先通过客户端向本实施例提供的元数据存储装置发送存储请求指令，当元数据存储装置获得了客户端发送来的存储请求指令后，开始后续存储操作。
步骤S102：根据所述存储请求指令为所述欲存储数据创建元数据，所述元数据包括欲存储数据的存储节点的地址信息。
在实践过程中，为了便于元数据存储装置获得的欲存储数据的存储节点能够有效的存储欲存储的数据，所述存储请求指令包括所述欲存储数据的数据量大小，用户通过客户端向本实施例提供的元数据存储装置发送存储请求指令时，元数据存储装置则根据所述欲存储数据的数据量为欲存储的数据分配存储节点。
步骤S103：压缩所述元数据。
当在元数据服务器中创建了大量的元数据后，为了节约元数据服务器的存储空间，需要对元数据进行压缩。而在实践过程中，数据压缩的方式有多种，为了便于元数据压缩装置进行数据压缩，较佳的，所述元数据服务器中存储有数据压缩规则，相应的，在步骤S103中包括：所述元数据存储装置获得元数据服务器上存储的数据压缩规则；根据所述数据压缩规则，对所述元数据进行压缩。
步骤S104：将压缩后的所述元数据存储到所述元数据服务器。
在实践过程中，如果只将元数据存储到元数据服务器上，而当元数据服务器受到网络攻击或者其他原因而损坏时，元数据服务器上的元数据则有可能遭受损坏而不可恢复。为了提升元数据的安全性，在实施过程中，作为一种优选的方式，本实施例提供的分布式存储***还包括元数据备份服务器，元数据备份服务器的数量可以根据实际情况确定。相应的，本实施例提供的元数据存储方法，还包括：所述元数据存储装置把压缩后的所述元数据传输到所述元数据备份服务器并存储，从而使元数据备份服务器启动容灾备份的作用，以提升元数据的安全性。
本发明实施例提供的一种元数据存储方法吗，通过把元数据服务器上创建的欲存储数据的元数据进行压缩后再存储的方式，使元数据服务器上的存储空间得到极大的节约，极大的提升了元数据服务器的存储能力。
如图3所示，本发明实施例提供的一种元数据存储装置，应用于分布式存储***，所述元数据存储装置包括存储请求指令获得单元、元数据创建单元、元数据压缩单元以及元数据存储单元。其中，
存储请求指令获得单元，用于获得欲存储数据的存储请求指令。为了便于获得欲存储数据的数据量的大小，所述存储请求指令获得单元包括数据量获得子单元，用于获得所述欲存储数据的数据量大小。
元数据创建单元，用于根据所述存储请求指令为所述欲存储数据创建元数据，所述元数据包括欲存储数据的存储节点的地址信息。
元数据压缩单元，用于压缩所述元数据。而在实施过程中，为了便于压缩，元数据服务器上存储有数据压缩规则，相应的，元数据压缩单元包括压缩规则获得子单元，用于获得元数据服务器上存储的数据压缩规则。
元数据存储单元，用于将压缩后的所述元数据存储到所述元数据服务器。
为了提升元数据的安全性，在实施过程中，作为一种优选的方式，本实施例提供的分布式存储***还包括元数据备份服务器，而为了便于把压缩后的元数据传输到元数据备份服务器，本实施例提供的元数据存储装置还包括元数据备份传输子单元，用于把压缩后的所述元数据传输到所述元数据备份服务器并存储。
本发明实施例提供的一种元数据存储装置，通过把元数据服务器上创建的欲存储数据的元数据进行压缩后再存储的方式，使元数据服务器上的存储空间得到极大的节约，极大的提升了元数据服务器的存储能力。
如图1所示，本发明实施例还提供了一种分布式存储***，所述分布式存储***包括元数据存储装置300、存储节点303以及元数据服务器301，所述元数据服务器301，用于存储元数据。其中，所述***中的元数据存储装置300的实现原理和效果和前述方法实施例相同，本发明实施例未述及之处，可参考前述方法实施例相应部分。
所述元数据存储装置300，用于获得欲存储数据的存储请求指令；根据所述存储请求指令为所述欲存储数据创建元数据，所述元数据包括欲存储数据的存储节点303的地址信息；压缩所述元数据；将压缩后的所述元数据存储到所述元数据服务器301。
在实践过程中，本实施例提供的分布式存储***还包括元数据备份服务器302，用于备份元数据服务器301上的元数据。
本发明实施例提供的分布式存储***，通过元数据存储装置300把元数据服务器301上创建的欲存储数据的元数据进行压缩后再存储的方式，使元数据服务器301上的存储空间得到极大的节约，极大的提升了元数据服务器的存储能力。
参见图4，本发明实施例还提供的另一种元数据存储装置500，包括：处理器501，存储器502，总线503和通信接口504，所述处理器501、通信接口504和存储器502通过总线503连接；处理器501用于执行存储器502中存储的可执行模块，例如计算机程序。
其中，存储器502可能包含高速随机存取存储器(RAM：Random Access Memory)，也可能还包括非不稳定的存储器(non-volatile memory)，例如至少一个磁盘存储器。通过至少一个通信接口504(可以是有线或者无线)实现该***网元与至少一个其他网元之间的通信连接，可以使用互联网，广域网，本地网，城域网等。
总线503可以是ISA总线、PCI总线或EISA总线等。所述总线可以分为地址总线、数据总线、控制总线等。为便于表示，图4中仅用一个双向箭头表示，但并不表示仅有一根总线或一种类型的总线。
其中，存储器502用于存储程序，所述处理器501在接收到执行指令后，执行所述程序，前述本发明实施例任一实施例揭示的流过程定义的装置所执行的方法可以应用于处理器501中，或者由处理器501实现。
处理器501可能是一种集成电路芯片，具有信号的处理能力。在实现过程中，上述方法的各步骤可以通过处理器501中的硬件的集成逻辑电路或者软件形式的指令完成。上述的处理器501可以是通用处理器，包括中央处理器(Central Processing Unit，简称CPU)、网络处理器(Network Processor，简称NP)等；还可以是数字信号处理器(DSP)、专用集成电路(ASIC)、现成可编程门阵列(FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件。可以实现或者执行本发明实施例中的公开的各方法、步骤及逻辑框图。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。结合本发明实施例所公开的方法的步骤可以直接体现为硬件译码处理器执行完成，或者用译码处理器中的硬件及软件模块组合执行完成。软件模块可以位于随机存储器，闪存、只读存储器，可编程只读存储器或者电可擦写可编程存储器、寄存器等本领域成熟的存储介质中。该存储介质位于存储器502，处理器501读取存储器502中的信息，结合其硬件完成上述方法的步骤。
需要说明的是，本发明实施例所提供的装置，其实现原理及产生的技术效果和前述方法实施例相同，为简要描述，装置实施例部分未提及之处，可参考前述方法实施例中相应内容。
需要说明的是，在本申请所提供的几个实施例中，应该理解到，所揭露的***、装置和方法，可以通过其它的方式实现。以上所描述的装置实施例仅仅是示意性的，例如，所述单元的划分，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式。
需要说明的是，所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。另外，在本发明各个实施例中的各功能单元可以集成在一个处理单元中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个单元中。
而在实践过程中，为了提高元数据的存储安全性，较佳的，所述分布式存储***还包括元数据备份服务器，所述元数据备份服务器，用于对所述元数据服务器中的元数据进行备份。
以上所述仅为本发明的优选实施例而已，并不用于限制本发明，对于本领域的技术人员来说，本发明可以有各种更改和变化。凡在本发明的精神和原则之内，所作的任何修改、等同替换、改进等，均应包含在本发明的保护范围之内。

Claims (10)

1.一种元数据存储方法，其特征在于，应用于分布式存储***，所述分布式存储***包括元数据存储装置以及元数据服务器，所述方法包括：
所述元数据存储装置获得欲存储数据的存储请求指令；
根据所述存储请求指令为所述欲存储数据创建元数据，所述元数据包括欲存储数据的存储节点的地址信息；
压缩所述元数据；
将压缩后的所述元数据存储到所述元数据服务器。
2.根据权利要求1所述的元数据存储方法，其特征在于，所述存储请求指令包括所述欲存储数据的数据量大小，所述根据所述存储请求指令为所述欲存储数据创建元数据，包括：
所述元数据存储装置获得所述欲存储数据的数据量大小；
为所述欲存储数据分配目标存储节点，所述目标存储节点上剩余存储空间大于所述欲存储数据的数据量大小的存储节点。
3.根据权利要求1或2所述的元数据存储方法，其特征在于，所述元数据服务器中存储有数据压缩规则，所述压缩所述元数据，包括：
所述元数据存储装置获得元数据服务器上存储的数据压缩规则；
根据所述数据压缩规则，对所述元数据进行压缩。
4.根据权利要求1或2所述的元数据存储方法，其特征在于，所述分布式存储***还包括元数据备份服务器，所述元数据存储方法包括，还包括：
所述元数据存储装置把压缩后的所述元数据传输到所述元数据备份服务器并存储。
5.一种元数据存储装置，其特征在于，应用于分布式存储***，所述分布式存储***包括元数据服务器，所述元数据存储装置包括：
存储请求指令获得单元，用于获得欲存储数据的存储请求指令；
元数据创建单元，用于根据所述存储请求指令为所述欲存储数据创建元数据，所述元数据包括欲存储数据的存储节点的地址信息；
元数据压缩单元，用于压缩所述元数据；
元数据存储单元，用于将压缩后的所述元数据存储到所述元数据服务器。
6.根据权利要求5所述的元数据存储装置，其特征在于，所述存储请求指令包括所述欲存储数据的数据量大小，所述存储请求指令获得单元。包括：
数据量获得子单元，用于获得所述欲存储数据的数据量大小。
7.根据权利要求5或6所述的元数据存储装置，其特征在于，所述元数据服务器中存储有数据压缩规则，所述元数据压缩单元，包括：
压缩规则获得子单元，用于获得元数据服务器上存储的数据压缩规则。
8.根据权利要求5或6所述的元数据存储装置，其特征在于，所述分布式存储***还包括元数据备份服务器，所述元数据存储单元，包括：
元数据备份传输子单元，用于把压缩后的所述元数据传输到所述元数据备份服务器并存储。
9.一种分布式存储***，其特征在于，所述分布式存储***包括元数据存储装置以及元数据服务器，
所述元数据服务器，用于存储元数据；
所述元数据存储装置，用于获得欲存储数据的存储请求指令；根据所述存储请求指令为所述欲存储数据创建元数据，所述元数据包括欲存储数据的存储节点的地址信息；压缩所述元数据；将压缩后的所述元数据存储到所述元数据服务器。
10.根据权利要求9所述的分布式存储***，其特征在于，所述分布式存储***还包括元数据备份服务器，
所述元数据备份服务器，用于对所述元数据服务器中的元数据进行备份。
CN201410836887.8A 2014-12-29 2014-12-29 元数据存储方法、装置以及*** Pending CN104461404A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201410836887.8A CN104461404A (zh) 2014-12-29 2014-12-29 元数据存储方法、装置以及***

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201410836887.8A CN104461404A (zh) 2014-12-29 2014-12-29 元数据存储方法、装置以及***

Publications (1)

Publication Number Publication Date
CN104461404A true CN104461404A (zh) 2015-03-25

Family

ID=52907533

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201410836887.8A Pending CN104461404A (zh) 2014-12-29 2014-12-29 元数据存储方法、装置以及***

Country Status (1)

Country Link
CN (1) CN104461404A (zh)

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107153508A (zh) * 2016-03-03 2017-09-12 杭州海康威视数字技术股份有限公司 一种数据存储方法及装置
CN107480010A (zh) * 2017-08-21 2017-12-15 郑州云海信息技术有限公司 一种恢复元数据的方法及装置
CN107704208A (zh) * 2017-10-13 2018-02-16 郑州云海信息技术有限公司 一种元数据的修复方法、装置及介质
CN108133000A (zh) * 2017-12-21 2018-06-08 百度在线网络技术（北京）有限公司 一种元数据存储方法、装置和服务器
CN109831540A (zh) * 2019-04-12 2019-05-31 成都四方伟业软件股份有限公司 分布式存储方法、装置、电子设备及存储介质
CN110795497A (zh) * 2018-08-02 2020-02-14 阿里巴巴集团控股有限公司 分布式存储***中的协同压缩

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2003003217A2 (en) * 2001-06-29 2003-01-09 Intel Corporation Storing of cache metadata
CN101378397A (zh) * 2007-08-31 2009-03-04 索尼株式会社 发送***、装置和方法、接收装置和方法及记录介质
CN102044295A (zh) * 2009-10-16 2011-05-04 三星电子株式会社 非易失性存储器***以及在电源中断期间保存数据的方法
CN103167026A (zh) * 2013-02-06 2013-06-19 数码辰星科技发展（北京）有限公司 一种云存储环境数据处理方法、***及设备
CN103873501A (zh) * 2012-12-12 2014-06-18 华中科技大学 一种云备份***及其数据备份方法
CN104077355A (zh) * 2014-05-29 2014-10-01 中国银行股份有限公司 一种非结构化数据存储和查询的方法、装置及***

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2003003217A2 (en) * 2001-06-29 2003-01-09 Intel Corporation Storing of cache metadata
CN101378397A (zh) * 2007-08-31 2009-03-04 索尼株式会社 发送***、装置和方法、接收装置和方法及记录介质
CN102044295A (zh) * 2009-10-16 2011-05-04 三星电子株式会社 非易失性存储器***以及在电源中断期间保存数据的方法
CN103873501A (zh) * 2012-12-12 2014-06-18 华中科技大学 一种云备份***及其数据备份方法
CN103167026A (zh) * 2013-02-06 2013-06-19 数码辰星科技发展（北京）有限公司 一种云存储环境数据处理方法、***及设备
CN104077355A (zh) * 2014-05-29 2014-10-01 中国银行股份有限公司 一种非结构化数据存储和查询的方法、装置及***

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107153508A (zh) * 2016-03-03 2017-09-12 杭州海康威视数字技术股份有限公司 一种数据存储方法及装置
CN107153508B (zh) * 2016-03-03 2020-07-24 杭州海康威视数字技术股份有限公司 一种数据存储方法及装置
CN107480010A (zh) * 2017-08-21 2017-12-15 郑州云海信息技术有限公司 一种恢复元数据的方法及装置
CN107704208A (zh) * 2017-10-13 2018-02-16 郑州云海信息技术有限公司 一种元数据的修复方法、装置及介质
CN108133000A (zh) * 2017-12-21 2018-06-08 百度在线网络技术（北京）有限公司 一种元数据存储方法、装置和服务器
CN108133000B (zh) * 2017-12-21 2021-05-04 百度在线网络技术（北京）有限公司 一种元数据存储方法、装置和服务器
US11200201B2 (en) 2017-12-21 2021-12-14 Baidu Online Network Technology (Beijing) Co., Ltd. Metadata storage method, device and server
CN110795497A (zh) * 2018-08-02 2020-02-14 阿里巴巴集团控股有限公司 分布式存储***中的协同压缩
CN109831540A (zh) * 2019-04-12 2019-05-31 成都四方伟业软件股份有限公司 分布式存储方法、装置、电子设备及存储介质

Similar Documents

Publication Publication Date Title
CN104461404A (zh) 元数据存储方法、装置以及***
CN107391629B (zh) 集群间数据迁移方法、***、服务器及计算机存储介质
CN104462225B (zh) 一种数据读取的方法、装置及***
CN104461698A (zh) 虚拟磁盘动态挂载的方法、管理装置及分布式存储***
CN111475483B (zh) 数据库迁移方法、装置及计算设备
CN109783014B (zh) 一种存储数据的方法及装置
CN107153643B (zh) 数据表连接方法及装置
CN105205143A (zh) 一种文件存储及处理方法、设备和***
CN104731569A (zh) 一种数据处理方法及相关设备
EP3147797A1 (en) Data management method, node and system for database cluster
CN104571956A (zh) 一种数据写入方法及拆分装置
US20130311480A1 (en) Sensor data locating
CN111880967A (zh) 云场景下的文件备份方法、装置、介质和电子设备
CN104917817A (zh) 客户端以及数据通信方法
CN111881476A (zh) 对象存储控制方法、装置、计算机设备及存储介质
CN107391303B (zh) 数据处理方法、装置、***、服务器及计算机存储介质
CN104468240A (zh) 云终端管理方法、装置
CN111625180B (zh) 数据写入方法及装置、存储介质
CN106708865B (zh) 流处理***中访问窗口数据的方法和装置
CN104408178A (zh) Web控件加载装置和方法
CN114489690A (zh) 一种分布式***部署方法、装置、电子设备及存储介质
CN111211993A (zh) 流式计算的增量持久化方法及其装置
CN104268089A (zh) 一种信息更新的方法、装置及***
CN110941597B (zh) 解压缩文件的清理方法、装置、计算设备及计算机存储介质
CN115984022A (zh) 分布式支付***统一对账方法和装置

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
TA01 Transfer of patent application right
TA01 Transfer of patent application right

Effective date of registration: 20171129

Address after: 610000 Chengdu City, Sichuan, Chengdu, China (Sichuan) free trade test zone, Chengdu high tech Zone, Tianfu Sanjie No. 219, 2 building

Applicant after: Chengdu Chi Chi Technology Co., Ltd.

Address before: 610000 Chengdu province high tech Zone, East Street, No. 76, grass layer, layer 4, No.

Applicant before: CHENGDU ZHIYUN SCIENCE & TECHNOLOGY CO., LTD.

RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20150325