WO2018027466A1 - Procédé et système de mémorisation de données volumineuses dans un système distribué - Google Patents
Procédé et système de mémorisation de données volumineuses dans un système distribué Download PDFInfo
- Publication number
- WO2018027466A1 WO2018027466A1 PCT/CN2016/093941 CN2016093941W WO2018027466A1 WO 2018027466 A1 WO2018027466 A1 WO 2018027466A1 CN 2016093941 W CN2016093941 W CN 2016093941W WO 2018027466 A1 WO2018027466 A1 WO 2018027466A1
- Authority
- WO
- WIPO (PCT)
- Prior art keywords
- data
- stored
- distributed
- distributed storage
- location
- Prior art date
Links
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/07—Responding to the occurrence of a fault, e.g. fault tolerance
- G06F11/14—Error detection or correction of the data by redundancy in operation
Definitions
- the present invention relates to the field of big data, and in particular, to a method and system for storing big data in a distributed system.
- Big data or massive data, refers to the massive, high-growth, and diverse information assets that require new processing models to have greater decision-making, insight, and process optimization capabilities.
- Victor ⁇ Meyer Schonberg and Kenneth Big data in the Big Data Era written by Cookey refers to the use of all data for analysis without the use of random analysis (sample survey). 4V features of big data: Volume, Velocity, Variety, Value.
- a method for storing big data in a distributed system is provided, which solves the shortcoming of low security of data in the prior art.
- a method for storing big data in a distributed system comprising the steps of:
- the method further includes:
- the method further includes:
- a storage system for providing big data in a distributed system comprising:
- a receiving unit configured to receive data that needs to be stored
- a search unit for finding the location of its distributed storage after the data is stored
- a backup unit for backing up data that needs to be stored at the location of the distributed storage is
- system further includes:
- a sending unit configured to issue a backup completion message after the distributed storage is completed.
- system further includes:
- a prompting unit for prompting the remaining storage capacity A prompting unit for prompting the remaining storage capacity.
- the technical solution provided by the specific embodiment of the present invention receives data that needs to be stored. After the data is stored, the location of the distributed storage is searched, and the data to be stored is backed up in the distributed storage location, so that the backup processing can be implemented. advantage.
- FIG. 1 is a flowchart of a method for storing big data in a distributed system according to the present invention
- FIG. 2 is a structural diagram of a big data storage system in a distributed system according to the present invention.
- FIG. 1 is a flowchart of a method for storing big data in a distributed system according to a first preferred embodiment of the present invention.
- the method is implemented by a server.
- the method is as shown in FIG. 1 and includes the following steps:
- Step S101 Receive data that needs to be stored
- Step S102 After the data is stored, search for the location of the distributed storage
- Step S103 Backing up data that needs to be stored at the location of the distributed storage.
- the technical solution provided by the specific embodiment of the present invention receives data that needs to be stored. After the data is stored, the location of the distributed storage is searched, and the data to be stored is backed up in the distributed storage location, so that the backup processing can be implemented. advantage.
- the foregoing method may further include:
- the foregoing method may further include:
- FIG. 2 is a schematic diagram of a storage system for providing big data in a distributed system according to a second preferred embodiment of the present invention.
- the system includes:
- the receiving unit 201 is configured to receive data that needs to be stored
- the searching unit 202 is configured to search for the location of the distributed storage after the data is stored.
- the backup unit 203 is configured to back up data that needs to be stored at the location of the distributed storage.
- the technical solution provided by the specific embodiment of the present invention receives data that needs to be stored. After the data is stored, the location of the distributed storage is searched, and the data to be stored is backed up in the distributed storage location, so that the backup processing can be implemented. advantage.
- the above system may further include:
- the sending unit 204 is configured to issue a backup completion message after the distributed storage is completed.
- the above system may further include:
- the prompting unit 205 is configured to prompt the remaining storage capacity.
- Computer readable media includes both computer storage media and communication media including any medium that facilitates transfer of a computer program from one location to another.
- a storage medium may be any available media that can be accessed by a computer.
- the computer readable medium may include random access memory (Random) Access Memory, RAM), Read-Only Memory (ROM), Electrically Erasable Programmable Read Only Memory (Electrically Erasable Programmable Read-Only Memory, EEPROM), Compact Disc Read-Only Memory, CD-ROM, or other optical disc storage, magnetic storage medium or other magnetic storage device, or any other medium that can be used to carry or store desired program code in the form of instructions or data structures and that can be accessed by a computer. Also. Any connection may suitably be a computer readable medium.
- a disk and a disc include a compact disc (CD), a laser disc, a compact disc, a digital versatile disc (DVD), a floppy disk, and a Blu-ray disc, wherein the disc is usually magnetically copied, and the disc is The laser is used to optically replicate the data. Combinations of the above should also be included within the scope of the computer readable media.
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Quality & Reliability (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
Procédé et système de mémorisation de données volumineuses dans un système distribué. Le procédé comprend : la réception de données devant être mémorisées (101) ; après l'achèvement de la mémorisation des données, la recherche d'un emplacement de mémorisation distribuée de celles-ci (102) ; et la sauvegarde, à l'emplacement de mémorisation distribuée, des données devant être mémorisées (103). Le procédé présente l'avantage d'être très sûr.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
PCT/CN2016/093941 WO2018027466A1 (fr) | 2016-08-08 | 2016-08-08 | Procédé et système de mémorisation de données volumineuses dans un système distribué |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
PCT/CN2016/093941 WO2018027466A1 (fr) | 2016-08-08 | 2016-08-08 | Procédé et système de mémorisation de données volumineuses dans un système distribué |
Publications (1)
Publication Number | Publication Date |
---|---|
WO2018027466A1 true WO2018027466A1 (fr) | 2018-02-15 |
Family
ID=61161116
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
PCT/CN2016/093941 WO2018027466A1 (fr) | 2016-08-08 | 2016-08-08 | Procédé et système de mémorisation de données volumineuses dans un système distribué |
Country Status (1)
Country | Link |
---|---|
WO (1) | WO2018027466A1 (fr) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN114357069A (zh) * | 2021-12-23 | 2022-04-15 | 微梦创科网络科技(中国)有限公司 | 一种基于分布式存储的大数据采样方法及*** |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102880531A (zh) * | 2012-09-27 | 2013-01-16 | 新浪网技术(中国)有限公司 | 数据库备份***及其备份方法和从数据库服务器 |
CN103034739A (zh) * | 2012-12-29 | 2013-04-10 | 天津南大通用数据技术有限公司 | 一种分布式存储***及其更新和查询方法 |
CN103095754A (zh) * | 2011-10-31 | 2013-05-08 | 台达电子工业股份有限公司 | 分布式文件***及其使用的备份位置决策方法 |
CN105530294A (zh) * | 2015-12-04 | 2016-04-27 | 中科院成都信息技术股份有限公司 | 一种海量数据分布式存储的方法 |
CN106294010A (zh) * | 2016-08-08 | 2017-01-04 | 马岩 | 分布式***中大数据的存储方法及*** |
-
2016
- 2016-08-08 WO PCT/CN2016/093941 patent/WO2018027466A1/fr active Application Filing
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103095754A (zh) * | 2011-10-31 | 2013-05-08 | 台达电子工业股份有限公司 | 分布式文件***及其使用的备份位置决策方法 |
CN102880531A (zh) * | 2012-09-27 | 2013-01-16 | 新浪网技术(中国)有限公司 | 数据库备份***及其备份方法和从数据库服务器 |
CN103034739A (zh) * | 2012-12-29 | 2013-04-10 | 天津南大通用数据技术有限公司 | 一种分布式存储***及其更新和查询方法 |
CN105530294A (zh) * | 2015-12-04 | 2016-04-27 | 中科院成都信息技术股份有限公司 | 一种海量数据分布式存储的方法 |
CN106294010A (zh) * | 2016-08-08 | 2017-01-04 | 马岩 | 分布式***中大数据的存储方法及*** |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN114357069A (zh) * | 2021-12-23 | 2022-04-15 | 微梦创科网络科技(中国)有限公司 | 一种基于分布式存储的大数据采样方法及*** |
CN114357069B (zh) * | 2021-12-23 | 2024-05-28 | 微梦创科网络科技(中国)有限公司 | 一种基于分布式存储的大数据采样方法及*** |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
WO2018027466A1 (fr) | Procédé et système de mémorisation de données volumineuses dans un système distribué | |
WO2018027465A1 (fr) | Procédé et système permettant une sauvegarde en temps réel sur la base de mégadonnées | |
WO2018027468A1 (fr) | Procédé et système de stockage classifié pour mégadonnées | |
WO2018027469A1 (fr) | Procédé et système d'application de mot-clé dans une mémoire de mégadonnées | |
WO2018027560A1 (fr) | Procédé et système d'enregistrement de présence gprs destinés à être utilisés dans la sécurité | |
WO2018027557A1 (fr) | Procédé et système d'enregistrement de présence wi-fi en matière de sécurité | |
WO2018027467A1 (fr) | Procédé et système de stockage de mégadonnées dans un disque en réseau | |
WO2018035697A1 (fr) | Procédé et système de recherche d'annonces immobilières sur internet | |
WO2018032346A1 (fr) | Procédé et système de dissimulation d'application dans un scénario d'utilisation spécifique | |
WO2018032335A1 (fr) | Procédé et système de fermeture d'applications de téléphone mobile | |
WO2018027576A1 (fr) | Procédé et système de collecte de durée de fonctionnement dans des statistiques dans l'internet des objets | |
WO2018035788A1 (fr) | Procédé et système d'application pour une commande en boucle ouverte dans une machine d'enroulement vertical | |
WO2018023482A1 (fr) | Procédé et système pour mettre en œuvre une recherche vocale | |
WO2018027343A1 (fr) | Procédé et système de mise en œuvre d'une recherche vocale | |
WO2018023484A1 (fr) | Procédé et système de mise en œuvre d'une recherche de différentes parties de discours dans des données volumineuses | |
WO2018027464A1 (fr) | Procédé et système de mise en oeuvre pour différentes parties de discours pendant une recherche dans des mégadonnées | |
WO2018027470A1 (fr) | Procédé et système de partage de mégadonnées dans wechat | |
WO2018027456A1 (fr) | Procédé et système de spécification d'application à partager dans des mégadonnées | |
WO2018027342A1 (fr) | Procédé et système d'application de synonyme dans une recherche de mégadonnées | |
WO2018027455A1 (fr) | Procédé et système permettant de partager des mégadonnées dans un réseau social | |
WO2018023481A1 (fr) | Procédé et système d'application d'un synonyme dans une recherche de mégadonnées | |
WO2018027457A1 (fr) | Procédé et système de partage de mégadonnées mobiles | |
WO2018023483A1 (fr) | Procédé et système de mise en œuvre de recherche en temps réel de différentes langues dans des mégadonnées | |
WO2018027458A1 (fr) | Procédé et système permettant de partager des mégadonnées en temps réel | |
WO2018023480A1 (fr) | Procédé et système de recherche dans des mégadonnées sur la base de la classification de mots-clés |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
121 | Ep: the epo has been informed by wipo that ep was designated in this application |
Ref document number: 16911922 Country of ref document: EP Kind code of ref document: A1 |
|
NENP | Non-entry into the national phase |
Ref country code: DE |
|
122 | Ep: pct application non-entry in european phase |
Ref document number: 16911922 Country of ref document: EP Kind code of ref document: A1 |