CN103714123A - 企业云存储分块对象重复数据删除和重组版本控制方法 - Google Patents
企业云存储分块对象重复数据删除和重组版本控制方法 Download PDFInfo
- Publication number
- CN103714123A CN103714123A CN201310657167.0A CN201310657167A CN103714123A CN 103714123 A CN103714123 A CN 103714123A CN 201310657167 A CN201310657167 A CN 201310657167A CN 103714123 A CN103714123 A CN 103714123A
- Authority
- CN
- China
- Prior art keywords
- file
- data
- version
- user
- files
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims abstract description 56
- 238000000638 solvent extraction Methods 0.000 claims description 30
- 230000008878 coupling Effects 0.000 claims description 17
- 238000010168 coupling process Methods 0.000 claims description 17
- 238000005859 coupling reaction Methods 0.000 claims description 17
- 230000006870 function Effects 0.000 claims description 16
- 230000008569 process Effects 0.000 claims description 12
- 238000012545 processing Methods 0.000 claims description 6
- 230000000903 blocking effect Effects 0.000 claims description 4
- 125000004122 cyclic group Chemical group 0.000 claims description 3
- 238000012217 deletion Methods 0.000 claims description 2
- 230000037430 deletion Effects 0.000 claims description 2
- 230000008901 benefit Effects 0.000 abstract description 3
- 230000011218 segmentation Effects 0.000 abstract 2
- 241001269238 Data Species 0.000 description 3
- 238000005516 engineering process Methods 0.000 description 3
- 238000007726 management method Methods 0.000 description 3
- 241000414967 Colophon Species 0.000 description 2
- 230000005540 biological transmission Effects 0.000 description 2
- 238000010586 diagram Methods 0.000 description 2
- 230000007246 mechanism Effects 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000009286 beneficial effect Effects 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 238000013500 data storage Methods 0.000 description 1
- 238000012423 maintenance Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/10—File systems; File servers
- G06F16/17—Details of further file system functions
- G06F16/174—Redundancy elimination performed by the file system
- G06F16/1748—De-duplication implemented within the file system, e.g. based on file segments
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Data Mining & Analysis (AREA)
- Databases & Information Systems (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
Description
Claims (9)
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201310657167.0A CN103714123B (zh) | 2013-12-06 | 2013-12-06 | 企业云存储分块对象重复数据删除和重组版本控制方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201310657167.0A CN103714123B (zh) | 2013-12-06 | 2013-12-06 | 企业云存储分块对象重复数据删除和重组版本控制方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN103714123A true CN103714123A (zh) | 2014-04-09 |
CN103714123B CN103714123B (zh) | 2017-06-16 |
Family
ID=50407098
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201310657167.0A Expired - Fee Related CN103714123B (zh) | 2013-12-06 | 2013-12-06 | 企业云存储分块对象重复数据删除和重组版本控制方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN103714123B (zh) |
Cited By (19)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104410692A (zh) * | 2014-11-28 | 2015-03-11 | 上海爱数软件有限公司 | 一种用于重复文件上传的方法和*** |
CN104932841A (zh) * | 2015-06-17 | 2015-09-23 | 南京邮电大学 | 一种云存储***中节约型重复数据删除方法 |
CN105205118A (zh) * | 2015-09-10 | 2015-12-30 | 邯郸职业技术学院 | 一种基于文件分块的镜像文件同步方法 |
CN105653209A (zh) * | 2015-12-31 | 2016-06-08 | 浪潮(北京)电子信息产业有限公司 | 一种对象存储数据传输方法及装置 |
CN106020722A (zh) * | 2016-05-19 | 2016-10-12 | 浪潮(北京)电子信息产业有限公司 | 一种云存储***的重复数据去重方法、装置及*** |
CN106611035A (zh) * | 2016-06-12 | 2017-05-03 | 四川用联信息技术有限公司 | 一种云存储中重复数据删除的检索算法 |
CN107391669A (zh) * | 2017-07-20 | 2017-11-24 | 郑州云海信息技术有限公司 | 一种基于文件***的多版本文件管理方法及装置 |
CN107741889A (zh) * | 2017-09-01 | 2018-02-27 | 广州视源电子科技股份有限公司 | 文档恢复方法、***、可读存储介质及终端 |
CN108243207A (zh) * | 2016-12-23 | 2018-07-03 | 航天星图科技(北京)有限公司 | 一种网络云盘的数据存储方法 |
CN108958773A (zh) * | 2018-07-10 | 2018-12-07 | 北京贞宇科技有限公司 | 智能机器人 |
CN109241023A (zh) * | 2018-09-21 | 2019-01-18 | 郑州云海信息技术有限公司 | 分布式存储***数据存储方法、装置、***及存储介质 |
CN109344131A (zh) * | 2018-10-10 | 2019-02-15 | 国网安徽省电力有限公司信息通信分公司 | 数据存储方法、装置及管理服务器 |
CN109634927A (zh) * | 2018-12-13 | 2019-04-16 | 维沃移动通信有限公司 | 一种文件处理方法及终端设备 |
CN110096483A (zh) * | 2019-05-08 | 2019-08-06 | 北京奇艺世纪科技有限公司 | 一种重复文件检测方法、终端和服务器 |
CN110636141A (zh) * | 2019-10-17 | 2019-12-31 | 中国人民解放军陆军工程大学 | 基于云雾协同的多云存储***及其管理方法 |
CN110795408A (zh) * | 2019-10-28 | 2020-02-14 | 柏科数据技术(深圳)股份有限公司 | 基于对象存储的数据处理方法、装置、服务器和存储介质 |
CN110908589A (zh) * | 2018-09-14 | 2020-03-24 | 阿里巴巴集团控股有限公司 | 数据文件的处理方法、装置、***和存储介质 |
CN113127421A (zh) * | 2021-04-01 | 2021-07-16 | 山东英信计算机技术有限公司 | 一种存储***检索文件内容的方法和设备 |
CN115757328A (zh) * | 2022-11-15 | 2023-03-07 | 百润红科技有限公司 | 一种基于云平台的数据储存方法及存储管理*** |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20100070725A1 (en) * | 2008-09-05 | 2010-03-18 | Anand Prahlad | Systems and methods for management of virtualization data |
CN102316131A (zh) * | 2010-07-02 | 2012-01-11 | 戴元顺 | 云平台***智能备份 |
CN103095843A (zh) * | 2013-01-28 | 2013-05-08 | 刘海峰 | 一种基于版本矢量的数据备份方法及客户端 |
CN103118104A (zh) * | 2013-01-28 | 2013-05-22 | 刘海峰 | 一种基于版本矢量的数据还原方法及服务器 |
CN103136243A (zh) * | 2011-11-29 | 2013-06-05 | 中国电信股份有限公司 | 基于云存储的文件***去重方法及装置 |
-
2013
- 2013-12-06 CN CN201310657167.0A patent/CN103714123B/zh not_active Expired - Fee Related
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20100070725A1 (en) * | 2008-09-05 | 2010-03-18 | Anand Prahlad | Systems and methods for management of virtualization data |
CN102316131A (zh) * | 2010-07-02 | 2012-01-11 | 戴元顺 | 云平台***智能备份 |
CN103136243A (zh) * | 2011-11-29 | 2013-06-05 | 中国电信股份有限公司 | 基于云存储的文件***去重方法及装置 |
CN103095843A (zh) * | 2013-01-28 | 2013-05-08 | 刘海峰 | 一种基于版本矢量的数据备份方法及客户端 |
CN103118104A (zh) * | 2013-01-28 | 2013-05-22 | 刘海峰 | 一种基于版本矢量的数据还原方法及服务器 |
Non-Patent Citations (3)
Title |
---|
付印金等: "重复数据删除关键技术研究进展", 《计算机研究与发展》 * |
崔兴华等: "重复数据检测在多版本数据备份中的应用", 《计算机应用研究》 * |
王树鹏: "重复数据删除技术的发展及应用", 《中兴通讯技术》 * |
Cited By (27)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104410692A (zh) * | 2014-11-28 | 2015-03-11 | 上海爱数软件有限公司 | 一种用于重复文件上传的方法和*** |
CN104410692B (zh) * | 2014-11-28 | 2019-03-22 | 上海爱数信息技术股份有限公司 | 一种用于重复文件上传的方法和*** |
CN104932841B (zh) * | 2015-06-17 | 2018-05-08 | 南京邮电大学 | 一种云存储***中节约型重复数据删除方法 |
CN104932841A (zh) * | 2015-06-17 | 2015-09-23 | 南京邮电大学 | 一种云存储***中节约型重复数据删除方法 |
CN105205118A (zh) * | 2015-09-10 | 2015-12-30 | 邯郸职业技术学院 | 一种基于文件分块的镜像文件同步方法 |
CN105653209A (zh) * | 2015-12-31 | 2016-06-08 | 浪潮(北京)电子信息产业有限公司 | 一种对象存储数据传输方法及装置 |
CN106020722A (zh) * | 2016-05-19 | 2016-10-12 | 浪潮(北京)电子信息产业有限公司 | 一种云存储***的重复数据去重方法、装置及*** |
CN106611035A (zh) * | 2016-06-12 | 2017-05-03 | 四川用联信息技术有限公司 | 一种云存储中重复数据删除的检索算法 |
CN108243207A (zh) * | 2016-12-23 | 2018-07-03 | 航天星图科技(北京)有限公司 | 一种网络云盘的数据存储方法 |
CN108243207B (zh) * | 2016-12-23 | 2019-03-15 | 中科星图股份有限公司 | 一种网络云盘的数据存储方法 |
CN107391669A (zh) * | 2017-07-20 | 2017-11-24 | 郑州云海信息技术有限公司 | 一种基于文件***的多版本文件管理方法及装置 |
CN107741889A (zh) * | 2017-09-01 | 2018-02-27 | 广州视源电子科技股份有限公司 | 文档恢复方法、***、可读存储介质及终端 |
CN108958773A (zh) * | 2018-07-10 | 2018-12-07 | 北京贞宇科技有限公司 | 智能机器人 |
CN110908589A (zh) * | 2018-09-14 | 2020-03-24 | 阿里巴巴集团控股有限公司 | 数据文件的处理方法、装置、***和存储介质 |
CN110908589B (zh) * | 2018-09-14 | 2023-06-27 | 阿里巴巴集团控股有限公司 | 数据文件的处理方法、装置、***和存储介质 |
CN109241023A (zh) * | 2018-09-21 | 2019-01-18 | 郑州云海信息技术有限公司 | 分布式存储***数据存储方法、装置、***及存储介质 |
CN109344131A (zh) * | 2018-10-10 | 2019-02-15 | 国网安徽省电力有限公司信息通信分公司 | 数据存储方法、装置及管理服务器 |
CN109344131B (zh) * | 2018-10-10 | 2022-03-29 | 国网安徽省电力有限公司信息通信分公司 | 数据存储方法、装置及管理服务器 |
CN109634927A (zh) * | 2018-12-13 | 2019-04-16 | 维沃移动通信有限公司 | 一种文件处理方法及终端设备 |
CN110096483A (zh) * | 2019-05-08 | 2019-08-06 | 北京奇艺世纪科技有限公司 | 一种重复文件检测方法、终端和服务器 |
CN110096483B (zh) * | 2019-05-08 | 2021-04-30 | 北京奇艺世纪科技有限公司 | 一种重复文件检测方法、终端和服务器 |
CN110636141A (zh) * | 2019-10-17 | 2019-12-31 | 中国人民解放军陆军工程大学 | 基于云雾协同的多云存储***及其管理方法 |
CN110636141B (zh) * | 2019-10-17 | 2021-11-09 | 中国人民解放军陆军工程大学 | 基于云雾协同的多云存储***及其管理方法 |
CN110795408A (zh) * | 2019-10-28 | 2020-02-14 | 柏科数据技术(深圳)股份有限公司 | 基于对象存储的数据处理方法、装置、服务器和存储介质 |
CN113127421A (zh) * | 2021-04-01 | 2021-07-16 | 山东英信计算机技术有限公司 | 一种存储***检索文件内容的方法和设备 |
CN115757328A (zh) * | 2022-11-15 | 2023-03-07 | 百润红科技有限公司 | 一种基于云平台的数据储存方法及存储管理*** |
CN115757328B (zh) * | 2022-11-15 | 2023-06-27 | 百润红科技有限公司 | 一种基于云平台的数据储存方法及存储管理*** |
Also Published As
Publication number | Publication date |
---|---|
CN103714123B (zh) | 2017-06-16 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN103714123A (zh) | 企业云存储分块对象重复数据删除和重组版本控制方法 | |
US20210263888A1 (en) | User-centric interfaces for information management systems | |
US10795578B2 (en) | Deduplicating data based on boundary identification | |
US11921594B2 (en) | Enhanced file indexing, live browsing, and restoring of backup copies of virtual machines and/or file systems by populating and tracking a cache storage area and a backup index | |
US9507800B2 (en) | Data management in distributed file systems | |
US8200638B1 (en) | Individual file restore from block-level incremental backups by using client-server backup protocol | |
US9928210B1 (en) | Constrained backup image defragmentation optimization within deduplication system | |
US20150269032A1 (en) | Backing up data to cloud data storage while maintaining storage efficiency | |
US8700567B2 (en) | Information apparatus | |
WO2011108021A1 (en) | File level hierarchical storage management system, method, and apparatus | |
US20210064486A1 (en) | Access arbitration to a shared cache storage area in a data storage management system for live browse, file indexing, backup and/or restore operations | |
US20120005307A1 (en) | Storage virtualization | |
US11914477B2 (en) | Lightweight metadata handling for file indexing and live browse of backup copies | |
US20130311493A1 (en) | Systems and methods for arbitrary data transformations | |
US11567902B2 (en) | Systems and methods for document search and aggregation with reduced bandwidth and storage demand | |
US11650967B2 (en) | Managing a deduplicated data index | |
US20070174360A1 (en) | Storage system embedding database | |
US10318489B2 (en) | Avoiding full file replication using sparse files | |
EP3436973A1 (en) | File system support for file-level ghosting | |
US12007983B2 (en) | Optimization of application of transactional information for a hybrid transactional and analytical processing architecture | |
US20240220366A1 (en) | Lightweight metadata handling for file indexing and live browse of backup copies | |
CN116661675A (zh) | 一种工作负载特征提取方法及装置 | |
Kurz | Efficient dataset archiving and ver-sioning at large scale |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
CB03 | Change of inventor or designer information | ||
CB03 | Change of inventor or designer information |
Inventor after: Liu Jun Inventor before: Xue Tao Inventor before: Liu Yulong |
|
TA01 | Transfer of patent application right | ||
TA01 | Transfer of patent application right |
Effective date of registration: 20170516 Address after: 325036 Zhejiang, Ouhai, South East Road, No. 38, Wenzhou National University Science Park Incubator Applicant after: Wenzhou University Address before: 710048 Shaanxi province Xi'an Beilin District Jinhua Road No. 19 Applicant before: XI'AN POLYTECHNIC University |
|
GR01 | Patent grant | ||
EE01 | Entry into force of recordation of patent licensing contract | ||
EE01 | Entry into force of recordation of patent licensing contract |
Application publication date: 20140409 Assignee: Big data and Information Technology Research Institute of Wenzhou University Assignor: Wenzhou University Contract record no.: X2020330000098 Denomination of invention: Version control method for data duplication and reorganization of partitioned objects in Enterprise Cloud Storage Granted publication date: 20170616 License type: Common License Record date: 20201115 |
|
EE01 | Entry into force of recordation of patent licensing contract | ||
EE01 | Entry into force of recordation of patent licensing contract |
Application publication date: 20140409 Assignee: Tigerman Polytron Technologies Inc. Assignor: Wenzhou University Contract record no.: X2022330000707 Denomination of invention: Enterprise cloud storage chunking object deduplication and reorganization version control method Granted publication date: 20170616 License type: Common License Record date: 20221202 |
|
CF01 | Termination of patent right due to non-payment of annual fee |
Granted publication date: 20170616 |