CN105827681A - 一种san网络下备份数据传输方法 - Google Patents

一种san网络下备份数据传输方法 Download PDF

Info

Publication number
CN105827681A
CN105827681A CN201510011606.XA CN201510011606A CN105827681A CN 105827681 A CN105827681 A CN 105827681A CN 201510011606 A CN201510011606 A CN 201510011606A CN 105827681 A CN105827681 A CN 105827681A
Authority
CN
China
Prior art keywords
backup
labelling
data
read
written
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201510011606.XA
Other languages
English (en)
Other versions
CN105827681B (zh
Inventor
管继岗
许萍萍
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Aerospace One System Jiangsu Information Technology Co ltd
Original Assignee
NANJING YIJIZHI INFORMATION TECHNOLOGY Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by NANJING YIJIZHI INFORMATION TECHNOLOGY Co Ltd filed Critical NANJING YIJIZHI INFORMATION TECHNOLOGY Co Ltd
Priority to CN201510011606.XA priority Critical patent/CN105827681B/zh
Publication of CN105827681A publication Critical patent/CN105827681A/zh
Application granted granted Critical
Publication of CN105827681B publication Critical patent/CN105827681B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Landscapes

  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本发明公开了一种基于SAN(Storage Area Network存储区域网络)下备份数据传输方法。本发明略过介质管理部分，通过在备份主机上映射一个虚拟LUN，备份代理将虚拟LUN映射到本地后，直接把备份数据以扇区形式写入虚拟LUN，备份主机读取虚拟LUN的数据块备份到介质中。因为本方法不需要独立的介质管理程序，也不需要配置多个逻辑卷，因此相比更简单，高效，对生产主机的性能影响更小。

Description

一种SAN网络下备份数据传输方法
技术领域
本发明涉及一种备份数据传输方法，特别是涉及一种基于SAN(StorageAreaNetwork存储区域网络)下备份数据传输方法。
背景技术
当前政府重要机关和企业中，数据量呈现快速增长的态势，而传统备份机制，采用以太网(TCP/IP)的数据备份方式，备份窗口越来越长，而且影响前端以太网的带宽。因此采用LANFREE备份，即直接从后端存储网络中获取备份数据，再通过SAN存储网络传输到备份主机上，是目前解决这类问题的最佳途径。
目前LANFREE的备份实现方案，普遍采用在生产主机上安装介质管理程序，备份代理将数据直接发送给本地主机上的介质管理程序，介质管理程序再将数据保存到指定的LUN上。
现有方案有以下几个缺点：
1.因为经过介质管理程序转发数据，消耗了生产主机过多的资源，影响生产***的运行。
2.因为介质管理程序独占对LUN的访问，所以备份主机无法对其数据进行后台管理，例如重复数据删除等。
3.部署复杂，如果有多台生产主机同时需要LANFREE备份，需要在每一台备份主机上安装代理和介质管理，每个介质管理程序都对应一个独立的LUN，部署复杂程度很高。
发明内容
本发明的目的是解决上述缺点，提供一种简单高效，对生产***影响较小的LANFREE备份方案。
本发明略过介质管理部分，直接让备份代理，将数据传输到备份主机上，通过在备份主机上映射一个虚拟LUN，备份代理将虚拟LUN映射到本地后，直接把备份数据以扇区形式写入虚拟LUN，备份主机读取虚拟LUN的数据块后，即完成一次传输过程。
具体数据传输过程如下：
在备份主机上利用一块连续的内存区域，虚拟成一个块设备，可以将此虚拟块设备认为是一个普通物理磁盘，可以以扇区为单位进行读写。
利用备份主机的FCHBA卡建立TARGET端，然后将虚拟磁盘映射为一个逻辑卷。凡是通过FC存储网络挂载该逻辑卷的客户端，读写扇区均转化为读写备份主机的内存。
在生产***上安装备份代理，并通过FC存储网络，挂载备份主机的虚拟磁盘。
当备份数据时，备份代理将备份数据写入虚拟磁盘，并设置待写入标记，备份主机检查到待写入标记时，读出虚拟磁盘内的数据，再写入到备份介质上，完成后将标记清空。
当恢复数据时，备份主机将数据从备份介质中读出，写入虚拟磁盘，并设置待读取标记，备份代理检查到此标记后，将虚拟磁盘中的数据读出，然后恢复到指定的位置，最后将标记清空。
相对于当前的技术方法，本方法实现更简单，高效，对生产主机的性能影响更小。本发明利用在备份主机内存中创建虚拟磁盘，作为传输备份数据的通道。因此不需要独立的介质管理程序，也不需要配置多个逻辑卷，从而造成各个逻辑卷上管理数据相当繁琐，极大程度上提高了生产***的性能。
附图说明
图1是本发明通过SAN网络下备份数据传输的原理图。
图2是本发明通过通过SAN网络备份数据的流程图。
图3是本发明中待写入标记原理示意图。
图4是本发明通过通过SAN网络恢复数据的流程图。
具体实施方式
下面结合附图对本发明的技术方案进行详细说明。
本发明所描述的是一种简单高效的在SAN存储网络中传输备份数据的方法。SAN网络是一种高速网络，依托光纤通道为服务器和存储设备之间的连接提供更高的吞吐能力，提供在计算机与存储***之间的数据传输。
首先，在备份主机上利用一块连续的内存区域，虚拟成一个块设备，可以将此虚拟块设备认为是一个普通物理磁盘，以扇区为单位进行读写。
优选的，因为数据保存在内存中，因此纯粹为内存操作，所以读取速度非常快。另一方面，该内存区域，大小可以设置，内存越大，读写性能越好。
其次，利用备份主机的FCHBA卡建立TARGET端，然后将虚拟磁盘映射为一个逻辑卷。因此凡是通过FC存储网络挂载该逻辑卷的备份代理，读写扇区均转化为读写备份主机的内存，速度非常快。
本发明备份数据过程如图2所示：
备份数据时，在生产主机上安装备份代理，通过FC存储网络，挂载备份主机的虚拟磁盘。备份代理将备份数据写入虚拟磁盘，因为该虚拟磁盘是通过FC存储网络映射到生产主机，因此备份主机可以直接读取虚拟磁盘中的备份数据，然后存入备份介质中，即完成一次备份数据传输过程。
若有多台生产主机需要备份数据，只需要在生产主机上安装备份代理，然后在备份主机上划出另一块内存区域虚拟成一个块设备，作为传输该生产主机备份数据的通道，不需要独立的介质管理程序，也不需要配置多个逻辑卷，从而造成各个逻辑卷上管理数据相当繁琐。
备份代理将备份数据写入虚拟磁盘，检查到待写入标记时，读出虚拟磁盘内的数据，再写入到备份介质上，完成后将标记清空。
如图3所示，优选的，该待写入取标记可以位于内存磁盘的任意位置，也可以根据需求在内存中设置多个待写入标记。假设该内存区域设置了三个待写入标记，①②③为待写入标记位置，当备份数据写入到①区域的时候，读取到待写入标记，读出写入磁盘的数据，然后写入到备份介质上，完成后将该标记清空，再依次继续。当划分的三处内存区域写满后，再返回到第一处，因此数据可以源源不断的进行传输。
优选的，备份介质可以为硬盘，也可以为磁盘或者磁带，可以根据客户需求选择不同介质。
本发明恢复数据过程如图4所示：
当恢复数据时，备份主机将数据从备份介质中读出，写入虚拟磁盘，设置待读取标记，备份代理检查到此标记后，将虚拟磁盘中的数据读出，然后恢复到指定的位置，最后将标记清空。
和备份数据时一样，恢复数据时可以在位于内存磁盘的任意位置设置待读取标记，检查到此标记后，读取数据恢复。
以上所述仅为本发明的较佳实施例而已，并不用以限制本发明，凡在本发明的精神和原则之内所做的任何修改、等同替换和改进等，均应包含在本发明的保护范围之内。

Claims (4)

1.一种基于SAN下备份数据传输方法，其主要技术特征在于：
步骤一，在备份主机上利用一块连续的内存区域，虚拟成一个块设备，将此虚拟块设备认为是一个普通物理磁盘，以扇区为单位进行读写；
步骤二，在生产***上安装备份代理，通过FC存储网络，挂载备份主机的所述虚拟磁盘；
步骤三，当备份数据时，备份代理将备份数据写入虚拟磁盘，并设置待写入标记，备份主机端检查到待读取标记时，读出虚拟磁盘内的数据，再写入到备份介质上，完成后将所述标记清空；
步骤四，当恢复数据时，备份主机将数据从备份介质中读出，写入虚拟磁盘，并设置待读取标记，备份代理检查到此标记后，将虚拟磁盘中的数据读出，然后恢复到指定的位置，最后将所述标记清空。
2.如权利要求1所述的虚拟磁盘，其特征在于：利用备份主机的FCHBA卡建立TARGET端，然后将虚拟磁盘映射为一个逻辑卷；
通过FC存储网络挂载该逻辑卷的客户端，读写扇区均转化为读写备份主机的内存。
3.如权利要求1所述的待写入标记，其特征在于：待写入标记可以位于所述内存磁盘的任意位置，通过待写入标记，数据可以源源不断进行传输。
4.如权利要求1所述的待读取标记，其特征在于：待读取标记可以位于所述内存磁盘的任意位置，通过待读取标记，数据可以源源不断进行传输。
CN201510011606.XA 2015-01-06 2015-01-06 一种san网络下备份数据传输方法 Active CN105827681B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201510011606.XA CN105827681B (zh) 2015-01-06 2015-01-06 一种san网络下备份数据传输方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201510011606.XA CN105827681B (zh) 2015-01-06 2015-01-06 一种san网络下备份数据传输方法

Publications (2)

Publication Number Publication Date
CN105827681A true CN105827681A (zh) 2016-08-03
CN105827681B CN105827681B (zh) 2019-04-16

Family

ID=56514205

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201510011606.XA Active CN105827681B (zh) 2015-01-06 2015-01-06 一种san网络下备份数据传输方法

Country Status (1)

Country Link
CN (1) CN105827681B (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107911238A (zh) * 2017-11-13 2018-04-13 郑州云海信息技术有限公司 一种基于ipsan服务器双机备份方法和***
CN109144783A (zh) * 2018-08-22 2019-01-04 南京壹进制信息技术股份有限公司 一种分布式海量非结构化数据备份方法及***

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101149694A (zh) * 2007-11-02 2008-03-26 西安三茗科技有限责任公司 基于块级的增量备份和整卷恢复的方法
CN101149693A (zh) * 2007-11-02 2008-03-26 西安三茗科技有限责任公司 计算机硬盘数据连续时间点存储与恢复的方法
CN101751233A (zh) * 2009-12-31 2010-06-23 成都索贝数码科技股份有限公司 存储设备容量的扩展方法及***
CN102521072A (zh) * 2011-11-25 2012-06-27 成都市华为赛门铁克科技有限公司 虚拟磁带库设备及数据恢复方法
CN102571916A (zh) * 2011-12-02 2012-07-11 曙光信息产业(北京)有限公司 一种云存储空间的租赁软件的架构与操作方法
US20130117485A1 (en) * 2011-11-04 2013-05-09 Lsi Corporation Server direct attached storage shared through virtual sas expanders
CN104090828A (zh) * 2014-07-24 2014-10-08 浪潮(北京)电子信息产业有限公司 一种实现数据实时备份的方法及***

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101149694A (zh) * 2007-11-02 2008-03-26 西安三茗科技有限责任公司 基于块级的增量备份和整卷恢复的方法
CN101149693A (zh) * 2007-11-02 2008-03-26 西安三茗科技有限责任公司 计算机硬盘数据连续时间点存储与恢复的方法
CN101751233A (zh) * 2009-12-31 2010-06-23 成都索贝数码科技股份有限公司 存储设备容量的扩展方法及***
US20130117485A1 (en) * 2011-11-04 2013-05-09 Lsi Corporation Server direct attached storage shared through virtual sas expanders
CN102521072A (zh) * 2011-11-25 2012-06-27 成都市华为赛门铁克科技有限公司 虚拟磁带库设备及数据恢复方法
CN102571916A (zh) * 2011-12-02 2012-07-11 曙光信息产业(北京)有限公司 一种云存储空间的租赁软件的架构与操作方法
CN104090828A (zh) * 2014-07-24 2014-10-08 浪潮(北京)电子信息产业有限公司 一种实现数据实时备份的方法及***

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
廖竣锴: "基于Internet的容灾***的设计与实现", 《中国优秀硕士学位论文全文数据库 信息科技辑》 *

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107911238A (zh) * 2017-11-13 2018-04-13 郑州云海信息技术有限公司 一种基于ipsan服务器双机备份方法和***
CN109144783A (zh) * 2018-08-22 2019-01-04 南京壹进制信息技术股份有限公司 一种分布式海量非结构化数据备份方法及***
CN109144783B (zh) * 2018-08-22 2020-08-18 南京壹进制信息科技有限公司 一种分布式海量非结构化数据备份方法及***

Also Published As

Publication number Publication date
CN105827681B (zh) 2019-04-16

Similar Documents

Publication Publication Date Title
US10346081B2 (en) Handling data block migration to efficiently utilize higher performance tiers in a multi-tier storage environment
US10866912B2 (en) Integrated heterogeneous solid state storage drive
US9747318B2 (en) Retrieving data in a storage system using thin provisioning
US9767035B2 (en) Pass-through tape access in a disk storage environment
US20070162692A1 (en) Power controlled disk array system using log storage area
WO2017190578A1 (zh) 硬盘数据擦除方法、服务器及***
US8312316B2 (en) Data storage system, method and data storage and backup system
CN103399823B (zh) 业务数据的存储方法、设备和***
CN104461390A (zh) 将数据写入叠瓦状磁记录smr硬盘的方法及装置
US8205041B2 (en) Virtual tape apparatus, control method of virtual tape apparatus, and control section of electronic device
CN103985393B (zh) 一种多光盘数据并行管理方法及装置
KR101654807B1 (ko) 데이터 저장 장치 및 그것의 동작 방법
CN109918352B (zh) 存储器***和存储数据的方法
CN103076993A (zh) 一种密集型***中的存储***及方法
JP2019028954A (ja) ストレージ制御装置、プログラム、及び重複排除方法
CN110147203A (zh) 一种文件管理方法、装置、电子设备及存储介质
CN104050057A (zh) 一种历史感知的数据去重碎片消除方法与***
US20170039140A1 (en) Network storage device for use in flash memory and processing method therefor
CN103530236A (zh) 一种混合硬盘的实现方法及装置
CN105827681A (zh) 一种san网络下备份数据传输方法
US9235352B2 (en) Datastore for non-overwriting storage devices
US20100250894A1 (en) Explicit data segment boundaries with SCSI I/O referrals
CN104461930A (zh) 一种写缓存的方法及装置
CN103064926B (zh) 数据处理方法和装置
US6950905B2 (en) Write posting memory interface with block-based read-ahead mechanism

Legal Events

Date Code Title Description
DD01 Delivery of document by public notice

Addressee: Nanjing Unary Information Technology Co.,Ltd.

Document name: Notification of Passing Preliminary Examination of the Application for Invention

C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
CB02 Change of applicant information

Address after: Guanghua Road Qinhuai District of Nanjing City, Jiangsu province 210014 (No. 1 Baixia High-tech Park) stenden networking tower 8

Applicant after: NANJING UNARY INFORMATION TECHNOLOGY Inc.,Ltd.

Address before: Guanghua Road Qinhuai District of Nanjing City, Jiangsu province 210014 (No. 1 Baixia High-tech Park) stenden networking tower 8

Applicant before: Nanjing Unary Information Technology Co.,Ltd.

COR Change of bibliographic data
CB02 Change of applicant information

Address after: 210014 three floor, building five, five, Bai Xia hi tech park, No. 5, Yong Zhi Road, Qinhuai District, Nanjing, Jiangsu.

Applicant after: NANJING UNARY INFORMATION TECHNOLOGY Inc.,Ltd.

Address before: 210014, 8 floor, South Tower, stander Internet of things, 1 Guanghua Road, Qinhuai District, Nanjing, Jiangsu.

Applicant before: NANJING UNARY INFORMATION TECHNOLOGY Inc.,Ltd.

CB02 Change of applicant information
CB02 Change of applicant information
CB02 Change of applicant information

Address after: 210014 three floor, building five, five, Bai Xia hi tech park, No. 5, Yong Zhi Road, Qinhuai District, Nanjing, Jiangsu.

Applicant after: NANJING UNARY INFORMATION TECHNOLOGY Co.,Ltd.

Address before: 210014 three floor, building five, five, Bai Xia hi tech park, No. 5, Yong Zhi Road, Qinhuai District, Nanjing, Jiangsu.

Applicant before: NANJING UNARY INFORMATION TECHNOLOGY Inc.,Ltd.

GR01 Patent grant
GR01 Patent grant
CP03 Change of name, title or address
CP03 Change of name, title or address

Address after: Building 1, 6th Floor, Changfeng Building, No.14 Xinghuo Road, Research and Innovation Park, Jiangbei New District, Nanjing City, Jiangsu Province, 210000

Patentee after: Aerospace One System (Jiangsu) Information Technology Co.,Ltd.

Address before: 210014 three floor, building five, five, Bai Xia hi tech park, No. 5, Yong Zhi Road, Qinhuai District, Nanjing, Jiangsu.

Patentee before: NANJING UNARY INFORMATION TECHNOLOGY Co.,Ltd.