CN109286615A - 一种高效的跨局域网数据同步方法 - Google Patents

一种高效的跨局域网数据同步方法 Download PDF

Info

Publication number
CN109286615A
CN109286615A CN201811019608.3A CN201811019608A CN109286615A CN 109286615 A CN109286615 A CN 109286615A CN 201811019608 A CN201811019608 A CN 201811019608A CN 109286615 A CN109286615 A CN 109286615A
Authority
CN
China
Prior art keywords
data
address
intranet
file
public network
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201811019608.3A
Other languages
English (en)
Inventor
周先东
张海涛
章文友
孟彦
朱静轩
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
China Network Information Security Ltd By Share Ltd
Original Assignee
China Network Information Security Ltd By Share Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by China Network Information Security Ltd By Share Ltd filed Critical China Network Information Security Ltd By Share Ltd
Priority to CN201811019608.3A priority Critical patent/CN109286615A/zh
Publication of CN109286615A publication Critical patent/CN109286615A/zh
Pending legal-status Critical Current

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L63/00—Network architectures or network communication protocols for network security
    • H04L63/02—Network architectures or network communication protocols for network security for separating internal from external traffic, e.g. firewalls
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L61/00—Network arrangements, protocols or services for addressing or naming
    • H04L61/50—Address allocation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L63/00—Network architectures or network communication protocols for network security
    • H04L63/04—Network architectures or network communication protocols for network security for providing a confidential data exchange among entities communicating through data packet networks
    • H04L63/0428—Network architectures or network communication protocols for network security for providing a confidential data exchange among entities communicating through data packet networks wherein the data content is protected, e.g. by encrypting or encapsulating the payload
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/02—Protocols based on web technology, e.g. hypertext transfer protocol [HTTP]
    • H04L67/025—Protocols based on web technology, e.g. hypertext transfer protocol [HTTP] for remote control or remote monitoring of applications
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/06—Protocols specially adapted for file transfer, e.g. file transfer protocol [FTP]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/10—Protocols in which an application is distributed across nodes in the network
    • H04L67/1095—Replication or mirroring of data, e.g. scheduling or transport for data synchronisation between network nodes
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/50—Network services
    • H04L67/56—Provisioning of proxy services
    • H04L67/565—Conversion or adaptation of application format or content

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Computer Security & Cryptography (AREA)
  • Computer Hardware Design (AREA)
  • Computing Systems (AREA)
  • General Engineering & Computer Science (AREA)
  • Data Exchanges In Wide-Area Networks (AREA)

Abstract

本发明涉及局域网数据同步技术领域，具体涉及一种高效的跨局域网数据同步方法，包括在局域网与公网之间架设双向隔离网闸、配置镜像、公网到内网同步、解析数据并建立索引、内网到公网同步、FTP连接传输文件到D地址、外网FTP从B地址获取从内网到外网传递的格式化后的文件。本发明通过在公网、局域网之间架设网闸并进行数据传输，实现用物理隔离手段进行数据传输，保证了数据传输时的安全可控性，同时也满足高保密数据的跨网数据需求；数据库层面建立唯一字段索引，提高数据传输过程的高效性。

Description

一种高效的跨局域网数据同步方法
技术领域
本发明涉及局域网数据同步技术领域，具体涉及一种高效的跨局域网数据同步方法。
背景技术
随着信息化建设，数据在网络之间的交换传输愈显频繁，基于对重要部门内部数据安全的考虑，对计算机网络进行了物理的隔离，但是这种隔离是建立在牺牲计算机网络使用的方便性为代价，从而大大降低了工作效率。为了满足不同网络间物理隔离的安全需求和实现跨网数据安全交换，通常采用数据单项传输技术，为高保密要求的数据信息安全工作提供了有效的解决手段，数据单项传输，虽然确保了数据的保密，但是在数据交换频繁的情况下，工作效率较低。
发明内容
本发明的目的在于克服现有技术中存在的问题，提供一种高效的跨局域网数据同步方法，它可以实现有效的保证数据同步的保密性、使用FTP分别上传多个包，内网端可以快速下载，同时多个线程进行同步更新，避免了数据同步过程的阻塞。
为实现上述技术目的，达到上述技术效果，本发明是通过以下技术方案实现的：
一种高效的跨局域网数据同步方法，其包括如下步骤：
步骤1、在局域网与公网之间架设双向隔离网闸；
步骤2、配置镜像：配置公网端与网闸数据入口地址为A，网闸与公网数据出口地址为B，网闸与内网数据出口地址为C，内网数据与网闸数据出口地址为D，配置访问A、B、C、D各地址的用户名与密码，配置C与A地址镜像、D与B的地址镜像；
步骤3、公网到内网同步，具体包括如下步骤：
步骤3.1、格式化需要同步的数据；
步骤3.2、将格式化后的数据打包成加密的ZIP文件；
步骤3.3、启动线程以FTP连接方式上传加密的ZIP文件到A地址，上传成功后删除ZIP文件；
步骤3.4、内网程序启动线程以FTP下载的方式从C地址，下载文件保存到指定位置；
步骤3.5、解压线程监控下载位置对文件进行解压，识别文件标示，同步更新相应数据库表，更新完成后删除源数据文件；
步骤4、解析数据并建立索引：解析所述步骤3.1中格式化后的数据并保存在内存中，数据库层面建立唯一字段索引；
步骤5、内网到公网同步：将需要传输的数据格式化，加密压缩生成ZIP格式的文件；
步骤6、FTP连接传输文件到D地址；
步骤7、外网FTP从B地址获取从内网到外网传递的格式化后的文件。
优选地，所述步骤3.1中将需要同步的数据格式化为JSON格式，单文件数据条数在100～500条内，并以相互约定好的规则命名文件名称。
优选地，所述步骤5中对需要传输的数据格式化成XML格式。
进一步地，所述步骤3.1中对格式化后的数据进行命名，且命名规则需具有唯一性。
本发明的有益效果：通过在公网、局域网之间架设网闸并进行数据传输，实现用物理隔离手段进行数据传输，保证了数据传输时的安全可控性，同时也满足高保密数据的跨网数据需求；数据库层面建立唯一字段索引，提高数据传输过程的高效性。
附图说明
图1为本发明一种高效的跨局域网数据同步方法的示意图。
具体实施方式
为了使本发明实现的技术手段、创作特征、达成目的与功效易于明白了解，下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其它实施例，都属于本发明保护的范围。
如图1所示的一种高效的跨局域网数据同步方法，其包括如下步骤：
步骤1、在局域网与公网之间架设双向隔离网闸；
步骤2、配置镜像：配置公网端与网闸数据入口地址为A，网闸与公网数据出口地址为B，网闸与内网数据出口地址为C，内网数据与网闸数据出口地址为D，配置访问A、B、C、D各地址的用户名与密码，配置C与A地址镜像、D与B的地址镜像；
步骤3、公网到内网同步，具体包括如下步骤：
步骤3.1、格式化需要同步的数据；
步骤3.2、将格式化后的数据打包成加密的ZIP文件；
步骤3.3、启动线程以FTP连接方式上传加密的ZIP文件到A地址，上传成功后删除ZIP文件；
步骤3.4、内网程序启动线程以FTP下载的方式从C地址，下载文件保存到指定位置；
步骤3.5、解压线程监控下载位置对文件进行解压，识别文件标示，同步更新相应数据库表，更新完成后删除源数据文件；
步骤4、解析数据并建立索引：解析所述步骤3.1中格式化后的数据并保存在内存中，数据库层面建立唯一字段索引；
步骤5、内网到公网同步：将需要传输的数据格式化，加密压缩生成ZIP格式的文件；
步骤6、FTP连接传输文件到D地址；
步骤7、外网FTP从B地址获取从内网到外网传递的格式化后的文件。
所述步骤3.1中将需要同步的数据格式化为JSON格式，单文件数据条数在100～500条内，并以相互约定好的规则命名文件名称，可以快速读取文件名，提高数据传输过程的高效性，当然也可以将需要同步的数据格式化为XML格式。
所述步骤5中对需要传输的数据格式化成XML格式，能够快速读取需要传输的数据的文件名，提高数据传输过程的高效性，当然也可以将需要同步的数据格式化为JSON格式。
所述步骤3.1中对格式化后的数据进行命名，且命名规则需具有唯一性，提高数据传输的高效性。
以上公开的本发明优选实施例只是用于帮助阐述本发明。优选实施例并没有详尽叙述所有的细节，也不限制该发明仅为所述的具体实施方式。显然，根据本说明书的内容，可作很多的修改和变化。本说明书选取并具体描述这些实施例，是为了更好地解释本发明的原理和实际应用，从而使所属技术领域技术人员能很好地理解和利用本发明。本发明仅受权利要求书及其全部范围和等效物的限制。

Claims (4)

1.一种高效的跨局域网数据同步方法，其特征在于，其包括如下步骤：
步骤1、在局域网与公网之间架设双向隔离网闸；
步骤2、配置镜像：配置公网端与网闸数据入口地址为A，网闸与公网数据出口地址为B，网闸与内网数据出口地址为C，内网数据与网闸数据出口地址为D，配置访问A、B、C、D各地址的用户名与密码，配置C与A地址镜像、D与B的地址镜像；
步骤3、公网到内网同步，具体包括如下步骤：
步骤3.1、格式化需要同步的数据；
步骤3.2、将格式化后的数据打包成加密的ZIP文件；
步骤3.3、启动线程以FTP连接方式上传加密的ZIP文件到A地址，上传成功后删除ZIP文件；
步骤3.4、内网程序启动线程以FTP下载的方式从C地址，下载文件保存到指定位置；
步骤3.5、解压线程监控下载位置对文件进行解压，识别文件标示，同步更新相应数据库表，更新完成后删除源数据文件；
步骤4、解析数据并建立索引：解析所述步骤3.1中格式化后的数据并保存在内存中，数据库层面建立唯一字段索引；
步骤5、内网到公网同步：将需要传输的数据格式化，加密压缩生成ZIP格式的文件；
步骤6、FTP连接传输文件到D地址；
步骤7、外网FTP从B地址获取从内网到外网传递的格式化后的文件。
2.根据权利要求1所述的一种高效的跨局域网数据同步方法，其特征在于，所述步骤3.1中将需要同步的数据格式化为JSON格式，单文件数据条数在100～500条内，并以相互约定好的规则命名文件名称。
3.根据权利要求1所述的一种高效的跨局域网数据同步方法，其特征在于，所述步骤5中对需要传输的数据格式化成XML格式。
4.根据权利要求1所述的一种高效的跨局域网数据同步方法，其特征在于，所述步骤3.1中对格式化后的数据进行命名，且命名规则需具有唯一性。
CN201811019608.3A 2018-09-03 2018-09-03 一种高效的跨局域网数据同步方法 Pending CN109286615A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201811019608.3A CN109286615A (zh) 2018-09-03 2018-09-03 一种高效的跨局域网数据同步方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201811019608.3A CN109286615A (zh) 2018-09-03 2018-09-03 一种高效的跨局域网数据同步方法

Publications (1)

Publication Number Publication Date
CN109286615A true CN109286615A (zh) 2019-01-29

Family

ID=65183511

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201811019608.3A Pending CN109286615A (zh) 2018-09-03 2018-09-03 一种高效的跨局域网数据同步方法

Country Status (1)

Country Link
CN (1) CN109286615A (zh)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110334062A (zh) * 2019-07-11 2019-10-15 深圳物讯科技有限公司 一种基于数据库物理日志的跨公安边界的大数据传输方法
CN110557370A (zh) * 2019-07-30 2019-12-10 视联动力信息技术股份有限公司 一种pamir同步终端信息的方法、***、电子设备及存储介质
CN111857959A (zh) * 2020-07-24 2020-10-30 苏州浪潮智能科技有限公司 一种跨局域网的Docker镜像同步的方法、***、设备及介质
CN113347252A (zh) * 2021-06-01 2021-09-03 山东友大软件科技有限公司 一种基于文件传输的跨网络数据交换***

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6968553B1 (en) * 2001-03-01 2005-11-22 Alcatel Element manager common gateway architecture system and method
CN105007272A (zh) * 2015-07-21 2015-10-28 陈巨根 一种具有安全隔离的信息交换***
CN106131146A (zh) * 2016-06-28 2016-11-16 山东中磁视讯股份有限公司 一种受限网络下的数据同步***与方法
CN107508907A (zh) * 2017-09-13 2017-12-22 北京明朝万达科技股份有限公司 一种数据传输方法及装置
CN108259446A (zh) * 2016-12-29 2018-07-06 航天信息股份有限公司 一种基于隔离网络传输数据的方法及装置

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6968553B1 (en) * 2001-03-01 2005-11-22 Alcatel Element manager common gateway architecture system and method
CN105007272A (zh) * 2015-07-21 2015-10-28 陈巨根 一种具有安全隔离的信息交换***
CN106131146A (zh) * 2016-06-28 2016-11-16 山东中磁视讯股份有限公司 一种受限网络下的数据同步***与方法
CN108259446A (zh) * 2016-12-29 2018-07-06 航天信息股份有限公司 一种基于隔离网络传输数据的方法及装置
CN107508907A (zh) * 2017-09-13 2017-12-22 北京明朝万达科技股份有限公司 一种数据传输方法及装置

Non-Patent Citations (5)

* Cited by examiner, † Cited by third party
Title
北京联信永成科技有限公司: "双向网闸TIPTOP V2.0 万兆视频网闸", 《HTTP://WWW.LXSUCC.CN/ARTICLE20151117155407/ARITCLE135.HTML》 *
吴缇: "基于物理隔离网闸的银行文件安全传输***的设计与实现", 《中国优秀硕士学位论文全文数据库(电子期刊)信息科技辑》 *
崔洋: "《MySQL数据库应用从入门到精通》", 31 January 2016, 中国铁道出版社 *
曹晓亮: "双向网闸TIPTOP V2.0通用", 《HTTP://WWW.LXSUCC.CN/ARTICLE20151117155407/ARITCLE47.HTML》 *
曹晓亮: "双向网闸TIPTOPV2.0 文件交换专用网闸", 《HTTP://WWW.LXSUCC.CN/ARTICLE20151117155407/ARITCLE49.HTML》 *

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110334062A (zh) * 2019-07-11 2019-10-15 深圳物讯科技有限公司 一种基于数据库物理日志的跨公安边界的大数据传输方法
CN110557370A (zh) * 2019-07-30 2019-12-10 视联动力信息技术股份有限公司 一种pamir同步终端信息的方法、***、电子设备及存储介质
CN110557370B (zh) * 2019-07-30 2022-06-17 视联动力信息技术股份有限公司 一种pamir同步终端信息的方法、***、电子设备及存储介质
CN111857959A (zh) * 2020-07-24 2020-10-30 苏州浪潮智能科技有限公司 一种跨局域网的Docker镜像同步的方法、***、设备及介质
CN113347252A (zh) * 2021-06-01 2021-09-03 山东友大软件科技有限公司 一种基于文件传输的跨网络数据交换***

Similar Documents

Publication Publication Date Title
CN109286615A (zh) 一种高效的跨局域网数据同步方法
CN101820449B (zh) 跨安全区应用服务隔离平台
CN102866998A (zh) 一种同步***中集中式密码管理方法和***
CN102915377A (zh) 数据库转换或同步方法及***
CN103324605B (zh) 一种多用户协同编辑的方法、设备及***
CN103713612A (zh) 一种便于个性化定制和扩展的智能家居***解决方案
CN103258149A (zh) 基于云计算的在线阅读***及方法
CN103701913A (zh) 数据同步方法及装置
CN103595727A (zh) 基于交换标识的跨域增量数据交换模型及交换方法
CN103841180A (zh) 一种基于操作指令的网络数据同步方法、装置、终端设备和服务器
CN105281432B (zh) 一种无线测试及数据传输***的监控装置
CN102611574A (zh) Vpn自动配置***及配置方法
CN105117654A (zh) 一种网络物理隔离情况下相同***之间数据同步方法
CN104243198B (zh) 一种基于网络配置协议的网络管理方法和***
CN112152981B (zh) 一种通信方法、节点以及通信***
CN101505300B (zh) 基于Linux下服务器与终端间的数据同步***及其同步方法
CN103259831A (zh) 基于云计算的数字出版***
CN109800009A (zh) 混合型App功能模块的热更新方法及***
CN103986791A (zh) 一种集群内部节点快速时间同步方法
CN109033345A (zh) 用于大科学装置控制***的分布式数据存档参数配置方法
CN102244649B (zh) 一种安全网络间传输数据的方法和资料处理机
CN106649181B (zh) 一种用于钻完井现场同时集成wits数据和witsml数据的方法
CN111031109B (zh) 一种网络安全设备备份及同步管理的方法
CN112256797A (zh) 一种基于MongoDB的公安网与政务网的数据同步***和方法
CN105681105B (zh) 网元配置信息同步方法和装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20190129

RJ01 Rejection of invention patent application after publication