CN102916987A - 基于云计算架构的数据采集管理*** - Google Patents

基于云计算架构的数据采集管理*** Download PDF

Info

Publication number
CN102916987A
CN102916987A CN2011102187625A CN201110218762A CN102916987A CN 102916987 A CN102916987 A CN 102916987A CN 2011102187625 A CN2011102187625 A CN 2011102187625A CN 201110218762 A CN201110218762 A CN 201110218762A CN 102916987 A CN102916987 A CN 102916987A
Authority
CN
China
Prior art keywords
data
database server
management system
customer database
terminal
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN2011102187625A
Other languages
English (en)
Inventor
邢韬
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Tianjin Primemobi Technology Co Ltd
Original Assignee
Tianjin Primemobi Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Tianjin Primemobi Technology Co Ltd filed Critical Tianjin Primemobi Technology Co Ltd
Priority to CN2011102187625A priority Critical patent/CN102916987A/zh
Publication of CN102916987A publication Critical patent/CN102916987A/zh
Pending legal-status Critical Current

Links

Images

Landscapes

  • Debugging And Monitoring (AREA)

Abstract

一种基于云计算架构的数据采集管理***,包括:客户数据库服务器,汇总储存本地端客户的相关数据;数据终端,与上述客户数据库服务器之间构成网络连接,从客户数据库服务器接收各种相关信息,数据终端作为数据的发送端;云端服务器,与数据终端建立网络连接,接收从数据终端发出的数据信息,并将接收到的信息储存,由于采用了云端服务器的结构,数据处理都在云端服务器上运行,在上传数据文件的同时向云端服务器发送运行日志,因此在更改不同的客户数据库服务器仍然能够对某一特定时间的数据文件进行查询和调用。

Description

基于云计算架构的数据采集管理***
技术领域
本发明涉及数据传输管理的技术领域,具体说是一种在本地设置数据终端,通过数据终端将客户数据库服务器内的数据信息定时上传至云端服务器进行储存备份的基于云计算架构的数据采集管理***。
背景技术
现有技术中进行数据管理和汇总时,需要将位于本地的客户数据库服务器内的数据信息定时上传至云端服务器,在进行数据传输时通常在本地的客户数据库服务器和ftp服务器上安装数据传输软件,通过软件完成数据的发送和接收。
通过软件上传数据必须要有专人进行软件的运行和操作,在传输数据量较大时,操作者就必须担负巨大的工作量,且工作效率低下,造成数据上传缓慢甚至停滞。
发明内容
本发明要解决的技术问题是提供一种在本地设置数据终端,通过数据终端将客户数据库服务器内的数据信息定时上传至云端服务器进行储存备份的基于云计算架构的数据采集管理***。
本发明为解决公知技术中存在的技术问题所采取的技术方案是:
本发明的基于云计算架构的数据采集管理***,其中的数据采集管理***包括:客户数据库服务器,汇总储存本地端客户的相关数据;数据终端,与上述客户数据库服务器之间构成网络连接,从客户数据库服务器接收各种相关信息,数据终端作为数据的发送端;云端服务器,与数据终端建立网络连接,接收从数据终端发出的数据信息,并将接收到的信息储存,数据采集管理***在工作时,对数据终端进行配置,配置完成后的配置文件上传至云端服务器,数据终端对客户数据库服务器中的数据信息进行读取采集,保存为本地的数据文件,同时建立数据采集管理***的运行日志,数据终端按照规定时间将数据文件和运行日志通过网络向云端服务器上传,云端服务器接收并存储数据文件和运行日志。
本发明还可以采用以下的技术方案:
所述的数据终端定时向客户数据库服务器发送在线信号,检测客户数据库服务器内是否有数据更新,如果检测到数据更新则进行数据采集。
所述的数据终端定时检测客户数据库服务器上是否存在升级文件,如存在升级文件则进行升级下载。
所述的数据终端接收客户数据库服务器的设置信息,根据设定的时间在一段时间内强制数据读取。
本发明具有的优点和积极效果是:
本发明的基于云计算架构的数据采集管理***中,通过数据终端发送信息,***集成在硬件设备中代替在电脑安装客户端软件,实现自动抓取、定时自动上传的功能,大大的减少了操作者的工作量,使工作进度加快,而且也避免了错误操作的可能。由于采用了云端服务器的结构,数据处理都在云端服务器上运行,在上传数据文件的同时向云端服务器发送运行日志,因此在更改不同的客户数据库服务器仍然能够对某一特定时间的数据文件进行查询和调用。
附图说明
图1是本发明的基于云计算架构的数据采集管理***的结构示意图。
具体实施方式
以下参照附图及实施例对本发明进行详细的说明。
图1是本发明的基于云计算架构的数据采集管理***的结构示意图。
如图1所示,本发明的基于云计算架构的数据采集管理***,其中的数据采集管理***包括:客户数据库服务器,汇总储存本地端客户的相关数据;数据终端,与上述客户数据库服务器之间构成网络连接,从客户数据库服务器接收各种相关信息,数据终端作为数据的发送端;云端服务器,与数据终端建立网络连接,接收从数据终端发出的数据信息,并将接收到的信息储存,数据采集管理***在工作时,对数据终端进行配置,配置完成后的配置文件上传至云端服务器,数据终端对客户数据库服务器中的数据信息进行读取采集,保存为本地的数据文件,同时建立数据采集管理***的运行日志,数据终端按照规定时间将数据文件和运行日志通过网络向云端服务器上传,云端服务器接收并存储数据文件和运行日志。
所述的数据终端定时向客户数据库服务器发送在线信号,检测客户数据库服务器内是否有数据更新,如果检测到数据更新则进行数据采集。
所述的数据终端定时检测客户数据库服务器上是否存在升级文件,如存在升级文件则进行升级下载。
所述的数据终端接收客户数据库服务器的设置信息,根据设定的时间在一段时间内强制数据读取。
数据终端连接客户数据服务器,在设定的时间点根据时间戳读取前一日或前几日的进销存数据,完成读数后在设定的时间点上传数据,根据用户的上网环境不同,可通过以太网和移动网络上传数据。
数据终端的功能包括取数机制、上传机制、配置管理、日志管理、状态管理、在线升级:
取数机制:设备通过软件对不同数据库进行操作完成读取,并保存为“本地.txt”的文件,每月刷新一次。可以接受服务器端指令,强制某个时间段取数。
上传机制:网络设定后,通过与后台协议传输.txt文件的数据。
配置管理:
1.本地配置:用户可通过计算机USB连接设备USB接口,设备自动打开配置页面进行配置
2.远程配置:设备设置WEB SERVER用户可以在远程登录页面的方式配置。
3.配置保存及上传:第一次配置完成后,配置文件将上传服务器。以后每次配置后都将上传服务器。因故障丢失配置时向服务器请求恢复配置。
4.配置设置:配置设置错误时具备查错功能。
日志管理:记录***运行的日志、错误日志。日志可与数据同步上传或定时上传日志,也可计算机通过USB浏览本地日志,但不可修改。
状态管理:向服务器发送在线信号(心跳机制),查看是否有升级文件。
在线升级:检测服务器存在升级文件即下载文件升级。
本地升级:用户可通过PC端升级软件对设备进行升级。
本发明的基于云计算架构的数据采集管理***中,通过数据终端发送信息,***集成在硬件设备中代替在电脑安装客户端软件,实现自动抓取、定时自动上传的功能,大大的减少了操作者的工作量,使工作进度加快,而且也避免了错误操作的可能。由于采用了云端服务器的结构,数据处理都在云端服务器上运行,在上传数据文件的同时向云端服务器发送运行日志,因此在更改不同的客户数据库服务器仍然能够对某一特定时间的数据文件进行查询和调用。
以上所述,仅是本发明的较佳实施例而已,并非对本发明作任何形式上的限制,虽然本发明已以较佳实施例公开如上,然而,并非用以限定本发明,任何熟悉本专业的技术人员,在不脱离本发明技术方案范围内,当然会利用揭示的技术内容作出些许更动或修饰,成为等同变化的等效实施例,但凡是未脱离本发明技术方案的内容,依据本发明的技术实质对以上实施例所作的任何简单修改、等同变化与修饰,均属于本发明技术方案的范围内。

Claims (4)

1.一种基于云计算架构的数据采集管理***,其特征在于:所述的数据采集管理***包括:客户数据库服务器,汇总储存本地端客户的相关数据;数据终端,与上述客户数据库服务器之间构成网络连接,从客户数据库服务器接收各种相关信息,数据终端作为数据的发送端;云端服务器,与数据终端建立网络连接,接收从数据终端发出的数据信息,并将接收到的信息储存,数据采集管理***在工作时,对数据终端进行配置,配置完成后的配置文件上传至云端服务器,数据终端对客户数据库服务器中的数据信息进行读取采集,保存为本地的数据文件,同时建立数据采集管理***的运行日志,数据终端按照规定时间将数据文件和运行日志通过网络向云端服务器上传,云端服务器接收并存储数据文件和运行日志。
2.根据权利要求1所述的基于云计算架构的数据采集管理***,其特征在于:数据终端定时向客户数据库服务器发送在线信号,检测客户数据库服务器内是否有数据更新,如果检测到数据更新则进行数据采集。
3.根据权利要求1所述的基于云计算架构的数据采集管理***,其特征在于:数据终端定时检测客户数据库服务器上是否存在升级文件,如存在升级文件则进行升级下载。
4.根据权利要求1所述的基于云计算架构的数据采集管理***,其特征在于:数据终端接收客户数据库服务器的设置信息,根据设定的时间在一段时间内强制数据读取。
CN2011102187625A 2011-08-02 2011-08-02 基于云计算架构的数据采集管理*** Pending CN102916987A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN2011102187625A CN102916987A (zh) 2011-08-02 2011-08-02 基于云计算架构的数据采集管理***

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN2011102187625A CN102916987A (zh) 2011-08-02 2011-08-02 基于云计算架构的数据采集管理***

Publications (1)

Publication Number Publication Date
CN102916987A true CN102916987A (zh) 2013-02-06

Family

ID=47615221

Family Applications (1)

Application Number Title Priority Date Filing Date
CN2011102187625A Pending CN102916987A (zh) 2011-08-02 2011-08-02 基于云计算架构的数据采集管理***

Country Status (1)

Country Link
CN (1) CN102916987A (zh)

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103559256A (zh) * 2013-11-01 2014-02-05 百度在线网络技术(北京)有限公司 通过头戴式设备管理多媒体日志的方法、装置和***
CN103577577A (zh) * 2013-11-06 2014-02-12 北京京东尚科信息技术有限公司 一种保存数据库日志的方法、装置及***
CN104219280A (zh) * 2014-07-01 2014-12-17 武汉众联信息技术股份有限公司 一种智能应用数据传输通道
CN106021255A (zh) * 2015-12-28 2016-10-12 买燕萍 云端皮脊纹数据收集方法及数据库管理
CN106972950A (zh) * 2017-02-20 2017-07-21 上海赛印信息技术股份有限公司 质量信息服务端及包含其的质量信息管理***
CN109143017A (zh) * 2018-07-31 2019-01-04 成都天衡智造科技有限公司 一种半导体行业生产测试数据处理方法
CN112187546A (zh) * 2020-09-30 2021-01-05 福建星网视易信息***有限公司 一种基于物联网的数据管理方法及***

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1612542A (zh) * 2003-10-30 2005-05-04 乐金电子(天津)电器有限公司 家用电器的远程控制***
CN1694427A (zh) * 2005-04-11 2005-11-09 深圳市天路软件开发有限公司 异地数据同步的传输方法及***
CN101854367A (zh) * 2010-06-13 2010-10-06 用友软件股份有限公司 用于服务器端监控客户端的方法和***
CN101969455A (zh) * 2010-09-13 2011-02-09 山东省农业科学院科技信息工程技术研究中心 一种基于智能手机的小麦生产风险信息采集***和方法
CN102063756A (zh) * 2010-12-24 2011-05-18 青岛普加智能信息有限公司 基于物联网的云计算队列处理***
CN201904809U (zh) * 2010-12-20 2011-07-20 惠州紫旭科技有限公司 基于云计算的数据服务***

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1612542A (zh) * 2003-10-30 2005-05-04 乐金电子(天津)电器有限公司 家用电器的远程控制***
CN1694427A (zh) * 2005-04-11 2005-11-09 深圳市天路软件开发有限公司 异地数据同步的传输方法及***
CN101854367A (zh) * 2010-06-13 2010-10-06 用友软件股份有限公司 用于服务器端监控客户端的方法和***
CN101969455A (zh) * 2010-09-13 2011-02-09 山东省农业科学院科技信息工程技术研究中心 一种基于智能手机的小麦生产风险信息采集***和方法
CN201904809U (zh) * 2010-12-20 2011-07-20 惠州紫旭科技有限公司 基于云计算的数据服务***
CN102063756A (zh) * 2010-12-24 2011-05-18 青岛普加智能信息有限公司 基于物联网的云计算队列处理***

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103559256A (zh) * 2013-11-01 2014-02-05 百度在线网络技术(北京)有限公司 通过头戴式设备管理多媒体日志的方法、装置和***
CN103559256B (zh) * 2013-11-01 2017-10-31 百度在线网络技术(北京)有限公司 通过头戴式设备管理多媒体日志的方法、装置和***
CN103577577A (zh) * 2013-11-06 2014-02-12 北京京东尚科信息技术有限公司 一种保存数据库日志的方法、装置及***
CN104219280A (zh) * 2014-07-01 2014-12-17 武汉众联信息技术股份有限公司 一种智能应用数据传输通道
CN104219280B (zh) * 2014-07-01 2018-03-16 武汉众廉科技有限公司 一种智能应用数据传输通道
CN106021255A (zh) * 2015-12-28 2016-10-12 买燕萍 云端皮脊纹数据收集方法及数据库管理
CN106972950A (zh) * 2017-02-20 2017-07-21 上海赛印信息技术股份有限公司 质量信息服务端及包含其的质量信息管理***
CN109143017A (zh) * 2018-07-31 2019-01-04 成都天衡智造科技有限公司 一种半导体行业生产测试数据处理方法
CN112187546A (zh) * 2020-09-30 2021-01-05 福建星网视易信息***有限公司 一种基于物联网的数据管理方法及***

Similar Documents

Publication Publication Date Title
CN102916987A (zh) 基于云计算架构的数据采集管理***
CN103064731A (zh) 一种提高消息队列***性能的装置及其方法
CN102891873A (zh) 一种存储日志数据的方法及日志数据存储***
CN103326896B (zh) 一种收集用户在互联网上产生的信息数据的***及方法
CN109547240B (zh) 基于边缘计算的智能设备以及接入与设备的解析方法
CN102385582A (zh) 生产测试数据处理方法、服务器及***
CN104104707A (zh) 网页数据更新方法、终端、缓存服务器及***
CN105323640A (zh) 一种基于互联网实现智能电视售后服务的方法、***和设备
CN103067230A (zh) 一种通过植入监控代码实现对http服务监控的方法
CN109361525B (zh) 重启分布式部署多服务的方法、装置、控制终端及介质
CN101360127A (zh) 文件更新方法及传输***
CN107357571A (zh) 设备组件程序的维护方法、***及组件服务器
CN101350834A (zh) 一种信息采集和信息上传异步进行的信息采集***
CN101351002A (zh) 一种自动上报软件***运行异常的***和方法
CN112565415A (zh) 一种基于云边协同的跨地域资源纳管***和纳管方法
CN202268912U (zh) 基于云计算架构的数据管理***
CN104657841A (zh) 快件投递方法、投递处理方法及快递柜终端和服务***
CN102480489A (zh) 一种用于分布式环境下的日志记录方法和设备
CN103905441A (zh) 数据获取方法及装置
CN104253868A (zh) 一种云存储数据同步的方法及装置
CN112764696A (zh) 一种云打印服务器、远程打印设备的智能打印方法及***
CN110019539A (zh) 一种数据仓库的数据同步的方法和装置
CN102646072B (zh) 数据管理方法
CN114490272A (zh) 数据处理方法及装置、电子设备和计算机可读存储介质
CN112838935A (zh) 一种电子数据交换方法和***

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
DD01 Delivery of document by public notice

Addressee: Tianjin Primemobi Technology Co., Ltd.

Document name: Notification of Patent Invention Entering into Substantive Examination Stage

C02 Deemed withdrawal of patent application after publication (patent law 2001)
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20130206