CN109218435B - 一种数据上传方法及*** - Google Patents

一种数据上传方法及*** Download PDF

Info

Publication number
CN109218435B
CN109218435B CN201811165711.9A CN201811165711A CN109218435B CN 109218435 B CN109218435 B CN 109218435B CN 201811165711 A CN201811165711 A CN 201811165711A CN 109218435 B CN109218435 B CN 109218435B
Authority
CN
China
Prior art keywords
data
uploading
cache file
unit
file
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
CN201811165711.9A
Other languages
English (en)
Other versions
CN109218435A (zh
Inventor
杨旭
李喻
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Wuhan Hanyuan Technology Co ltd
Original Assignee
Hubei Hualian Boyuan Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hubei Hualian Boyuan Technology Co ltd filed Critical Hubei Hualian Boyuan Technology Co ltd
Priority to CN201811165711.9A priority Critical patent/CN109218435B/zh
Publication of CN109218435A publication Critical patent/CN109218435A/zh
Application granted granted Critical
Publication of CN109218435B publication Critical patent/CN109218435B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/01Protocols
    • H04L67/06Protocols specially adapted for file transfer, e.g. file transfer protocol [FTP]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/50Network services
    • H04L67/56Provisioning of proxy services
    • H04L67/568Storing data temporarily at an intermediate stage, e.g. caching
    • H04L67/5683Storage of data provided by user terminals, i.e. reverse caching

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Information Transfer Between Computers (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本发明提出了一种数据上传方法及***,所述方法包括:客户端对软件的运行状态进行监听,记录软件生成的缓存文件;每记录一次缓存文件,判断当前缓存文件的特征值是否与预设的缓存文件特征值相匹配,若是则继续进行监听,记录缓存文件;若否,则将缓存文件上传至服务器,所述***包括:运行监听模块、文件判断模块、任务判断模块和文件传输模块,本发明能够让数据上传更加及时,同时能够有效避免数据重复上传,即使是数据在同一时间上传也可以避免重复再次上传,且本发明数据上传方法还能够让未一次传输完成的数据在下一次可以继续进行传输,避免数据没有一次性上传完成导致的重复上传情况。

Description

一种数据上传方法及***
技术领域
本发明涉及计算机技术领域,尤其涉及一种数据上传方法及***。
背景技术
随着信息技术的越来越完善,互联网上的计算机应用程序也越来越普及,用户对应用程序的体验要求也越来越高。应用程序作为软件,其与硬件的兼容以及与***的兼容一直都是被关注的问题,同时为了及时对应用程序进行改进和升级,用户使用数据的获取成为了不可缺少的环节。
目前客户端应用程序数据上传的方式一般是通过与服务器端建立数据传输通道,并将需要传输的数据通过传输通道传递给服务器端,传输过程缓慢,传输数据量冗长。
发明内容
有鉴于此,本发明提出了一种传输效率更高的数据上传方法及***。
本发明的技术方案是这样实现的:本发明提供了一种数据上传方法,步骤包括:
客户端对软件的运行状态进行监听,记录软件生成的缓存文件;
每记录一次缓存文件,判断当前缓存文件的特征值是否与预设的缓存文件特征值相匹配,若是则继续进行监听,记录缓存文件;
若否,则将缓存文件上传至服务器。
在以上技术方案的基础上,优选的,客户端在将缓存文件上传至服务器之前,还包括:
判断同时在上传相同缓存文件的其他上传任务是否已经上传完毕;
若是,则向客户端发送所述缓存文件上传完毕的消息;
若否,则继续将缓存文件上传至服务器。
在以上技术方案的基础上,优选的,所述客户端在发送数据上传请求之前,还包括:
向服务器发送缓存文件的特征值,服务器根据缓存文件的特征值对比判断是否存在其他上传任务上传过具有相同特征值的缓存文件,若是,服务器先对具有该特征值的缓存文件进行遍历,同时服务器向客户端发送遍历结果信息;
若否,服务器向客户端发送执行上传信息,客户端继续上传缓存文件。
在以上技术方案的基础上,优选的,所述遍历结果信息包含缓存文件已上传部分的数据偏移信息以及上传执行信息。
更进一步优选的,还包括,在记录软件生成的缓存文件的同时,获取所述软件运行过程中各个参数的数据;
当所述参数的数据不在其对应的标准数据误差范围内时,获取所述参数的数据,作为缓存文件上传至服务器。
一种数据上传***,包括:
运行监听模块、文件判断模块、任务判断模块和文件传输模块,
所述运行监听模块用于对客户端的软件运行状态进行监听,包括对软件产生的缓存文件和软件的运行参数进行监听;
所述文件判断模块用于判断软件产生的缓存文件以及软件运行的各项参数是否正常;
所述任务判断模块用于判断客户端与服务器之间传输的数据是否存在重复上传,并生成判断信息给文件传输模块;
所述文件传输模块用于在客户端和服务器之间进行文件传输。
在以上技术方案的基础上,优选的,所述运行监听模块包括数据抓取单元和数据模拟单元,所述数据抓取单元用于抓取软件运行过程中产生的文件以及获取各项参数,所述数据模拟单元用于提供预设缓存文件以及软件正常运行产生的各项参数。
在以上技术方案的基础上,优选的,所述文件判断模块包括判断单元、确定单元和输出单元,所述判断单元用于将抓取的文件和参数与模拟的文件和参数进行对比,确定单元根据判断单元的对比结果输出一个判断结果,输出单元将判断结果发送至任务判断模块。
在以上技术方案的基础上,优选的,所述任务判断模块包括特征值计算单元,特征值对比单元和传递单元,所述特征值计算单元用于计算客户端和服务器上的缓存文件的特征值,特征值对比单元用于对比客户端和服务器上的缓存文件的特征值,并将对比结果发送至传递单元,所述传递单元根据对比结果和来自输出单元的判断结果进行总结是否需要传输客户端的缓存文件和参数,并将总结结果发送至传输模块。
在以上技术方案的基础上,优选的,所述文件传输模块包括上传单元、下载单元和命令接收单元,所述命令接收单元接收来自任务判断模块的总结结果,并根据总结结果执行上传和下载,所述上传单元用于将客户端数据上传至服务器,所述下载单元用于将服务器的数据下载至客户端。
本发明的一种数据上传方法及***相对于现有技术具有以下有益效果:
本发明的数据上传方法及***能够让数据上传更加及时,同时能够有效避免数据重复上传,即使是数据在同一时间上传也可以避免重复再次上传,且本发明数据上传方法还能够让未一次传输完成的数据在下一次可以继续进行传输,避免数据没有一次性上传完成导致的重复上传情况。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1为本发明数据上传方法的流程图;
图2为本发明数据上传方法的流程图;
图3为本发明数据上传***的结构框图。
具体实施方式
下面将结合本发明实施方式,对本发明实施方式中的技术方案进行清楚、完整地描述,显然,所描述的实施方式仅仅是本发明一部分实施方式,而不是全部的实施方式。基于本发明中的实施方式,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施方式,都属于本发明保护的范围。
如图1所示,结合图2,本发明的数据上传方法,其具体步骤包括:
客户端对软件的运行状态进行监听,记录软件生成的缓存文件;
每记录一次缓存文件,判断当前缓存文件的特征值是否与预设的缓存文件特征值相匹配,若是则继续进行监听,记录缓存文件;
若否,则将缓存文件上传至服务器。
在具体实施方式中,客户端在将缓存文件上传至服务器之前,还包括:
判断同时在上传相同缓存文件的其他上传任务是否已经上传完毕;
若是,则向客户端发送所述缓存文件上传完毕的消息;
若否,则继续将缓存文件上传至服务器。
在具体实施方式中,客户端在发送数据上传请求之前,还包括:
向服务器发送缓存文件的特征值,服务器根据缓存文件的特征值对比判断是否存在其他上传任务上传过具有相同特征值的缓存文件,若是,服务器先对具有该特征值的缓存文件进行遍历,同时服务器向客户端发送遍历结果信息;
若否,服务器向客户端发送执行上传信息,客户端继续上传缓存文件。
在具体实施方式中,遍历结果信息包含缓存文件已上传部分的数据偏移信息以及上传执行信息。
在具体实施方式中,还包括,在记录软件生成的缓存文件的同时,获取所述软件运行过程中各个参数的数据;
当所述参数的数据不在其对应的标准数据误差范围内时,获取所述参数的数据,作为缓存文件上传至服务器。
如图3所示,一种数据上传***,包括:
运行监听模块、文件判断模块、任务判断模块和文件传输模块;
所述运行监听模块用于对客户端的软件运行状态进行监听,包括对软件产生的缓存文件和软件的运行参数进行监听;
所述文件判断模块用于判断软件产生的缓存文件以及软件运行的各项参数是否正常;
所述任务判断模块用于判断客户端与服务器之间传输的数据是否存在重复上传,并生成判断信息给文件传输模块;
所述文件传输模块用于在客户端和服务器之间进行文件传输。
在具体实施方式中,所述运行监听模块包括数据抓取单元和数据模拟单元,所述数据抓取单元用于抓取软件运行过程中产生的文件以及获取各项参数,所述数据模拟单元用于提供预设缓存文件以及软件正常运行产生的各项参数。
在具体实施方式中,所述文件判断模块包括确定判断、确定单元和输出单元,所述判断单元用于将抓取的文件和参数与模拟的文件和参数进行对比,确定单元根据判断单元的对比结果输出一个判断结果,输出单元将判断结果发送至任务判断模块。
在具体实施方式中,所述任务判断模块包括特征值计算单元,特征值对比单元和传递单元,所述特征值计算单元用于计算客户端和服务器上的缓存文件的特征值,特征值对比单元用于对比客户端和服务器上的缓存文件的特征值,并将对比结果发送至传递单元,所述传递单元根据对比结果和来自输出单元的判断结果进行总结是否需要传输客户端的缓存文件和参数,并将总结结果发送至传输模块。
在具体实施方式中,所述文件传输模块包括上传单元、下载单元和命令接收模块,所述命令接收模块接收来自任务判断模块的总结结果,并根据总结结果执行上传和下载,所述上传单元用于将客户端数据上传至服务器,所述下载单元用于将服务器的数据下载至客户端。
以上所述仅为本发明的较佳实施方式而已,并不用以限制本发明,凡在本发明的精神和原则之内,所作的任何修改、等同替换、改进等,均应包含在本发明的保护范围之内。

Claims (7)

1.一种数据上传方法,其特征在于,包括如下步骤:
客户端对软件的运行状态进行监听,记录软件生成的缓存文件;
每记录一次缓存文件,判断当前缓存文件的特征值是否与预设的缓存文件特征值相匹配,若是则继续进行监听,记录缓存文件;
若否,则将缓存文件上传至服务器;
客户端在将缓存文件上传至服务器之前,还包括:
判断同时在上传相同缓存文件的其他上传任务是否已经上传完毕;
若是,则向客户端发送所述缓存文件上传完毕的消息;
若否,则继续将缓存文件上传至服务器;
所述客户端在发送数据上传请求之前,还包括:
向服务器发送缓存文件的特征值,服务器根据缓存文件的特征值对比判断是否存在其他上传任务上传过具有相同特征值的缓存文件,若是,服务器先对具有该特征值的缓存文件进行遍历,同时服务器向客户端发送遍历结果信息,所述遍历结果信息包含缓存文件已上传部分的数据偏移信息以及上传执行信息;
若否,服务器向客户端发送执行上传信息,客户端继续上传缓存文件。
2.如权利要求1所述的数据上传方法,其特征在于,还包括,在记录软件生成的缓存文件的同时,获取所述软件运行过程中各个参数的数据;
当所述参数的数据不在其对应的标准数据误差范围内时,获取所述参数的数据,作为缓存文件上传至服务器。
3.一种采用权利要求1所述的数据上传方法的***,其特征在于,包括:
运行监听模块、文件判断模块、任务判断模块和文件传输模块,
所述运行监听模块用于对客户端的软件运行状态进行监听,包括对软件产生的缓存文件和软件的运行参数进行监听;
所述文件判断模块用于判断软件产生的缓存文件以及软件运行的各项参数是否正常;
所述任务判断模块用于判断客户端与服务器之间传输的数据是否存在重复上传,并生成判断信息给文件传输模块;
所述文件传输模块用于在客户端和服务器之间进行文件传输。
4.如权利要求3所述的一种数据上传***,其特征在于,所述运行监听模块包括数据抓取单元和数据模拟单元,所述数据抓取单元用于抓取软件运行过程中产生的文件以及获取各项参数,所述数据模拟单元用于提供预设缓存文件以及软件正常运行产生的各项参数。
5.如权利要求4所述的一种数据上传***,其特征在于,所述文件判断模块包括判断单元、确定单元和输出单元,所述判断单元用于将抓取的文件和参数与模拟的文件和参数进行对比,确定单元根据判断单元的对比结果输出一个判断结果,输出单元将判断结果发送至任务判断模块。
6.如权利要求5所述的一种数据上传***,其特征在于,所述任务判断模块包括特征值计算单元,特征值对比单元和传递单元,所述特征值计算单元用于计算客户端和服务器上的缓存文件的特征值,特征值对比单元用于对比客户端和服务器上的缓存文件的特征值,并将对比结果发送至传递单元,所述传递单元根据对比结果和来自输出单元的判断结果进行总结是否需要传输客户端的缓存文件和参数,并将总结结果发送至传输模块。
7.如权利要求6所述的一种数据上传***,其特征在于,所述文件传输模块包括上传单元、下载单元和命令接收单元,所述命令接收单元接收来自任务判断模块的总结结果,并根据总结结果执行上传和下载,所述上传单元用于将客户端数据上传至服务器,所述下载单元用于将服务器的数据下载至客户端。
CN201811165711.9A 2018-09-30 2018-09-30 一种数据上传方法及*** Expired - Fee Related CN109218435B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201811165711.9A CN109218435B (zh) 2018-09-30 2018-09-30 一种数据上传方法及***

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201811165711.9A CN109218435B (zh) 2018-09-30 2018-09-30 一种数据上传方法及***

Publications (2)

Publication Number Publication Date
CN109218435A CN109218435A (zh) 2019-01-15
CN109218435B true CN109218435B (zh) 2021-07-23

Family

ID=64983127

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201811165711.9A Expired - Fee Related CN109218435B (zh) 2018-09-30 2018-09-30 一种数据上传方法及***

Country Status (1)

Country Link
CN (1) CN109218435B (zh)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110300151B (zh) * 2019-05-22 2022-02-11 深圳壹账通智能科技有限公司 数据文件上传方法及***
CN115250269B (zh) * 2022-07-26 2024-02-02 中银金融科技有限公司 一种文件分配方法及装置、存储介质及电子设备

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102096590A (zh) * 2011-02-22 2011-06-15 宇龙计算机通信科技(深圳)有限公司 一种移动终端内应用程序的升级方法、移动终端及服务器
CN103685332A (zh) * 2012-08-31 2014-03-26 腾讯科技(深圳)有限公司 文件上传方法、客户端、服务器及***
CN103856537A (zh) * 2012-12-05 2014-06-11 ***通信集团公司 获取应用程序在终端上运行状态的方法、平台和***
CN108173889A (zh) * 2016-12-07 2018-06-15 北大方正集团有限公司 用户数据处理方法及用户数据处理装置
CN108345524A (zh) * 2017-01-22 2018-07-31 腾讯科技(深圳)有限公司 应用程序监控方法及应用程序监控装置

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20130132523A1 (en) * 2011-05-23 2013-05-23 Thomas Love Systems for the integrated design, operation and modification of databases and associated web applications
CN105376193B (zh) * 2014-08-15 2019-06-04 中国电信股份有限公司 安全事件的智能关联分析方法与装置
CN107948924B (zh) * 2017-10-10 2019-07-16 深圳数位传媒科技有限公司 无线信号指纹信息的校准方法、***、服务器和介质

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102096590A (zh) * 2011-02-22 2011-06-15 宇龙计算机通信科技(深圳)有限公司 一种移动终端内应用程序的升级方法、移动终端及服务器
CN103685332A (zh) * 2012-08-31 2014-03-26 腾讯科技(深圳)有限公司 文件上传方法、客户端、服务器及***
CN103856537A (zh) * 2012-12-05 2014-06-11 ***通信集团公司 获取应用程序在终端上运行状态的方法、平台和***
CN108173889A (zh) * 2016-12-07 2018-06-15 北大方正集团有限公司 用户数据处理方法及用户数据处理装置
CN108345524A (zh) * 2017-01-22 2018-07-31 腾讯科技(深圳)有限公司 应用程序监控方法及应用程序监控装置

Also Published As

Publication number Publication date
CN109218435A (zh) 2019-01-15

Similar Documents

Publication Publication Date Title
US10666522B2 (en) Server side content delivery network quality of service
US7933988B2 (en) Method and system for monitoring performance of a client-server architecture
CN110807128B (zh) 视频的预加载方法、装置、设备和存储介质
CN103795762B (zh) 一种反向代理的测试方法及***
CN109218435B (zh) 一种数据上传方法及***
CN107566477B (zh) 一种在分布式文件***集群中获取文件的方法和装置
EP2767039A2 (en) Quality of user experience testing for video transmissions
CN109002424B (zh) 文件格式转换方法、装置、计算机设备及存储介质
WO2013071747A1 (zh) 一种获取文件的方法和装置
CN111211934B (zh) 集群远程通信测试方法以及***
EP2951954B1 (en) Network server system, client device, computer program product and computer-implemented method
TWI694332B (zh) 資料備份系統以及資料備份方法
CN109194706B (zh) 网络资源拨测方法及终端
CN104539478A (zh) 一种针对即时通讯***的压力测试装置及方法
CN107315672B (zh) 用于监控服务器的方法和装置
CN111158577B (zh) 远程操作处理方法及装置
CN112650755A (zh) 数据存储方法、查询数据的方法、数据库、以及可读介质
WO2017185632A1 (zh) 数据传输的方法及电子设备
KR20170052269A (ko) 멀티미디어 시스템에서 데이터 제공 방법 및 장치
CN103731736A (zh) 智能电视升级的控制方法和装置
CN114461485A (zh) 一种资源加载监测方法、装置、设备及存储介质
WO2017036308A1 (zh) 文件上传方法、访问方法、装置及设备
CN116596065B (zh) 一种梯度计算方法、装置、存储介质、产品及电子设备
CN111352992B (zh) 数据一致性检测方法、装置及服务器
CN115622996A (zh) Web应用中文件传输方法、装置和***

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
TR01 Transfer of patent right

Effective date of registration: 20211202

Address after: 430074 1502-5, building 1, SBI Chuangye street, Dongxin Road, Donghu New Technology Development Zone, Wuhan City, Hubei Province (one site with multiple photos)

Patentee after: Wuhan Hanyuan Technology Co.,Ltd.

Address before: 430074 room 211, Optics Valley venture coffee, 1st floor, Optics Valley capital building, No.1 Minzu Avenue, Donghu New Technology Development Zone, Wuhan City, Hubei Province

Patentee before: HUBEI HUALIAN BOYUAN TECHNOLOGY Co.,Ltd.

TR01 Transfer of patent right
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20210723

Termination date: 20210930

CF01 Termination of patent right due to non-payment of annual fee