CN109962980A - 一种基于物联网的数据上传方法、装置、设备及介质 - Google Patents
一种基于物联网的数据上传方法、装置、设备及介质 Download PDFInfo
- Publication number
- CN109962980A CN109962980A CN201910213614.0A CN201910213614A CN109962980A CN 109962980 A CN109962980 A CN 109962980A CN 201910213614 A CN201910213614 A CN 201910213614A CN 109962980 A CN109962980 A CN 109962980A
- Authority
- CN
- China
- Prior art keywords
- data
- persistant
- transmitted
- collection point
- predetermined period
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/01—Protocols
- H04L67/02—Protocols based on web technology, e.g. hypertext transfer protocol [HTTP]
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/01—Protocols
- H04L67/10—Protocols in which an application is distributed across nodes in the network
- H04L67/1095—Replication or mirroring of data, e.g. scheduling or transport for data synchronisation between network nodes
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/01—Protocols
- H04L67/12—Protocols specially adapted for proprietary or special-purpose networking environments, e.g. medical networks, sensor networks, networks in vehicles or remote metering networks
Landscapes
- Engineering & Computer Science (AREA)
- Computer Networks & Wireless Communication (AREA)
- Signal Processing (AREA)
- Health & Medical Sciences (AREA)
- Computing Systems (AREA)
- General Health & Medical Sciences (AREA)
- Medical Informatics (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本发明提供了一种基于物联网的数据上传方法，通过初始配置文件对每个采集点的实时采集值和上一时刻的采集值进行对比，能够确定发生变化的采集点和未发生变化的采集点，通过上传发生数据变化的采集点所有属性对应的数据和未发生数据变化的采集点的标识和数据状态，能够减少上传数据包的大小，以减少传输量，提升服务器的处理效率，降低运营成本。并且，通过上述预设周期内存储的数据，能够将一个周期内每个时刻的变化数据均上传至管理平台服务器，使用户获得更加全面的采集值。
Description
技术领域
本发明涉及数据上传技术领域，具体涉及一种基于物联网的数据上传方法、装置、设备及介质。
背景技术
现有技术中，在数据上传过程中，需要上传的数据以xml或json的数据结构序列化为字节流后通过http协议或TCP协议以不同的数据传输方式传输至服务器，服务器接收到数据后将数据反序列化为数据对象，进行业务处理或存储。
1.1数据传输方式
定期上传，设置物联网终端设备的数据上传周期，在每个周期将当前的最新数据发送至服务器。
订阅方式，服务器向物联网终端设备订阅数据变化，一旦数据发送变化，则将最新的数据发送至服务器。
1.2数据结构
XML：扩展标记语言(Extensible Markup Language,XML)，用于标记电子文件使其具有结构性的标记语言，可以用来标记数据、定义数据类型，是一种允许用户对自己的标记语言进行定义的源语言。XML使用DTD(document type definition)文档类型定义来组织数据；格式统一，跨平台和语言，早已成为业界公认的标准。
XML是标准通用标记语言(SGML)的子集，非常适合Web传输。XML提供统一的方法来描述和交换独立于应用程序或供应商的结构化数据。
JSON：JSON(JavaScript Object Notation)一种轻量级的数据交换格式，具有良好的可读和便于快速编写的特性。可在不同平台之间进行数据交换。JSON采用兼容性很高的、完全独立于语言文本格式，同时也具备类似于C语言的习惯(包括C,C++,C#,Java,JavaScript,Perl,Python等)体系的行为。这些特性使JSON成为理想的数据交换语言。
JSON基于JavaScript Programming Language,Standard ECMA-262 3rdEdition-December 1999的一个子集。
1.3数据传输协议
http协议传输：HTTP是Hyper Text Transfer Protocol(超文本传输协议)的缩写。它的发展是万维网协会(World Wide Web Consortium)和Internet工作小组IETF(Internet Engineering Task Force)合作的结果，(他们)最终发布了一系列的RFC，RFC1945定义了HTTP/1.0版本。其中最著名的就是RFC 2616。RFC 2616定义了今天普遍使用的一个版本——HTTP 1.1。
HTTP协议(HyperText Transfer Protocol，超文本传输协议)是用于从WWW服务器传输超文本到本地浏览器的传送协议。它可以使浏览器更加高效，使网络传输减少。它不仅保证计算机正确快速地传输超文本文档，还确定传输文档中的哪一部分，以及哪部分内容首先显示(如文本先于图形)等。
HTTP是一个应用层协议，由请求和响应构成，是一个标准的客户端服务器模型。HTTP是一个无状态的协议。
TCP协议传输：TCP(Transmission Control Protocol传输控制协议)是一种面向连接的、可靠的、基于字节流的传输层通信协议，由IETF的RFC793定义。
现有技术中的传输方式的缺点为：
a)周期内数据的变化无法上传，每一个周期仅能上传一个时刻的数据。
b)重复上传数据，数据变化并不频繁时，始终会将同一份数据上传至服务器。
订阅方式的缺点：
a)数据频繁变化，则会频繁将数据发送至服务器，导致服务器负荷增大，数据流量增加，运营成本直线上升。
b)无法准确的判断设备故障和数据未发生任何变化这两种情况。
发明内容
针对现有技术中的缺陷，本发明提供一种基于物联网的数据上传方法、装置、设备及介质，能够减少上传数据包的大小，以减少传输量，提升服务器的处理效率，降低运营成本。
第一方面，本发明提供了一种基于物联网的数据上传方法，包括：
初始化过程：
连接管理平台服务器；向所述管理平台服务器请求最新配置文件；根据所述最新配置文件更新本地配置文件；对更新后的本地配置文件进行初始化，获得初始配置文件；
预处理过程：
根据各个采集点的属性建立缓存数据表格和持久数据表格；
实时采集每个采集点的当前采集值，将所述当前采集值更新至所述缓存数据表格中的第一列表中；将上一时刻的采集值缓存至所述缓存数据表格的第二列表中；
根据所述初始配置文件，实时对同一采集点的所述第一列表中的数据与所述第二列表中的数据进行对比；
若数据发生变化，则将相应采集点所有属性对应的数据均缓存至所述持久数据表格；若数据没有发生变化，则更新相应采集点的数据状态，并将相应采集点的标识和数据状态缓存至所述持久数据表格；
基于预设周期，对所述持久数据表格中存储的所述预设周期内的数据进行序列化，获得待传输数据；
数据上传过程：
将所述待传输数据上传至所述管理平台服务器。
可选的，在初始化过程中的连接管理平台服务器的步骤之后，还包括：
判断是否连接成功；
若连接失败，则加载本地配置文件；对所述本地配置文件进行初始化，获得初始配置文件；
若连接成功，则执行所述向所述管理平台服务器请求最新配置文件步骤；判断是否请求成功；若请求成功，则执行根据所述最新配置文件更新本地配置文件的步骤；
若请求失败，则加载本地配置文件；对所述本地配置文件进行初始化，获得初始配置文件。
可选的，在所述基于预设周期，对所述持久数据表格中存储的所述预设周期内的数据进行序列化，获得待传输数据的步骤之后，还包括：
将所述待传输数据存储至持久化存储空间；
所述将所述待传输数据上传至所述管理平台服务器，包括：
从所述持久化存储空间，将所述待传输数据上传至所述管理平台服务器。
可选的，在所述基于预设周期，对所述持久数据表格中存储的所述预设周期内的数据进行序列化，获得待传输数据的步骤之前，还包括：
基于预设周期，对所述持久数据表格中存储的所述预设周期内的数据按类别进行分类存储；
设置所述持久数据表格的标准时间；
根据所述标准时间，计算每个分类中每个数据的时间戳对应的时间差，以所述时间差记录每个数据的采集时间，获得新持久数据表格；
所述基于预设周期，对所述持久数据表格中存储的所述预设周期内的数据进行序列化，获得待传输数据，包括：
对所述新持久数据表格进行序列化，获得待传输数据。
可选的，所述初始配置文件，包括：对部分或全部数据进行对比参数设置的初始配置文件。
可选的，在所述将所述待传输数据上传至所述管理平台服务器的步骤之后，还包括：
判断是否接收到所述管理平台服务器返回的接收成功信息；
若是，则删除所述待传输数据；
若否，则在下一个周期继续上传所述待传输数据。
可选的，在预处理过程中，初始时刻采集的数据，默认为数据是发生变化的。
第二方面，本发明提供了一种基于物联网的数据上传装置，包括：初始化模块、预处理模块和上传模块；
所述初始化模块，包括：
连接单元，用于连接管理平台服务器；
文件请求单元，用于向所述管理平台服务器请求最新配置文件；
文件更新单元，用于根据所述最新配置文件更新本地配置文件；
初始化单元，用于对更新后的本地配置文件进行初始化，获得初始配置文件；
所述预处理模块，包括：
表格建立单元，用于根据各个采集点的属性建立缓存数据表格和持久数据表格；
数据采集单元，用于实时采集每个采集点的当前采集值，将所述当前采集值更新至所述缓存数据表格中的第一列表中；将上一时刻的采集值缓存至所述缓存数据表格的第二列表中；
数据对比单元，用于根据所述初始配置文件，实时对同一采集点的所述第一列表中的数据与所述第二列表中的数据进行对比；
变化数据缓存单元，用于将所述数据对比单元中数据发生变化的采集点所有属性对应的数据均缓存至所述持久数据表格；更新所述数据对比单元中数据没有发生变化的采集点的数据状态，并将相应采集点的标识和数据状态缓存至所述持久数据表格；
序列化单元，用于基于预设周期，对所述持久数据表格中存储的所述预设周期内的数据进行序列化，获得待传输数据；
所述上传模块，用于将所述待传输数据上传至所述管理平台服务器。
第三方面，本发明提供了一种基于物联网的数据上传设备，包括处理器、输入设备、输出设备和存储器，所述处理器、输入设备、输出设备和存储器相互连接，其中，所述存储器用于存储计算机程序，所述计算机程序包括程序指令，所述处理器被配置用于调用所述程序指令，执行如第一方面提供的一种基于物联网的数据上传方法。
第四方面，本发明提供了一种计算机可读存储介质，所述计算机可读存储介质存储有计算机程序，所述计算机程序包括程序指令，所述程序指令当被处理器执行时使所述处理器执行如第一方面提供的一种基于物联网的数据上传方法。
本发明通过初始配置文件对每个采集点的实时采集值和上一时刻的采集值进行对比，能够确定发生变化的采集点和未发生变化的采集点，通过上传发生数据变化的采集点所有属性对应的数据和未发生数据变化的采集点的标识和数据状态，能够减少上传数据包的大小，以减少传输量，提升服务器的处理效率，降低运营成本。并且，通过上述预设周期内存储的数据，能够将一个周期内每个时刻的变化数据均上传至管理平台服务器，使用户获得更加全面的采集值。
本发明提供的一种基于物联网的数据上传装置、一种计算机可读存储介质和一种基于物联网的数据上传设备，与上述一种基于物联网的数据上传方法出于相同的发明构思，具有相同的有益效果。
附图说明
为了更清楚地说明本发明具体实施方式或现有技术中的技术方案，下面将对具体实施方式或现有技术描述中所需要使用的附图作简单地介绍。在所有附图中，类似的元件或部分一般由类似的附图标记标识。附图中，各元件或部分并不一定按照实际的比例绘制。
图1为本发明实施例提供的一种基于物联网的数据上传方法的流程图；
图2为本发明实施例提供的一种基于物联网的数据上传方法的预处理机制流程图；
图3为本发明实施例提供的一种基于物联网的数据上传装置的示意图；
图4为本发明实施例提供的一种基于物联网的数据上传设备的示意图。
具体实施方式
下面将结合附图对本发明技术方案的实施例进行详细的描述。以下实施例仅用于更加清楚地说明本发明的技术方案，因此只是作为示例，而不能以此来限制本发明的保护范围。
需要注意的是，除非另有说明，本申请使用的技术术语或者科学术语应当为本发明所属领域技术人员所理解的通常意义。
本发明提供了一种基于物联网的数据上传方法、装置、设备及介质。下面结合附图对本发明的实施例进行说明。
请参考图1，图1为本发明具体实施例提供的一种基于物联网的数据上传方法的流程图，本实施例提供的一种基于物联网的数据上传方法，包括：
步骤S1：初始化过程：
步骤S11：连接管理平台服务器；步骤S12：向所述管理平台服务器请求最新配置文件；步骤S13：根据所述最新配置文件更新本地配置文件；步骤S14：对更新后的本地配置文件进行初始化，获得初始配置文件。
随着物联网的飞速发展，物联网应用被广泛应用于农业、交通、医疗、物流、工业、安防、家居等领域。而无数的物联网终端设备，所采集到的数据(传感器产生的数据、设备运行信息、等等)，都需要通过网络将数据传输至服务器。
本发明的执行主体为物联网终端设备，当物联网终端设备采集到采集点数据后，需要通过互联网将该数据上传至管理平台服务器。在上传之前，需要连接管理平台服务器，然后，再判断是否连接成功；若连接失败，则加载本地配置文件；对所述本地配置文件进行初始化，获得初始配置文件。
若连接成功，则向所述管理平台服务器请求最新配置文件；判断是否请求成功；若请求成功，则根据所述最新配置文件更新本地配置文件；若请求失败，则加载本地配置文件；对所述本地配置文件进行初始化，获得初始配置文件。
当连接管理平台服务器不成功，或向管理平台服务器请求最新配置文件不成功时，利用本地存储的本地配置文件进行后续处理，能够保证数据及时处理，进而及时上传。
通过请求最新配置文件，能够使物联网终端设备实时同步服务器端的最新配置文件，能够立即被应用于当前数据，时效性较高。
步骤S2：预处理过程：
初始化后，需要对数据进行预处理，预处理的具体过程为：
步骤S21：根据各个采集点的属性建立缓存数据表格和持久数据表格。
采集点是指固定的一类值。例如，温度、压力等采集点。
采集点的属性可以包括：标识、当前采集值、数据状态、上一时刻采集值和时间戳等。
缓存数据表格是指在内存中缓存的时刻更新的数据表格。
持久数据表格是指在内存中缓存的一个时间周期的数据表格。
步骤S22：实时采集每个采集点的当前采集值，将所述当前采集值更新至所述缓存数据表格中的第一列表中；将上一时刻的采集值缓存至所述缓存数据表格的第二列表中。
缓存数据表格包括：采集点标识、上一时刻的采集值、当前采集值、时间戳、数据状态等维度的数据。
当采集到最新的数据后，删除上上一次采集的数据，只保留当前采集值和上一时刻的采集值，这样能够减少存储空间。
步骤S23：根据所述初始配置文件，实时同一采集点的对所述第一列表中的数据与所述第二列表中的数据进行对比。
第一列表中的数据为各个采集点的当前采集值，第二列表中的数据为上一时刻的采集值。将当前采集值和上一时刻的采集值进行对比，判断数据是否发生变化。其中，在对比时，可以根据初始配置文件进行对比。
初始配置文件中存储了对比规则，对比规则规定了：需要进行对比的所有采集点的标识、数据的差值范围、数据没有发生变化的条件等。
数据的差值范围是指若两个数据的差值超过差值范围，则表明数据变更；若没有超过该差值范围，则表明数据没有变更。对于不同的采集点可以设置不同的差值范围。
数据没有发生变化的条件可以是：若数据在一定时间内未发生变化，则表示该采集点未发生数据变化。例如，若5秒内未发生变化，则表示该采集点未发生数据变化。
当最新配置文件设置在服务器中时，管理人员可以根据需要设置最新配置文件中的对比规则，这样，可以灵活设置数据比对规则，并能细化到对单个数据点进行个性化设置，以达到减少传输量，提升服务器处理效率，降低运营成本。
步骤S24：若数据发生变化，则将相应采集点所有属性对应的数据均缓存至所述持久数据表格；若数据没有发生变化，则更新相应采集点的数据状态，并将相应采集点的标识和数据状态缓存至所述持久数据表格。
持久数据表格包括：采集点标识、上一时刻的采集值、当前采集值、时间戳、数据状态等维度的数据。持久数据表格中存储的是：发生变化的数据和未发生变化的数据。对于没有发生变化的数据，需要更新相应采集点的数据状态。
发生变化的数据包括采集点标识、上一时刻的采集值、当前采集值、时间戳、数据状态等所有维度的数据；而未发生变化的数据包括：采集点标识、数据状态、时间戳三个维度的数据。通过这种方式能够减少上传数据包的大小。对于未发生变化的数据，可通过周期来判断是否发生变化，周期由初始配置文件规定。
例如，每间隔1s对已变化数据和最新数据点列表中状态为未发生变化的数据进行序列化，状态为未发生数据变化的点，在序列化时仅对数据的标识进行序列化，减少传输量。
对于初始时刻采集的数据，由于初始时刻缓存数据表格中的上一时刻的采集值为空，因此，默认初始时刻的采集值是发生变化的。这个规则可以在初始配置文件中进行设定。这样，能够保存初始时刻的采集值。
由于缓存数据表格是实时更新的，而持久数据表格存储有一个周期内的数据，因此，当密集采集数据时，数据产生的毫秒级别的变化仍然会完整的被记录在持久数据表格中，便于工作人员对数据的观察。
步骤S25：基于预设周期，对所述持久数据表格中存储的所述预设周期内的数据进行序列化，获得待传输数据。
在对数据进行序列化之前，还包括：对数据进行整理，整理的过程为：基于预设周期，对所述持久数据表格中存储的所述预设周期内的数据按类别进行分类存储；设置所述持久数据表格的标准时间；根据所述标准时间，计算每个分类中每个数据的时间戳对应的时间差，以所述时间差记录每个数据的采集时间，获得新持久数据表格。
其中，按类别进行分类存储是指按采集点进行分类存储。例如，压力采集点的数据存储在一起，温度采集点的数据存储在一起。
设置该周期内的持久数据表格的标准时间，根据标准时间，计算每个时间戳对应的时间差，以时间差记录每个数据的采集时间，这样，在向服务器上传数据时，能够减小上传的数据包大小，提高上传效率。
在上传过程中，上传数据包需要携带该标准时间，以便服务器根据该标准时间反推出时间戳。
由于数据在上传过程中，需要以一定格式进行上传，因此，需要对新持久数据表格进行序列化，获得符合上传格式的待传输数据。例如，采用*** protocol buffer的方式将数据序列化为字节数组。
在本发明中，在对所述持久数据表格中存储的所述预设周期内的数据进行序列化之后，还包括：将所述待传输数据存储至持久化存储空间；所述将所述待传输数据上传至所述管理平台服务器，包括：从所述持久化存储空间，将所述待传输数据上传至所述管理平台服务器。
一个周期结束时，将待传输数据存储至持久化存储空间。持久化存储空间可以为硬盘等。通过将待传输数据存储至持久化存储空间，能够最大程度的保证数据不丢失。例如，保存毫秒变化的数据。
将待传输数据存储至持久数据表格之后，就可以从内存中删除持久数据表格中的数据，进行下一个周期内的数据存储。
步骤S3：数据上传过程：
步骤S31：将所述待传输数据上传至所述管理平台服务器。
在将待传输数据成功上传至管理平台服务器后，管理平台服务器可以向客户端发送接收成功信息，因此，在上传后，需要判断是否接收到管理平台服务器返回的接收成功信息，若是，则表明上传成功，删除本地存储的待传输数据；若否，则表明上传失败，则在下一个周期继续上传该待传输数据。
在上传数据时，可以规定每次上传数据包的大小，若超过该大小，则从中随机抽取数据进行上传，若没有超过，则全部上传。
通过本发明提供的方法，能够达到以下效果：
1、合理降低数据传输量，合理降低对带宽的占用。
2、主动合理的降低对服务器的请求，提升服务器的处理效率。
3、提供毫秒数据采集上传方法。
4、降低数据丢失风险。
5、提升数据传输过程中的安全能力。
本发明可以应用于以下场景：工业现场需要将生产数据发送至服务器端，为管理平台提供生产管理数据。采集n个仪表等相关的数据，并且现场的网络状况比较差。但需要尽量的降低对服务器的请求、合理的缩小每次请求所传输的数据量，以及准确的将工业现场数据的每次变化的值都传输至服务器。
基于与上述一种基于物联网的数据上传方法相同的发明构思，与之相对应的，本发明实施例还提供了一种基于物联网的数据上传装置，如图3所示。由于装置实施例基本相似与方法实施例，所以描述得比较简单，相关之处参见方法实施例的部分说明即可。
本发明提供的一种基于物联网的数据上传装置，包括：初始化模块100、预处理模块200和上传模块300；
所述初始化模块100，包括：
连接单元101，用于连接管理平台服务器；
文件请求单元102，用于向所述管理平台服务器请求最新配置文件；
文件更新单元103，用于根据所述最新配置文件更新本地配置文件；
初始化单元104，用于对更新后的本地配置文件进行初始化，获得初始配置文件；
所述预处理模块200，包括：
表格建立单元201，用于根据各个采集点的属性建立缓存数据表格和持久数据表格；
数据采集单元202，用于实时采集每个采集点的当前采集值，将所述当前采集值更新至所述缓存数据表格中的第一列表中；将上一时刻的采集值缓存至所述缓存数据表格的第二列表中；
数据对比单元203，用于根据所述初始配置文件，实时同一采集点的对所述第一列表中的数据与所述第二列表中的数据进行对比；
变化数据缓存单元204，用于将所述数据对比单元中数据发生变化的采集点所有属性对应的数据均缓存至所述持久数据表格；更新所述数据对比单元中数据没有发生变化的采集点的数据状态，并将相应采集点的标识和数据状态缓存至所述持久数据表格；
序列化单元205，用于基于预设周期，对所述持久数据表格中存储的所述预设周期内的数据进行序列化，获得待传输数据；
所述上传模块300，包括：
上传单元301，用于将所述待传输数据上传至所述管理平台服务器。
在本发明提供的一个具体实施例中，所述初始化模块100，还包括：
连接判断单元，用于判断是否连接成功；
本地加载单元，用于当所述连接判断单元判断的结果为连接失败，则加载本地配置文件；
本地初始化单元，用于对所述本地配置文件进行初始化，获得初始配置文件；
当所述连接判断单元判断的结果为连接成功，则执行所述文件请求单元103的过程；
请求判断单元，用于判断是否请求成功；
当所述请求判断单元的判断结果为：请求成功，则执行文件更新单元103的过程；
当所述请求判断单元的判断结果为：请求失败，则执行本地加载单元和本地初始化单元的过程。
在本发明提供的一个具体实施例中，预处理模块200，还包括：
持久化单元，用于将所述待传输数据存储至持久化存储空间；
所述上传模块300，具体用于：
从所述持久化存储空间，将所述待传输数据上传至所述管理平台服务器。
在本发明提供的一个具体实施例中，预处理模块200，还包括：
分类存储单元，用于基于预设周期，对所述持久数据表格中存储的所述预设周期内的数据按类别进行分类存储；
标准时间设置单元，用于设置所述持久数据表格的标准时间；
时间差计算单元，用于根据所述标准时间，计算每个分类中每个数据的时间戳对应的时间差，以所述时间差记录每个数据的采集时间，获得新持久数据表格；
所述序列化单元205，具体用于：
对所述新持久数据表格进行序列化，获得待传输数据。
在本发明提供的一个具体实施例中，所述初始配置文件，包括：对部分或全部数据进行对比参数设置的初始配置文件。
在本发明提供的一个具体实施例中，上传模块300，还包括：
上传判断单元，用于判断是否接收到所述管理平台服务器返回的接收成功信息；
删除单元，用于当所述上传判断单元的判断结果为接收成功，则删除所述待传输数据；
重新上传单元，用于当所述上传判断单元的判断结果为接收失败，则在下一个周期继续上传所述待传输数据。
在本发明提供的一个具体实施例中，在预处理过程中，初始时刻采集的数据，默认为数据是发生变化的。
以上，为本发明提供的一种基于物联网的数据上传装置。
进一步地，在上述实施例所提供的一种基于物联网的数据上传方法及装置的基础上，本发明实施例还提供了一种基于物联网的数据上传设备。如图4所示，该设备可以包括：一个或多个处理器401、一个或多个输入设备402、一个或多个输出设备403和存储器404，上述处理器401、输入设备402、输出设备403和存储器404通过总线405相互连接。存储器404用于存储计算机程序，所述计算机程序包括程序指令，所述处理器401被配置用于调用所述程序指令执行上述方法实施例部分的方法。
应当理解，在本发明实施例中，所称处理器401可以是中央处理单元(CentralProcessing Unit，CPU)，该处理器还可以是其他通用处理器、数字信号处理器(DigitalSignal Processor，DSP)、专用集成电路(Application Specific Integrated Circuit，ASIC)、现成可编程门阵列(Field-Programmable Gate Array，FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。
输入设备402可以包括键盘等，输出设备403可以包括显示器(LCD等)、扬声器等。
该存储器404可以包括只读存储器和随机存取存储器，并向处理器201提供指令和数据。存储器404的一部分还可以包括非易失性随机存取存储器。例如，存储器404还可以存储设备类型的信息。
具体实现中，本发明实施例中所描述的处理器401、输入设备402、输出设备403可执行本发明实施例提供的一种基于物联网的数据上传方法的实施例中所描述的实现方式，在此不再赘述。
相应地，本发明实施例提供了一种计算机可读存储介质，所述计算机可读存储介质存储有计算机程序，所述计算机程序包括程序指令，所述程序指令被处理器执行时实现：上述基于物联网的数据上传方法。
所述计算机可读存储介质可以是前述任一实施例所述的***的内部存储单元，例如***的硬盘或内存。所述计算机可读存储介质也可以是所述***的外部存储设备，例如所述***上配备的插接式硬盘，智能存储卡(Smart Media Card,SMC)，安全数字(SecureDigital,SD)卡，闪存卡(Flash Card)等。进一步地，所述计算机可读存储介质还可以既包括所述***的内部存储单元也包括外部存储设备。所述计算机可读存储介质用于存储所述计算机程序以及所述***所需的其他程序和数据。所述计算机可读存储介质还可以用于暂时地存储已经输出或者将要输出的数据。
本领域普通技术人员可以意识到，结合本文中所公开的实施例描述的各示例的单元及算法步骤，能够以电子硬件、计算机软件或者二者的结合来实现，为了清楚地说明硬件和软件的可互换性，在上述说明中已经按照功能一般性地描述了各示例的组成及步骤。这些功能究竟以硬件还是软件方式来执行，取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能，但是这种实现不应认为超出本发明的范围。
在本申请所提供的几个实施例中，应该理解到，所揭露的装置和方法，可以通过其它的方式实现。例如，以上所描述的装置实施例仅仅是示意性的，例如，所述单元的划分，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式，例如多个单元或组件可以结合或者可以集成到另一个***，或一些特征可以忽略，或不执行。另外，所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口、装置或单元的间接耦合或通信连接，也可以是电的，机械的或其它的形式连接。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本发明实施例方案的目的。
另外，在本发明各个实施例中的各功能单元可以集成在一个处理单元中，也可以是各个单元单独物理存在，也可以是两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现，也可以采用软件功能单元的形式实现。
所述集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读取存储介质中。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分，或者该技术方案的全部或部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。而前述的存储介质包括：U盘、移动硬盘、只读存储器(ROM，Read-OnlyMemory)、随机存取存储器(RAM，Random Access Memory)、磁碟或者光盘等各种可以存储程序代码的介质。
以上所述，仅为本发明的具体实施方式，但本发明的保护范围并不局限于此，任何熟悉本技术领域的技术人员在本发明揭露的技术范围内，可轻易想到各种等效的修改或替换，这些修改或替换都应涵盖在本发明的保护范围之内。因此，本发明的保护范围应以权利要求的保护范围为准。
Claims (10)
1.一种基于物联网的数据上传方法，其特征在于，包括：
初始化过程：
连接管理平台服务器；向所述管理平台服务器请求最新配置文件；根据所述最新配置文件更新本地配置文件；对更新后的本地配置文件进行初始化，获得初始配置文件；
预处理过程：
根据各个采集点的属性建立缓存数据表格和持久数据表格；
实时采集每个采集点的当前采集值，将所述当前采集值更新至所述缓存数据表格中的第一列表中；将上一时刻的采集值缓存至所述缓存数据表格的第二列表中；
根据所述初始配置文件，实时对同一采集点的所述第一列表中的数据与所述第二列表中的数据进行对比；
若数据发生变化，则将相应采集点所有属性对应的数据均缓存至所述持久数据表格；若数据没有发生变化，则更新相应采集点的数据状态，并将相应采集点的标识和数据状态缓存至所述持久数据表格；
基于预设周期，对所述持久数据表格中存储的所述预设周期内的数据进行序列化，获得待传输数据；
数据上传过程：
将所述待传输数据上传至所述管理平台服务器。
2.根据权利要求1所述的方法，其特征在于，在初始化过程中的连接管理平台服务器的步骤之后，还包括：
判断是否连接成功；
若连接失败，则加载本地配置文件；对所述本地配置文件进行初始化，获得初始配置文件；
若连接成功，则执行所述向所述管理平台服务器请求最新配置文件步骤；判断是否请求成功；若请求成功，则执行根据所述最新配置文件更新本地配置文件的步骤；
若请求失败，则加载本地配置文件；对所述本地配置文件进行初始化，获得初始配置文件。
3.根据权利要求1所述的方法，其特征在于，在所述基于预设周期，对所述持久数据表格中存储的所述预设周期内的数据进行序列化，获得待传输数据的步骤之后，还包括：
将所述待传输数据存储至持久化存储空间；
所述将所述待传输数据上传至所述管理平台服务器，包括：
从所述持久化存储空间，将所述待传输数据上传至所述管理平台服务器。
4.根据权利要求1所述的方法，其特征在于，在所述基于预设周期，对所述持久数据表格中存储的所述预设周期内的数据进行序列化，获得待传输数据的步骤之前，还包括：
基于预设周期，对所述持久数据表格中存储的所述预设周期内的数据按类别进行分类存储；
设置所述持久数据表格的标准时间；
根据所述标准时间，计算每个分类中每个数据的时间戳对应的时间差，以所述时间差记录每个数据的采集时间，获得新持久数据表格；
所述基于预设周期，对所述持久数据表格中存储的所述预设周期内的数据进行序列化，获得待传输数据，包括：
对所述新持久数据表格进行序列化，获得待传输数据。
5.根据权利要求1所述的方法，其特征在于，所述初始配置文件，包括：对部分或全部数据进行对比参数设置的初始配置文件。
6.根据权利要求1所述的方法，其特征在于，在所述将所述待传输数据上传至所述管理平台服务器的步骤之后，还包括：
判断是否接收到所述管理平台服务器返回的接收成功信息；
若是，则删除所述待传输数据；
若否，则在下一个周期继续上传所述待传输数据。
7.根据权利要求1所述的方法，其特征在于，在预处理过程中，初始时刻采集的数据，默认为数据是发生变化的。
8.一种基于物联网的数据上传装置，其特征在于，包括：初始化模块、预处理模块和上传模块；
所述初始化模块，包括：
连接单元，用于连接管理平台服务器；
文件请求单元，用于向所述管理平台服务器请求最新配置文件；
文件更新单元，用于根据所述最新配置文件更新本地配置文件；
初始化单元，用于对更新后的本地配置文件进行初始化，获得初始配置文件；
所述预处理模块，包括：
表格建立单元，用于根据各个采集点的属性建立缓存数据表格和持久数据表格；
数据采集单元，用于实时采集每个采集点的当前采集值，将所述当前采集值更新至所述缓存数据表格中的第一列表中；将上一时刻的采集值缓存至所述缓存数据表格的第二列表中；
数据对比单元，用于根据所述初始配置文件，实时对同一采集点的所述第一列表中的数据与所述第二列表中的数据进行对比；
变化数据缓存单元，用于将所述数据对比单元中数据发生变化的采集点所有属性对应的数据均缓存至所述持久数据表格；更新所述数据对比单元中数据没有发生变化的采集点的数据状态，并将相应采集点的标识和数据状态缓存至所述持久数据表格；
序列化单元，用于基于预设周期，对所述持久数据表格中存储的所述预设周期内的数据进行序列化，获得待传输数据；
所述上传模块，用于将所述待传输数据上传至所述管理平台服务器。
9.一种基于物联网的数据上传设备，其特征在于，包括处理器、输入设备、输出设备和存储器，所述处理器、输入设备、输出设备和存储器相互连接，其中，所述存储器用于存储计算机程序，所述计算机程序包括程序指令，所述处理器被配置用于调用所述程序指令，执行如权利要求1-7任一项所述的方法。
10.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质存储有计算机程序，所述计算机程序包括程序指令，所述程序指令当被处理器执行时使所述处理器执行如权利要求1-7任一项所述的方法。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201910213614.0A CN109962980A (zh) | 2019-03-20 | 2019-03-20 | 一种基于物联网的数据上传方法、装置、设备及介质 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201910213614.0A CN109962980A (zh) | 2019-03-20 | 2019-03-20 | 一种基于物联网的数据上传方法、装置、设备及介质 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN109962980A true CN109962980A (zh) | 2019-07-02 |
Family
ID=67024692
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201910213614.0A Pending CN109962980A (zh) | 2019-03-20 | 2019-03-20 | 一种基于物联网的数据上传方法、装置、设备及介质 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN109962980A (zh) |
Cited By (18)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN110944065A (zh) * | 2019-12-13 | 2020-03-31 | 李炳勇 | 一种基于物联网的传感器数据传输方法及*** |
| CN111752918A (zh) * | 2020-05-15 | 2020-10-09 | 南京国电南自维美德自动化有限公司 | 一种历史数据交互***及其配置方法 |
| CN111918230A (zh) * | 2020-05-29 | 2020-11-10 | 北京寄云鼎城科技有限公司 | 一种数据采集方法、数据传输方法、网关、设备和存储介质 |
| CN112559813A (zh) * | 2021-01-29 | 2021-03-26 | 广州技象科技有限公司 | 基于指令关联推送的物联网网关数据处理方法及装置 |
| CN112750435A (zh) * | 2020-12-28 | 2021-05-04 | 苏州思必驰信息科技有限公司 | 智能家居设备同步方法和装置 |
| CN112769882A (zh) * | 2019-11-01 | 2021-05-07 | 科美诊断技术股份有限公司 | 一种医疗数据的上传方法及装置 |
| CN112804293A (zh) * | 2020-12-24 | 2021-05-14 | 湖北华威科智能股份有限公司 | 一种基于循环标记的电力设备监控数据传输方法 |
| CN113010614A (zh) * | 2021-03-18 | 2021-06-22 | 山东高速满易物流科技有限公司 | 一种物流数据储存方法及*** |
| CN113192233A (zh) * | 2021-04-29 | 2021-07-30 | 北京车和家信息技术有限公司 | 数据采集方法、装置、设备及介质 |
| CN113328523A (zh) * | 2021-05-31 | 2021-08-31 | 广东电网有限责任公司 | 电力开关管理方法、装置、设备及存储介质 |
| CN113328521A (zh) * | 2021-05-31 | 2021-08-31 | 广东电网有限责任公司 | 电力开关状态的边缘处理方法、装置、设备及存储介质 |
| CN113328522A (zh) * | 2021-05-31 | 2021-08-31 | 广东电网有限责任公司 | 电力开关监控方法、装置、设备及存储介质 |
| CN114268636A (zh) * | 2021-11-10 | 2022-04-01 | 华人运通(上海)云计算科技有限公司 | 一种汽车的tbox数据更新方法、装置、设备和介质 |
| CN114430412A (zh) * | 2020-10-29 | 2022-05-03 | 佛山点度物联科技有限公司 | 基于轮询数值检测的物联网实时数据上传方法 |
| CN114500673A (zh) * | 2022-02-15 | 2022-05-13 | 江苏提米智能科技有限公司 | 一种基于时序数据传输的编码方法和解码方法、装置、电子设备及存储介质 |
| CN114817200A (zh) * | 2022-05-06 | 2022-07-29 | 安徽森江人力资源服务有限公司 | 一种基于物联网的文档数据云端管理方法、***及储存介质 |
| WO2023035892A1 (zh) * | 2021-09-09 | 2023-03-16 | 青岛海尔洗衣机有限公司 | 数据处理方法、装置、服务器及存储介质 |
| CN117056419A (zh) * | 2023-07-20 | 2023-11-14 | 安徽国科检测科技有限公司 | 一种基于局域网的实验室检测数据共享*** |
Citations (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN102163308A (zh) * | 2011-04-18 | 2011-08-24 | 中国科学院计算技术研究所 | 一种流程业务数据上传***及上传方法 |
| CN102724291A (zh) * | 2012-05-23 | 2012-10-10 | 北京经纬恒润科技有限公司 | 一种车联网数据采集方法、单元和*** |
| CN102981933A (zh) * | 2012-12-18 | 2013-03-20 | 武汉邮电科学研究院 | 物联网感知层的数据增量备份方法及*** |
| CN103002010A (zh) * | 2012-10-29 | 2013-03-27 | 北京奇虎科技有限公司 | 一种基于增量数据的数据更新方法、装置和*** |
| CN106789904A (zh) * | 2016-11-23 | 2017-05-31 | 北京邮电大学 | 物联网入侵检测方法及装置 |
| EP3373557A1 (en) * | 2017-03-10 | 2018-09-12 | Symphony Communication Services Holdings, LLC | Secure information retrieval and update |
| CN105656722B (zh) * | 2016-01-29 | 2019-02-05 | 广州能迪云服务科技有限公司 | 一种基于工业物联网的数据上传方法及其*** |
-
2019
- 2019-03-20 CN CN201910213614.0A patent/CN109962980A/zh active Pending
Patent Citations (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN102163308A (zh) * | 2011-04-18 | 2011-08-24 | 中国科学院计算技术研究所 | 一种流程业务数据上传***及上传方法 |
| CN102724291A (zh) * | 2012-05-23 | 2012-10-10 | 北京经纬恒润科技有限公司 | 一种车联网数据采集方法、单元和*** |
| CN103002010A (zh) * | 2012-10-29 | 2013-03-27 | 北京奇虎科技有限公司 | 一种基于增量数据的数据更新方法、装置和*** |
| CN102981933A (zh) * | 2012-12-18 | 2013-03-20 | 武汉邮电科学研究院 | 物联网感知层的数据增量备份方法及*** |
| CN105656722B (zh) * | 2016-01-29 | 2019-02-05 | 广州能迪云服务科技有限公司 | 一种基于工业物联网的数据上传方法及其*** |
| CN106789904A (zh) * | 2016-11-23 | 2017-05-31 | 北京邮电大学 | 物联网入侵检测方法及装置 |
| EP3373557A1 (en) * | 2017-03-10 | 2018-09-12 | Symphony Communication Services Holdings, LLC | Secure information retrieval and update |
Cited By (26)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN112769882A (zh) * | 2019-11-01 | 2021-05-07 | 科美诊断技术股份有限公司 | 一种医疗数据的上传方法及装置 |
| CN110944065A (zh) * | 2019-12-13 | 2020-03-31 | 李炳勇 | 一种基于物联网的传感器数据传输方法及*** |
| CN110944065B (zh) * | 2019-12-13 | 2023-03-24 | 湖南半岛医疗科技有限公司 | 一种基于物联网的传感器数据传输方法及*** |
| CN111752918B (zh) * | 2020-05-15 | 2023-12-22 | 南京国电南自维美德自动化有限公司 | 一种历史数据交互***及其配置方法 |
| CN111752918A (zh) * | 2020-05-15 | 2020-10-09 | 南京国电南自维美德自动化有限公司 | 一种历史数据交互***及其配置方法 |
| CN111918230A (zh) * | 2020-05-29 | 2020-11-10 | 北京寄云鼎城科技有限公司 | 一种数据采集方法、数据传输方法、网关、设备和存储介质 |
| CN111918230B (zh) * | 2020-05-29 | 2022-09-09 | 北京寄云鼎城科技有限公司 | 一种数据采集方法、数据传输方法、网关、设备和存储介质 |
| CN114430412A (zh) * | 2020-10-29 | 2022-05-03 | 佛山点度物联科技有限公司 | 基于轮询数值检测的物联网实时数据上传方法 |
| CN112804293A (zh) * | 2020-12-24 | 2021-05-14 | 湖北华威科智能股份有限公司 | 一种基于循环标记的电力设备监控数据传输方法 |
| CN112804293B (zh) * | 2020-12-24 | 2023-03-24 | 湖北华威科智能股份有限公司 | 一种基于循环标记的电力设备监控数据传输方法 |
| CN112750435A (zh) * | 2020-12-28 | 2021-05-04 | 苏州思必驰信息科技有限公司 | 智能家居设备同步方法和装置 |
| CN112750435B (zh) * | 2020-12-28 | 2022-07-26 | 思必驰科技股份有限公司 | 智能家居设备同步方法和装置 |
| CN112559813A (zh) * | 2021-01-29 | 2021-03-26 | 广州技象科技有限公司 | 基于指令关联推送的物联网网关数据处理方法及装置 |
| CN113010614A (zh) * | 2021-03-18 | 2021-06-22 | 山东高速满易物流科技有限公司 | 一种物流数据储存方法及*** |
| CN113192233A (zh) * | 2021-04-29 | 2021-07-30 | 北京车和家信息技术有限公司 | 数据采集方法、装置、设备及介质 |
| CN113328522A (zh) * | 2021-05-31 | 2021-08-31 | 广东电网有限责任公司 | 电力开关监控方法、装置、设备及存储介质 |
| CN113328521A (zh) * | 2021-05-31 | 2021-08-31 | 广东电网有限责任公司 | 电力开关状态的边缘处理方法、装置、设备及存储介质 |
| CN113328523A (zh) * | 2021-05-31 | 2021-08-31 | 广东电网有限责任公司 | 电力开关管理方法、装置、设备及存储介质 |
| WO2023035892A1 (zh) * | 2021-09-09 | 2023-03-16 | 青岛海尔洗衣机有限公司 | 数据处理方法、装置、服务器及存储介质 |
| CN114268636A (zh) * | 2021-11-10 | 2022-04-01 | 华人运通(上海)云计算科技有限公司 | 一种汽车的tbox数据更新方法、装置、设备和介质 |
| CN114268636B (zh) * | 2021-11-10 | 2024-04-12 | 华人运通(上海)云计算科技有限公司 | 一种汽车的tbox数据更新方法、装置、设备和介质 |
| CN114500673A (zh) * | 2022-02-15 | 2022-05-13 | 江苏提米智能科技有限公司 | 一种基于时序数据传输的编码方法和解码方法、装置、电子设备及存储介质 |
| CN114817200A (zh) * | 2022-05-06 | 2022-07-29 | 安徽森江人力资源服务有限公司 | 一种基于物联网的文档数据云端管理方法、***及储存介质 |
| CN114817200B (zh) * | 2022-05-06 | 2024-04-05 | 新疆利丰智能科技股份有限公司 | 一种基于物联网的文档数据云端管理方法、***及储存介质 |
| CN117056419A (zh) * | 2023-07-20 | 2023-11-14 | 安徽国科检测科技有限公司 | 一种基于局域网的实验室检测数据共享*** |
| CN117056419B (zh) * | 2023-07-20 | 2024-03-15 | 安徽国科检测科技有限公司 | 一种基于局域网的实验室检测数据共享*** |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN109962980A (zh) | 一种基于物联网的数据上传方法、装置、设备及介质 | |
| CN103002010B (zh) | 一种基于增量数据的数据更新方法、装置和*** | |
| CN108287758A (zh) | 一种应用资源管理方法、使用方法及装置 | |
| CN103095819A (zh) | 推送数据信息的方法及数据信息推送*** | |
| CN112711612B (zh) | 数据处理方法、装置和存储介质及电子装置 | |
| CN107092552A (zh) | 一种日志管理方法及装置 | |
| CN105022832B (zh) | App应用程序安全下载的方法、移动终端及下载服务器 | |
| US20080249994A1 (en) | System and process for server side stateless data interchange | |
| CN111611129B (zh) | PaaS云平台的性能监控方法及装置 | |
| CN104615597B (zh) | 浏览器中清除缓存文件的方法、装置和*** | |
| CN100534084C (zh) | 远程xml数据更新方法以及*** | |
| CN106161623A (zh) | 缓存服务器、更新服务器及数据更新方法 | |
| CN101770511B (zh) | 一种用于移动通讯设备终端加快回退操作的浏览***及其应用方法 | |
| CN111367685A (zh) | 接口调用的方法及装置、计算机设备、存储介质 | |
| CN108881493A (zh) | 一种任务进度信息推送方法、装置及设备 | |
| CN111314478B (zh) | 文件传输方法、装置和计算机设备 | |
| Xiao-Hong | Research and development of web of things system based on rest architecture | |
| US11823240B2 (en) | Efficient updates of biometric data for remotely connected devices | |
| US20230052324A1 (en) | System And Method For Sending And Receiving Remote Procedure Calls | |
| CN101388863A (zh) | 一种wap网关提取业务的实现方法和*** | |
| CN107968798A (zh) | 一种网管资源标签获取方法、缓存同步方法、装置及*** | |
| CN108337280A (zh) | 一种资源更新方法及装置 | |
| CN115914319A (zh) | 一种虚拟现实设备的远程管理方法和*** | |
| CN105916184B (zh) | 一种符合ISA100.11a标准的工业无线传感网终端实现方法 | |
| CN105592143B (zh) | 一种文件加载方法及装置 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| RJ01 | Rejection of invention patent application after publication |
Application publication date: 20190702 |
|
| RJ01 | Rejection of invention patent application after publication |