CN114079668B - 基于互联网大数据的信息采集整理方法及*** - Google Patents

基于互联网大数据的信息采集整理方法及*** Download PDF

Info

Publication number
CN114079668B
CN114079668B CN202210062901.8A CN202210062901A CN114079668B CN 114079668 B CN114079668 B CN 114079668B CN 202210062901 A CN202210062901 A CN 202210062901A CN 114079668 B CN114079668 B CN 114079668B
Authority
CN
China
Prior art keywords
data
new data
new
attribute value
source end
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202210062901.8A
Other languages
English (en)
Other versions
CN114079668A (zh
Inventor
高伟哲
吴碧珊
孟德一
傅奕
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Tanmu Information Technology Shenzhen Co ltd
Original Assignee
Tanmu Information Technology Shenzhen Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Tanmu Information Technology Shenzhen Co ltd filed Critical Tanmu Information Technology Shenzhen Co ltd
Priority to CN202210062901.8A priority Critical patent/CN114079668B/zh
Publication of CN114079668A publication Critical patent/CN114079668A/zh
Application granted granted Critical
Publication of CN114079668B publication Critical patent/CN114079668B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/14Session management
    • H04L67/141Setup of application sessions
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/01Protocols
    • H04L67/10Protocols in which an application is distributed across nodes in the network
    • H04L67/1095Replication or mirroring of data, e.g. scheduling or transport for data synchronisation between network nodes

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
  • Information Transfer Between Computers (AREA)

Abstract

本发明涉及一种基于互联网大数据的信息采集整理方法及***,其中,在***工作之前,需要对***进行搭建。至少设置两个及以上的客户端,在每一客户端嵌入一源端数据采集端,在源端数据采集端内嵌入一个数据预处理模块;设置一数据服务器,将数据服务器配置成具有数据服务器缓存端和共享缓存端,然后建立客户端和数据服务器之间的通信连接。客户端和数据服务器之间的通信连接采用具有通信唤醒即用的方式;即数据预处理模块通过同步任务处理线程唤醒通信通道与数据服务器的连接。所述的目标数据均可以进行溯源,且所有的目标数据均以共享的方式进行缓存存储,存储能力强,支持随时修改,且对于数据变化的需求响应更加及时且具有全局灵活性。

Description

基于互联网大数据的信息采集整理方法及***
技术领域
本发明涉及互联网大数据技术领域,具体为一种基于互联网大数据的信息采集整理方法及***。
背景技术
传统的信息化建设基本上以业务为导向,将原来人工的流程用计算机技术进行自动化和效率化。这些信息化***往往是有应用程序和其对应的数据库***组成一体,互相之间并不联通,渐渐就形成一个个的企业内数据孤岛。
随着物联网的日益更新和大数据的不断挖掘,在某些领域,已经开始实现了数据孤岛之间的数据交换和融合,以此给不同的企业之间提供了更多可以参考的数据性意见,在进行数据挖掘时,往往需要建立采集端和存储端之间的追踪体系,以便能够对不同端的数据进行检索分析,目前在每新的业务需要的时候,就去从各个源***进行一次性的数据抽,涉及到部门协调,***账号开通,数据字典等一系列繁琐的步骤。并且常见的工具都是基于批量定期抽数的模式,比较难以实现一些对数据实时要求较高的业务场景,并且没有复用性,每次有新需求或者需求有改动的时候,都需要花费大量人力去重新同步或者修改同步程序去实现。
发明内容
有鉴于此,本发明的目的在于提供一种基于互联网大数据的信息采集整理方法及***,以解决上述背景技术中提出的问题。
为实现上述目的,本发明提供如下技术方案:
基于互联网大数据的信息采集整理方法,包括如下步骤:
不同源端有新数据产生时,嵌入在源端中的数据预处理模块以源端的第一属性值写入至新数据;
数据服务器利用同步数据采集器将所述新数据以时间戳为标记进行抓取并输送到数据服务器缓存端;
在所述数据服务器缓存端建立多个任务链,并将所述任务链与所述源端建立映射表,使得一源端对应一个所述任务链;
所述任务链按照时间戳抽取数据服务器缓存端对应的新数据,当所述任务链每抽取一段新数据时,对应产生一个新记录,并将所述新记录发送至处理链路,所述处理链路按照所述新记录调取任务链中的新数据,将新数据在处理模块中进行过滤,过滤内容为空的新数据,然后将新数据转换成结构化数据以形成目标数据,将所述目标数据存储在共享端的数据缓存层,并在所述共享端形成一个链路标识,所述链路标识用于对数据缓存层的目标数据进行验证。
进一步地,当所述源端有新数据产生时,通过所述源端内置的触发器获取新数据产生事件,新数据产生事件触发数据预处理模块从所述源端的数据库中调取所述新数据并同时读取源端的第一属性值,数据预处理模块依据所述源端的第一属性值和新数据产生的时间作为新数据的第二属性值;同时数据预处理模块通过同步任务处理线程唤醒通信通道与数据服务器的连接。
进一步地,所述数据服务器与通信通道之间的连接被唤醒后,依据同步任务处理线程将具有第二属性值的所述新数据以时间戳为标记进行抓取并输送到数据服务器缓存端。
进一步地,所述链路标识用于对数据缓存层的目标数据进行验证,具体包括:
链路标识启动校验任务后,将目标数据依据链路标识与对应的所述源端产生的新数据进行查询,用边读边比较的方法同时遍历源端的数据库和共享端的数据缓存层进行数据链路一致性校验。
本发明还提供了一种基于互联网大数据的信息采集整理***,包括:
以多个客户端作为源端,该源端被配置成当有新数据在所述源端产生时,嵌入在源端中的数据预处理模块以源端的第一属性值作为新数据属性写入的参考值写入至新数据;
与客户端连接的数据服务器,所述数据服务器包括多个同步数据采集器以及数据服务器缓存端;
所述数据服务器缓存端具有多个依据客户端建立的任务链、基于任务链形成的处理链路、处理模块,所述数据服务器还包括与数据服务器缓存端对应的共享端;
所述数据服务器利用同步数据采集器将所述新数据以时间戳为标记进行抓取并输送到数据服务器缓存端;
所述任务链按照时间戳抽取数据服务器缓存端对应的新数据,当所述任务链每抽取一段新数据时,对应产生一个新记录,并将所述新记录发送至处理链路,所述处理链路按照所述新记录调取任务链中的新数据,将新数据在处理模块中进行过滤、转换以形成目标数据,将所述目标数据存储在共享端的数据缓存层。
进一步地,所述处理模块中具有过滤单元以及转换单元;
所述过滤单元用于将内容为空的新数据进行过滤;
所述转换单元用于将经过过滤单元进行过滤处理的新数据转换成结构化数据以形成目标数据。
进一步地,所述共享端在有目标数据存储后,基于目标数据形成一个链路标识,所述链路标识用于对数据缓存层的目标数据进行验证。
进一步地,所述数据预处理模块从所述客户端的数据库中调取所述新数据并同时读取源端的第一属性值,数据预处理模块依据所述源端的第一属性值和新数据产生的时间作为新数据的第二属性值;同时数据预处理模块通过同步任务处理线程唤醒通信通道与数据服务器的连接。
进一步地,所述数据服务器依据同步任务处理线程将具有第二属性值的所述新数据以时间戳为标记进行抓取并输送到数据服务器缓存端。
进一步地,所述链路标识用于将目标数据依据链路标识与对应的所述源端产生的新数据进行查询,用边读边比较的方法同时遍历源端的数据库和共享端的数据缓存层进行数据链路一致性校验。
本发明在不同的客户端产生新数据的时候,对新数据进行标记处理,以便于进行追溯,且在整个过程中,任务链在抽取新数据时也会形成对应的新记录,处理链路按照所述新记录调取任务链中的新数据,将新数据在处理模块中进行过滤、转换以形成目标数据并存储在共享端的数据缓存层时,对应的产生链路标识,所述链路标识用于将目标数据依据链路标识与对应的所述源端产生的新数据进行查询,用边读边比较的方法同时遍历源端的数据库和共享端的数据缓存层进行数据链路一致性校验。
在上述中,当所述源端有新数据产生时,通过所述源端内置的触发器获取新数据产生事件,新数据产生事件触发数据预处理模块从所述源端的数据库中调取所述新数据并同时读取源端的第一属性值,数据预处理模块依据所述源端的第一属性值和新数据产生的时间作为新数据的第二属性值,同时数据预处理模块通过同步任务处理线程唤醒通信通道与数据服务器的连接。因此,本发明只要将客户端和数据服务器进行链接通信后,即可完成自动的抓取数据、并对数据进行统一整理和存储,便于后端分析对数据进行抓取。
在上述中,本发明提供的大数据的信息采集整理***不需要人为干预,并且可以能够通过同步数据采集器将所述新数据以时间戳为标记进行抓取并输送到数据服务器缓存端,以便获取实时数据,便于分析数据使用的时效性。
在上述中,所述的目标数据均可以进行溯源,且所有的目标数据均以共享的方式进行缓存存储,存储能力强,支持随时修改,且对于数据变化的需求响应更加及时且具有全局灵活性。
附图说明
图1本发明的框架原理图;
图2为本发明具体实施时的框架原理图。
具体实施方式
以下结合附图对本发明进行详细的描述,参照图1至图2。
本发明提供了一种基于互联网大数据的信息采集整理方法,具体包括:
在源端有新数据产生时,嵌入在源端中的数据预处理模块以源端的第一属性值写入至新数据;具体的,当所述源端有新数据产生时,通过所述源端内置的触发器获取新数据产生事件,新数据产生事件触发数据预处理模块从所述源端的数据库中调取所述新数据并同时读取源端的第一属性值,数据预处理模块依据所述源端的第一属性值和新数据产生的时间作为新数据的第二属性值;同时数据预处理模块通过同步任务处理线程唤醒通信通道与数据服务器的连接;
当所述数据服务器与通信通道之间的连接被唤醒后,依据同步任务处理线程将具有第二属性值的所述新数据以时间戳为标记进行抓取并输送到数据服务器缓存端。
在所述数据服务器缓存端建立多个任务链,并将所述任务链与所述源端建立映射表,使得一源端对应一个所述任务链;
所述任务链按照时间戳抽取数据服务器缓存端对应的新数据,当所述任务链每抽取一段新数据时,对应产生一个新记录,并将所述新记录发送至处理链路,所述处理链路按照所述新记录调取任务链中的新数据,将新数据在处理模块中进行过滤,过滤内容为空的新数据,然后将新数据转换成结构化数据以形成目标数据,将所述目标数据存储在共享端的数据缓存层,并在所述共享端形成一个链路标识,所述链路标识用于对数据缓存层的目标数据进行验证,具体包括:
链路标识启动校验任务后,将目标数据依据链路标识与对应的所述源端产生的新数据进行查询,用边读边比较的方法同时遍历源端的数据库和共享端的数据缓存层进行数据链路一致性校验。
为了便于上述方法的实现,本申请提供了一种基于互联网大数据的信息采集整理***,包括:
以多个客户端作为源端,该源端被配置成当有新数据在所述源端产生时,嵌入在源端中的数据预处理模块以源端的第一属性值作为新数据属性写入的参考值写入至新数据;具体的,所述数据预处理模块从所述客户端的数据库中调取所述新数据并同时读取源端的第一属性值,数据预处理模块依据所述源端的第一属性值和新数据产生的时间作为新数据的第二属性值;同时数据预处理模块通过同步任务处理线程唤醒通信通道与数据服务器的连接。
在上述中,当所述源端有新数据产生时,通过所述源端内置的触发器获取新数据产生事件,新数据产生事件触发数据预处理模块从所述源端的数据库中调取所述新数据并同时读取源端的第一属性值,数据预处理模块依据所述源端的第一属性值和新数据产生的时间作为新数据的第二属性值,同时数据预处理模块通过同步任务处理线程唤醒通信通道与数据服务器的连接。因此,本发明只要将客户端和数据服务器进行链接通信后,即可完成自动的抓取数据、并对数据进行统一整理和存储,便于后端分析对数据进行抓取。
与客户端连接的数据服务器,所述数据服务器包括多个同步数据采集器以及数据服务器缓存端;具体的,所述数据服务器依据同步任务处理线程将具有第二属性值的所述新数据以时间戳为标记进行抓取并输送到数据服务器缓存端。本发明提供的大数据的信息采集整理***不需要人为干预,并且可以能够通过同步数据采集器将所述新数据以时间戳为标记进行抓取并输送到数据服务器缓存端,以便获取实时数据,便于分析数据使用的时效性。
在上述中,所述数据服务器缓存端具有多个依据客户端建立的任务链、基于任务链形成的处理链路、处理模块,所述数据服务器还包括与数据服务器缓存端对应的共享端;
所述数据服务器利用同步数据采集器将所述新数据以时间戳为标记进行抓取并输送到数据服务器缓存端;
所述任务链按照时间戳抽取数据服务器缓存端对应的新数据,当所述任务链每抽取一段新数据时,对应产生一个新记录,并将所述新记录发送至处理链路,所述处理链路按照所述新记录调取任务链中的新数据,将新数据在处理模块中进行过滤、转换以形成目标数据,将所述目标数据存储在共享端的数据缓存层。
在上述中,所述处理模块中具有过滤单元以及转换单元;
所述过滤单元用于将内容为空的新数据进行过滤;
所述转换单元用于将经过过滤单元进行过滤处理的新数据转换成结构化数据以形成目标数据。
在上述中,所述共享端在有目标数据存储后,基于目标数据形成一个链路标识,所述链路标识用于对数据缓存层的目标数据进行验证。本发明在不同的客户端产生新数据的时候,对新数据进行标记处理,以便于进行追溯,且在整个过程中,任务链在抽取新数据时也会形成对应的新记录,处理链路按照所述新记录调取任务链中的新数据,将新数据在处理模块中进行过滤、转换以形成目标数据并存储在共享端的数据缓存层时,对应的产生链路标识,所述链路标识用于将目标数据依据链路标识与对应的所述源端产生的新数据进行查询,用边读边比较的方法同时遍历源端的数据库和共享端的数据缓存层进行数据链路一致性校验。
通过所述数据链路一致性校验,所述的目标数据均可以进行溯源,且所有的目标数据均以共享的方式进行缓存存储,存储能力强,支持随时修改,且对于数据变化的需求响应更加及时且具有全局灵活性。
具体的原理是:本发明提供了一种基于互联网大数据的信息采集整理***,在***工作之前,需要对***进行搭建。
至少设置两个及以上的客户端,在每一客户端嵌入一源端数据采集端,在源端数据采集端内嵌入一个数据预处理模块;
设置一数据服务器,将数据服务器配置成具有数据服务器缓存端和共享缓存端,然后建立客户端和数据服务器之间的通信连接。
客户端和数据服务器之间的通信连接采用具有通信唤醒即用的方式;即数据预处理模块通过同步任务处理线程唤醒通信通道与数据服务器的连接。
上述搭建好之后,在源端有新数据产生时,嵌入在源端中的数据预处理模块以源端的第一属性值写入至新数据;具体的,当所述源端有新数据产生时,通过所述源端内置的触发器获取新数据产生事件,新数据产生事件触发数据预处理模块从所述源端的数据库中调取所述新数据并同时读取源端的第一属性值,数据预处理模块依据所述源端的第一属性值和新数据产生的时间作为新数据的第二属性值;同时数据预处理模块通过同步任务处理线程唤醒通信通道与数据服务器的连接;
当所述数据服务器与通信通道之间的连接被唤醒后,依据同步任务处理线程将具有第二属性值的所述新数据以时间戳为标记进行抓取并输送到数据服务器缓存端。
在所述数据服务器缓存端建立多个任务链,并将所述任务链与所述源端建立映射表,使得一源端对应一个所述任务链;
所述任务链按照时间戳抽取数据服务器缓存端对应的新数据,当所述任务链每抽取一段新数据时,对应产生一个新记录,并将所述新记录发送至处理链路,所述处理链路按照所述新记录调取任务链中的新数据,将新数据在处理模块中进行过滤,过滤内容为空的新数据,然后将新数据转换成结构化数据以形成目标数据,将所述目标数据存储在共享端的数据缓存层,并在所述共享端形成一个链路标识,所述链路标识用于对数据缓存层的目标数据进行验证,具体包括:
链路标识启动校验任务后,将目标数据依据链路标识与对应的所述源端产生的新数据进行查询,用边读边比较的方法同时遍历源端的数据库和共享端的数据缓存层进行数据链路一致性校验。
本文中应用了具体个例对本发明的原理及实施方式进行了阐述,以上实例的说明只是用于帮助理解本发明的方法及其核心思想。以上所述仅是本发明的优选实施方式,应当指出,由于文字表达的有限性,而客观上存在无限的具体结构,对于本技术领域的普通技术人员来说,在不脱离本发明原理的前提下,还可以做出若干改进、润饰或变化,也可以将上述技术特征以适当的方式进行组合;这些改进润饰、变化或组合,或未经改进将发明的构思和技术方案直接应用于其它场合的,均应视为本发明的保护范围。

Claims (10)

1.基于互联网大数据的信息采集整理方法,其特征在于,包括如下步骤:
不同源端有新数据产生时,嵌入在源端中的数据预处理模块以源端的第一属性值写入至新数据,得到了赋予第一属性值的新数据;
数据服务器利用同步数据采集器将所述赋予第一属性值的新数据以时间戳为标记进行抓取并输送到数据服务器缓存端;
在所述数据服务器缓存端建立多个任务链,并将所述任务链与所述源端建立映射表,使得一源端对应一个所述任务链;
所述任务链按照时间戳抽取数据服务器缓存端对应的赋予第一属性值的新数据,当所述任务链每抽取一段新数据时,对应产生一个新记录,并将所述新记录发送至处理链路,所述处理链路按照所述新记录调取任务链中的新数据,将新数据在处理模块中进行过滤,过滤内容为空的新数据,然后将新数据转换成结构化数据以形成目标数据,将所述目标数据存储在共享端的数据缓存层,并在所述共享端形成一个链路标识,所述链路标识用于对数据缓存层的目标数据进行验证。
2.根据权利要求1所述的基于互联网大数据的信息采集整理方法,其特征在于,当所述源端有新数据产生时,通过所述源端内置的触发器获取新数据产生事件,新数据产生事件触发数据预处理模块从所述源端的数据库中调取所述新数据并同时读取源端的第一属性值,数据预处理模块依据所述源端的第一属性值和新数据产生的时间作为新数据的第二属性值;同时数据预处理模块通过同步任务处理线程唤醒通信通道与数据服务器的连接。
3.根据权利要求1或2所述的基于互联网大数据的信息采集整理方法,其特征在于,所述数据服务器与通信通道之间的连接被唤醒后,依据同步任务处理线程将具有第二属性值的所述新数据以时间戳为标记进行抓取并输送到数据服务器缓存端。
4.根据权利要求1所述的基于互联网大数据的信息采集整理方法,其特征在于,所述链路标识用于对数据缓存层的目标数据进行验证,具体包括:
链路标识启动校验任务后,将目标数据依据链路标识与对应的所述源端产生的新数据进行查询,用边读边比较的方法同时遍历源端的数据库和共享端的数据缓存层进行数据链路一致性校验。
5.基于互联网大数据的信息采集整理***,其特征在于,包括:
以多个客户端作为源端,该源端被配置成当有新数据在所述源端产生时,嵌入在源端中的数据预处理模块以源端的第一属性值写入至新数据,得到了赋予第一属性值的新数据;
与客户端连接的数据服务器,所述数据服务器包括多个同步数据采集器以及数据服务器缓存端;
所述数据服务器缓存端具有多个依据客户端建立的任务链、基于任务链形成的处理链路、处理模块,所述数据服务器还包括与数据服务器缓存端对应的共享端;
所述数据服务器利用同步数据采集器将所述赋予第一属性值的新数据以时间戳为标记进行抓取并输送到数据服务器缓存端;
所述任务链按照时间戳抽取数据服务器缓存端对应的赋予第一属性值的新数据,当所述任务链每抽取一段新数据时,对应产生一个新记录,并将所述新记录发送至处理链路,所述处理链路按照所述新记录调取任务链中的新数据,将新数据在处理模块中进行过滤、转换以形成目标数据,将所述目标数据存储在共享端的数据缓存层。
6.根据权利要求5所述的基于互联网大数据的信息采集整理***,其特征在于,所述处理模块中具有过滤单元以及转换单元;
所述过滤单元用于将内容为空的新数据进行过滤;
所述转换单元用于将经过过滤单元进行过滤处理的新数据转换成结构化数据以形成目标数据。
7.根据权利要求5所述的基于互联网大数据的信息采集整理***,其特征在于,所述共享端在有目标数据存储后,基于目标数据形成一个链路标识,所述链路标识用于对数据缓存层的目标数据进行验证。
8.根据权利要求5所述的基于互联网大数据的信息采集整理***,其特征在于,所述数据预处理模块从所述客户端的数据库中调取所述新数据并同时读取源端的第一属性值,数据预处理模块依据所述源端的第一属性值和新数据产生的时间作为新数据的第二属性值;同时数据预处理模块通过同步任务处理线程唤醒通信通道与数据服务器的连接。
9.根据权利要求5所述的基于互联网大数据的信息采集整理***,其特征在于,所述数据服务器依据同步任务处理线程将具有第二属性值的所述新数据以时间戳为标记进行抓取并输送到数据服务器缓存端。
10.根据权利要求7所述的基于互联网大数据的信息采集整理***,其特征在于,所述链路标识用于将目标数据依据链路标识与对应的所述源端产生的新数据进行查询,用边读边比较的方法同时遍历源端的数据库和共享端的数据缓存层进行数据链路一致性校验。
CN202210062901.8A 2022-01-20 2022-01-20 基于互联网大数据的信息采集整理方法及*** Active CN114079668B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202210062901.8A CN114079668B (zh) 2022-01-20 2022-01-20 基于互联网大数据的信息采集整理方法及***

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202210062901.8A CN114079668B (zh) 2022-01-20 2022-01-20 基于互联网大数据的信息采集整理方法及***

Publications (2)

Publication Number Publication Date
CN114079668A CN114079668A (zh) 2022-02-22
CN114079668B true CN114079668B (zh) 2022-04-08

Family

ID=80284724

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202210062901.8A Active CN114079668B (zh) 2022-01-20 2022-01-20 基于互联网大数据的信息采集整理方法及***

Country Status (1)

Country Link
CN (1) CN114079668B (zh)

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106776780A (zh) * 2016-11-23 2017-05-31 中国科学院软件研究所 一种云环境中数据交换与共享方法及***
WO2017193739A1 (zh) * 2016-05-10 2017-11-16 中兴通讯股份有限公司 一种数据共享方法及装置
CN111198914A (zh) * 2019-12-12 2020-05-26 山西云时代技术有限公司 基于oracle数据库归档日志的整库实时数据采集方法
WO2021055078A1 (en) * 2019-09-16 2021-03-25 Oracle International Corporation Applying rules to client updates on shared records to trigger system-generated updates
CN113742357A (zh) * 2021-08-25 2021-12-03 国核电力规划设计研究院有限公司 一种跨平台设计数据自动归集并关联的方法和***

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN100489814C (zh) * 2007-08-01 2009-05-20 杭州华三通信技术有限公司 一种共享缓存***及实现方法
CN101645928B (zh) * 2009-08-26 2012-07-25 成都市华为赛门铁克科技有限公司 内容资源缓存方法、装置及***
US11074555B2 (en) * 2015-10-26 2021-07-27 Ajit S. Shah Systems and methods for implementing structured asynchronous and synchronous group interaction with automatic assistance over user selected media

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2017193739A1 (zh) * 2016-05-10 2017-11-16 中兴通讯股份有限公司 一种数据共享方法及装置
CN106776780A (zh) * 2016-11-23 2017-05-31 中国科学院软件研究所 一种云环境中数据交换与共享方法及***
WO2021055078A1 (en) * 2019-09-16 2021-03-25 Oracle International Corporation Applying rules to client updates on shared records to trigger system-generated updates
CN111198914A (zh) * 2019-12-12 2020-05-26 山西云时代技术有限公司 基于oracle数据库归档日志的整库实时数据采集方法
CN113742357A (zh) * 2021-08-25 2021-12-03 国核电力规划设计研究院有限公司 一种跨平台设计数据自动归集并关联的方法和***

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
Application on Information Island with Information Visualization and Software Engineering;Jiahui Lv等;《2018 5th International Conference on Systems and Informatics (ICSAI)》;20190103;第598-603页 *
基于共享数据库的数据共享技术;王天亮等;《计算机工程与设计》;20070428;第28卷(第08期);第1923-1926页 *

Also Published As

Publication number Publication date
CN114079668A (zh) 2022-02-22

Similar Documents

Publication Publication Date Title
CN108052681B (zh) 一种关系型数据库间结构化数据的同步方法及***
CN110968629A (zh) 一种基于跨层级、异构数据汇聚的统一信息资源管理方法及***
CN103455896B (zh) 基于物联网的无纸化装配质量控制方法
CN114238388A (zh) 一种基于多协议的异构数据收集及检索***
CN112559634A (zh) 一种基于计算机云计算大数据用数据管理***
CN115269515A (zh) 一种检索指定目标文档数据处理方法
CN104506624A (zh) 一种社交信息管理***及管理方法
CN114820000A (zh) 一种智能化产品溯源管理***
CN114079668B (zh) 基于互联网大数据的信息采集整理方法及***
CN111343269B (zh) 一种数据下载方法、装置、计算机设备和存储介质
CN112598142A (zh) 一种风电机组检修工作质量审查辅助方法与***
CN112328667A (zh) 一种基于数据血缘的页岩气田地面工程数字化移交方法
CN116644136A (zh) 一种增量和全量数据的数据采集方法、装置、设备及介质
CN114003774A (zh) 一种用于智慧城市的电力大数据信息采集***
CN110825800A (zh) 一种多点异构环境下的业务数据自动传输校验方法
CN111274885A (zh) 一种基于人脸识别技术的商场客户轨迹跟踪及信息采集***
CN112653768B (zh) 一种仿社会学服务器端架构
CN112699977B (zh) 一种轨道车辆手写记录智能采集***及采集方法
CN110515955A (zh) 数据的存储、查询方法、***、电子设备和存储介质
CN116644039B (zh) 一种基于大数据的在线能力运营日志自动采集分析的方法
CN114385737A (zh) 基于变化数据捕捉的电力监控数据监控方法及平台
CN113610497B (zh) 一种高效率协作办公***
Huiguang et al. Research on Tracking Technology of Service Call Chain Based on Microservice Architecture
CN2554723Y (zh) 基于掌上电脑及数字标签的电力设备巡检装置
CN115129735A (zh) 一种支持多源异构数据的统一sql查询***

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant