CN113836592A - 数据采集交付方法、***、设备及计算机可读存储介质 - Google Patents
数据采集交付方法、***、设备及计算机可读存储介质 Download PDFInfo
- Publication number
- CN113836592A CN113836592A CN202111046273.6A CN202111046273A CN113836592A CN 113836592 A CN113836592 A CN 113836592A CN 202111046273 A CN202111046273 A CN 202111046273A CN 113836592 A CN113836592 A CN 113836592A
- Authority
- CN
- China
- Prior art keywords
- data
- node
- delivery
- target data
- data acquisition
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000002716 delivery method Methods 0.000 title claims abstract description 35
- 238000003860 storage Methods 0.000 title claims abstract description 21
- 238000012384 transportation and delivery Methods 0.000 claims abstract description 125
- 238000000034 method Methods 0.000 claims abstract description 45
- 238000000605 extraction Methods 0.000 claims abstract description 25
- 238000013075 data extraction Methods 0.000 claims description 54
- 238000013480 data collection Methods 0.000 claims description 40
- 238000012545 processing Methods 0.000 claims description 32
- 238000012795 verification Methods 0.000 claims description 29
- 230000006378 damage Effects 0.000 claims description 18
- 238000004590 computer program Methods 0.000 claims description 5
- 238000010200 validation analysis Methods 0.000 claims 1
- 238000010606 normalization Methods 0.000 abstract description 12
- 230000005540 biological transmission Effects 0.000 abstract description 6
- 238000007726 management method Methods 0.000 description 15
- 238000004891 communication Methods 0.000 description 10
- 230000006870 function Effects 0.000 description 10
- 230000032683 aging Effects 0.000 description 8
- 238000010586 diagram Methods 0.000 description 7
- 238000012790 confirmation Methods 0.000 description 4
- 238000013523 data management Methods 0.000 description 4
- 238000005516 engineering process Methods 0.000 description 4
- 238000004519 manufacturing process Methods 0.000 description 4
- 238000013515 script Methods 0.000 description 4
- 238000012546 transfer Methods 0.000 description 4
- 230000001550 time effect Effects 0.000 description 3
- 238000004458 analytical method Methods 0.000 description 2
- 238000013524 data verification Methods 0.000 description 2
- 238000011161 development Methods 0.000 description 2
- 230000018109 developmental process Effects 0.000 description 2
- 238000009826 distribution Methods 0.000 description 2
- 238000013475 authorization Methods 0.000 description 1
- 238000012217 deletion Methods 0.000 description 1
- 230000037430 deletion Effects 0.000 description 1
- 238000007689 inspection Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 238000005457 optimization Methods 0.000 description 1
- 230000002265 prevention Effects 0.000 description 1
- 230000001360 synchronised effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F21/00—Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
- G06F21/60—Protecting data
- G06F21/64—Protecting data integrity, e.g. using checksums, certificates or signatures
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/23—Updating
- G06F16/2358—Change logging, detection, and notification
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Computer Security & Cryptography (AREA)
- Databases & Information Systems (AREA)
- Data Mining & Analysis (AREA)
- Health & Medical Sciences (AREA)
- Bioethics (AREA)
- General Health & Medical Sciences (AREA)
- Computer Hardware Design (AREA)
- Software Systems (AREA)
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
Abstract
本发明公开了一种数据采集交付方法、***、设备及计算机存储介质,通过在存在多人参与的数据采集交付需求时,根据实际需求确定对应的多个角色,并将各个角色分配至各个节点上,采用数据流转的方式来执行数据采集交付的过程,使得***能够保证交付流程的规范性以及信息传递的准确性;通过在***的交付节点上发布目标数据后生成对应的提取凭证,并推送至接收节点对应终端,使得只有正确的接收人才能获取到提取凭证,并登录***在接收节点上提取到目标数据,确保了数据安全性,从而大大提高了数据采集交付过程的数据安全性和规范性。
Description
技术领域
本发明涉及数据处理技术领域,尤其涉及数据采集交付方法、***、设备及计算机可读存储介质。
背景技术
随着数据处理技术的快速发展,各公司企业对于生产数据采集和交付的需求也在不断增长。目前企业内一般采用内部的通讯工具,例如腾讯通RTX、邮件***等作为传输工具,以线下邮件的形式进行数据交付,对于采集数据的存储也往往是本地存储,因此存在则数据丢失或泄露的风险,同时也不便于存档和管理。从而反映出现有的数据采集交付方式难以保证数据安全性和规范性的问题。
发明内容
本发明的主要目的在于提出一种数据采集交付方法、***、设备及计算机可读存储介质,旨在解决现有的数据采集交付方式难以保证数据安全性和规范性的技术问题。
为实现上述目的,本发明提供一种数据采集交付方法,所述数据采集交付方法应用于数据采集交付***,所述数据采集交付方法包括:
接收数据采集申请,基于所述数据采集申请确定数据流转节点,其中,所述数据流转节点至少包括处理节点、交付节点和接收节点;
将所述数据采集申请流转至所述处理节点,在所述处理节点上基于所述数据采集申请采集目标数据;
将所述目标数据传递至所述交付节点,在所述交付节点上发布所述目标数据,并生成数据提取凭证;
将所述数据提取凭证推送至所述接收节点对应终端,在所述接收节点上按照所述数据提取凭证提取所述目标数据,以完成所述目标数据的线上交付。
可选地,所述数据采集交付***与工单***对接,所述接收数据采集申请,基于所述数据采集申请确定数据流转节点的步骤包括:
在接收到由所述工单***同步发送的数据采集工单时,将所述数据采集工单作为所述数据采集申请;
获取所述数据采集工单的工单内容,以确定数据流转人员,并为所述数据流转人员分配所述数据流转节点。
可选地,所述数据流转节点还包括验证节点,
所述将所述目标数据传递至所述交付节点,在所述交付节点上发布所述目标数据的步骤包括:
将所述目标数据传递至所述交付节点,并判断所述数据流转节点中是否包括验证节点;
若是,则将所述目标数据发送至所述验证节点,直至所述目标数据经所述验证节点验证通过,在所述交付节点上将所述目标数据发布至所述***。
可选地,所述生成数据提取凭证的步骤之后,还包括:
判断所述目标数据中是否包含敏感数据;
若是,则将预设的第一凭证时效作为所述数据提取凭证的凭证时效;
若否,则将预设的第二凭证时效作为所述数据提取凭证的凭证时效,其中,所述第一凭证时效小于所述第二凭证时效。
可选地,所述将所述数据提取凭证推送至所述接收节点对应终端的步骤之前,还包括:
将所述数据采集申请对应的申请方作为所述接收节点的接收方,以将所述申请方关联终端作为所述接收节点对应终端;
所述将所述数据提取凭证推送至所述接收节点对应终端,在所述接收节点上按照所述数据提取凭证提取所述目标数据,以完成所述目标数据的线上交付的步骤包括:
将所述数据提取凭证以邮件形式推送至所述申请方关联终端,并在接收到所述接收节点上发出的携带所述数据提取凭证的提取指令时,判断所述提取指令是否超出所述凭证时效;
若否,则将所述目标数据反馈至所述接收节点,以将所述目标数据线上交付至所述申请方。
可选地,所述目标数据中包含敏感数据,
所述在所述接收节点上按照所述数据提取凭证提取所述目标数据,以完成所述目标数据的线上交付的步骤之后,还包括:
判断所述目标数据是否已提取超出预设时长;
若是,则生成所述目标数据对应的数据销毁提示;
将所述数据销毁提示推送至所述接收节点对应终端,直至接收到所述接收节点的确认销毁指令,基于所述确认销毁指令销毁所述目标数据。
可选地,所述在所述接收节点上按照所述数据提取凭证提取所述目标数据,以完成所述目标数据的线上交付的步骤之后,还包括:
将所述数据采集申请在全流转过程中的日志记录存入指定数据库。
此外,为实现上述目的,本发明还提供一种数据采集交付***,所述数据采集交付***包括:
流转节点确定模块,用于接收数据采集申请,基于所述数据采集申请确定数据流转节点,其中,所述数据流转节点至少包括处理节点、交付节点和接收节点;
目标数据采集模块,用于将所述数据采集申请流转至所述处理节点,在所述处理节点上基于所述数据采集申请采集目标数据;
目标数据发布模块,用于将所述目标数据传递至所述交付节点,在所述交付节点上发布所述目标数据,并生成数据提取凭证;
目标数据交付模块,用于将所述数据提取凭证推送至所述接收节点对应终端,在所述接收节点上按照所述数据提取凭证提取所述目标数据,以完成所述目标数据的线上交付。
此外,为实现上述目的,本发明还提供一种数据采集交付设备,所述数据采集交付设备包括:存储器、处理器及存储在所述存储器上并可在所述处理器上运行的数据采集交付程序,所述数据采集交付程序被所述处理器执行时实现如上所述的数据采集交付方法的步骤。
此外,为实现上述目的,本发明还提供一种计算机可读存储介质,所述计算机可读存储介质上存储有数据采集交付程序,所述数据采集交付程序被处理器执行时实现如上所述的数据采集交付方法的步骤。
此外,为实现上述目的,本发明还提供一种计算机可读存储介质,包括计算机程序,所述计算机程序被处理器执行时实现如上述的数据采集交付方法的步骤。
本发明通过在存在多人参与的数据采集交付需求时,根据实际需求确定对应的多个角色,并将各个角色分配至各个节点上,采用数据流转的方式来执行目标数据从采集到最终交付的过程,使得***能够保证交付流程的规范性以及信息传递的准确性;通过在***的交付节点上发布目标数据后生成对应的提取凭证,并推送至接收节点对应的终端,使得只有正确的接收人才能获取到提取凭证,并登录***在接收节点上提取到目标数据,确保了数据安全性,从而大大提高了数据采集交付过程的数据安全性和规范性,解决了现有的数据采集交付方式难以保证数据安全性和规范性的问题。
附图说明
图1是本发明实施例方案涉及的硬件运行环境的设备结构示意图;
图2为本发明数据采集交付方法第一实施例的流程示意图;
图3为本发明数据采集交付方法第一实施例中一具体实施例的***功能示意图;
图4为本发明数据采集交付方法第二实施例中一具体实施例的状态流程示意图;
图5为本发明数据采集交付***的功能模块示意图。
本发明目的的实现、功能特点及优点将结合实施例,参照附图做进一步说明。
具体实施方式
应当理解,此处所描述的具体实施例仅仅用以解释本发明,并不用于限定本发明。
随着数据处理技术的快速发展,各公司企业对于生产数据采集和交付的需求也在不断增长。目前企业内一般采用内部的通讯工具,例如腾讯通RTX、邮件***等作为传输工具,以线下邮件的形式进行数据交付,对于采集数据的存储也往往是本地存储,因此存在则数据丢失或泄露的风险,同时也不便于存档和管理。从而反映出现有的数据采集交付方式难以保证数据安全性和规范性的问题。
为解决上述问题,本发明提供一种数据采集交付方法,即通过在存在多人参与的数据采集交付需求时,根据实际需求确定对应的多个角色,并将各个角色分配至各个节点上,采用数据流转的方式来执行目标数据从采集到最终交付的过程,使得***能够保证交付流程的规范性以及信息传递的准确性;通过在***的交付节点上发布目标数据后生成对应的提取凭证,并推送至接收节点对应的终端,使得只有正确的接收人才能获取到提取凭证,并登录***在接收节点上提取到目标数据,确保了数据安全性,从而大大提高了数据采集交付过程的数据安全性和规范性,解决了现有的数据采集交付方式难以保证数据安全性和规范性的问题。
如图1所示,图1是本发明实施例方案涉及的硬件运行环境的设备结构示意图。
如图1所示,该数据采集交付***可以包括:处理器1001,例如CPU,用户接口1003,网络接口1004,存储器1005,通信总线1002。其中,通信总线1002用于实现这些组件之间的连接通信。用户接口1003可以包括显示屏(Display)、输入单元比如键盘(Keyboard),可选用户接口1003还可以包括标准的有线接口、无线接口。网络接口1004可选的可以包括标准的有线接口、无线接口(如WI-FI接口)。存储器1005可以是高速RAM存储器,也可以是稳定的存储器(non-volatile memory),例如磁盘存储器。存储器1005可选的还可以是独立于前述处理器1001的存储装置。
本领域技术人员可以理解,图1中示出的设备结构并不构成对设备的限定,可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件布置。
如图1所示,作为一种计算机存储介质的存储器1005中可以包括操作***、网络通信模块、用户接口模块以及数据采集交付程序。
在图1所示的设备中,网络接口1004主要用于连接后台服务器,与后台服务器进行数据通信;用户接口1003主要用于连接客户端(程序员端),与客户端进行数据通信;而处理器1001可以用于调用存储器1005中存储的数据采集交付程序,并执行下述数据采集交付方法中的操作。
基于上述硬件结构,提出本发明数据采集交付方法实施例。
参照图2,图2为本发明数据采集交付方法第一实施例的流程示意图。所述数据采集交付方法包括;
步骤S10,接收数据采集申请,基于所述数据采集申请确定数据流转节点,其中,所述数据流转节点至少包括处理节点、交付节点和接收节点;
在本实施例中,本发明应用于数据采集交付***。该***具体可采用PYTHON+DJANGO技术开发,使用数据采集流程为用户提供紧急,临时渠道采集生产数据,用于应对监管检查,对外报送及运营分析等,帮助IT人员建立有效、可靠和安全的管理及交付生产数据的采集,存储,交付及跟踪。
数据采集申请具体可以由两种方式接收,第一种是从对接的ITSM工单***同步接收数据采集申请,另一种则是数据需求方登录该***手动录入数据采集申请,手动录入后,***可以新建相关的数据采集目录,用于存放数据和脚本。数据流转节点指的是数据采集申请在***上从创建到完成的过程中,需要流经的若干节点,其中至少包括处理节点、交付节点和接收节点。由于***采用了多角色、多功能线上交付方式,处理节点指的是数据采集申请的处理人在***上对应的节点,交付节点指的是数据采集申请的交付人在***上对应的节点,接收节点指的是数据采集申请的接收人在***上对应的节点。具体地,***在接收到由数据需求方手动录入的一数据采集申请时,新建与该数据采集申请相关的数据采集目录并自动生成与该申请对应的待办任务,然后根据该手动录入信息确定该任务对应的处理人、交付人和接收人,并创建对应的处理节点、交付节点和接收节点。
步骤S20,将所述数据采集申请流转至所述处理节点,在所述处理节点上基于所述数据采集申请采集目标数据;
步骤S30,将所述目标数据传递至所述交付节点,在所述交付节点上发布所述目标数据,并生成数据提取凭证;
在本实施例中,***将此***任务按照确定的流转顺序流转至处理节点,并可向对应处理人发送相应任务处理通知,处理人登录***,在自己对应的处理节点上基于自己的数据采集权限采集到该申请所需的目标数据,即可完成处理节点的任务。需要说明的是,同一数据采集申请中,处理节点对应的处理人可以为一个或多个。
处理人在采集完成申请所需要的所有目标数据后,数据流转节点自动从处理节点流转到下一个交付节点,也可向交付人发送相应任务处理通知,交付人登录***后,在自己对应的交付节点上按照自己的操作权限将处理节点上采集到的目标数据在***上发布,并可生成发布数据对应的数据标签,该数据标签可用来表示数据具有唯一性的相关信息,如excel的版本号等。另外,在交付节点上目标数据发布时还生成与该目标数据对应的数据提取凭证,凭证的具体形式可以为文本形式、图片形式、语音形式等,凭证的生成方式可以是基于目标数据生成,也可以是根据预设规则完全随机生成。需要说明的是,关于数据发布环节,***需要更新数据采集状态(完成),数据发布人,最后发布时间等。此外,***还可设有数据发布撤销功能。
步骤S40,将所述数据提取凭证推送至所述接收节点对应终端,在所述接收节点上按照所述数据提取凭证提取所述目标数据,以完成所述目标数据的线上交付。
在本实施例中,***将此***任务流转至处理节点接收节点,将在交付节点上生成的数据提取凭证推送给接收人,具体可以通过发送邮件、短信等方式进行推送。接收人在接收到数据提取凭证后,登录***以利用该提取凭证在自己对应的接收节点上提取目标数据,至此,即可完成当前的***任务,数据需求方成功获取到需要的数据,***也完成了该任务的线上交付。
另外,在数据交付使用完毕后,***还可触发清除提醒,并需要使用方确认已清除,从流程上进一步保障了数据防泄漏的安全性。
作为一具体实施例,如图3所示。图3为***功能示意图。对于本实施例中的数据交付***(平台),主要包括了数据管理、数据发布、数据交付、检索/查询、配置及权限管理功能。
对于数据管理功能,具体包括了数据采集申请管理、数据采集脚本管理和数据采集数据管理。数据采集申请管理:除了ITSM同步过来外,需提供手动录入渠道,维护数据采集申请,手动录入后,可以新建相关的数据采集目录,用于存放数据和脚本;数据采集数据及脚本管理:包括上传,修改,删除和导出功能,除查询外,需保留操作记录,对于已经发布出去的数据,不可以删除,如果数据多次上传,需要增加版本号。
对于数据发布功能,具体包括数据标记、数据发布(验证)及再次发布。数据发布:生成数据标签(唯一标签,可用来标示数据相关信息),产生数据提取码,由***生成数据提取链接,并通过邮件通知数据提取人,数据再次发布;数据发布撤销功能。
操作数据发布时,提取人默认为数据采集申请人;用户根据收到的数据提取码登陆平台,输入提取码后,在限定的时间内可以不限次数提取数据,时效为***默认设置;为了确认采集数据准确,在发布过程中,可以更改和指定提取人,可以先通过数据发布将数据给到数据属主确认数据准确性;数据发布或者再次发布,***需要更新数据采集状态(完成),数据发布人,最后发布时间;***对发布的各项功能操作都需保留操作记录(操作时间,操作人员等)。
对于数据交付(提取)功能,数据发布后,指定用户在通过域账号登陆校验后,输入提取凭证后可以在限定的时间内提取数据,过了指定时效后将无法提取。
对于查询/检索功能,包括数据采集申请查询(按编号,申请人,部门,日期(时间),***,标题,申请内容,采集项目,是否报送等,具体参考ITSM接口数据),采集、发布和提取状态查询,并且支持按标题进行模糊查询。
对于配置及权限管理功能,具体包括菜单权限管理和基础配置管理。菜单权限管理:基本分为管理员权限,数据管理和数据发布权限管理,对删除额外授权;基础配置管理:数据共享默认初始时效设置等。
本实施例提供一种数据采集交付方法,通过在存在多人参与的数据采集交付需求时,根据实际需求确定对应的多个角色,并将各个角色分配至各个节点上,采用数据流转的方式来执行目标数据从采集到最终交付的过程,使得***能够保证交付流程的规范性以及信息传递的准确性;通过在***的交付节点上发布目标数据后生成对应的提取凭证,并推送至接收节点对应的终端,使得只有正确的接收人才能获取到提取凭证,并登录***在接收节点上提取到目标数据,确保了数据安全性,从而大大提高了数据采集交付过程的数据安全性和规范性,解决了现有的数据采集交付方式难以保证数据安全性和规范性的问题。
进一步地,基于上述图2所示的第一实施例,提出本发明数据采集交付方法的第二实施例。在本实施例中,所述数据采集交付***与工单***对接,步骤S10包括:
步骤S10,在接收到由所述工单***同步发送的数据采集工单时,将所述数据采集工单作为所述数据采集申请;
步骤S20,获取所述数据采集工单的工单内容,以确定数据流转人员,并为所述数据流转人员分配所述数据流转节点。
在本实施例中,平台对接了ITSM***,对于数据采集工单会自动流转到数据采集交付***生成***任务,并邮件提醒。在数据采集交付***进行发布之后,也会自动将ITSM工单进行流转,简化处理人操作。在***接收到有ITSM***同步过来的数据采集工单时,会将其作为数据采集申请并创建相应***任务,然后根据工单上的具体内容确定相应的处理人、交付人和接收人,并将该任务下的对应节点与人员进行关联。
进一步地,所述数据流转节点还包括验证节点,步骤S30包括:
步骤S31,将所述目标数据传递至所述交付节点,并判断所述数据流转节点中是否包括验证节点;
步骤S32,若是,则将所述目标数据发送至所述验证节点,直至所述目标数据经所述验证节点验证通过,在所述交付节点上将所述目标数据发布至所述***。
在本实施例中,数据流转节点还包括验证节点。交付人员在对目标数据进行发布之前,***可先判断本次任务中是否需要验证节点,具体是通过判断之前确定的数据流转节点中是否包含验证节点来确定。若本次任务的数据流转节点中包含验证节点,则将目标数据发送给验证节点对应的验证人员(通常是目标数据的属主),由验证人员确认目标数据的准确性,待验证人员确认通过后,将确认信息反馈至交付节点,交付人员则可进行数据发布。若本次任务的数据流转节点中不包含验证节点,也即是目标数据无需验证,则交付人员可直接进行数据发布。
作为一具体实施例,如图4所示,图4为状态流程图。对于创建人:在ITSM提数据采集流程,需要标注是否包含敏感信息等数据。
对于处理人:根据ITSM数据采集工单内容采集创建人所需要的数据,并传给交付人。
对于交付人:将处理人传送的数据发布到数据采集交付平台,如需要进行数据验证,则联系验证人,如无需则发布数据,ITSM同步工单流转。
对于验证人:对提取的数据进行验证。
对于数据接收人:在数据采集交付平台通过提取码提取数据,并进行结果确认。
进一步地,步骤S40之后,还包括:
步骤S50,将所述数据采集申请在全流转过程中的日志记录存入指定数据库。
在本实施例中,***会将数据采集申请的全部流转过程中的一些操作信息生成相应日志并与该申请关联存储至数据库,具体信息可包括:创建人员、创建时间、采集需求、采集人员、采集时间、交付人员、交付时间、数据标签、提取人员、提取时间等。
本实施例进一步通过将全流转过程中的日志信息存入指定数据库,使得***能够有效记录数据采集及交付过程,实现规范化的数据归档,方便事后追踪以及分析优化。
进一步地,基于上述第一实施例,提出本发明数据采集交付方法的第三实施例。在本实施例中,步骤S30之后,还包括:
步骤A1,判断所述目标数据中是否包含敏感数据;
步骤A2,若是,则将预设的第一凭证时效作为所述数据提取凭证的凭证时效;
步骤A3,若否,则将预设的第二凭证时效作为所述数据提取凭证的凭证时效,其中,所述第一凭证时效小于所述第二凭证时效。
在本实施例中,本***还支持安全扫描以及敏感数据时效管理,当数据包含有敏感信息时,下载链接时效具体可为2小时(第一凭证时效),未包含敏感信息则时效为24小时(第二凭证时效),下载链接过期则失效。对于敏感数据的判断方式,可以是数据需求方在提出申请时就在申请中添加敏感信息标识,也可以是***自动根据申请中的数据需求说明信息自动判别是否包含敏感数据。
进一步地,步骤S40之前,还包括:
步骤B1,将所述数据采集申请对应的申请方作为所述接收节点的接收方,以将所述申请方关联终端作为所述接收节点对应终端;
步骤S40包括:
步骤S41,将所述数据提取凭证以邮件形式推送至所述申请方关联终端,并在接收到所述接收节点上发出的携带所述数据提取凭证的提取指令时,判断所述提取指令是否超出所述凭证时效;
步骤S42,若否,则将所述目标数据反馈至所述接收节点,以将所述目标数据线上交付至所述申请方。
在本实施例中,***自动生成验证码作为凭证,并将深情方默认作为接收方,发送邮件到数据采集需求方(即接收人员)。数据采集需求方可根据收到的验证码登录***,在指定时限内无限次提取数据。但若是超出凭证时效,接收方则无法根据凭证提取到相应目标数据,且***会自动提示凭证已失效的信息。
进一步地,所述目标数据中包含敏感数据,步骤S40之后,还包括:
步骤C1,判断所述目标数据是否已提取超出预设时长;
步骤C2,若是,则生成所述目标数据对应的数据销毁提示;
步骤C3,将所述数据销毁提示推送至所述接收节点对应终端,直至接收到所述接收节点的确认销毁指令,基于所述确认销毁指令销毁所述目标数据。
在本实施例中,对于敏感数据,***会提醒用户及时销毁数据直至用户点击确认,用户确认销毁后,***则根据用户的指令对目标数据全部进行销毁,或将目标数据中的敏感数据进行销毁,从而进一步确保数据安全性。
如图5所示,本发明还提供一种数据采集交付***,所述数据采集交付***包括:
流转节点确定模块10,用于接收数据采集申请,基于所述数据采集申请确定数据流转节点,其中,所述数据流转节点至少包括处理节点、交付节点和接收节点;
目标数据采集模块20,用于将所述数据采集申请流转至所述处理节点,在所述处理节点上基于所述数据采集申请采集目标数据;
目标数据发布模块30,用于将所述目标数据传递至所述交付节点,在所述交付节点上发布所述目标数据,并生成数据提取凭证;
目标数据交付模块40,用于将所述数据提取凭证推送至所述接收节点对应终端,在所述接收节点上按照所述数据提取凭证提取所述目标数据,以完成所述目标数据的线上交付。
可选地,所述数据采集交付***与工单***对接,所述流转节点确定模块10包括:
采集工单发送单元,用于在接收到由所述工单***同步发送的数据采集工单时,将所述数据采集工单作为所述数据采集申请;
流转人员确定单元,用于获取所述数据采集工单的工单内容,以确定数据流转人员,并为所述数据流转人员分配所述数据流转节点。
可选地,所述数据流转节点还包括验证节点,
所述标数据发布模块30包括:
验证节点判断单元,用于将所述目标数据传递至所述交付节点,并判断所述数据流转节点中是否包括验证节点;
目标数据验证单元,用于若是,则将所述目标数据发送至所述验证节点,直至所述目标数据经所述验证节点验证通过,在所述交付节点上将所述目标数据发布至所述***。
可选地,所述数据采集交付***还包括:
敏感数据判断模块,用于判断所述目标数据中是否包含敏感数据;
第一时效确定模块,用于若是,则将预设的第一凭证时效作为所述数据提取凭证的凭证时效;
第二时效确定模块,用于若否,则将预设的第二凭证时效作为所述数据提取凭证的凭证时效,其中,所述第一凭证时效小于所述第二凭证时效。
可选地,所述数据采集交付***还包括:
申请终端确定模块,用于将所述数据采集申请对应的申请方作为所述接收节点的接收方,以将所述申请方关联终端作为所述接收节点对应终端;
所述目标数据交付模块40包括:
凭证时效判断单元,用于将所述数据提取凭证以邮件形式推送至所述申请方关联终端,并在接收到所述接收节点上发出的携带所述数据提取凭证的提取指令时,判断所述提取指令是否超出所述凭证时效;
目标数据交付单元,用于若否,则将所述目标数据反馈至所述接收节点,以将所述目标数据线上交付至所述申请方。
可选地,所述目标数据中包含敏感数据,
所述数据采集交付***还包括:
提取时长判断模块,用于判断所述目标数据是否已提取超出预设时长;
销毁提示生成模块,用于若是,则生成所述目标数据对应的数据销毁提示;
目标数据销毁模块,用于将所述数据销毁提示推送至所述接收节点对应终端,直至接收到所述接收节点的确认销毁指令,基于所述确认销毁指令销毁所述目标数据。
可选地,所述数据采集交付***还包括:
日志记录存储模块,用于将所述数据采集申请在全流转过程中的日志记录存入指定数据库。
本发明还提供一种数据采集交付设备。
所述数据采集交付设备包括处理器、存储器及存储在所述存储器上并可在所述处理器上运行的数据采集交付程序,其中所述数据采集交付程序被所述处理器执行时,实现如上所述的数据采集交付方法的步骤。
其中,所述数据采集交付程序被执行时所实现的方法可参照本发明数据采集交付方法的各个实施例,此处不再赘述。
本发明还提供一种计算机可读存储介质。
本发明计算机可读存储介质上存储有数据采集交付程序,所述数据采集交付程序被处理器执行时实现如上所述的数据采集交付方法的步骤。
其中,所述数据采集交付程序被执行时所实现的方法可参照本发明数据采集交付方法各个实施例,此处不再赘述。
本发明还提供一种计算机可读存储介质,包括计算机程序,所述计算机程序被处理器执行时实现如上述的数据采集交付方法的步骤。
其中,所述计算机程序被执行时所实现的方法可参照本发明数据采集交付方法各个实施例,此处不再赘述。
需要说明的是,在本文中,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者***不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者***所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括该要素的过程、方法、物品或者***中还存在另外的相同要素。
上述本发明实施例序号仅仅为了描述,不代表实施例的优劣。
通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件***的方式来实现,当然也可以通过硬件,但很多情况下前者是更佳的实施方式。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品存储在如上所述的一个存储介质(如ROM/RAM、磁碟、光盘)中,包括若干指令用以使得一台终端设备(可以是手机,计算机,服务器,或者网络设备等)执行本发明各个实施例所述的方法。
以上仅为本发明的优选实施例,并非因此限制本发明的专利范围,凡是利用本发明说明书及附图内容所作的等效结构或等效流程变换,或直接或间接运用在其他相关的技术领域,均同理包括在本发明的专利保护范围内。
Claims (10)
1.一种数据采集交付方法,其特征在于,所述数据采集交付方法应用于数据采集交付***,所述数据采集交付方法包括:
接收数据采集申请,基于所述数据采集申请确定数据流转节点,其中,所述数据流转节点至少包括处理节点、交付节点和接收节点;
将所述数据采集申请流转至所述处理节点,在所述处理节点上基于所述数据采集申请采集目标数据;
将所述目标数据传递至所述交付节点,在所述交付节点上发布所述目标数据,并生成数据提取凭证;
将所述数据提取凭证推送至所述接收节点对应终端,在所述接收节点上按照所述数据提取凭证提取所述目标数据,以完成所述目标数据的线上交付。
2.如权利要求1所述的数据采集交付方法,其特征在于,所述数据采集交付***与工单***对接,所述接收数据采集申请,基于所述数据采集申请确定数据流转节点的步骤包括:
在接收到由所述工单***同步发送的数据采集工单时,将所述数据采集工单作为所述数据采集申请;
获取所述数据采集工单的工单内容,以确定数据流转人员,并为所述数据流转人员分配所述数据流转节点。
3.如权利要求1所述的数据采集交付方法,其特征在于,所述数据流转节点还包括验证节点,
所述将所述目标数据传递至所述交付节点,在所述交付节点上发布所述目标数据的步骤包括:
将所述目标数据传递至所述交付节点,并判断所述数据流转节点中是否包括验证节点;
若是,则将所述目标数据发送至所述验证节点,直至所述目标数据经所述验证节点验证通过,在所述交付节点上将所述目标数据发布至所述***。
4.如权利要求1所述的数据采集交付方法,其特征在于,所述生成数据提取凭证的步骤之后,还包括:
判断所述目标数据中是否包含敏感数据;
若是,则将预设的第一凭证时效作为所述数据提取凭证的凭证时效;
若否,则将预设的第二凭证时效作为所述数据提取凭证的凭证时效,其中,所述第一凭证时效小于所述第二凭证时效。
5.如权利要求4所述的数据采集交付方法,其特征在于,所述将所述数据提取凭证推送至所述接收节点对应终端的步骤之前,还包括:
将所述数据采集申请对应的申请方作为所述接收节点的接收方,以将所述申请方关联终端作为所述接收节点对应终端;
所述将所述数据提取凭证推送至所述接收节点对应终端,在所述接收节点上按照所述数据提取凭证提取所述目标数据,以完成所述目标数据的线上交付的步骤包括:
将所述数据提取凭证以邮件形式推送至所述申请方关联终端,并在接收到所述接收节点上发出的携带所述数据提取凭证的提取指令时,判断所述提取指令是否超出所述凭证时效;
若否,则将所述目标数据反馈至所述接收节点,以将所述目标数据线上交付至所述申请方。
6.如权利要求4所述的数据采集交付方法,其特征在于,所述目标数据中包含敏感数据,
所述在所述接收节点上按照所述数据提取凭证提取所述目标数据,以完成所述目标数据的线上交付的步骤之后,还包括:
判断所述目标数据是否已提取超出预设时长;
若是,则生成所述目标数据对应的数据销毁提示;
将所述数据销毁提示推送至所述接收节点对应终端,直至接收到所述接收节点的确认销毁指令,基于所述确认销毁指令销毁所述目标数据。
7.如权利要求1-6任一项所述的数据采集交付方法,其特征在于,所述在所述接收节点上按照所述数据提取凭证提取所述目标数据,以完成所述目标数据的线上交付的步骤之后,还包括:
将所述数据采集申请在全流转过程中的日志记录存入指定数据库。
8.一种数据采集交付***,其特征在于,所述数据采集交付***包括:
流转节点确定模块,用于接收数据采集申请,基于所述数据采集申请确定数据流转节点,其中,所述数据流转节点至少包括处理节点、交付节点和接收节点;
目标数据采集模块,用于将所述数据采集申请流转至所述处理节点,在所述处理节点上基于所述数据采集申请采集目标数据;
目标数据发布模块,用于将所述目标数据传递至所述交付节点,在所述交付节点上发布所述目标数据,并生成数据提取凭证;
目标数据交付模块,用于将所述数据提取凭证推送至所述接收节点对应终端,在所述接收节点上按照所述数据提取凭证提取所述目标数据,以完成所述目标数据的线上交付。
9.一种数据采集交付设备,其特征在于,所述数据采集交付设备包括:存储器、处理器及存储在所述存储器上并可在所述处理器上运行的数据采集交付程序,所述数据采集交付程序被所述处理器执行时实现如权利要求1至7中任一项所述的数据采集交付方法的步骤。
10.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质包括计算机程序,所述计算机程序被处理器执行时实现如权利要求1至7中任一项所述的数据采集交付方法的步骤。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202111046273.6A CN113836592A (zh) | 2021-09-07 | 2021-09-07 | 数据采集交付方法、***、设备及计算机可读存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202111046273.6A CN113836592A (zh) | 2021-09-07 | 2021-09-07 | 数据采集交付方法、***、设备及计算机可读存储介质 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN113836592A true CN113836592A (zh) | 2021-12-24 |
Family
ID=78958638
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202111046273.6A Pending CN113836592A (zh) | 2021-09-07 | 2021-09-07 | 数据采集交付方法、***、设备及计算机可读存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN113836592A (zh) |
Citations (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106030636A (zh) * | 2014-02-21 | 2016-10-12 | 维萨国际服务协会 | 用于发射并接收交易信息的***和方法 |
CN106657116A (zh) * | 2016-12-30 | 2017-05-10 | 北京奇虎科技有限公司 | 一种远程开启流数据传输的方法和装置 |
CN108665261A (zh) * | 2018-04-20 | 2018-10-16 | 杭州环普数据技术有限公司 | 一种去中心化的物联网数据交易*** |
US10128000B1 (en) * | 2012-04-19 | 2018-11-13 | Kaiser Foundation Hospitals | Computer system and method for delivering operational intelligence for ambulatory team based care and virtual medicine |
CN109040070A (zh) * | 2018-08-02 | 2018-12-18 | 深圳前海微众银行股份有限公司 | 文件发送方法、设备及计算机可读存储介质 |
CN110321113A (zh) * | 2019-07-09 | 2019-10-11 | 苏宁消费金融有限公司 | 以项目批次为标准的一体化流水线***及其工作方法 |
CN110493220A (zh) * | 2019-08-16 | 2019-11-22 | 腾讯科技(深圳)有限公司 | 一种基于区块链的数据共享方法、设备及存储介质 |
CN111970236A (zh) * | 2020-07-08 | 2020-11-20 | 招联消费金融有限公司 | 跨网数据传输方法和装置 |
CN112804403A (zh) * | 2021-01-21 | 2021-05-14 | 咪咕音乐有限公司 | 信息交互方法、电子设备及可读存储介质 |
CN112800145A (zh) * | 2021-01-27 | 2021-05-14 | 西安重装配套技术服务有限公司 | 基于大数据体系的综采工作面数据融合方法 |
CN112966308A (zh) * | 2021-04-23 | 2021-06-15 | 京东方科技集团股份有限公司 | 软件交付方法、处理设备及存储介质 |
CN113343272A (zh) * | 2021-06-30 | 2021-09-03 | 重庆富民银行股份有限公司 | 一种应用于数据库的自动化数据提取***及方法 |
-
2021
- 2021-09-07 CN CN202111046273.6A patent/CN113836592A/zh active Pending
Patent Citations (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US10128000B1 (en) * | 2012-04-19 | 2018-11-13 | Kaiser Foundation Hospitals | Computer system and method for delivering operational intelligence for ambulatory team based care and virtual medicine |
CN106030636A (zh) * | 2014-02-21 | 2016-10-12 | 维萨国际服务协会 | 用于发射并接收交易信息的***和方法 |
CN106657116A (zh) * | 2016-12-30 | 2017-05-10 | 北京奇虎科技有限公司 | 一种远程开启流数据传输的方法和装置 |
CN108665261A (zh) * | 2018-04-20 | 2018-10-16 | 杭州环普数据技术有限公司 | 一种去中心化的物联网数据交易*** |
CN109040070A (zh) * | 2018-08-02 | 2018-12-18 | 深圳前海微众银行股份有限公司 | 文件发送方法、设备及计算机可读存储介质 |
CN110321113A (zh) * | 2019-07-09 | 2019-10-11 | 苏宁消费金融有限公司 | 以项目批次为标准的一体化流水线***及其工作方法 |
CN110493220A (zh) * | 2019-08-16 | 2019-11-22 | 腾讯科技(深圳)有限公司 | 一种基于区块链的数据共享方法、设备及存储介质 |
CN111970236A (zh) * | 2020-07-08 | 2020-11-20 | 招联消费金融有限公司 | 跨网数据传输方法和装置 |
CN112804403A (zh) * | 2021-01-21 | 2021-05-14 | 咪咕音乐有限公司 | 信息交互方法、电子设备及可读存储介质 |
CN112800145A (zh) * | 2021-01-27 | 2021-05-14 | 西安重装配套技术服务有限公司 | 基于大数据体系的综采工作面数据融合方法 |
CN112966308A (zh) * | 2021-04-23 | 2021-06-15 | 京东方科技集团股份有限公司 | 软件交付方法、处理设备及存储介质 |
CN113343272A (zh) * | 2021-06-30 | 2021-09-03 | 重庆富民银行股份有限公司 | 一种应用于数据库的自动化数据提取***及方法 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US11063767B2 (en) | Apparatus and method to perform secure data sharing in a distributed network by using a blockchain | |
Anglano | Forensic analysis of WhatsApp Messenger on Android smartphones | |
US8204949B1 (en) | Email enabled project management applications | |
CN111382985B (zh) | 待办消息集成推送***和工作方法 | |
CN1756192A (zh) | 为在线使用主含的应用程序管理终端服务帐户和会话 | |
CN110895603B (zh) | 多***账号信息整合方法和装置 | |
CN111666539B (zh) | 一种房地产资源管理方法、装置、服务器及存储介质 | |
CN109885790B (zh) | 获取满意度评价数据的方法和装置 | |
CN112966308A (zh) | 软件交付方法、处理设备及存储介质 | |
CN111833190A (zh) | 年金数据处理方法、装置、介质及电子设备 | |
CN100531154C (zh) | 实现消息业务的***和方法 | |
CN112434040B (zh) | 数据存储方法、数据获取方法及装置、***及设备 | |
CN113836592A (zh) | 数据采集交付方法、***、设备及计算机可读存储介质 | |
CN113778709B (zh) | 接口调用方法、装置、服务器及存储介质 | |
CN105471818B (zh) | 应用软件间的信息传递方法和*** | |
CN101345740B (zh) | 一种多媒体数据的数字识别注册、处理方法及*** | |
CN114757151A (zh) | 文档编辑方法、设备及存储介质 | |
CN113485731A (zh) | 一种用于区块链的智能合约升级方法和*** | |
JP2012181793A (ja) | 電子マニュアル更新通知システム | |
CN108075932B (zh) | 一种数据监控方法和装置 | |
JP2000105720A (ja) | 複数サーバ/クライアント間のデータ回送制御方式 | |
JP6062843B2 (ja) | 情報連携管理システムおよび情報連携管理方法 | |
CN113179333B (zh) | 一种用于区块链的文件传输与实时计算***及方法 | |
CN112561455B (zh) | 一种业务申办控制***及业务申办控制方法 | |
CN112333455B (zh) | 信令下发方法、装置、服务器以及存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |