CN111949612A - 基于hadoop的非结构化数据存储中间件***以及其使用方法 - Google Patents

基于hadoop的非结构化数据存储中间件***以及其使用方法 Download PDF

Info

Publication number
CN111949612A
CN111949612A CN202010755885.1A CN202010755885A CN111949612A CN 111949612 A CN111949612 A CN 111949612A CN 202010755885 A CN202010755885 A CN 202010755885A CN 111949612 A CN111949612 A CN 111949612A
Authority
CN
China
Prior art keywords
data
module
packaging
information
application layer
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202010755885.1A
Other languages
English (en)
Other versions
CN111949612B (zh
Inventor
官鲁卫
陈霞
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Guangxi Meicube Engineering Consulting Co Ltd
Original Assignee
Guangxi Meicube Engineering Consulting Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Guangxi Meicube Engineering Consulting Co Ltd filed Critical Guangxi Meicube Engineering Consulting Co Ltd
Priority to CN202010755885.1A priority Critical patent/CN111949612B/zh
Publication of CN111949612A publication Critical patent/CN111949612A/zh
Application granted granted Critical
Publication of CN111949612B publication Critical patent/CN111949612B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/10—File systems; File servers
    • G06F16/16—File or folder operations, e.g. details of user interfaces specifically adapted to file systems
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/10—File systems; File servers
    • G06F16/17—Details of further file system functions
    • G06F16/172—Caching, prefetching or hoarding of files
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/90—Details of database functions independent of the retrieved data types
    • G06F16/901—Indexing; Data structures therefor; Storage structures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/90—Details of database functions independent of the retrieved data types
    • G06F16/906—Clustering; Classification

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Databases & Information Systems (AREA)
  • Data Mining & Analysis (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Software Systems (AREA)
  • Human Computer Interaction (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本发明属于数据存储技术领域，尤其是基于hadoop的非结构化数据存储中间件***以及其使用方法，所述***包括：与数据库和文件***连接的数据校验模块，且所述数据校验模块与数据读取模块连接；数据读取模块连接有数据处理组件，所述数据处理组件还分别与数据库以及文件***连接，数据处理组件用于：根据数据类别对原始数据信息进行分类后，根据数据关键字对分类后的数据进行封装，并发送至对应的数据库或者文件***。应用本发明，可以实现对数据的分类封装。

Description

基于hadoop的非结构化数据存储中间件***以及其使用方法
技术领域
本发明涉及数据存储技术领域，尤其涉及基于hadoop的非结构化数据存储中间件***以及其使用方法。
背景技术
随着信息技术的发展，在编程中如何避免程序开发人员话费过多的时间在调节程序在不同***的适应性上，提出了中间件思路。中间件是介于应用***和***软件之间的一类软件，中间件是一种独立的***软件服务程序，分布式应用软件借助这种软件在不同的技术之间共享资源，中间件位于客户机服务器的操作***之上，管理计算资源和网络通信。目前，中间件在计算机***中起到承上启下的作用，其将底层***与应用软件之间进行了隔离，这样程序开发人员可以将更多的时间用在开发程序上，而不是调节程序的适应性上，极大地提高了开发效率。
现有技术中申请号为201910902344.4的发明专利申请公开了一种基于非结构化数据中间件文件云存储的方法和装置，属于数据存储技术领域。该云存储装置包括统一集成接口、存储方式识别接口、存储方式集成库、非结构化数据完整性识别接口、数据文件大小检测接口、云端中间件、数据分类识别匹配接口和非结构化数据分类库；通过本发明能将复杂的非结构化数据进行分类加密存储等，云端中间件能够根据存储的数据大小弹性扩容，这使得用户提交数据时无需考虑存储空间大小和数据的存储物理位置。同时能够使第三方***能快速获取文件数据，减少了存储压力，节省的页面的响应时间，提高工作效率，为用户带来良好的使用体验，节省了硬件成本。
但是，发明人发现，现有技术中虽然进行了分类，在应用软件调用该文件时，仍然需要逐一遍历才能查询到需要的文件，导致查询效率较低。
发明内容
本发明提出的基于hadoop的非结构化数据存储中间件***以及其使用方法，以解决现有技术中查询效率较低的技术问题。
为了实现上述目的，本发明采用了如下技术方案：
本发明提供了基于hadoop的非结构化数据存储中间件***，所述***包括：与数据库和文件***连接的数据校验模块，且所述数据校验模块与数据读取模块连接；
数据读取模块连接有数据处理组件，所述数据处理组件还分别与数据库以及文件***连接，数据处理组件用于：根据数据类别对原始数据信息进行分类后，根据数据关键字对分类后的数据进行封装，并发送至对应的数据库或者文件***。
可选的，所述数据校验模块用于校验位于数据库以及文件***的原始数据信息，验证原始数据信息是否被读取，数据读取模块将校验完成的原始数据信息进行读取转换。
可选的，所述数据处理组件包括指令接收模块、数据分类模、数据管理模块、数据封装模块、数据发布模块、数据管理设置模块和数据缓存模块，其中，
数据分类模、数据管理模块、数据封装模块、数据发布模块和数据缓存模块依次连接；
数据缓存模块分别与数据封装模块、数据分类模块、数据读取模块和指令接收模块连接；
指令接收模块、数据管理设置模块和数据管理模块依次连接，数据读取模块与数据分类模块连接。
可选的，所述指令接收模块用于接收用于数据处理条件的指令信息同时向数据管理模块发布数据处理的方式；数据分类模将读取完成后的原始数据信息进行分类处理，同时形成分类列表进行登记，然后将分类的原始数据信息以及分类列表存储至数据缓存模块当中；数据管理模块用于将分类之后的数据按照设定方式进行处理；数据封装模块将完成处理的数据进行封装处理并发送至数据缓存模块和数据发布模块，数据发布模块将完成封装的数据推送至数据库和文件***，数据管理设置模块用于管理数据管理模块对数据的处理方式，数据缓存模块用于存储数据读取模块读取的原始数据信息、指令接收模块接收的指令信息、数据封装模块封装的信息以及数据发布模块分布的信息。
可选的，所述数据缓存模块在接收到封装后的数据以及分类后的原始数据信息设为只读；
所述数据或者文件***接收到封装后的数据后，向第一应用层软件提供服务；
第一应用层软件在接收到封装后的数据后，从数据缓存模块中读取分类后的原始数据信息；然后，根据该原始数据信息的类别，利用对应于该类别的封装算法封装分类后的原始数据信息，得到封装验证数据；根据封装验证数据与封装数据是否相同判断中间件的数据封装过程是否存在风险。
可选的，所述第一应用层软件部署在除中间件以外的其他服务器上。
可选的，所述第一应用层软件还用于：在封装验证数据与封装数据是相同的情况下判定中间件的数据封装过程不存在风险后，所述第一应用层软件向服务器网络中部署的第二应用层软件广播，部署有中间件的服务器封装对应类别数据的过程不存在风险，其中，第一应用层软件与第二应用层软件对应的数据类别相同。
可选的，部署有第一应用层软件的服务器还部署有第三应用层软件，用于接收其他服务器发送的针对三应用层软件对应的数据类别的广播消息，其中，所述第三应用层软件与第一应用层软件对应的数据类别不同。
本发明还提供了使用上述任一项基于hadoop的非结构化数据存储中间件***的方法，所述方法包括：
S1数据校验读取：数据校验模块对数据库以及文件***中的原始数据信息进行校验，当验证原始数据信息通过的时候，数据读取模块将校验完成的原始数据信息进行读取转换；
S2数据处理控制：首先指令接收模块接收到用于数据处理条件的指令信息，然后将这些指令信息传输至数据管理设置模块，以使数据管理设置模块对数据管理模块当中的数据处理调节进行设置；
S2数据处理：数据分类模将读取完成后的原始数据信息进行分类处理，同时形成分类列表进行登记，然后将分类的原始数据信息以及分类列表存储至数据缓存模块当中；然后数据管理模块将分类之后的数据按照设定方式进行处理，并将处理后的数据发送至数据封装模块进行封装，数据封装模块将封装后的数据分别发送至数据缓存模块和数据发布模块，以使数据发布模块将封装后的数据按照分类列表中的位置信息推送至对应的数据库或者文件***。
应用本发明实施例，通过设置关键词对分类的数据进行封装，在应用软件需要调用该文件时，可以仅遍历关键字即可，无需遍历整个文件，遍历的内容较少，进而提高了查询效率。
附图说明
图1为本发明提出的基于hadoop的非结构化数据存储中间件***的结构示意图。
具体实施方式
下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。
第一方面，图1为本发明提出的基于hadoop的非结构化数据存储中间件***的结构示意图，如图1所示，所述***包括：与数据库和文件***连接的数据校验模块，且所述数据校验模块与数据读取模块连接；
数据读取模块连接有数据处理组件，所述数据处理组件还分别与数据库以及文件***连接，数据处理组件用于：根据数据类别对原始数据信息进行分类后，利用关键词提取算法提取出原始数据信息的关键字，然后将关键字作为该原始数据信息的索引，根据数据关键字对分类后的数据进行封装，并发送至对应的数据库或者文件***。
需要强调的是，在用户从应用软件层查询原始数据信息，会使用与中间层相同的关键词提取算法进行关键词的提取；或者应用软件中存储有关键词列表，用户根据该关键词列表进行查询得到需要的关键词，然后根据该关键词进行原始数据信息的查询。
在本发明实施例的一种具体实施方式中，所述数据校验模块用于校验位于数据库以及文件***的原始数据信息，验证原始数据信息是否被读取，数据读取模块将校验完成的原始数据信息进行读取转换。
在本发明实施例的一种具体实施方式中，所述数据处理组件包括指令接收模块、数据分类模、数据管理模块、数据封装模块、数据发布模块、数据管理设置模块和数据缓存模块，其中，
数据分类模、数据管理模块、数据封装模块、数据发布模块和数据缓存模块依次连接；
数据缓存模块分别与数据封装模块、数据分类模块、数据读取模块和指令接收模块连接；
指令接收模块、数据管理设置模块和数据管理模块依次连接，数据读取模块与数据分类模块连接。
在本发明实施例的一种具体实施方式中，所述指令接收模块用于接收用于数据处理条件的指令信息同时向数据管理模块发布数据处理的方式；数据分类模将读取完成后的原始数据信息进行分类处理，同时形成分类列表进行登记，然后将分类的原始数据信息以及分类列表存储至数据缓存模块当中；数据管理模块用于将分类之后的数据按照设定方式进行处理；数据封装模块将完成处理的数据进行封装处理并发送至数据缓存模块和数据发布模块，数据发布模块将完成封装的数据推送至数据库和文件***，数据管理设置模块用于管理数据管理模块对数据的处理方式，数据缓存模块用于存储数据读取模块读取的原始数据信息、指令接收模块接收的指令信息、数据封装模块封装的信息以及数据发布模块分布的信息。
在本发明实施例的一种具体实施方式中，所述数据缓存模块在接收到封装后的数据以及分类后的原始数据信息设为只读；包含数据缓存模块的中间件部署于服务器A；
所述数据或者文件***接收到封装后的数据后，向部署于服务器B的第一应用层软件提供服务；
第一应用层软件在接收到封装后的数据后，从服务器A的数据缓存模块中读取分类后的原始数据信息；然后，第一应用层软件从原始数据信息中获取该原始数据信息的类别，然后根据该原始数据信息的类别从服务器B中查询到对应该类别的封装算法；然后使用该封装算法封装所读取出的原始数据信，得到封装验证数据；根据封装验证数据与封装数据是否相同判断中间件的数据封装过程是否存在风险。当封装验证数据与封装数据相同时判定中间件的数据封装过程不存在风险；当封装验证数据与封装数据不相同时判定中间件的数据封装过程存在风险。应用本发明实施例，第一应用层软件对封装算法进行验证，进而可以在封装算法被篡改，或者数据存取过程被写入非法数据时及时发现异常。
进一步的，在服务器A封装原始数据信息时，还可以将针对原始数据信息的哈希值封装进去作为唯一标识，进而避免原始数据信息被篡改，进而保证了安全性。
在本发明实施例的一种具体实施方式中，所述第一应用层软件还用于：在封装验证数据与封装数据是相同的情况下判定中间件的数据封装过程不存在风险后，所述第一应用层软件向服务器网络中部署的第二应用层软件广播，部署有中间件的服务器封装对应类别数据的过程不存在风险，其中，第一应用层软件与第二应用层软件对应的数据类别相同。
示例性的，当部署在服务器B上的第一应用层软件发现了所读取的原始数据信息以及对应的封装数据不存在风险时，通知服务器C、服务器D上部署的第二应用层软件，第二应用层软件收到广播后，则不再对服务器A上的封装数据进行封装验证，避免了重复验证，提高了效率。
另外，当部署在服务器B上的第一应用层软件发现了所读取的原始数据信息以及对应的封装数据存在风险时，通知服务器C、服务器D上部署的第二应用层软件，第二应用层软件收到广播后，则不再对服务器A上的封装数据进行读取，在避免了重复验证的同时，还可以通知其他服务器封装数据存在风险，提高了***安全性。
需要强调的是，第一应用层软件与第二应用层软件处理的原始数据信息的类别是相同的。
在本发明实施例的一种具体实施方式中，部署有第一应用层软件的服务器还部署有第三应用层软件，用于接收其他服务器发送的针对三应用层软件对应的数据类别的广播消息，其中，所述第三应用层软件与第一应用层软件对应的数据类别不同。
服务器A中部署的第三应用层软件可能会从其他服务器，如服务器F中读取对应类型的原始数据信息，类似的，服务器A也可以作为广播接受方接收针对该类型的原始数据信息的验证的广播，应用本发明上述实施例，避免了重复验证，提高了效率。
基于本发明第一方面实施例，本发明还提供了使用基于hadoop的非结构化数据存储中间件***的方法，所述方法包括：
S1数据校验读取：数据校验模块对数据库以及文件***中的原始数据信息进行校验，当验证原始数据信息通过的时候，数据读取模块将校验完成的原始数据信息进行读取转换；
S2数据处理控制：首先指令接收模块接收到用于数据处理条件的指令信息，然后将这些指令信息传输至数据管理设置模块，以使数据管理设置模块对数据管理模块当中的数据处理调节进行设置；从而调整数据管理的不同方式，适合不同条件数据的处理；
S2数据处理：数据分类模将读取完成后的原始数据信息进行分类处理，同时形成分类列表进行登记，然后将分类的原始数据信息以及分类列表存储至数据缓存模块当中；然后数据管理模块将分类之后的数据按照设定方式进行处理，并将处理后的数据发送至数据封装模块进行封装，数据封装模块将封装后的数据分别发送至数据缓存模块和数据发布模块，以使数据发布模块将封装后的数据按照分类列表中的位置信息推送至对应的数据库或者文件***。
此外，术语“第一”、“第二”仅用于描述目的，而不能理解为指示或暗示相对重要性或者隐含指明所指示的技术特征的数量。由此，限定有“第一”、“第二”的特征可以明示或者隐含地包括一个或者更多个该特征。在本发明的描述中，“多个”的含义是两个或两个以上，除非另有明确具体的限定。
以上所述，仅为本发明较佳的具体实施方式，但本发明的保护范围并不局限于此，任何熟悉本技术领域的技术人员在本发明揭露的技术范围内，根据本发明的技术方案及其发明构思加以等同替换或改变，都应涵盖在本发明的保护范围之内。

Claims (9)

1.基于hadoop的非结构化数据存储中间件***，其特征在于，所述***包括：与数据库和文件***连接的数据校验模块，且所述数据校验模块与数据读取模块连接；
数据读取模块连接有数据处理组件，所述数据处理组件还分别与数据库以及文件***连接，数据处理组件用于：根据数据类别对原始数据信息进行分类后，根据数据关键字对分类后的数据进行封装，并发送至对应的数据库或者文件***。
2.根据权利要求1所述的基于hadoop的非结构化数据存储中间件***，其特征在于，所述数据校验模块用于校验位于数据库以及文件***的原始数据信息，验证原始数据信息是否被读取，数据读取模块将校验完成的原始数据信息进行读取转换。
3.根据权利要求1所述的基于hadoop的非结构化数据存储中间件***，其特征在于，所述数据处理组件包括指令接收模块、数据分类模、数据管理模块、数据封装模块、数据发布模块、数据管理设置模块和数据缓存模块，其中，
数据分类模、数据管理模块、数据封装模块、数据发布模块和数据缓存模块依次连接；
数据缓存模块分别与数据封装模块、数据分类模块、数据读取模块和指令接收模块连接；
指令接收模块、数据管理设置模块和数据管理模块依次连接，数据读取模块与数据分类模块连接。
4.根据权利要求3所述的基于hadoop的非结构化数据存储中间件***，其特征在于，所述指令接收模块用于接收用于数据处理条件的指令信息同时向数据管理模块发布数据处理的方式；数据分类模将读取完成后的原始数据信息进行分类处理，同时形成分类列表进行登记，然后将分类的原始数据信息以及分类列表存储至数据缓存模块当中；数据管理模块用于将分类之后的数据按照设定方式进行处理；数据封装模块将完成处理的数据进行封装处理并发送至数据缓存模块和数据发布模块，数据发布模块将完成封装的数据推送至数据库和文件***，数据管理设置模块用于管理数据管理模块对数据的处理方式，数据缓存模块用于存储数据读取模块读取的原始数据信息、指令接收模块接收的指令信息、数据封装模块封装的信息以及数据发布模块分布的信息。
5.根据权利要求3所述的基于hadoop的非结构化数据存储中间件***，其特征在于，所述数据缓存模块在接收到封装后的数据以及分类后的原始数据信息设为只读；
所述数据或者文件***接收到封装后的数据后，向第一应用层软件提供服务；
第一应用层软件在接收到封装后的数据后，从数据缓存模块中读取分类后的原始数据信息；然后，根据该原始数据信息的类别，利用对应于该类别的封装算法封装分类后的原始数据信息，得到封装验证数据；根据封装验证数据与封装数据是否相同判断中间件的数据封装过程是否存在风险。
6.根据权利要求5所述的基于hadoop的非结构化数据存储中间件***，其特征在于，所述第一应用层软件部署在除中间件以外的其他服务器上。
7.根据权利要求6所述的基于hadoop的非结构化数据存储中间件***，其特征在于，所述第一应用层软件还用于：在封装验证数据与封装数据是相同的情况下判定中间件的数据封装过程不存在风险后，所述第一应用层软件向服务器网络中部署的第二应用层软件广播，部署有中间件的服务器封装对应类别数据的过程不存在风险，其中，第一应用层软件与第二应用层软件对应的数据类别相同。
8.根据权利要求7所述的基于hadoop的非结构化数据存储中间件***，其特征在于，部署有第一应用层软件的服务器还部署有第三应用层软件，用于接收其他服务器发送的针对三应用层软件对应的数据类别的广播消息，其中，所述第三应用层软件与第一应用层软件对应的数据类别不同。
9.使用权利要求1-4任一项基于hadoop的非结构化数据存储中间件***的方法，其特征在于，所述方法包括：
S1数据校验读取：数据校验模块对数据库以及文件***中的原始数据信息进行校验，当验证原始数据信息通过的时候，数据读取模块将校验完成的原始数据信息进行读取转换；
S2数据处理控制：首先指令接收模块接收到用于数据处理条件的指令信息，然后将这些指令信息传输至数据管理设置模块，以使数据管理设置模块对数据管理模块当中的数据处理调节进行设置；
S2数据处理：数据分类模将读取完成后的原始数据信息进行分类处理，同时形成分类列表进行登记，然后将分类的原始数据信息以及分类列表存储至数据缓存模块当中；然后数据管理模块将分类之后的数据按照设定方式进行处理，并将处理后的数据发送至数据封装模块进行封装，数据封装模块将封装后的数据分别发送至数据缓存模块和数据发布模块，以使数据发布模块将封装后的数据按照分类列表中的位置信息推送至对应的数据库或者文件***。
CN202010755885.1A 2020-07-31 2020-07-31 基于hadoop的非结构化数据存储中间件***以及其使用方法 Active CN111949612B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202010755885.1A CN111949612B (zh) 2020-07-31 2020-07-31 基于hadoop的非结构化数据存储中间件***以及其使用方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010755885.1A CN111949612B (zh) 2020-07-31 2020-07-31 基于hadoop的非结构化数据存储中间件***以及其使用方法

Publications (2)

Publication Number Publication Date
CN111949612A true CN111949612A (zh) 2020-11-17
CN111949612B CN111949612B (zh) 2023-02-28

Family

ID=73338922

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010755885.1A Active CN111949612B (zh) 2020-07-31 2020-07-31 基于hadoop的非结构化数据存储中间件***以及其使用方法

Country Status (1)

Country Link
CN (1) CN111949612B (zh)

Citations (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20060129745A1 (en) * 2004-12-11 2006-06-15 Gunther Thiel Process and appliance for data processing and computer program product
CN102270238A (zh) * 2011-08-11 2011-12-07 北京龙戴特信息技术有限公司 构建语文知识点拓展的方法和装置
CN104077290A (zh) * 2013-03-26 2014-10-01 腾讯科技（深圳）有限公司 一种生成推广账户的方法和装置
CN105830406A (zh) * 2013-12-18 2016-08-03 瑞典爱立信有限公司 用于支持软件定义网络中的灵活查找关键字的方法、设备和***
CN105956932A (zh) * 2016-04-29 2016-09-21 中国南方电网有限责任公司电网技术研究中心 配用电数据融合方法和***
CN106649496A (zh) * 2016-10-10 2017-05-10 国信优易数据有限公司 一种政务数据采集共享***与方法
CN106815338A (zh) * 2016-12-25 2017-06-09 北京中海投资管理有限公司 一种大数据的实时存储、处理和查询***
US20180239602A1 (en) * 2015-07-20 2018-08-23 Google Llc Methods for Multi-Source Configuration of Mobile Applications
CN108628947A (zh) * 2018-04-02 2018-10-09 阿里巴巴集团控股有限公司 一种业务规则匹配处理方法、装置及处理设备
CN109101277A (zh) * 2017-06-20 2018-12-28 恒为科技（上海）股份有限公司 一种基于语义一致性的信息处理***
CN110297945A (zh) * 2019-07-02 2019-10-01 中国工商银行股份有限公司 基于xbrl的数据信息处理方法及***
CN110619048A (zh) * 2019-09-24 2019-12-27 云南昆钢电子信息科技有限公司 一种基于非结构化数据中间件文件云存储的方法和装置
CN111191228A (zh) * 2019-12-20 2020-05-22 京东数字科技控股有限公司 一种业务处理方法及装置、设备、存储介质

Patent Citations (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20060129745A1 (en) * 2004-12-11 2006-06-15 Gunther Thiel Process and appliance for data processing and computer program product
CN102270238A (zh) * 2011-08-11 2011-12-07 北京龙戴特信息技术有限公司 构建语文知识点拓展的方法和装置
CN104077290A (zh) * 2013-03-26 2014-10-01 腾讯科技（深圳）有限公司 一种生成推广账户的方法和装置
CN105830406A (zh) * 2013-12-18 2016-08-03 瑞典爱立信有限公司 用于支持软件定义网络中的灵活查找关键字的方法、设备和***
US20180239602A1 (en) * 2015-07-20 2018-08-23 Google Llc Methods for Multi-Source Configuration of Mobile Applications
CN105956932A (zh) * 2016-04-29 2016-09-21 中国南方电网有限责任公司电网技术研究中心 配用电数据融合方法和***
CN106649496A (zh) * 2016-10-10 2017-05-10 国信优易数据有限公司 一种政务数据采集共享***与方法
CN106815338A (zh) * 2016-12-25 2017-06-09 北京中海投资管理有限公司 一种大数据的实时存储、处理和查询***
CN109101277A (zh) * 2017-06-20 2018-12-28 恒为科技（上海）股份有限公司 一种基于语义一致性的信息处理***
CN108628947A (zh) * 2018-04-02 2018-10-09 阿里巴巴集团控股有限公司 一种业务规则匹配处理方法、装置及处理设备
CN110297945A (zh) * 2019-07-02 2019-10-01 中国工商银行股份有限公司 基于xbrl的数据信息处理方法及***
CN110619048A (zh) * 2019-09-24 2019-12-27 云南昆钢电子信息科技有限公司 一种基于非结构化数据中间件文件云存储的方法和装置
CN111191228A (zh) * 2019-12-20 2020-05-22 京东数字科技控股有限公司 一种业务处理方法及装置、设备、存储介质

Also Published As

Publication number Publication date
CN111949612B (zh) 2023-02-28

Similar Documents

Publication Publication Date Title
US20200285978A1 (en) Model training system and method, and storage medium
CN108810006B (zh) 资源访问方法、装置、设备及存储介质
US20090319639A1 (en) Content identification method and system, and scidm client and server
US11563560B2 (en) Blockchain-based data evidence storage method and apparatus
CN108289098B (zh) 分布式文件***的权限管理方法和装置、服务器、介质
EP2275949B1 (en) Content identification method and system, content management client and server
CN111865895B (zh) 一种基于云平台的数据保密传输方法及***
CN111241152B (zh) 政策信息挖掘方法、装置及云服务器
CN114091099A (zh) 一种针对业务***的权限分级控制方法、设备及存储介质
CN113395271A (zh) 一种云计算平台中数据安全访问方法及云计算平台
CN111061713A (zh) 区块链数据融合方法、装置、设备以及存储介质
CN112035402A (zh) 一种文件存储方法、装置及终端设备
Wen et al. Secrethunter: A large-scale secret scanner for public git repositories
CN111949612B (zh) 基于hadoop的非结构化数据存储中间件***以及其使用方法
CN115526551B (zh) 基于人工智能的农产品溯源数据处理方法及云平台
CN113986835B (zh) FastDFS分布式文件的管理方法、装置、设备及存储介质
CN114443595A (zh) 一种处理文件的方法及装置
CN112214769A (zh) 基于SGX架构的Windows***的主动度量***
CN107704557B (zh) 操作互斥数据的处理方法、装置、计算机设备和存储介质
CN114491653A (zh) 数据内容防篡改***、方法及装置
CN108075932B (zh) 一种数据监控方法和装置
CN116340991B (zh) Ip图库素材资源的大数据管理方法、装置以及电子设备
CN114745368B (zh) 文件下载方法、装置、计算机设备和计算机可读存储介质
US7827287B2 (en) Interim execution context identifier
CN115333807B (zh) 一种实现跨场景的数据安全交互方法及***

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant