CN114500674A - 分布式***数据透传方法、装置、存储介质及*** - Google Patents
分布式***数据透传方法、装置、存储介质及*** Download PDFInfo
- Publication number
- CN114500674A CN114500674A CN202210287687.6A CN202210287687A CN114500674A CN 114500674 A CN114500674 A CN 114500674A CN 202210287687 A CN202210287687 A CN 202210287687A CN 114500674 A CN114500674 A CN 114500674A
- Authority
- CN
- China
- Prior art keywords
- transparent transmission
- transmission data
- protocol
- data
- transparent
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 230000005540 biological transmission Effects 0.000 title claims abstract description 525
- 238000000034 method Methods 0.000 title claims abstract description 45
- 238000012545 processing Methods 0.000 claims abstract description 69
- 230000002452 interceptive effect Effects 0.000 claims abstract description 35
- 238000003032 molecular docking Methods 0.000 claims description 16
- 238000004590 computer program Methods 0.000 claims description 8
- 238000004458 analytical method Methods 0.000 claims description 5
- 238000011161 development Methods 0.000 abstract description 4
- 238000004891 communication Methods 0.000 description 6
- 238000013481 data capture Methods 0.000 description 6
- 238000012827 research and development Methods 0.000 description 6
- 238000010586 diagram Methods 0.000 description 5
- 230000003993 interaction Effects 0.000 description 5
- 210000001503 joint Anatomy 0.000 description 3
- 230000008569 process Effects 0.000 description 3
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 230000009286 beneficial effect Effects 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 230000007547 defect Effects 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 238000004806 packaging method and process Methods 0.000 description 1
- 238000003672 processing method Methods 0.000 description 1
- 239000013589 supplement Substances 0.000 description 1
- 238000012546 transfer Methods 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L69/00—Network arrangements, protocols or services independent of the application payload and not provided for in the other groups of this subclass
- H04L69/06—Notations for structuring of protocol data, e.g. abstract syntax notation one [ASN.1]
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L69/00—Network arrangements, protocols or services independent of the application payload and not provided for in the other groups of this subclass
- H04L69/18—Multiprotocol handlers, e.g. single devices capable of handling multiple protocols
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L69/00—Network arrangements, protocols or services independent of the application payload and not provided for in the other groups of this subclass
- H04L69/22—Parsing or analysis of headers
Landscapes
- Engineering & Computer Science (AREA)
- Computer Security & Cryptography (AREA)
- Computer Networks & Wireless Communication (AREA)
- Signal Processing (AREA)
- Computer And Data Communications (AREA)
Abstract
本发明涉及数据处理领域,提供一种分布式***数据透传方法、装置、存储介质及***,数据透传方法包括:获取客户端发送的第一传输协议请求;基于所述第一传输协议请求,应用预设的透传协议层模块,确定待传输的透传数据;并将所述透传数据添加至透传数据容器中;基于第二传输协议,从所述透传数据容器中取出所述透传数据;标识所述透传数据,并将标识后的透传数据添加至网关发送的第二传输协议请求中,以发送至目的地址;本发明的分布式***数据透传方法及装置能够提供多种远程程序调用交互数据的透传,具有很高的可扩展性;并且能够适用于异构分布式***的数据透传场景,为不同的开发语言的数据透传提供低成本的接入和使用。
Description
技术领域
本发明涉及数据处理领域,特别是涉及分布式***数据透传方法、装置、存储介质及***。
背景技术
在微服务架构的分布式***场景中,服务消费者和服务提供者之间通过定义的API接口进行远程程序调用交互数据的传输,这些数据包含API接口标识和API参数,其中,API参数用于满足具体业务服务的数据要求。在复杂的微服务***中,除API参数外,还需要有一些数据在远程程序调用交互中进行透传,以作为API参数的动态补充,以及供运行在***中的中间件和基础框架使用,这些透传的数据在传输时不会对API接口产生影响。
现有技术中分布式***的透传方法主要是各中间件为满足自身的数据透传场景而独立实现各自的功能模块,这种处理方法中的数据参数基本都是固定的,不便设置动态参数,不利于其他中间件或基础框架的集成使用。
因此,如何在分布式***中进行灵活、可扩展的数据透传是一个亟待解决的问题。
发明内容
鉴于以上所述现有技术的缺点,本发明的目的在于提供一种分布式***数据透传方法、装置、存储介质及***,用于解决现有技术中无法在分布式***中进行灵活、可扩展的数据透传的问题。
为实现上述目的及其他相关目的,本发明提供一种分布式***数据透传方法,包括以下步骤:获取客户端发送的第一传输协议请求;基于所述第一传输协议请求,应用预设的透传协议层模块,确定待传输的透传数据;并将所述透传数据添加至透传数据容器中;基于第二传输协议,从所述透传数据容器中取出所述透传数据;标识所述透传数据,并将标识后的透传数据添加至网关发送的第二传输协议请求中,以发送至目的地址。
于本发明的一实施例中,所述基于所述第一传输协议请求,应用预设的透传协议层模块,确定待传输的透传数据,包括:基于所述第一传输协议请求头,获取透传标识;当得到所述透传标识时,确定所述透传标识对应的透传数据;当未得到所述透传标识时,获取所述第一传输协议请求头中所述逻辑组装模块定义的透传数据对应的字段;基于所述字段,确定所述字段对应到的所述透传数据;当基于所述字段未得到所述透传数据时,对预定义可解析的字段进行解析,以得到所述字段解析后对应的透传数据。
于本发明的一实施例中,所述将标识后的透传数据添加至网关发送的第二传输协议请求中,以发送至目的地址,包括:第二传输协议的服务器接收所述第二传输协议请求;基于所述第二传输协议请求,应用所述透传协议层模块,确定所述透传数据;并将所述透传数据添加至所述服务器对应的透传数据容器中;基于所述第二传输协议,所述服务器从所述服务器对应的透传数据容器中取出所述透传数据;标识所述透传数据,并将标识后的透传数据添加至服务器发送的第二传输协议请求中,以发送给所述目的地址。
于本发明的一实施例中,第一传输协议和所述第二传输协议不同。
于本发明的一实施例中,所述将所述透传数据添加至透传数据容器中之后,还包括:从所述透传数据容器中取出所述透传数据;标识所述透传数据,并将标识后的透传数据添加至所述网关发送的所述第一传输协议的第二请求中,将所述第二请求直接发送至所述目的地址。
于本发明的一实施例中,所述透传数据容器配置在所述网关的内存中。
对应地,本发明提供一种分布式***数据透传装置,包括:获取模块,用于获取客户端发送的第一传输协议请求;确定模块,用于基于所述第一传输协议请求,应用预设的透传协议层模块,确定待传输的透传数据;并将所述透传数据添加至透传数据容器中;第一处理模块,用于基于第二传输协议,从所述透传数据容器中取出所述透传数据;第二处理模块,用于标识所述透传数据,并将标识后的透传数据添加至网关发送的第二传输协议请求中,以发送至目的地址。
其中,所述透传协议层模块包括:协议管理模块、协议对接模块、逻辑组装模块以及逻辑处理模块;所述协议管理模块,用于对接的协议注册和处理逻辑的定义管理;所述协议对接模块,用于定义不同交互协议中执行透传协议的透传入口,以及透传处理流程的执行;所述逻辑组装模块,用于基于所述协议管理模块中的处理逻辑的定义创建逻辑处理对象,包括透传数据接收处理器、交互协议参数透传数据抓取处理器、交互协议头部透传数据抓取处理器以及交互协议头部字段解析透传处理器;所述逻辑处理模块,用于交互协议对接透传协议的逻辑处理的实现,包括透传数据接收处理器和透传数据发送处理器。
所述确定模块,具体用于:基于所述第一传输协议请求头,获取透传标识;当得到所述透传标识时,确定所述透传标识对应的透传数据;当未得到所述透传标识时,获取所述第一传输协议请求头中所述逻辑组装模块定义的透传数据对应的字段;基于所述字段,确定所述字段对应到的所述透传数据;当基于所述字段未得到所述透传数据时,对令牌字段进行解析,以得到所述透传数据。
本发明提供一种存储介质,其上存储有计算机程序,该程序被处理器执行时实现上述的分布式***数据透传方法。
本发明提供一种分布式***数据透传***,包括存储器,用于存储计算机程序;处理器,用于运行所述计算机程序以实现上述的分布式***数据透传方法。
如上所述,本发明的分布式***数据透传方法及装置,具有以下有益效果:
(1)能够提供多种远程程序调用交互数据的透传,具有很高的可扩展性。
(2)能够适用于异构分布式***的数据透传场景,为不同的开发语言的数据透传提供低成本的接入和使用。
(3)能够对中间件和基础框架提供数据透传的支撑能力,省去了其中的数据透传模块的研发成本,提高研发效率。
附图说明
图1显示为本发明的分布式***数据透传方法于一实施例中的流程图。
图2显示为本发明的分布式***数据透传方法于一实施例中的透传数据传输流程图。
图3显示为本发明的分布式***数据透传方法于一实施例中的实例示意图。
图4显示为本发明的分布式***数据透传装置于一实施例中的结构示意图。
图5显示为本发明的分布式***数据透传方法于一实施例中的透传协议层模块图。
图6显示为本发明的分布式***数据透传装置于一实施例中的分布式***数据透传***图。
元件标号说明
41 获取模块
42 确定模块
43 第一处理模块
44 第二处理模块
51 协议管理模块
52 协议对接模块
53 逻辑组装模块
54 逻辑处理模块
61 处理器
62 存储器
具体实施方式
以下通过特定的具体实例说明本发明的实施方式,本领域技术人员可由本说明书所揭露的内容轻易地了解本发明的其他优点与功效。本发明还可以通过另外不同的具体实施方式加以实施或应用,本说明书中的各项细节也可以基于不同观点与应用,在没有背离本发明的精神下进行各种修饰或改变。需说明的是,在不冲突的情况下,以下实施例及实施例中的特征可以相互组合。
需要说明的是,以下实施例中所提供的图示仅以示意方式说明本发明的基本构想,遂图式中仅显示与本发明中有关的组件而非按照实际实施时的组件数目、形状及尺寸绘制,其实际实施时各组件的型态、数量及比例可为一种随意的改变,且其组件布局型态也可能更为复杂。
本发明的分布式***数据透传方法及装置,能够提供多种远程程序调用交互数据的透传,具有很高的可扩展性;并且能够适用于异构分布式***的数据透传场景,为不同的开发语言的数据透传提供低成本的接入和使用;此外,能够对中间件和基础框架提供数据透传的支撑能力,省去了其中的数据透传模块的研发成本,提高研发效率。
如图1所示,于本实施例中,本发明的分布式***数据透传方法包括以下步骤:
步骤S1、获取客户端发送的第一传输协议请求。
具体地,在分布式***中当有数据透传需求时,客户端至网关的传输协议为第一传输协议,在客户端发送第一传输协议请求前,将透传数据添加至第一传输协议请求的第一传输协议请求头中,和传输数据一起发送至网关。
步骤S2、基于所述第一传输协议请求,应用预设的透传协议层模块,确定待传输的透传数据;并将所述透传数据添加至透传数据容器中。
具体地,所述透传协议层模块包括:协议管理模块、协议对接模块、逻辑组装模块以及逻辑处理模块;所述协议管理模块,用于对接的协议注册和处理逻辑的定义管理;所述协议对接模块,用于定义不同交互协议中执行透传协议的透传入口,以及透传处理流程的执行;所述逻辑组装模块,用于基于所述协议管理模块中的处理逻辑的定义创建逻辑处理对象,包括透传数据接收处理器、交互协议参数透传数据抓取处理器、交互协议头部透传数据抓取处理器以及交互协议头部字段解析透传处理器;所述逻辑处理模块,用于交互协议对接透传协议的逻辑处理的实现,包括透传数据接收处理器和透传数据发送处理器。
进一步具体地,如图2所示,于本实施例中,本发明的透传数据传输流程图。在透传协议层的模块设置好后,基于透传协议和交互协议的对接以及数据传输网络流程,确定透传数据的传输流程,包括:由逻辑处理层21对透传数据进行预先处理,通过透传协议层22发送包含透传数据的传输协议请求,并将添加有透传数据的传输协议请求传递至通信交互层23,通过网络传输24发送至接收端,接收端通过通信交互层23接收包含透传数据的传输协议请求,并通过透传协议层22从传输协议请求中获取透传数据,再通过逻辑处理层21对透传数据进行操作处理,从而完成透传数据的全链路透传。
进一步具体地,基于所述第一传输协议请求头,获取透传标识;当得到所述透传标识时,确定所述透传标识对应的透传数据;当未得到所述透传标识时,获取所述第一传输协议请求头中所述逻辑组装模块定义的透传数据对应的字段;基于所述字段,确定所述字段对应到的所述透传数据;当基于所述字段未得到对应的透传数据时,对预定义可解析的字段进行解析,以得到所述字段解析后对应的透传数据。
举例来说,预先设定的透传数据的透传标识为_tt_m_,客户端现在有透传数据的需求,需要将透传数据从超文本传输协议(Hyper Text transfer protocol,Http)的通信网络传递至分布式服务框架协议Dubbo协议的通信网络中。先由客户端将透传数据添加至第一传输协议请求中,将包含有透传数据的第一传输协议请求和传输的数据传输发送至网关,其中,客户端和网关之间的第一传输协议为Http协议;网关再与Dubbo协议的服务器通信连接,Dubbo协议的服务器通过第二传输协议Dubbo协议与请求的目的地址连接。预先基于Http协议和透传协议层的模块,在透传协议层的逻辑组装模块中对透传处理的逻辑定义有4个,分别对应4个透传输入处理器,包括Http协议的透传数据接收处理器;Http协议参数透传数据抓取处理器;Http协议头部透传数据抓取处理器;以及对Http协议头部中字段解析的解析透传处理器。通过Http协议提交的数据有接口的业务数据、公共的数据等,其中,公共的数据对应的字段包括令牌字段等;并预先基于Dubbo协议和透传协议层的模块,在透传协议层的逻辑组装模块中对透传处理的逻辑定有4个,分别对应4个透传输入处理器,包括Dubbo协议的透传数据接收处理器;Dubbo协议参数透传数据抓取处理器;Dubbo协议头部透传数据抓取处理器;以及对Dubbo协议头部中字段解析的解析透传处理器。网关是网络服务器,预先通过协议透传对接的抽象对象和透传处理的逻辑定义创建一组Http协议相关的透传接收处理器;以及一组Dubbo协议相关的透传发送处理器。在实际的透传数据传输场景中,首先是从Http协议请求头中根据请求头名称是否包含透传标识进行透传数据的获取,当得到透传标识时,确定透传标识对应的透传数据,将透传数据添加至透传数据容器中;当从Http协议请求头中未能检测出透传标识时,从Http协议请求中获取透传处理的逻辑定义的透传数据对应的字段,基于字段,确定字段对应的透传数据;当通过字段未能获取透传数据时,再通过对预定义可解析的字段进行解析,以得到字段解析后对应的透传数据。
进一步具体地,预先在内存中配置有透传数据容器,当识别出透传数据后,将透传数据存入透传数据容器中;这里对透传数据容器做了更高层次的抽象实现,可兼容各种交互协议的实现,以及异步线程之间的透传。
步骤S3、基于第二传输协议,从所述透传数据容器中取出所述透传数据。
具体地,从透传数据容器中获取透传数据,以对透传数据进行打标识。
进一步具体地,在从透传数据容器中未获取到透传数据时,在内存中新创建透传数据容器,并应用代码添加的方式将透传数据添加至透传数据容器中,再从透传数据容器中获取到该新添加的透传数据,以对透传数据进行打标识。
步骤S4、标识所述透传数据,并将标识后的透传数据添加至网关发送的第二传输协议请求中,以发送至目的地址。
具体地,第二传输协议的服务器接收所述第二传输协议请求;基于所述第二传输协议请求,应用所述透传协议层模块,确定所述透传数据;并将所述透传数据添加至所述服务器对应的透传数据容器中;基于所述第二传输协议,所述服务器从所述服务器对应的透传数据容器中取出所述透传数据;标识所述透传数据,并将标识后的透传数据添加至服务器发送的第二传输协议请求中,以发送给所述目的地址。
举例来说,在上述实例中,当网关将添加有透传数据的Dubbo协议请求发送至Dubbo协议服务器后,Dubbo协议服务器基于Dubbo协议请求,应用透传协议层模块,确定透传数据,具体地,首先是从Dubbo协议请求头中根据请求头名称是否包含透传标识进行透传数据的获取;当得到透传标识时,确定透传标识对应的透传数据,将透传数据添加至透传数据容器中;当从Dubbo协议请求头中未能检测出透传标识时,从Dubbo协议请求中获取透传处理的逻辑定义的透传数据对应的字段,基于字段,确定字段对应的透传数据;当通过字段未能获取透传数据时,再通过对预定义可解析的字段进行解析,以得到字段解析后对应的透传数据。并将透传数据添加至透传数据容器中,基于Dubbo协议,Dubbo协议服务器从透传数据容器中取出透传数据,并标识透传数据,将标识后的透传数据添加至Dubbo协议请求中,发送至目的地址。
进一步具体地,第一传输协议和所述第二传输协议不同。上述实例中的交互协议不止一个,其中,第一传输协议为Http协议,第二传输协议为Dubbo协议;是在多个交互协议关联的全链路中进行的数据透传处理;在另一些实例场景中,数据透传处理的交互协议可以根据实际网络传输场景扩展至更多个协议;或者,数据透传处理也可在同一交互协议中进行传输处理。
同一交互协议的数据透传处理过程如下。
获取客户端发送的第一传输协议请求;基于所述第一传输协议请求,应用预设的透传协议层模块,确定待传输的透传数据;并将所述透传数据添加至透传数据容器中;从所述透传数据容器中取出所述透传数据;标识所述透传数据,并将标识后的透传数据添加至所述网关发送的所述第一传输协议的第二请求中,将所述第二请求直接发送至所述目的地址。
举例来说,预先设定的透传数据的透传标识为_tt_m_,客户端现在有透传数据的需求,需要将透传数据在Http协议的通信网络中传输至目的地址。先由客户端将透传数据添加至Http协议请求中,将包含有透传数据的Http协议请求和传输的数据传输发送至网关。预先基于Http协议和透传协议层的模块,在透传协议层的逻辑组装模块中对透传处理有4个逻辑定义,分别对应4个透传输入处理器,包括Http协议的透传数据接收处理器;Http协议参数透传数据抓取处理器;Http协议头部透传数据抓取处理器;以及对Http协议头部中字段解析的解析透传处理器。通过Http协议提交的数据有接口的业务数据、公共的数据等,其中,公共的数据对应的字段包括令牌字段等;对网关预先通过协议透传对接的抽象对象和透传处理的逻辑定义创建一组Http协议相关的透传接收处理器。在实际的透传数据传输场景中,首先是从Http协议请求头中根据请求头名称是否包含透传标识进行透传数据的获取,当得到透传标识时,确定透传标识对应的透传数据,将透传数据添加至透传数据容器中;当从Http协议请求头中未能检测出透传标识时,从Http协议请求中获取透传处理的逻辑定义的透传数据对应的字段,基于字段,确定字段对应的透传数据;当通过字段未能获取透传数据时,再通过对预定义可解析的字段进行解析,以得到字段解析后对应的透传数据。再将透传数据添加至透传数据容器中;当网关需要将透传数据传输至目的地址时,网关从透传数据容器中取出透传数据;标识透传数据,并将标识后的透传数据添加至网关发送的Http协议的第二请求中,网关将第二请求直接发送至目的地址。如图3所示,于本实施例中,本发明的实例示意图。当有接收透传数据的请求时,基于第一传输协议请求,应用预设的透传协议层模块,确定待传输的透传数据31。具体地,首先是从第一传输协议请求头中根据请求头名称是否包含透传标识进行透传数据的获取,当得到透传标识时,确定透传标识对应的透传数据,将透传数据添加至透传数据容器中;当从第一传输协议请求头中未能检测出透传标识时,从第一传输协议请求中获取透传处理的逻辑定义的透传数据对应的字段,基于字段,确定字段对应的透传数据;当通过字段未能获取透传数据时,再通过对预定义可解析的字段进行解析,以得到字段解析后对应的透传数据;在得到透传数据32后,将透传数据添加至透传数据容器中33。当有发送透传数据的请求时,比如网关需要将透传数据传输至某一目的地址34时,网关从透传数据容器中取出透传数据35;标识透传数据,并将标识后的透传数据添加至网关发送的第二传输协议的第二请求36中,网关将第二请求发送至相应的目的地址。
如图4所示,于本实施例中,本发明的分布式***数据透传装置包括:
获取模块41,用于获取客户端发送的第一传输协议请求;
确定模块42,用于基于所述第一传输协议请求,应用预设的透传协议层模块,确定待传输的透传数据;并将所述透传数据添加至透传数据容器中;
第一处理模块43,用于基于第二传输协议,从所述透传数据容器中取出所述透传数据;
第二处理模块44,用于标识所述透传数据,并将标识后的透传数据添加至网关发送的第二传输协议请求中,以发送至目的地址。
其中,所述透传协议层模块包括:协议管理模块、协议对接模块、逻辑组装模块以及逻辑处理模块;所述协议管理模块,用于对接的协议注册和处理逻辑的定义管理;所述协议对接模块,用于定义不同交互协议中执行透传协议的透传入口,以及透传处理流程的执行;所述逻辑组装模块,用于基于所述协议管理模块中的处理逻辑的定义创建逻辑处理对象,包括透传数据接收处理器、交互协议参数透传数据抓取处理器、交互协议头部透传数据抓取处理器以及交互协议头部字段解析透传处理器;所述逻辑处理模块,用于交互协议对接透传协议的逻辑处理的实现,包括透传数据接收处理器和透传数据发送处理器。所述确定模块42,具体用于:基于所述第一传输协议请求头,获取透传标识;当得到所述透传标识时,确定所述透传标识对应的透传数据;当未得到所述透传标识时,获取所述第一传输协议请求头中所述逻辑组装模块定义的透传数据对应的字段;基于所述字段,确定所述字段对应到的所述透传数据;当基于所述字段未得到所述透传数据时,对令牌字段进行解析,以得到所述透传数据。
进一步具体地,如图5所示,于本实施例中,本发明的透传协议层模块图;透传协议层模块包括:协议管理模块51、协议对接模块52、逻辑组装模块53以及逻辑处理模块54。其中,协议管理模块51,用于在应用定义的透传协议层的模块进行工作时,创建不同协议的透传对接协议实现,使用缓存策略有效提升协议对接实现的获取性能;处理逻辑的定义可以通过接口实现更新。
协议对接模块52,用于交互协议和透传协议的对接,当协议管理模块的处理逻辑定义发生改变时,通过协议对接模块对逻辑组装模块中的处理逻辑进行新的组装。其中,包括协议透传对接的抽象对象,交互协议根据这个抽象对象实现透传协议的对接。
逻辑组装模块53,用于通过协议管理模块中的处理逻辑的定义创建逻辑处理对象,并包装成列表,该模块使用迭代器的方式对逻辑处理进行合理编排,从而减少中间过程的判断,提升执行速度。其中,包括:透传处理的逻辑定义、透传数据的接收器以及透传数据的发送器;由协议对接模块中的抽象对象维护透传数据的接收器和透传数据的发送器;透传数据的接收器用于维护一组由透传处理的逻辑定义指定的逻辑处理模块中的透传数据输入处理器;透传数据的发送器用于维护一组由透传处理的逻辑定义指定的逻辑处理模块中的透传数据输出处理器;透传处理的逻辑定义根据该定义创建多个透传逻辑处理器,包括:透传数据接收处理器、交互协议参数透传数据抓取处理器、交互协议头部透传数据抓取处理器以及交互协议头部字段解析透传处理器。
逻辑处理模块54,即具体的透传逻辑都是该模块完成的,该模块将每个单独的数据透传逻辑包装成透传输入者和透传输出者,每个单独的数据透传逻辑用于接收包含透传数据的请求和将包含透传数据的请求发送的传递。其中,包括:透传数据接收处理器和透传数据输发送处理器。
本实施例的分布式***数据透传装置具体实现的技术特征与实施例1分布式***数据透传方法中的各步骤的原理基本相同,方法和装置之间可以通用的技术内容不作重复赘述。
本发明的存储介质上存储有计算机程序,该程序被处理器执行时实现上述的分布式***数据透传方法。
如图6所示,于本实施例中,本发明的分布式***数据透传***包括:处理器61及存储器62。
所述存储器62用于存储计算机程序。
所述存储器62包括:ROM、RAM、磁碟、U盘、存储卡或者光盘等各种可以存储程序代码的介质。
所述处理器61与所述存储器62相连,用于执行所述存储器62存储的计算机程序,以使所述分布式***数据透传***执行上述的分布式***数据透传方法。
优选地,上述的处理器61可以是通用处理器,包括中央处理器(CentralProcessing Unit,简称CPU)、网络处理器(Network Processor,简称NP)、图形处理器(Graphic Processing Unit,GPU)等,其中,在实际应用中,主要采用的通用处理器是图形处理器;还可以是数字信号处理器(Digital Signal Processing,简称DSP)、专用集成电路(Application Specific Integrated Circuit,简称ASIC)、现场可编程门阵列(Field-Programmable Gate Array,简称FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件。
综上所述,本发明的分布式***数据透传方法及装置,能够提供多种远程程序调用交互数据的透传,具有很高的可扩展性;并且能够适用于异构分布式***的数据透传场景,为不同的开发语言的数据透传提供低成本的接入和使用;此外,能够对中间件和基础框架提供数据透传的支撑能力,省去了其中的数据透传模块的研发成本,提高研发效率。所以,本发明有效克服了现有技术中的种种缺点而具高度产业利用价值。
上述实施例仅例示性说明本发明的原理及其功效,而非用于限制本发明。任何熟悉此技术的人士皆可在不违背本发明的精神及范畴下,对上述实施例进行修饰或改变。因此,举凡所属技术领域中具有通常知识者在未脱离本发明所揭示的精神与技术思想下所完成的一切等效修饰或改变,仍应由本发明的权利要求所涵盖。
Claims (10)
1.一种分布式***数据透传方法,其特征在于,应用于网关,包括:
获取客户端发送的第一传输协议请求;
基于所述第一传输协议请求,应用预设的透传协议层模块,确定待传输的透传数据;并将所述透传数据添加至透传数据容器中;
基于第二传输协议,从所述透传数据容器中取出所述透传数据;
标识所述透传数据,并将标识后的透传数据添加至所述网关发送的第二传输协议请求中,以发送至目的地址。
2.根据权利要求1所述的方法,其特征在于,所述基于所述第一传输协议请求,应用预设的透传协议层模块,确定待传输的透传数据,包括:
基于第一传输协议请求头,获取透传标识;
当得到所述透传标识时,确定所述透传标识对应的透传数据;
当未得到所述透传标识时,获取所述第一传输协议请求头中所述逻辑组装模块定义的透传数据对应的字段;
基于所述字段,确定所述字段对应到的所述透传数据;
当基于所述字段未得到对应的透传数据时,对预定义可解析的字段进行解析,以得到所述字段解析后对应的透传数据。
3.根据权利要求1所述的方法,其特征在于,所述将标识后的透传数据添加至所述网关发送的第二传输协议请求中,以发送至目的地址,包括:
第二传输协议的服务器接收所述第二传输协议请求;
基于所述第二传输协议请求,应用所述透传协议层模块,确定所述透传数据;并将所述透传数据添加至所述服务器对应的透传数据容器中;
基于所述第二传输协议,所述服务器从所述服务器对应的透传数据容器中取出所述透传数据;
标识所述透传数据,并将标识后的透传数据添加至服务器发送的第二传输协议请求中,以发送给所述目的地址。
4.根据权利要求1所述的方法,其特征在于,第一传输协议和所述第二传输协议不同。
5.根据权利要求1所述的方法,其特征在于,所述将所述透传数据添加至透传数据容器中之后,还包括:
从所述透传数据容器中取出所述透传数据;
标识所述透传数据,并将标识后的透传数据添加至所述网关发送的所述第一传输协议的第二请求中,将所述第二请求直接发送至所述目的地址。
6.根据权利要求1所述的方法,其特征在于,所述透传数据容器配置在所述网关的内存中。
7.一种分布式***数据透传装置,其特征在于,包括:
获取模块,用于获取客户端发送的第一传输协议请求;
确定模块,用于基于所述第一传输协议请求,应用预设的透传协议层模块,确定待传输的透传数据;并将所述透传数据添加至透传数据容器中;
第一处理模块,用于基于第二传输协议,从所述透传数据容器中取出所述透传数据;
第二处理模块,用于标识所述透传数据,并将标识后的透传数据添加至网关发送的第二传输协议请求中,以发送至目的地址。
8.根据权利要求7所述的装置,其特征在于,所述透传协议层模块包括:协议管理模块、协议对接模块、逻辑组装模块以及逻辑处理模块;
所述协议管理模块,用于对接的协议注册和处理逻辑的定义管理;
所述协议对接模块,用于定义不同交互协议中执行透传协议的透传入口,以及透传处理流程的执行;
所述逻辑组装模块,用于基于所述协议管理模块中的处理逻辑的定义创建逻辑处理对象,包括透传数据接收处理器、交互协议参数透传数据抓取处理器、交互协议头部透传数据抓取处理器以及交互协议头部字段解析透传处理器;
所述逻辑处理模块,用于交互协议对接透传协议的逻辑处理的实现,包括透传数据接收处理器和透传数据发送处理器。
9.一种存储介质,存储有程序指令,其中,所述程序指令被执行时实现如权利要求1至权利要求6任一项所述的分布式***数据透传方法的步骤。
10.一种分布式***数据透传***,其特征在于:包括存储器,用于存储计算机程序;处理器,用于运行所述计算机程序以实现如权利要求1至权利要求6任一权利要求所述的分布式***数据透传方法的步骤。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202210287687.6A CN114500674A (zh) | 2022-03-22 | 2022-03-22 | 分布式***数据透传方法、装置、存储介质及*** |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202210287687.6A CN114500674A (zh) | 2022-03-22 | 2022-03-22 | 分布式***数据透传方法、装置、存储介质及*** |
Publications (1)
Publication Number | Publication Date |
---|---|
CN114500674A true CN114500674A (zh) | 2022-05-13 |
Family
ID=81489094
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202210287687.6A Pending CN114500674A (zh) | 2022-03-22 | 2022-03-22 | 分布式***数据透传方法、装置、存储介质及*** |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN114500674A (zh) |
Citations (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1677361A (zh) * | 2004-03-31 | 2005-10-05 | 华为技术有限公司 | 一种分布式测试组件框架***及测试组件透传方法 |
CN105493471A (zh) * | 2014-01-20 | 2016-04-13 | 华为技术有限公司 | 透传数据传输方法及公共服务实体 |
CN109413083A (zh) * | 2018-11-12 | 2019-03-01 | 山东鲁能智能技术有限公司 | 一种智能站通信网关机数据透明传输方法及*** |
CN111045942A (zh) * | 2019-12-12 | 2020-04-21 | 同盾控股有限公司 | 应用测试方法、***、存储介质及电子设备 |
CN112667359A (zh) * | 2020-12-30 | 2021-04-16 | 深圳市科思科技股份有限公司 | 数据透传方法、电子设备及存储介质 |
CN112738042A (zh) * | 2020-12-22 | 2021-04-30 | 上海上实龙创智能科技股份有限公司 | 一种基于mqtt协议的物联网设备模型及其数据穿透方法 |
CN112825496A (zh) * | 2019-11-21 | 2021-05-21 | ***通信有限公司研究院 | 时间信息传输的处理方法、装置及存储介质 |
CN113992448A (zh) * | 2021-12-28 | 2022-01-28 | 北京瑞莱智慧科技有限公司 | 一种数据透传方法、***、介质及计算设备 |
CN114172948A (zh) * | 2022-02-09 | 2022-03-11 | 北京数码视讯技术有限公司 | 基于udp的ip透传网关传输***和方法 |
-
2022
- 2022-03-22 CN CN202210287687.6A patent/CN114500674A/zh active Pending
Patent Citations (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1677361A (zh) * | 2004-03-31 | 2005-10-05 | 华为技术有限公司 | 一种分布式测试组件框架***及测试组件透传方法 |
CN105493471A (zh) * | 2014-01-20 | 2016-04-13 | 华为技术有限公司 | 透传数据传输方法及公共服务实体 |
CN109413083A (zh) * | 2018-11-12 | 2019-03-01 | 山东鲁能智能技术有限公司 | 一种智能站通信网关机数据透明传输方法及*** |
CN112825496A (zh) * | 2019-11-21 | 2021-05-21 | ***通信有限公司研究院 | 时间信息传输的处理方法、装置及存储介质 |
CN111045942A (zh) * | 2019-12-12 | 2020-04-21 | 同盾控股有限公司 | 应用测试方法、***、存储介质及电子设备 |
CN112738042A (zh) * | 2020-12-22 | 2021-04-30 | 上海上实龙创智能科技股份有限公司 | 一种基于mqtt协议的物联网设备模型及其数据穿透方法 |
CN112667359A (zh) * | 2020-12-30 | 2021-04-16 | 深圳市科思科技股份有限公司 | 数据透传方法、电子设备及存储介质 |
CN113992448A (zh) * | 2021-12-28 | 2022-01-28 | 北京瑞莱智慧科技有限公司 | 一种数据透传方法、***、介质及计算设备 |
CN114172948A (zh) * | 2022-02-09 | 2022-03-11 | 北京数码视讯技术有限公司 | 基于udp的ip透传网关传输***和方法 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN106131213B (zh) | 一种服务管理方法和*** | |
CN109756559B (zh) | 面向嵌入式机载***分布式数据分发服务的构建及使用方法 | |
CN109815025B (zh) | 一种业务模型调用方法、装置及存储介质 | |
CN110413418B (zh) | 缓存同步装置及方法,缓存同步***、电子设备 | |
CN111447170B (zh) | 数据处理方法及其***、计算机***及计算机可读介质 | |
US8701129B2 (en) | Web API server program, web API publication method | |
CN110769009B (zh) | 用户身份认证方法及*** | |
CN107040613B (zh) | 一种报文传输方法及*** | |
CN114070833A (zh) | 多协议服务兼容方法、***、设备、介质和程序产品 | |
CN111367685B (zh) | 接口调用的方法及装置、计算机设备、存储介质 | |
CN116996112B (zh) | 一种遥感卫星数据实时预处理方法 | |
CN112817539A (zh) | 一种工业数据存储方法、***、电子设备及存储介质 | |
CN103002047A (zh) | 一种rpc式web服务架构方法 | |
CN116506526B (zh) | 基于可配置协议解析器的卫星数据处理方法及*** | |
CN113037834A (zh) | 基于分布式即时推送的Web页面状态更新方法及装置 | |
Kang et al. | Android RMI: a user-level remote method invocation mechanism between Android devices | |
CN113535419A (zh) | 一种服务编排方法和装置 | |
CN114500674A (zh) | 分布式***数据透传方法、装置、存储介质及*** | |
CN110262912B (zh) | 一种过程调用gRPC的调用方法及装置 | |
CN109669793B (zh) | 中间件进程内对象调用方法 | |
CN114466047A (zh) | 物联网设备便捷接入物联网平台的方法、平台、设备及介质 | |
CN114185695A (zh) | 基于工业app微服务的松耦合数据处理方法和*** | |
CN113992644A (zh) | 一种基于无服务技术的物联网关***及其数据处理方法 | |
CN112769741B (zh) | 一种消息通信方法及电子设备 | |
CN113918245A (zh) | 一种数据调用方法、装置、设备及计算机可读存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |