CN112948152A - 一种编排数据处理与接口服务及调用方法 - Google Patents

一种编排数据处理与接口服务及调用方法 Download PDF

Info

Publication number
CN112948152A
CN112948152A CN202110413134.6A CN202110413134A CN112948152A CN 112948152 A CN112948152 A CN 112948152A CN 202110413134 A CN202110413134 A CN 202110413134A CN 112948152 A CN112948152 A CN 112948152A
Authority
CN
China
Prior art keywords
node
data
service
calling
interface
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202110413134.6A
Other languages
English (en)
Other versions
CN112948152B (zh
Inventor
邵健锋
朱国全
林鉴
郑立凡
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
New Trend International Logis Tech Co ltd
Original Assignee
New Trend International Logis Tech Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by New Trend International Logis Tech Co ltd filed Critical New Trend International Logis Tech Co ltd
Priority to CN202110413134.6A priority Critical patent/CN112948152B/zh
Publication of CN112948152A publication Critical patent/CN112948152A/zh
Application granted granted Critical
Publication of CN112948152B publication Critical patent/CN112948152B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00Arrangements for program control, e.g. control units
    • G06F9/06Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/46Multiprogramming arrangements
    • G06F9/54Interprogram communication
    • G06F9/547Remote procedure calls [RPC]; Web services

Landscapes

  • Engineering & Computer Science (AREA)
  • Software Systems (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Computer And Data Communications (AREA)

Abstract

本发明涉及计算机技术领域,公开了一种编排数据处理与接口服务及调用的方法,为了解决服务与服务间做数据对接时,遇到的各种不确定性与变化,导致需要人为进行开发、调整、测试、部署等一些列问题;包括动态生成http服务接口、http请求调用、webservice服务接口、webservice请求调用、定时任务、消息订阅和发布、生成sql进行数据入库及各种不同的数据格式与结构的相互转换,并能将以上的所有功能进行编排串联成一个数据流程,编排过程中根据运行时的值进行条件判断路由选择,实现方便有效的处理,大大降低定制开发接口的成本投入。

Description

一种编排数据处理与接口服务及调用方法
技术领域
本发明涉及计算机技术领域,特别是一种编排数据处理与服务及调用方法。
背景技术
随着信息技术的不断发展,企业中信息化的需求越来越旺盛,根据不同的业务构建不同的***,在新***完成后经常需要跟已有的***进行对接,已有的***由于开发时间的不同,开发团队的不同,使用的技术栈和接口通讯时采用的数据格式可能是不一样的,不同的接口,通讯时的数据结构也可能不一样,但***所需要对接的数据范围是相对明确的,因此会产生三个问题:
一、有些服务采用的技术栈是webservice,进行数据通讯,需要新上架的***提供webservice接口供现有***调用,推送数据,有些现有服务提供webservice接口供新上架***查询数据,同样是获取数据就存在着推和拉两种方式,而这只是针对一个通讯框架,如果新上架的***采用的技术栈中没有webservice,那么研发人员需要因引入webservice而进行定制开发;
二、如果新上架的***根据现有***A提供了相应的数据接口,供***A查询,但此时另一个现有的***B需要新上架的***定时推送数据上来,那研发人员需要再开发一个定时任务以及接口调用;
三、每次开发完接口之后,都必须要重新部署***,让接口生效。
以上只是对服务之间对接存在的问题进行简要列举,本专利的方法可以实现方便有效的处理,大大降低定制开发接口的成本投入。
基于本专利,可以编排一个数据路由流程,在调用方和被调用方之间形成一道透明代理,或将两个被动调用的接口串联起来,做到调用接口A后,以A接口返回的数据进行数据处理后作为调用接口B的参数,进行调用,在创建或修改数据路由流程之后,只需要点击部署按钮,进行数据路由的部署,整个路由重部的过程,应用不需要重新启动。
发明内容
本发明的目的在于提供一种编排数据处理与服务及调用方法,以解决背景技术中不同接口对接需要人为定制开发以应对服务间通讯协议不一致,数据格式需要转换的问题,通过在调用方和被调用方之间形成一道透明代理,或将两个被动调用的接口串联起来,将变化的元素抽离出来,供用户快速配置部署。
为实现上述技术目的,达到上述技术效果,本发明公开了一种编排数据处理与服务及调用方法,包括但不限于(http服务节点,http接口调用节点,webservice服务节点,webservice接口调用节点,定时任务节点,sql数据库操作节点,消息队列发布消息节点,消息队列消费节点)以及数据处理节点,包括但不限于(json与xml互转,json与map,xml与map互转,数据结构转换,xpath提取xml),具体实现步骤如下:
S1,先根据需要,创建出服务节点,服务节点包括http服务接口节点、webservcie服务接口节点、定时器节点、消息订阅节点,这类服务节点的特征是能产生数据流入到整个数据路由流程中;一个数据路由必须要有服务节点;
S2,根据需要,创建数据处理节点或数据转换节点,针对服务节点中流入到数据路由中的数据进行数据处理,如数据格式转换或数据结构转换,如果数据不需要转换,可以不需要数据处理节点或数据转换节点;
S3,根据需要,创建分支节点,对上一个节点输出的数据进行逻辑判断,以决定下一步要流向哪个节点,如果数据只会有一个流向,则不需要创建分支节点;
S4,根据需要,创建调用服务请求节点,调用服务请求节点包括http请求节点、webservice请求节点、消息发布节点、sql数据操作节点,调用服务节点的特征是能将数据作为参数调用相应的服务节点,并得到返回信息,如果数据不需要做为参数去调用服务,那就不需要创建调用服务;
S5,根据需要重复S1-S4,再将各节点连线指明从什么服务流向什么服务;
S6,根据用户的编排,进行解析,找到流程定义中的开始节点(平台接口);
S7,以开始节点进行深度遍历,开始节点只会是服务节点,因此根据服务的类型创建对应的服务,http_server即通过netty动态创建http服务,webservice_server则先通过javassist动态生成接口,再通过apache cxf基于动态生成的接口创建webservcie服务,其它服务同理调用相应组件创建对应服务;
S8,遍历与上一个节点相连的节点,如果当前节点是服务节点,因为平台接口只能有一个,所以其他服务节点只能是外部接口节点,http_client会通过netty创建httpclient发起http请求,webservice_client会通过cxf创建webservice客户端,其它服同理调用相应组件创建对应调用;
S9,如果遍历的当前节点是数据处理节点,则根据数据处理的类型,创建对应的数据处理器,如jsonToMap即通过jackson对json进行转换,其它数据处理类似;
S10,如果遍历的当前节点是数据转换节点,则会根据用户配置的源数据格式和目标数据格式映射,按源数据的每个字段进行遍历,如果字段配置了表达式,则根据表达式进行解析得到相应的值作为与源字段相对应的目标字段的值,该字段有配置条件表达式则先进行条件判断,如果条件不满足则跳过该字段;
S11,根据数据路由定义,把对应节点创建的各服务节点,数据处理节点,数据转换节点按编排的顺序串联起来;
S12,在运行时数据通过服务节点接收数据进行流转的过程中,上一个节点的输出会作为下一个节点的输入参数。
根据业务需要可以重复S2-S4的步骤,除了数据流的发起节点必须要存在,其余节点都可根据需要自由组合。
本发明的有益效果:
1、本发明除了不支持两个及以上的主动请求的接口进行串联以外,可以用于任意接口的对接,
2、本发明可以针对不同接口的不同数据格式和结构可以进行任意转换,包括但不限于json与xml互转,json与map,xml与map互转,数据结构转换,xpath提取xml,以及数据结构转换。
附图说明
图1为本发明一种实施例方框流程示意图。
图2为本发明中数据路由配置的操作界面图。
图3为本发明中数据转换节点的设置界面图。
图4为本发明中其余节点的参数设置界面图。
具体实施方式
为了使本发明的目的、技术方案及优点更加清楚明白,以下结合实施例,对本发明进行进一步详细说明。
如图1所示,本发明公开了一种编排数据处理与接口服务及调用方法,以解决背景技术中不同接口对接需要人为定制开发以应对服务间通讯协议不一致,数据格式需要转换的问题,通过用户配置数据路由流程,将流程中的数据接口串联起来,到数据处理透明代理的目的。帮助用户快速将不同应用的不同接口进行对接,过程中无须重启应用。
如图2,为数据路由配置的操作界面图。
其中,图2中的左边线框为数据流的节点工具区,根据需要可以将相应的节点托入右边的设计区域;
图2中的右边线框为数据流的设计区域,所有的节点编排都在这个区域操作;
1、以图2为例,平台接口为服务节点,外部接口为接口调用节点;
2、双击设计器中的节点会弹出节点的参数设置页面,其中数据转换节点的设置界面如图3所示,其余节点的参数设置界面如图4所示;
3、用户根据需要选择节点的类型,可以是HTTP_SERVER,WEBSERVICE_SERVER 等,如之前列举的类型,其中数据处理节点的参数设置界面虽然也是图4,但组件类型列表可以选择的选项却与接口节点(包括服务接口与调用接口)的选项不一样,选项包括但不限于jsonToXml,jsonToMap,xmlToJson,xmlToMap,Xpath;
4、当用户配置完数据路由流程与数据处理规则后,点击图2左上角的保存图表,路由流程将被保存下来,此时再将定义好的数据路由流程通过***的部署按钮,将数据路由启动,整个数据流即生效,开始提供服务,如果之前配置的是http服务的接口作为数据路由的其实节点,则http接口已生效,可以发送http进行调用,webservice也一样,webservice的服务相对于http的服务接口更为复杂,需要根据用户的配置参数动态生成webservice接口,再已webservice接口来发布webservice服务,这些复杂的操作通通包含在此专利中。
以上所述,仅为本发明较佳的服务与服务之间接口对接的方式,但本发明的保护范围并不局限于此,任何熟悉本技术领域的技术人员在本发明揭露的技术范围内,可轻易想到的变化或替换,都应涵盖在本发明的保护范围之内。

Claims (1)

1.一种编排数据处理与接口服务及调用的方法,为了解决服务与服务间做数据对接时,遇到的各种不确定性与变化,导致需要人为进行开发、调整、测试、部署等一些列问题,其特征在于:包括动态生成http服务接口、http请求调用、webservice服务接口、webservice请求调用、定时任务、消息订阅和发布、生成sql进行数据入库及各种不同的数据格式与结构的相互转换,并能将以上的所有功能进行编排串联成一个数据流程,编排过程中根据运行时的值进行条件判断路由选择具体实现步骤如下:
S1,先根据需要,创建出服务节点,服务节点包括http服务接口节点、webservcie服务接口节点、定时器节点、消息订阅节点,这类服务节点的特征是能产生数据流入到整个数据路由流程中;一个数据路由必须要有服务节点;
S2,根据需要,创建数据处理节点或数据转换节点,针对服务节点中流入到数据路由中的数据进行数据处理,如数据格式转换或数据结构转换,如果数据不需要转换,可以不需要数据处理节点或数据转换节点;
S3,根据需要,创建分支节点,对上一个节点输出的数据进行逻辑判断,以决定下一步要流向哪个节点,如果数据只会有一个流向,则不需要创建分支节点;
S4,根据需要,创建调用服务请求节点,调用服务请求节点包括http请求节点、webservice请求节点、消息发布节点、sql数据操作节点,调用服务节点的特征是能将数据作为参数调用相应的服务节点,并得到返回信息,如果数据不需要做为参数去调用服务,那就不需要创建调用服务;
S5,根据需要重复S1-S4,再将各节点连线指明从什么服务流向什么服务;
S6,根据用户的编排,进行解析,找到流程定义中的开始节点(平台接口);
S7,以开始节点进行深度遍历,开始节点只会是服务节点,因此根据服务的类型创建对应的服务,http_server即通过netty动态创建http服务,webservice_server则先通过javassist动态生成接口,再通过apache cxf基于动态生成的接口创建webservcie服务,其它服务同理调用相应组件创建对应服务;
S8,遍历与上一个节点相连的节点,如果当前节点是服务节点,因为平台接口只能有一个,所以其他服务节点只能是外部接口节点,http_client会通过netty创建httpclient发起http请求,webservice_client会通过cxf创建webservice客户端,其它服同理调用相应组件创建对应调用
S9,如果遍历的当前节点是数据处理节点,则根据数据处理的类型,创建对应的数据处理器,如jsonToMap即通过jackson对json进行转换,其它数据处理类似;
S10,如果遍历的当前节点是数据转换节点,则会根据用户配置的源数据格式和目标数据格式映射,按源数据的每个字段进行遍历,如果字段配置了表达式,则根据表达式进行解析得到相应的值作为与源字段相对应的目标字段的值,该字段有配置条件表达式则先进行条件判断,如果条件不满足则跳过该字段;
S11,根据数据路由定义,把对应节点创建的各服务节点,数据处理节点,数据转换节点按编排的顺序串联起来;
S12,在运行时数据通过服务节点接收数据进行流转的过程中,上一个节点的输出会作为下一个节点的输入参数。
CN202110413134.6A 2021-04-16 2021-04-16 一种编排数据处理与接口服务调用方法 Active CN112948152B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202110413134.6A CN112948152B (zh) 2021-04-16 2021-04-16 一种编排数据处理与接口服务调用方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202110413134.6A CN112948152B (zh) 2021-04-16 2021-04-16 一种编排数据处理与接口服务调用方法

Publications (2)

Publication Number Publication Date
CN112948152A true CN112948152A (zh) 2021-06-11
CN112948152B CN112948152B (zh) 2022-10-18

Family

ID=76232865

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202110413134.6A Active CN112948152B (zh) 2021-04-16 2021-04-16 一种编排数据处理与接口服务调用方法

Country Status (1)

Country Link
CN (1) CN112948152B (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115951882A (zh) * 2023-02-16 2023-04-11 中孚安全技术有限公司 一种基于vue实现的第三方接口格式转换平台及方法
TWI814227B (zh) * 2022-01-27 2023-09-01 國立高雄師範大學 使用微服務架構來實作程式庫的方法

Citations (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101930370A (zh) * 2010-09-09 2010-12-29 上海普元信息技术股份有限公司 Soa应用***服务集成中实现数据转换的***结构及其方法
CN102034151A (zh) * 2010-12-13 2011-04-27 东莞市高鑫机电科技服务有限公司 基于soa的企业协同管理***业务流程设计方法及***
CN103870274A (zh) * 2014-03-14 2014-06-18 浪潮集团山东通用软件有限公司 一种基于webservice技术下实现异构***间数据交互的可视化开发组件
CN105700888A (zh) * 2016-01-14 2016-06-22 国网山东省电力公司物资公司 一种基于jbpm工作流引擎的可视化快速开发平台
CN106846226A (zh) * 2017-01-19 2017-06-13 湖北省基础地理信息中心(湖北省北斗卫星导航应用技术研究院) 一种时空信息组装管理***
CN106961453A (zh) * 2016-01-08 2017-07-18 中兴通讯股份有限公司 基于tosca的服务调用方法及装置
CN109246157A (zh) * 2018-11-16 2019-01-18 杭州安恒信息技术股份有限公司 一种http慢速请求dos攻击的关联检测方法
CN110213369A (zh) * 2019-06-03 2019-09-06 电子科技大学 一种服务功能链自动编排***及其编排方法
CN111245916A (zh) * 2020-01-07 2020-06-05 苏宁云计算有限公司 基于微服务网关的服务调用方法、服务编排方法及装置
CN111447170A (zh) * 2019-01-17 2020-07-24 北京京东尚科信息技术有限公司 数据处理方法及其***、计算机***及计算机可读介质
CN111694888A (zh) * 2020-06-12 2020-09-22 谷云科技(广州)有限责任公司 基于微服务架构的分布式etl数据交换***及方法
CN111949257A (zh) * 2020-07-07 2020-11-17 北京思特奇信息技术股份有限公司 可拖曳的服务编排方法、***和使用方法
CN111984371A (zh) * 2020-08-18 2020-11-24 济南浪潮高新科技投资发展有限公司 一种流程编排服务调度和发布方法

Patent Citations (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101930370A (zh) * 2010-09-09 2010-12-29 上海普元信息技术股份有限公司 Soa应用***服务集成中实现数据转换的***结构及其方法
CN102034151A (zh) * 2010-12-13 2011-04-27 东莞市高鑫机电科技服务有限公司 基于soa的企业协同管理***业务流程设计方法及***
CN103870274A (zh) * 2014-03-14 2014-06-18 浪潮集团山东通用软件有限公司 一种基于webservice技术下实现异构***间数据交互的可视化开发组件
CN106961453A (zh) * 2016-01-08 2017-07-18 中兴通讯股份有限公司 基于tosca的服务调用方法及装置
CN105700888A (zh) * 2016-01-14 2016-06-22 国网山东省电力公司物资公司 一种基于jbpm工作流引擎的可视化快速开发平台
CN106846226A (zh) * 2017-01-19 2017-06-13 湖北省基础地理信息中心(湖北省北斗卫星导航应用技术研究院) 一种时空信息组装管理***
CN109246157A (zh) * 2018-11-16 2019-01-18 杭州安恒信息技术股份有限公司 一种http慢速请求dos攻击的关联检测方法
CN111447170A (zh) * 2019-01-17 2020-07-24 北京京东尚科信息技术有限公司 数据处理方法及其***、计算机***及计算机可读介质
CN110213369A (zh) * 2019-06-03 2019-09-06 电子科技大学 一种服务功能链自动编排***及其编排方法
CN111245916A (zh) * 2020-01-07 2020-06-05 苏宁云计算有限公司 基于微服务网关的服务调用方法、服务编排方法及装置
CN111694888A (zh) * 2020-06-12 2020-09-22 谷云科技(广州)有限责任公司 基于微服务架构的分布式etl数据交换***及方法
CN111949257A (zh) * 2020-07-07 2020-11-17 北京思特奇信息技术股份有限公司 可拖曳的服务编排方法、***和使用方法
CN111984371A (zh) * 2020-08-18 2020-11-24 济南浪潮高新科技投资发展有限公司 一种流程编排服务调度和发布方法

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
杨海军: ""基于SOA的ERP***架构分析与应用"", 《中国优秀硕士学位论文全文数据库 (信息科技辑)》 *
阿里云: ""服务编排"", 《HTTPS://HELP.ALIYUN.COM/DOCUMENT_DETAIL/128406.HTML?UTM_CONTENT=G_1000230851&SPM=5176.20966629.TOUBU.3.F2991DDCPXXVD1#SECTION-9YY-QU6-IOG》 *

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TWI814227B (zh) * 2022-01-27 2023-09-01 國立高雄師範大學 使用微服務架構來實作程式庫的方法
CN115951882A (zh) * 2023-02-16 2023-04-11 中孚安全技术有限公司 一种基于vue实现的第三方接口格式转换平台及方法

Also Published As

Publication number Publication date
CN112948152B (zh) 2022-10-18

Similar Documents

Publication Publication Date Title
CN107451109B (zh) 报表生成方法及***
KR102015071B1 (ko) 음성 활성 데이터 패킷의 데이터 구조 풀링
US10031922B2 (en) Systems and methods for query evaluation over distributed linked data stores
JP2021103583A (ja) ターゲットデータの取得方法、ターゲットデータの取得装置、電子機器、非一時的なコンピュータ可読記憶媒体およびコンピュータプログラム
CN112948152B (zh) 一种编排数据处理与接口服务调用方法
CN102185901A (zh) 一种客户端报文转换方法
CN111367681B (zh) 面向云计算集群的高负载状态下的桥梁设计***
JP2011118879A (ja) ユーザインタフェース操作の位置独立な実行
JP5677319B2 (ja) ウェブに基づくダイアグラム視覚性の拡張性
US11943177B2 (en) Virtual agent portal integration of two frameworks
JP7081014B2 (ja) インスタンス数を調整するための方法および装置、電子機器、記憶媒体並びにコンピュータプログラム
CN114117190A (zh) 数据处理方法、装置、存储介质及电子设备
US10924527B2 (en) Dynamic workflow-based composite web service system and method
US9201938B2 (en) Parameter driven data format conversion in client/server architectures
US20200034765A1 (en) Systems and methods for contextual actions using a map interface
CN113127335B (zh) 一种***测试的方法和装置
Petrenko Service-oriented computing in a cloud computing environment
CN109814916B (zh) 一种ivr流程的配置方法、装置、存储介质和服务器
AU2018390863B2 (en) Computer system and method for extracting dynamic content from websites
CN113923250B (zh) 一种辅助网络服务编排的方法、装置及***
US11188548B2 (en) Profile data store automation via bots
CN111399806B (zh) 一种组件管理方法、装置、电子设备及存储介质
US9516117B2 (en) Dynamic shifting of service bus components
CN112559808A (zh) 数据处理方法、装置以及电子设备
US9338248B2 (en) Parameter driven value conversion framework in client/server architectures

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant