CN113760597A - 中间数据处理方法、装置、电子设备及存储介质 - Google Patents
中间数据处理方法、装置、电子设备及存储介质 Download PDFInfo
- Publication number
- CN113760597A CN113760597A CN202111079232.7A CN202111079232A CN113760597A CN 113760597 A CN113760597 A CN 113760597A CN 202111079232 A CN202111079232 A CN 202111079232A CN 113760597 A CN113760597 A CN 113760597A
- Authority
- CN
- China
- Prior art keywords
- target
- micro
- micro server
- data
- server
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000003672 processing method Methods 0.000 title claims abstract description 25
- 238000013500 data storage Methods 0.000 claims abstract description 104
- 238000012545 processing Methods 0.000 claims abstract description 88
- 238000000034 method Methods 0.000 claims abstract description 28
- 230000001360 synchronised effect Effects 0.000 claims abstract description 16
- 238000004590 computer program Methods 0.000 claims description 4
- 238000012423 maintenance Methods 0.000 abstract description 14
- 230000003287 optical effect Effects 0.000 description 6
- 238000010586 diagram Methods 0.000 description 5
- 230000008569 process Effects 0.000 description 5
- 230000006870 function Effects 0.000 description 4
- 230000008859 change Effects 0.000 description 3
- 239000003814 drug Substances 0.000 description 2
- 229940079593 drug Drugs 0.000 description 2
- 239000013307 optical fiber Substances 0.000 description 2
- 230000002093 peripheral effect Effects 0.000 description 2
- 230000000644 propagated effect Effects 0.000 description 2
- 238000003491 array Methods 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 238000004891 communication Methods 0.000 description 1
- 230000003993 interaction Effects 0.000 description 1
- 238000002955 isolation Methods 0.000 description 1
- 230000008707 rearrangement Effects 0.000 description 1
- 238000011084 recovery Methods 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/07—Responding to the occurrence of a fault, e.g. fault tolerance
- G06F11/0703—Error or fault processing not based on redundancy, i.e. by taking additional measures to deal with the error or fault not making use of redundancy in operation, in hardware, or in data representation
- G06F11/0706—Error or fault processing not based on redundancy, i.e. by taking additional measures to deal with the error or fault not making use of redundancy in operation, in hardware, or in data representation the processing taking place on a specific hardware platform or in a specific software environment
- G06F11/0727—Error or fault processing not based on redundancy, i.e. by taking additional measures to deal with the error or fault not making use of redundancy in operation, in hardware, or in data representation the processing taking place on a specific hardware platform or in a specific software environment in a storage system, e.g. in a DASD or network based storage system
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/07—Responding to the occurrence of a fault, e.g. fault tolerance
- G06F11/0703—Error or fault processing not based on redundancy, i.e. by taking additional measures to deal with the error or fault not making use of redundancy in operation, in hardware, or in data representation
- G06F11/0793—Remedial or corrective actions
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/27—Replication, distribution or synchronisation of data between databases or within a distributed database system; Distributed database system architectures therefor
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/28—Databases characterised by their database models, e.g. relational or object models
- G06F16/284—Relational databases
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Databases & Information Systems (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Quality & Reliability (AREA)
- Data Mining & Analysis (AREA)
- Computing Systems (AREA)
- Hardware Redundancy (AREA)
Abstract
本发明实施例公开了一种中间数据处理方法、装置、电子设备及存储介质。该方法包括:接收请求接口发送的用于请求对目标数据进行数据处理的目标业务请求,读取预先存储的微服务注册信息;基于微服务注册信息,确定出预先设置的用于处理目标数据的目标微服务器;调用目标微服务器,以基于与目标微服务器关联的数据存储空间对目标数据进行数据处理操作;其中,目标微服务器仅关联一个数据存储空间,或者,目标微服务器关联至少两个数据存储空间且至少两个数据存储空间数据同步。本发明实施例的技术方案,可以在任一个数据存储空间不可用时,不影响其它微服务器的正常工作,能够快速修复数据,降低了运维难度和运维成本。
Description
技术领域
本发明实施例涉及数据处理技术领域,尤其涉及一种中间数据处理方法、装置、电子设备及存储介质。
背景技术
在当下的微服务软件开发架构风格中,为解决一些关系型数据库难以高效处理数据的问题,设计了大量数据处理中间件。例如为了处理搜索的倒排序索引数据服务中间件、为了应对海量同类请求的集中式的缓存服务中间件、用于高效处理数据之间关系的图数据库等。
现有技术中,通过微服务器实现业务逻辑时,通常将整体业务需要实现的数据逻辑均存放至一个单独的微服务器中,该微服务器可与多个中间件对应以实现不同中间数据的读写操作。在该微服务器工作需要读或写某个中间数据时,对与该中间数据对应的中间件进行读操作或写操作即可。
但是,现有技术中只有在中间件处于可用状态,才能保证微服务能够正常运行,若某一个中间件不可用,则会导致整体业务中的全部中间数据均无法读写,且数据恢复难度大,对用户造成极大的损失。
发明内容
本发明实施例提供了一种中间数据处理方法、装置、电子设备及存储介质,以实现在任一个数据存储空间不可用时,其它微服务器可正常工作,确保整体业务中其它数据不受影响,降低了运维难度和运维成本
第一方面,本发明实施例提供了一种中间数据处理方法,包括:
接收请求接口发送的用于请求对目标数据进行数据处理的目标业务请求,读取预先存储的微服务注册信息;
基于所述微服务注册信息,确定出预先设置的用于处理所述目标数据的目标微服务器;
调用所述目标微服务器,以基于与所述目标微服务器关联的数据存储空间对所述目标数据进行数据处理操作;
其中,所述目标微服务器仅关联一个数据存储空间,或者,所述目标微服务器关联至少两个数据存储空间且所述至少两个数据存储空间数据同步。
第二方面,本发明实施例还提供了一种中间数据处理装置,该装置包括:
接收请求模块,用于接收请求接口发送的用于请求对目标数据进行数据处理的目标业务请求,读取预先存储的微服务注册信息;
确定目标微服务器模块,用于基于所述微服务注册信息,确定出预先设置的用于处理所述目标数据的目标微服务器;
调用目标微服务器模块,用于调用所述目标微服务器,以基于与所述目标微服务器关联的数据存储空间对所述目标数据进行数据处理操作;
其中,所述目标微服务器仅关联一个数据存储空间,或者,所述目标微服务器关联至少两个数据存储空间且所述至少两个数据存储空间数据同步。
第三方面,本发明实施例还提供了一种电子设备,该电子设备包括:
一个或多个处理器;
存储装置,用于存储一个或多个程序,
当所述一个或多个程序被所述一个或多个处理器执行,使得所述一个或多个处理器实现本发明任意实施例所提供的中间数据处理方法。
第四方面,本发明实施例还提供了一种计算机可读存储介质,其上存储有计算机程序,该计算机程序被处理器执行时实现本发明任意实施例所提供的中间数据处理方法。
本发明实施例所提供的一种中间数据处理方法,通过接收请求接口发送的用于请求对目标数据进行数据处理的目标业务请求,读取预先存储的微服务注册信息;基于微服务注册信息,确定出预先设置的用于处理目标数据的目标微服务器;通过调用目标微服务器,以基于与目标微服务器关联的数据存储空间对目标数据进行数据处理操作,实现对中间数据的处理。其中,目标微服务器仅关联一个数据存储空间,或者,目标微服务器关联至少两个数据存储空间且至少两个数据存储空间数据同步,在任一个数据存储空间不可用时,可不影响其它微服务器的正常工作,确保整体业务中其它数据不受影响;且数据容易恢复,降低了运维难度和运维成本。
此外,本发明所提供的一种中间数据处理装置、电子设备及存储介质与上述方法对应,具有同样的有益效果。
附图说明
为了更清楚地说明本发明实施例,下面将对实施例中所需要使用的附图做简单的介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1为本发明实施例提供的一种中间数据处理方法的流程图;
图2为本发明实施例提供的另一种中间数据处理方法的流程图;
图3为本发明实施例提供的一种应用场景下中间数据处理方法的流程图;
图4为本发明实施例提供的一种中间数据处理装置的结构图;
图5为本发明实施例提供的一种电子设备的结构图。
具体实施方式
下面结合附图和实施例对本发明作进一步的详细说明。可以理解的是,此处所描述的具体实施例仅仅用于解释本发明,而非对本发明的限定。另外还需要说明的是,为了便于描述,附图中仅示出了与本发明相关的部分而非全部结构。
另外还需要说明的是,为了便于描述,附图中仅示出了与本发明相关的部分而非全部内容。在更加详细地讨论示例性实施例之前应当提到的是,一些示例性实施例被描述成作为流程图描绘的处理或方法。虽然流程图将各项操作(或步骤)描述成顺序的处理,但是其中的许多操作可以被并行地、并发地或者同时实施。此外,各项操作的顺序可以被重新安排。当其操作完成时所述处理可以被终止,但是还可以具有未包括在附图中的附加步骤。所述处理可以对应于方法、函数、规程、子例程、子程序等等。
为了使本技术领域的人员更好地理解本发明方案,下面结合附图和具体实施方式对本发明作进一步的详细说明。
实施例一
图1为本发明实施例提供的一种中间数据处理方法的流程图。该方法可以由中间数据处理装置来执行,该装置可以通过软件和/或硬件来实现,可配置于终端和/或服务器中来实现本发明实施例中的中间数据处理方法。
如图1所示,本实施例的方法具体可包括:
S101、接收请求接口发送的用于请求对目标数据进行数据处理的目标业务请求,读取预先存储的微服务注册信息。
在具体实施中,可接收请求接口发送的目标业务请求,基于接收到的目标业务请求对目标数据进行数据处理操作。数据处理操作包括对目标数据的读操作和写操作中的至少一种。
在本发明实施例中,可预先存储用于记录各微服务信息的微服务注册信息。具体的,微服务信息包括微服务器的微服务注册名、微服务关联的数据存储空间的名称及请求接口与微服务器之间的对应关系。通过微服务注册信息和接收到的业务请求,可确定出实现该业务请求的微服务器。
示例性的,数据存储空间为关系型数据库,业务请求为药品检索时,可将执行该业务请求的微服务器的注册名可为“material-service-impl”;数据存储空间为索引数据服务中间件,业务请求为药品检索时,可将执行该业务请求的微服务器的注册名可为“material-service-impl-Elasticsearch”,通过注册名即可确定出实现该业务请求的微服务器和对应的数据存储空间。
需要说明的是,微服务器与数据存储空间连接,通过访问数据存储空间实现对数据的读操作或写操作。示例性的,数据存储空间包括关系型数据库和数据中间件中至少一种。
可选的,数据中间件包括为了处理搜索的倒排序索引数据服务中间件、为了应对海量同类请求的集中式的缓存服务中间件和用于高效处理数据之间关系的图数据库中的至少一种。
S102、基于微服务注册信息,确定出预先设置的用于处理目标数据的目标微服务器。
在具体实施中,基于请求接口和接收到的目标业务请求,在微服务注册信息中确定出与目标业务请求或请求接口对应的目标微服务器。示例性的,请求接口设置有接口标识,接口标识反映出请求类型和请求处理的目标数据等信息。接口标识可为对请求接口添加的注释。根据微服务注册信息中记录的请求接口与微服务器之间的对应关系,查找与请求接口标识相匹配的微服务器标识,将具有该微服务器标识的微服务器确定为目标微服务器。
可选的,可预先设置至少一个用于处理数据的微服务器,各微服务器仅关联一个数据存储空间,或者,各微服务关联至少两个数据存储空间且至少两个数据存储空间之间数据同步。
可理解为,本发明实施例在预先建立微服务器时,设定数据不同步的任意两个或两个以上的数据存储空间,不能与同一个微服务器关联,从而实现无法同步数据的数据存储空间之间的物理隔离,避免一个数据存储空间出现故障导致关联的微服务器无法工作时,对其它业务产生影响。
具体的,当整体数据业务包括两个或两个以上的数据处理分业务,则可设定两个或两个以上的微服务器分别执行对应的数据处理分业务。示例性的,数据处理分业务与微服务器一一对应。进一步的,可单独设置调用微服务器,用于依据整体数据业务的处理顺序,调用各微服务器执行相应的数据处理分业务,通过调用微服务器调用各微服务器实现各微服务器之间的数据交互。
S103、调用目标微服务器,以基于与目标微服务器关联的数据存储空间对目标数据进行数据处理操作。
可选的,目标微服务器仅关联一个数据存储空间,或者,目标微服务器关联至少两个数据存储空间且至少两个数据存储空间数据同步。
在具体实施中,当目标微服务器仅关联一个数据存储空间时,调用目标微服务器时,可通过该数据存储空间对目标数据进行数据处理操作。
当目标微服务器关联至少两个数据存储空间时,数据存储空间可设定为主数据存储空间和从数据存储空间。调用目标微服务器时,可首先通过主数据存储空间执行目标数据的数据处理操作;当主数据存储空间不可用时,则可采用从数据存储空间执行目标数据的数据处理操作。进一步的,也可预先设定各数据存储空间的优先级,按照各数据存储空间的优先级顺序确定执行目标数据处理操作的数据存储空间。
本发明实施例所提供的一种中间数据处理方法,通过接收请求接口发送的用于请求对目标数据进行数据处理的目标业务请求,读取预先存储的微服务注册信息;基于微服务注册信息,确定出预先设置的用于处理目标数据的目标微服务器;通过调用目标微服务器,以基于与目标微服务器关联的数据存储空间对目标数据进行数据处理操作,实现对中间数据的处理。其中,目标微服务器仅关联一个数据存储空间,或者,目标微服务器关联至少两个数据存储空间且至少两个数据存储空间数据同步,在任一个数据存储空间不可用时,可不影响其它微服务器的正常工作,确保整体业务中其它数据不受影响;且数据容易恢复,降低了运维难度和运维成本。
实施例二
图2为本发明实施例提供的另一种中间数据处理方法的流程图。本实施例以上述各技术方案为基础进行优化。可选的,基于微服务注册信息,确定出预先设置的用于处理目标数据的目标微服务器,包括:基于微服务注册信息,确定出预先设置的用于处理目标数据的至少两个备选微服务器;在至少两个备选微服务器中确定出目标微服务器。可选的,在调用目标微服务器之后,还包括:将目标微服务器对应的数据存储空间与至少两个备选微服务器中除目标微服务器之外的备选微服务器对应的数据存储空间进行数据同步。其中,与上述各实施例相同或相应的术语的解释在此不再赘述。
如图2所示,本实施例的方法具体可包括:
S201、接收请求接口发送的用于请求对目标数据进行数据处理的目标业务请求,读取预先存储的微服务注册信息。
S202、基于微服务注册信息,确定出预先设置的用于处理目标数据的至少两个备选微服务器。
在具体实施中,基于请求接口和接收到的目标业务请求,在微服务注册信息中确定出与目标业务请求或请求接口对应的至少两个备选微服务器。示例性的,请求接口设置有接口标识,接口标识反映出请求类型和请求处理的目标数据等信息。根据微服务注册信息中记录的请求接口与微服务器之间的对应关系,查找与请求接口标识相匹配的微服务器标识,将具有该微服务器标识的微服务器确定为备选微服务器。需要说明的是,微服务注册信息中记录有请求接口与至少两个微服务器之间的对应关系。
S203、在至少两个备选微服务器中确定出目标微服务器。
可选的,在至少两个备选微服务器中确定出目标微服务器,包括:确定目标业务请求对应的整体业务请求,获取预先设定的整体业务请求的全局配置信息;确定全局配置信息中是否包含用于指示目标业务请求对应调用的微服务器的调用配置信息;如果包含调用配置信息,则基于调用配置信息,在备选微服务器中确定出目标微服务器。
在具体实施中,可为整体业务预先设定全局配置信息,全局配置信息包括微服务器的调用配置信息,通过调用配置信息可确定出目标业务请求对应调用的微服务器,将调用配置信息中指示调用的微服务器确定为目标微服务器。示例性的,调用配置信息可用于直接在备选微服务器中指定出目标微服务器,也可设定各备选微服务器的调用优先级的方式,将调用优先级最高的备选微服务器确定为目标微服务器。
进一步的,如果全局配置信息不包含调用配置信息,则查看请求接口是否已预先配置需调用的微服务器的微服务器标识;如果已配置,则基于微服务器标识,在至少两个备选微服务器中确定出目标微服务器。
具体的,当全局配置信息不包含调用配置信息时,可基于发送目标业务请求的请求接口的标识确定目标微服务器。示例性的,请求接口的标识可为预先添加的请求接口的注解,可预先在请求接口的注解中配置需要调用的微服务器的微服务器标识,基于微服务器标识,在备选微服务器的标识中确定出与该微服务器标识一致的备选微服务器,将该备选微服务器确定为目标微服务器。如果请求接口的注解中未配置微服务器标识,则可通过全局配置信息或接口注解确定各备选微服务器的调用优先级,将调用优先级最高的备选微服务器确定为目标微服务器。
可选的,当全局配置信息中包含调用配置信息时,基于调用配置信息,在备选微服务器中确定出目标微服务器,包括:确定调用配置信息是否为用于在各备选微服务器中指定目标微服务器的指定信息;如果是指定信息,则将指定信息所指定的备选微服务器确定为目标微服务器。
需要说明的是,指定信息中可包含目标微服务器的服务标识和目标微服务器关联的数据存储空间的空间标识中的至少一种。可基于服务标识或空间标识,在各备选微服务器中确定出服务标识或空间标识一致的备选微服务器确定为目标微服务器。
进一步的,如果该调用配置信息不是指定信息,则可确定至少两个备选微服务器的调用优先级,将调用优先级最高的备选微服务器确定为目标微服务器。需要说明的是,调用优先级可通过调用配置信息进行设定,也可通过请求接口的接口注解进行确定,对此本发明实施例不做限定。
S204、调用目标微服务器,以基于与目标微服务器关联的数据存储空间对目标数据进行数据处理操作。
S205、将目标微服务器对应的数据存储空间与至少两个备选微服务器中除目标微服务器之外的备选微服务器对应的数据存储空间进行数据同步。
在本发明实施例中,为确保各备选微服务器对应的数据存储空间存储有同样的数据,便于在目标微服务器故障时刻通过备选微服务器完成目标业务请求,需将除目标微服务器之外的备选微服务器对应的数据存储空间,与目标微服务器对应的数据存储空间进行数据同步操作。具体的,可预先建立同步微服务器,同步微服务器获取目标微服务器对应的数据存储空间的变化数据,并基于变化数据调整除目标微服务器外的各备选微服务器对应的数据存储空间中存储的数据。
进一步的,同步微服务器可在目标微服务器对应的数据存储空间中的数据发生变化时,触发调整除目标微服务器之外的各备选微服务器对应的数据存储空间中的数据,也可周期性进行数据同步操作,对此本发明实施例不作限定。
本发明实施例预先设置了至少两个备选微服务器,从而确保其中一个微服务器或微服务器对应的数据存储空间出现故障时,可通过其它备选微服务器完成业务请求,提高了数据处理的安全性和稳定性;并可通过指定目标微服务器或设定备选微服务器的调用优先级的方式,确定目标微服务器,提高了确定微服务器的灵活性和便捷性。
实施例三
上文中对于中间数据处理方法对应的实施例进行了详细描述,为了使本领域技术人员进一步清楚本方法的技术方案,下文中给出具体的应用场景。
图3为本发明实施例提供的一种应用场景下中间数据处理方法的流程图,如图3所示,可设定两种备选微服务器用于实现目标数据的读取,第一备选微服务器对应的数据存储空间为关系型数据库;第二备选微服务器对应的数据存储空间为缓存服务中间件。
在各微服务器启动时,向服务注册与发现中间件发送上线通知,并注册该微服务器的注册名。同时,可对各请求接口添加注解,注解内容包括指定执行该请求接口发送的业务请求的微服务器的注册名;或者,包括执行该请求接口发送的业务请求的微服务器的调用优先级。
进一步的,可单独设置用于调用各备选微服务器的调用微服务器,调用微服务器执行以下步骤:
接收到请求接口发送的业务请求后,读取服务注册与发现中间件内的微服务注册信息,判断是否已为当前环境调用的请求接口部署除关系型数据库外的中间件。
如果没有其它中间件实现业务请求,则可默认调用关系型数据库对应的第一备选微服务器;如果有其它中间件实现业务请求,查看全局配置是否配置指定微服务访问。
如果已配置,则根据配置直接调用指定的备选微服务器;如果没有配置,则默认调用关系型数据库对应的第一备选微服务器。
如果全局配置中未定义调用微服务器的相关信息,则查看请求接口是否标有注解。
如果有注解,则调用注解中指定的微服务器;如果未添加注解,则查看全局配置中各微服务器的调用优先级,直接调用调用优先级最高的备选微服务器。
如果全局配置中并未设定各微服务器的调用优先级,则默认调用关系型数据库对应的第一备选微服务器。
进一步的,可预先建立同步微服务器,同步微服务器可用于各数据存储空间的数据初始化,及根据被调用的备选微服务器对应的数据存储空间的变化数据,调整其它备选微服务器对应的数据存储空间中存储的数据。示例性的,若最终确定第一备选微服务器为被调用的目标微服务器,基于第一备选微服务器对应的关系型数据库完成目标数据的读或写操作,在完成数据处理后,通过同步微服务器对第二备选微服务器对应的缓存服务中间件,执行相同的目标数据的读或写操作,以确保关系型数据库和缓存服务中间件中存储的数据保持一致。
本发明实施例预先设置了两个备选微服务器,从而确保其中一个微服务器或微服务器对应的数据存储空间出现故障时,可通过其它备选微服务器完成业务请求,提高了数据处理的安全性和稳定性;并可通过指定目标微服务器或设定备选微服务器的调用优先级的方式,确定目标微服务器,提高了确定微服务器的灵活性和便捷性。
实施例四
图4为本发明实施例提供的一种中间数据处理装置的结构图,该装置用于执行上述任意实施例所提供的中间数据处理方法。该装置与上述各实施例的中间数据处理方法属于同一个发明构思,在中间数据处理装置的实施例中未详尽描述的细节内容,可以参考上述中间数据处理方法的实施例。该装置具体可包括:
接收请求模块10,用于接收请求接口发送的用于请求对目标数据进行数据处理的目标业务请求,读取预先存储的微服务注册信息;
确定目标微服务器模块11,用于基于微服务注册信息,确定出预先设置的用于处理目标数据的目标微服务器;
调用目标微服务器模块12,用于调用目标微服务器,以基于与目标微服务器关联的数据存储空间对目标数据进行数据处理操作;
其中,目标微服务器仅关联一个数据存储空间,或者,目标微服务器关联至少两个数据存储空间且至少两个数据存储空间数据同步。
在本发明实施例中任一可选技术方案的基础上,可选地,确定目标微服务器模块11,包括:
确定备选微服务器单元,用于基于微服务注册信息,确定出预先设置的用于处理目标数据的至少两个备选微服务器;在至少两个备选微服务器中确定出目标微服务器。
在本发明实施例中任一可选技术方案的基础上,可选地,确定备选微服务器单元,包括:
确定全局配置信息单元,用于确定目标业务请求对应的整体业务请求,获取预先设定的整体业务请求的全局配置信息;确定全局配置信息中是否包含用于指示目标业务请求对应调用的微服务器的调用配置信息;如果包含调用配置信息,则基于调用配置信息,在备选微服务器中确定出目标微服务器。
在本发明实施例中任一可选技术方案的基础上,可选地,确定全局配置信息单元,包括:
确定指定信息模块,用于确定调用配置信息是否为用于在各备选微服务器中指定目标微服务器的指定信息;如果是指定信息,则将指定信息所指定的备选微服务器确定为目标微服务器。
在本发明实施例中任一可选技术方案的基础上,可选地,装置还包括:
查看标识单元,在全局配置信息中中不包含调用配置信息时,用于则查看请求接口是否已预先配置需调用的微服务器的微服务器标识;如果已配置,则基于微服务器标识,在至少两个备选微服务器中确定出目标微服务器。
在本发明实施例中任一可选技术方案的基础上,可选地,装置还包括:
数据同步模块,用于将目标微服务器对应的数据存储空间与至少两个备选微服务器中除目标微服务器之外的备选微服务器对应的数据存储空间进行数据同步。
本发明实施例所提供的中间数据处理装置可执行如下方法:通过接收请求接口发送的用于请求对目标数据进行数据处理的目标业务请求,读取预先存储的微服务注册信息;基于微服务注册信息,确定出预先设置的用于处理目标数据的目标微服务器;通过调用目标微服务器,以基于与目标微服务器关联的数据存储空间对目标数据进行数据处理操作,实现对中间数据的处理。其中,目标微服务器仅关联一个数据存储空间,或者,目标微服务器关联至少两个数据存储空间且至少两个数据存储空间数据同步,在任一个数据存储空间不可用时,可不影响其它微服务器的正常工作,确保整体业务中其它数据不受影响;且数据容易恢复,降低了运维难度和运维成本。
值得注意的是,上述中间数据处理装置的实施例中,所包括的各个单元和模块只是按照功能逻辑进行划分的,但并不局限于上述的划分,只要能够实现相应的功能即可;另外,各功能单元的具体名称也只是为了便于相互区分,并不用于限制本发明的保护范围。
实施例五
图5为本发明实施例提供的一种电子设备的结构图。图5示出了适于用来实现本发明实施例实施方式的示例性电子设备20的框图。显示的电子设备20仅仅是一个示例,不应对本发明实施例的功能和使用范围带来任何限制。
如图5所示,电子设备20以通用计算设备的形式表现。电子设备20的组件可以包括但不限于:一个或者多个处理器或者处理单元201,***存储器202,连接不同***组件(包括***存储器202和处理单元201)的总线203。
总线203表示几类总线结构中的一种或多种,包括存储器总线或者存储器控制器,***总线,图形加速端口,处理器或者使用多种总线结构中的任意总线结构的局域总线。举例来说,这些体系结构包括但不限于工业标准体系结构(ISA)总线,微通道体系结构(MAC)总线,增强型ISA总线、视频电子标准协会(VESA)局域总线以及***组件互连(PCI)总线。
电子设备20典型地包括多种计算机***可读介质。这些介质可以是任何能够被电子设备20访问的可用介质,包括易失性和非易失性介质,可移动的和不可移动的介质。
***存储器202可以包括易失性存储器形式的计算机***可读介质,例如随机存取存储器(RAM)204和/或高速缓存存储器205。电子设备20可以进一步包括其它可移动/不可移动的、易失性/非易失性计算机***存储介质。仅作为举例,存储***206可以用于读写不可移动的、非易失性磁介质。可以提供用于对可移动非易失性磁盘(例如“软盘”)读写的磁盘驱动器,以及对可移动非易失性光盘(例如CD-ROM,DVD-ROM或者其它光介质)读写的光盘驱动器。在这些情况下,每个驱动器可以通过一个或者多个数据介质接口与总线203相连。存储器202可以包括至少一个程序产品,该程序产品具有一组(例如至少一个)程序模块,这些程序模块被配置以执行本发明各实施例的功能。
具有一组(至少一个)程序模块207的程序/实用工具208,可以存储在例如存储器202中,这样的程序模块207包括但不限于操作***、一个或者多个应用程序、其它程序模块以及程序数据,这些示例中的每一个或某种组合中可能包括网络环境的实现。程序模块207通常执行本发明所描述的实施例中的功能和/或方法。
电子设备20也可以与一个或多个外部设备209(例如键盘、指向设备、显示器210等)通信,还可与一个或者多个使得用户能与该电子设备20交互的设备通信,和/或与使得该电子设备20能与一个或多个其它计算设备进行通信的任何设备(例如网卡,调制解调器等等)通信。这种通信可以通过输入/输出(I/O)接口211进行。并且,电子设备20还可以通过网络适配器212与一个或者多个网络(例如局域网(LAN),广域网(WAN)和/或公共网络,例如因特网)通信。如图所示,网络适配器212通过总线203与电子设备20的其它模块通信。应当明白,可以结合电子设备20使用其它硬件和/或软件模块,包括但不限于:微代码、设备驱动器、冗余处理单元、外部磁盘驱动阵列、RAID***、磁带驱动器以及数据备份存储***等。
处理单元201通过运行存储在***存储器202中的程序,从而执行各种功能应用以及数据处理。
本发明所提供的一种电子设备,能够实现如下方法:通过接收请求接口发送的用于请求对目标数据进行数据处理的目标业务请求,读取预先存储的微服务注册信息;基于微服务注册信息,确定出预先设置的用于处理目标数据的目标微服务器;通过调用目标微服务器,以基于与目标微服务器关联的数据存储空间对目标数据进行数据处理操作,实现对中间数据的处理。其中,目标微服务器仅关联一个数据存储空间,或者,目标微服务器关联至少两个数据存储空间且至少两个数据存储空间数据同步,在任一个数据存储空间不可用时,可不影响其它微服务器的正常工作,确保整体业务中其它数据不受影响;且数据容易恢复,降低了运维难度和运维成本。
实施例六
本发明实施例提供一种包含计算机可执行指令的存储介质,所述计算机可执行指令在由计算机处理器执行时用于执行一种中间数据处理方法,该方法包括:通过接收请求接口发送的用于请求对目标数据进行数据处理的目标业务请求,读取预先存储的微服务注册信息;基于微服务注册信息,确定出预先设置的用于处理目标数据的目标微服务器;通过调用目标微服务器,以基于与目标微服务器关联的数据存储空间对目标数据进行数据处理操作,实现对中间数据的处理。其中,目标微服务器仅关联一个数据存储空间,或者,目标微服务器关联至少两个数据存储空间且至少两个数据存储空间数据同步,在任一个数据存储空间不可用时,可不影响其它微服务器的正常工作,确保整体业务中其它数据不受影响;且数据容易恢复,降低了运维难度和运维成本。
当然,本发明实施例所提供的一种包含计算机可执行指令的存储介质,其计算机可执行指令不限于如上所述的方法操作,还可以执行本发明任意实施例所提供的中间数据处理方法中的相关操作。
本发明实施例的计算机存储介质,可以采用一个或多个计算机可读的介质的任意组合。计算机可读介质可以是计算机可读信号介质或者计算机可读存储介质。计算机可读存储介质例如可以是但不限于电、磁、光、电磁、红外线、或半导体的***、装置或器件,或者任意以上的组合。计算机可读存储介质的更具体的例子(非穷举的列表)包括:具有一个或多个导线的电连接、便携式计算机磁盘、硬盘、随机存取存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、光纤、便携式紧凑磁盘只读存储器(CD-ROM)、光存储器件、磁存储器件、或者上述的任意合适的组合。在本文件中,计算机可读存储介质可以是任何包含或存储程序的有形介质,该程序可以被指令执行***、装置或者器件使用或者与其结合使用。
计算机可读的信号介质可以包括在基带中或者作为载波一部分传播的数据信号,其中承载了计算机可读的程序代码。这种传播的数据信号可以采用多种形式,包括但不限于电磁信号、光信号或上述的任意合适的组合。计算机可读的信号介质还可以是计算机可读存储介质以外的任何计算机可读介质,该计算机可读介质可以发送、传播或者传输用于由指令执行***、装置或者器件使用或者与其结合使用的程序。
计算机可读介质上包含的程序代码可以用任何适当的介质传输,包括——但不限于无线、电线、光缆、RF等等,或者上述的任意合适的组合。
可以以一种或多种程序设计语言或其组合来编写用于执行本发明实施例操作的计算机程序代码,所述程序设计语言包括面向对象的程序设计语言—诸如Java、Smalltalk、C++,还包括常规的过程式程序设计语言——诸如“C”语言或类似的程序设计语言。程序代码可以完全地在用户计算机上执行、部分地在用户计算机上执行、作为一个独立的软件包执行、部分在用户计算机上部分在远程计算机上执行、或者完全在远程计算机或服务器上执行。在涉及远程计算机的情形中,远程计算机可以通过任意种类的网络——包括局域网(LAN)或广域网(WAN)—连接到用户计算机,或者,可以连接到外部计算机(例如利用因特网服务提供商来通过因特网连接)。
注意,上述仅为本发明的较佳实施例及所运用技术原理。本领域技术人员会理解,本发明不限于这里所述的特定实施例,对本领域技术人员来说能够进行各种明显的变化、重新调整和替代而不会脱离本发明的保护范围。因此,虽然通过以上实施例对本发明进行了较为详细的说明,但是本发明不仅仅限于以上实施例,在不脱离本发明构思的情况下,还可以包括更多其他等效实施例,而本发明的范围由所附的权利要求范围决定。
Claims (10)
1.一种中间数据处理方法,其特征在于,包括:
接收请求接口发送的用于请求对目标数据进行数据处理的目标业务请求,读取预先存储的微服务注册信息;
基于所述微服务注册信息,确定出预先设置的用于处理所述目标数据的目标微服务器;
调用所述目标微服务器,以基于与所述目标微服务器关联的数据存储空间对所述目标数据进行数据处理操作;
其中,所述目标微服务器仅关联一个数据存储空间,或者,所述目标微服务器关联至少两个数据存储空间且所述至少两个数据存储空间数据同步。
2.根据权利要求1所述的方法,其特征在于,所述基于所述微服务注册信息,确定出预先设置的用于处理所述目标数据的目标微服务器,包括:
基于所述微服务注册信息,确定出预先设置的用于处理所述目标数据的至少两个备选微服务器;
在至少两个所述备选微服务器中确定出所述目标微服务器。
3.根据权利要求2所述的方法,其特征在于,所述在至少两个所述备选微服务器中确定出所述目标微服务器,包括:
确定所述目标业务请求对应的整体业务请求,获取预先设定的所述整体业务请求的全局配置信息;
确定所述全局配置信息中是否包含用于指示所述目标业务请求对应调用的微服务器的调用配置信息;
如果包含所述调用配置信息,则基于所述调用配置信息,在所述备选微服务器中确定出所述目标微服务器。
4.根据权利要求3所述的方法,其特征在于,所述基于所述调用配置信息,在所述备选微服务器中确定出所述目标微服务器,包括:
确定所述调用配置信息是否为用于在各所述备选微服务器中指定目标微服务器的指定信息;
如果是所述指定信息,则将所述指定信息所指定的备选微服务器确定为所述目标微服务器。
5.根据权利要求4所述的方法,其特征在于,还包括:
如果不是所述指定信息,则确定至少两个所述备选微服务器的调用优先级,将所述调用优先级最高的备选微服务器确定为所述目标微服务器。
6.根据权利要求3所述的方法,其特征在于,还包括:
如果不包含所述调用配置信息,则查看所述请求接口是否已预先配置需调用的微服务器的微服务器标识;
如果已配置,则基于所述微服务器标识,在至少两个所述备选微服务器中确定出所述目标微服务器。
7.根据权利要求2所述的方法,其特征在于,在调用所述目标微服务器之后,还包括:
将所述目标微服务器对应的数据存储空间与所述至少两个所述备选微服务器中除所述目标微服务器之外的备选微服务器对应的数据存储空间进行数据同步。
8.一种中间数据处理装置,其特征在于,包括:
接收请求模块,用于接收请求接口发送的用于请求对目标数据进行数据处理的目标业务请求,读取预先存储的微服务注册信息;
确定目标微服务器模块,用于基于所述微服务注册信息,确定出预先设置的用于处理所述目标数据的目标微服务器;
调用目标微服务器模块,用于调用所述目标微服务器,以基于与所述目标微服务器关联的数据存储空间对所述目标数据进行数据处理操作;
其中,所述目标微服务器仅关联一个数据存储空间,或者,所述目标微服务器关联至少两个数据存储空间且所述至少两个数据存储空间数据同步。
9.一种电子设备,其特征在于,包括:
一个或多个处理器;
存储器,用于存储一个或多个程序;
当所述一个或多个程序被所述一个或多个处理器执行,使得所述一个或多个处理器实现如权利要求1-7中任一所述的中间数据处理方法。
10.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现如权利要求1-7中任一所述的中间数据处理方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202111079232.7A CN113760597A (zh) | 2021-09-15 | 2021-09-15 | 中间数据处理方法、装置、电子设备及存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202111079232.7A CN113760597A (zh) | 2021-09-15 | 2021-09-15 | 中间数据处理方法、装置、电子设备及存储介质 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN113760597A true CN113760597A (zh) | 2021-12-07 |
Family
ID=78795629
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202111079232.7A Pending CN113760597A (zh) | 2021-09-15 | 2021-09-15 | 中间数据处理方法、装置、电子设备及存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN113760597A (zh) |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN109412853A (zh) * | 2018-10-31 | 2019-03-01 | 中国建设银行股份有限公司 | 分布式服务注册存储方法、***、装置和存储介质 |
CN110278284A (zh) * | 2019-07-10 | 2019-09-24 | 中国民航信息网络股份有限公司 | 一种服务调用方法及装置 |
-
2021
- 2021-09-15 CN CN202111079232.7A patent/CN113760597A/zh active Pending
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN109412853A (zh) * | 2018-10-31 | 2019-03-01 | 中国建设银行股份有限公司 | 分布式服务注册存储方法、***、装置和存储介质 |
CN110278284A (zh) * | 2019-07-10 | 2019-09-24 | 中国民航信息网络股份有限公司 | 一种服务调用方法及装置 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
EP3418877A1 (en) | Data writing and reading method and apparatus, and cloud storage system | |
US20120296960A1 (en) | Method and system for providing access to mainframe data objects in a heterogeneous computing environment | |
CN103248667B (zh) | 一种分布式***的资源访问方法和*** | |
CN109597640B (zh) | 一种应用程序的账号管理方法、装置、设备和介质 | |
CN110555150B (zh) | 一种数据监控方法、装置、设备和存储介质 | |
CN111399764B (zh) | 数据存储方法、读取方法、装置、设备及存储介质 | |
CN110134702A (zh) | 数据流拼接方法、装置、设备和存储介质 | |
CN110633046A (zh) | 一种分布式***的存储方法、装置、存储设备及存储介质 | |
CN113254969B (zh) | 业务数据处理方法、装置、电子设备及存储介质 | |
CN112328363B (zh) | 一种云硬盘挂载方法及其装置 | |
CN112363753A (zh) | 数据校验方法、装置、电子设备及存储介质 | |
CN114020444B (zh) | 一种企业数字中台中资源服务应用的调用***和方法 | |
CN114356521A (zh) | 任务调度方法、装置、电子设备及存储介质 | |
CN110096543B (zh) | 应用程序的数据操作方法、装置、服务器和介质 | |
CN115905314B (zh) | 配置数据处理方法、***、设备及计算机可读存储介质 | |
CN111679892A (zh) | 分布式事务的处理方法、装置、设备及介质 | |
CN109144979B (zh) | 一种基于分布式应用***的数据处理方法及装置 | |
CN113760597A (zh) | 中间数据处理方法、装置、电子设备及存储介质 | |
CN109740027B (zh) | 数据交换方法、装置、服务器和存储介质 | |
CN115577160A (zh) | 一种生产线数据采集方法、装置、设备及介质 | |
CN113986995A (zh) | 请求分发方法、装置、存储介质及电子设备 | |
CN111262727B (zh) | 服务的扩容方法、装置、设备及存储介质 | |
CN113220237A (zh) | 一种分布式存储方法、装置、设备及存储介质 | |
CN113761075A (zh) | 切换数据库的方法、装置、设备和计算机可读介质 | |
US11748354B2 (en) | Data shape confidence |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |