CN116149978A - 服务接口测试方法、装置、电子设备及存储介质 - Google Patents

服务接口测试方法、装置、电子设备及存储介质 Download PDF

Info

Publication number
CN116149978A
CN116149978A CN202111388322.4A CN202111388322A CN116149978A CN 116149978 A CN116149978 A CN 116149978A CN 202111388322 A CN202111388322 A CN 202111388322A CN 116149978 A CN116149978 A CN 116149978A
Authority
CN
China
Prior art keywords
tested
service
test
determining
interface
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202111388322.4A
Other languages
English (en)
Inventor
林晓升
高玉军
刘璐辰
邹意林
卢凯旋
曹紫光
杨萍
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing ByteDance Network Technology Co Ltd
Original Assignee
Beijing ByteDance Network Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing ByteDance Network Technology Co Ltd filed Critical Beijing ByteDance Network Technology Co Ltd
Priority to CN202111388322.4A priority Critical patent/CN116149978A/zh
Publication of CN116149978A publication Critical patent/CN116149978A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00Error detection; Error correction; Monitoring
    • G06F11/36Preventing errors by testing or debugging software
    • G06F11/3668Software testing
    • G06F11/3672Test management
    • G06F11/3676Test management for coverage analysis
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00Error detection; Error correction; Monitoring
    • G06F11/36Preventing errors by testing or debugging software
    • G06F11/3668Software testing
    • G06F11/3672Test management
    • G06F11/3684Test management for test design, e.g. generating new test cases
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00Error detection; Error correction; Monitoring
    • G06F11/36Preventing errors by testing or debugging software
    • G06F11/3668Software testing
    • G06F11/3672Test management
    • G06F11/3688Test management for test execution, e.g. scheduling of test suites

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Hardware Design (AREA)
  • Quality & Reliability (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Debugging And Monitoring (AREA)

Abstract

本公开实施例提供一种服务接口测试方法、装置、电子设备及存储介质,该方法通过确定待测服务,并获取待测服务对应的第一映射关系,第一映射关系表征待测服务的接口与待测函数的对应关系,其中,待测函数为实现待测服务的接口所需要的函数;根据第一映射关系,确定基于强化学习的智能体的动作空间;基于动作空间,通过智能体确定目标测试用例集,其中,目标测试用例集用于测试待测服务的接口测试,动作空间表征智能体确定目标测试用例集的过程中,目标测试用例集中的各测试用例之间所有可能的排列组合;基于目标测试用例集对目标测试点的接口进行测试,生成测试结果。提高微服务体系下对服务进行测试的准确性和时效性。

Description

服务接口测试方法、装置、电子设备及存储介质
技术领域
本公开实施例涉及计算机技术领域,尤其涉及一种服务接口测试方法、装置、电子设备及存储介质。
背景技术
持续开发与运维,也称为DevOps,是Development(开发)和Operations(运维)的组合,是一种过程、方法与***的统称,用于应用在开发、运维和质量保障部门之间的沟通、协作与整合。DevOps流水线是用于实现DevOps流程的自动化流程工具,通过构建和使用流水线,能够实现应用在开发、测试、集成、部署等各个环境的管理。
在微服务体系下的DevOps流水线中,每当应用的代码发生改变时,需要通过对服务接口进行卡点测试,以发现和排出程序错误。现有技术中,通常是从数据库中选择包括多个测试用例的测试用例集,对接口进行测试。然而,随着应用的不断更新迭代,数据库中存储的测试用例的数量也会随之增加,而测试用例集选择不当,会导致测试效果差、代码覆盖率低等问题,从而影响卡点测试的时效性和准确性。
发明内容
本公开实施例提供一种服务接口测试方法、装置、电子设备及存储介质,以克服现有技术中在微服务体系下的服务测试过程中,测试用例集选择不当的问题。
第一方面,本公开实施例提供一种服务接口测试方法,包括:
确定待测服务,并获取所述待测服务对应的第一映射关系,所述第一映射关系表征所述待测服务的接口与待测函数的对应关系,其中,所述待测函数为实现所述待测服务的接口所需要的函数;根据所述第一映射关系,确定基于强化学习的智能体的动作空间;基于所述动作空间,通过所述智能体确定目标测试用例集,其中,所述目标测试用例集用于测试所述待测服务的接口测试,所述动作空间表征所述智能体确定目标测试用例集的过程中,所述目标测试用例集中的各测试用例之间所有可能的排列组合;基于所述目标测试用例集对所述目标测试点的接口进行测试,生成测试结果。
第二方面,本公开实施例提供一种服务接口测试装置,包括:
设置模块,用于确定待测服务,并获取所述待测服务对应的第一映射关系,所述第一映射关系表征所述待测服务的接口与待测函数的对应关系,其中,所述待测函数为实现所述待测服务的接口所需要的函数;
第一确定模块,用于根据所述第一映射关系,确定基于强化学习的智能体的动作空间;
第二确定模块,用于基于所述动作空间,通过所述智能体确定目标测试用例集,其中,所述目标测试用例集用于测试所述待测服务的接口测试,所述动作空间表征所述智能体确定目标测试用例集的过程中,所述目标测试用例集中的各测试用例之间所有可能的排列组合;
测试模块,用于基于所述目标测试用例集对所述目标测试点的接口进行测试,生成测试结果。
第三方面,本公开实施例提供一种电子设备,包括:
处理器,以及与所述处理器通信连接的存储器;
所述存储器存储计算机执行指令;
所述处理器执行所述存储器存储的计算机执行指令,以实现如上第一方面以及第一方面各种可能的设计所述的服务接口测试方法。
第四方面,本公开实施例提供一种计算机可读存储介质,所述计算机可读存储介质中存储有计算机执行指令,当处理器执行所述计算机执行指令时,实现如上第一方面以及第一方面各种可能的设计所述的服务接口测试方法。
第五方面,本公开实施例提供一种计算机程序产品,包括计算机程序,该计算机程序被处理器执行时实现如上第一方面以及第一方面各种可能的设计所述的服务接口测试方法。
本实施例提供的服务接口测试方法、装置、电子设备及存储介质,该方法通过确定待测服务,并获取所述待测服务对应的第一映射关系,所述第一映射关系表征所述待测服务的接口与待测函数的对应关系,其中,所述待测函数为实现所述待测服务的接口所需要的函数;根据所述第一映射关系,确定基于强化学习的智能体的动作空间;基于所述动作空间,通过所述智能体确定目标测试用例集,其中,所述目标测试用例集用于测试所述待测服务的接口测试,所述动作空间表征所述智能体确定目标测试用例集的过程中,所述目标测试用例集中的各测试用例之间所有可能的排列组合;基于所述目标测试用例集对所述目标测试点的接口进行测试,生成测试结果。基于强化学习的智能体确定目标测试用例集,可以提高在微服务体系下对服务接口进行测试过程中,测试用例集与被测试的服务接口之间的匹配性,提高测试用例集中各测试用例的测试效果,进而提高微服务体系下对服务进行测试的准确性和时效性。
附图说明
为了更清楚地说明本公开实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作一简单地介绍,显而易见地,下面描述中的附图是本公开的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动性的前提下,还可以根据这些附图获得其他的附图。
图1为本公开实施例提供的一种服务接口测试方法的一种应用场景图;
图2为本公开实施例提供的服务接口测试方法的流程示意图一;
图3为图2所示实施例中步骤S102的实现方法流程图;
图4为本公开实施例提供的一种智能体与环境进行交互学习的示意图;
图5为本公开实施例提供的服务接口测试方法的流程示意图二;
图6为本公开实施例提供的服务接口测试方法的流程示意图三;
图7为本公开实施例提供的一种确定动作空间的过程示意图;
图8为本公开实施例提供的服务接口测试装置的结构框图;
图9为本公开实施例提供的一种电子设备的结构示意图;
图10为本公开实施例提供的电子设备的硬件结构示意图。
具体实施方式
为使本公开实施例的目的、技术方案和优点更加清楚,下面将结合本公开实施例中的附图,对本公开实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本公开一部分实施例,而不是全部的实施例。基于本公开中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本公开保护的范围。
下面对本公开实施例的应用场景进行解释:
图1为本公开实施例提供的一种服务接口测试方法的一种应用场景图,本公开实施例提供的服务接口测试方法,可以应用于DevOps流程中的持续集成(ContinuousIntegration)阶段中的测试卡点场景。具体地,如图1所示,本公开实施例提供的方法,可以应用于服务器,开发者用户通过开发终端设备修改应用代码后,将修改后的应用代码同步至测试服务器,测试服务器根据开发终端设备上传的代码,对应用中相关的各服务的接口进行测试,生成测试结果。之后,一方面,测试服务器将测试结果返回给开发终端设备,以告知开发者用户;另一方面,若测试结果正常,测试服务器继续将应用代码更新至应用对应的代码库,以及通过应用服务器执行后续自动部署应用等步骤。
现有技术中,在微服务体系下的DevOps流水线中,应用的功能被分解为多个小型功能区块,每一个小型功能区块对应一个服务,实现功能解耦。各个服务之间,通过服务接口(API)实现相互的通信。每当应用的代码发生改变时,需要通过对服务接口进行卡点测试,即通过设置卡点,对特定的待测服务(服务)进行测试,以发现和排出程序错误。现有技术中,通常是从数据库中选择包括多个测试用例的测试用例集,对接口进行测试。可以理解的是,将数据库中存储的所有测试用例在卡点测试时都执行完毕,可以有效提高接口测试用例覆盖度,但此方法运行时长、资源占用率最高且不能及时发现问题。此外,随时软件***的不断更新迭代,测试用例的数量不断增长,测试时长还会不断地增长。与之矛盾的,对于DevOps流水线卡点来说,需要在最短的时间内发现问题,而测试用例集选择不当,会导致测试效果差、代码覆盖率低等问题。
因此,当前亟需一种方法,能够更好的平衡测试用例覆盖度与卡点时效性,提高测试用例的测试效率,以更早的发现应用代码中的错误。因此,本公开实施例提供一种服务接口测试方法以解决上述问题。
图2为本公开实施例提供的服务接口测试方法的流程示意图一。本实施例的方法可以应用在服务器中,该服务接口测试方法包括:
步骤S101:确定待测服务,并获取待测服务对应的第一映射关系,第一映射关系表征待测服务的接口与待测函数的对应关系,其中,待测函数为实现待测服务的接口所需要的函数。
示例性地,DevOps流水线是一种用于实现DevOps流程的自动化流程工具,DevOps流水线可以是基于软件或程序的,通过例如Jenkins等工具可以实现对DevOps流水线的构建。在DevOps流水线构建完成后,在DevOps流水线上部署应用,即可实现对应用的DevOps流程管理,其中具体地实现和操作方法为本领域技术人员知晓的现有技术,此处不再赘述。
确定待测服务,可以通过设置DevOps流水线的目标测试点实现。即对DevOps流水线进行卡点测试,其中,待测服务可以对应DevOps流水线中的一个节点,也可以对应应用中一个具体的服务。设置DevOps流水线的待测服务的具体实现方式,可以基于用户的指令,或者配置信息确定,此处不进行具体限制,可根据具体需要设置。
进一步地,待测服务的功能是基于待测函数的接口实现的。其他微服务通过访问待测服务的接口,实现对该待测服务的调用。待测服务的接口对应至少一个待测函数,待测函数为实现待测服务的接口所需要的函数,例如读写函数、文件的打开函数和关闭函数,以及具体地功能性函数等。测服务的接口与待测函数的映射关系,即为第一映射关系。
在所有待测函数中,可以确定出于待测服务的接口对应的待测函数,例如,待测服务为A服务,其对应的接口即为A服务对应的接口,A服务接口对应的待测函数,即为所有待测函数中与A服务相关的函数,进而,根据服务与函数之间的对应关系,构建第一映射关系,该第一映射关系可以用于表征待测服务的接口与待测函数的对应关系,根据第一映射关系,可以在后续的步骤中,确定测试待测服务的接口所需要的测试用例。
步骤S102:根据第一映射关系,确定基于强化学习的智能体的动作空间。
首先对本实施例中使用的基于强化学习的智能体进行简单介绍:
基于强化学习的智能体,是一种通过强化学习进行训练而生成的模型,该基于强化学习的智能体,在训练至收敛后,可以用于解决序列决策和自动化控制等问题。示例性地。在本实施例步骤中,智能体是通过与测试用例的历史测试记录进行交互和训练而得到的模型,基于强化学习的智能体,能够用于对测试用例,以及多个测试用例组成的测试用例集的测试效果进行评估,从而确定出最适用于测试待测服务的接口进行测试的测试用例集合,即目标测试用例集合。由于智能体学习了测试用例的历史测试记录,因此基于由智能体确定的目标测试用例集合对待测服务的接口进行测试,相比于随机选择的测试用例集合,具有更好的测试效果,同时,降低了所需要的测试用例的数量,因此也降低了执行测试用例的耗时,提高了对待测服务的接口测试的时效性。
示例性地,在获取基于强化学习的智能体,并基于智能体,确定待测服务的目标测试用例集之前,需要对智能体进行训练,其中,可选地,如图3所示,对智能体进行训练的过程包括:
步骤S1021:获取用例历史记录,用例历史记录用于表征测试用例在用于之前的接口测试的过程中,发现问题的概率,和/或次数。
步骤S1022:根据用例历史记录,设置奖励值。
步骤S1023:基于奖励值对智能体进行训练,生成基于智能体的用例排序策略,用例排序策略用于表征目标测试用例集中测试用例的测试排序。
示例性地,用例历史记录是在之前的测试任务过程中,根据测试结果生成的数据。具体地,例如,在之前的测试任务中,根据历史测试结果,若测试用例A测试到了错误(BUG),则在后续的测试中,该测试用例A也有较大概率测试到BUG。因此,可以基于用例历史记录设置奖励值,通过奖励值对智能体进行训练,从而生成用例排序策略。用例排序策略用于指导智能体对测试用例进行排序,使多个排序后的测试用例生成的测试用例集,具有更好的测试效率和测试效果。
其中,示例性地,用例历史记录包括通过不同的用例排序策略生成的测试用例集对应的测试效果信息,测试效果信息用于表征测试用例集进行接口测试的过程中,发现问题的概率,和/或数量,和/或不同排序策略的测试用例集的代码覆盖率。根据用例历史记录,设置奖励值,包括:根据测试用例集对应的测试效果信息,设置奖励值。其中,通过该测试用例集发现问题的概率越大、数量越多、测试用例集的代码覆盖率越高,说明该测试用例集的测试效率和测试效果越好。在通过基于奖励值对智能体进行训练过程中,将测试效率和测试效果好的测试用例集作为奖励对智能体进行训练,可以进一步提高智能体的训练效率,提高基于智能体的用例排序策略的有效性。
进一步地,示例性地,智能体的动作空间,是一个集合,包括了所有用例可能的排列组合。图4为本公开实施例提供的一种智能体与环境进行交互学习的示意图,如图4所示,其中的环境即为DevOps流水线的待测服务(DevOps流水线卡点),智能体基于动作空间,每次选择一个动作(例如动作a),生成排序的测试用例集A,然后根据测试用例集的执行情况,DevOps流水线卡点环境会返回给智能体即时的奖励(A的奖励),用于评估当前选择动作a(也即测试用例集A)的执行效果。每一次流水线卡点作为一个周期,在多个周期的流水线卡点中,智能体通过累积最大即时奖励,来优化排序策略。这里的策略可以理解为,在当前状态,选择哪个动作可以获得最高即时奖励。其中,图中的状态空间则是指测试用例的集合。进而,根据第一映射关系所表征的待测服务的接口与待测函数的对应关系,可以确定所有适用于待测服务的接口的测试用例的排列组合,即智能体的动作空间。
步骤S103:基于动作空间,通过智能体确定目标测试用例集,其中,目标测试用例集用于测试待测服务的接口测试,动作空间表征智能体确定目标测试用例集的过程中,目标测试用例集中的各测试用例之间所有可能的排列组合。
示例性地,在确定动作空间后,智能体基于动作空间中所包括的测试用例的子集(即不同测试用例的排序组合),对各子集进行评估,例如进行打分,并将动作空间中分数最高的测试用例子集,确定为目标测试用例集。该打分过程有智能体完成,由于智能体在之前基于用例历史记录进行了训练和学习,因此,智能体可以实现对各测试用例子集的测试效果进行打分的目的。其具体的实现原理及实现方法,本领域技术人员知晓的现有技术,此处不再赘述。
本实施例中,为了降低智能体学习用例排序策略的时间,本发明从代码仓库入手,通过分析代码变更影响了哪些函数,可选地,再结合静态分析,代码覆盖率分析等方法,获取到接口与函数的关系映射,即第一映射关系。在全量测试用例中完成测试用例子集选择策略,缩小智能体的动作空间,进而降低智能体学习用例优化排序策略的时间。
步骤S104:基于目标测试用例集对待测服务的接口进行测试,生成测试结果。
示例性地,在确定目标测试用例集后,通过目标测试用例集中的已排序的各测试用例,对接口进行测试,从而生成测试结果。其中,在对接口进行测试生成测试结果后,将测试结果保存为用例历史记录,并根据用例历史记录对智能体进行更新,从而提高智能体确定待测服务的目标测试用例集的准确性。
在本实施例中,通过设置DevOps流水线的待测服务;获取基于强化学习的智能体,并基于智能体,确定待测服务的目标测试用例集,其中,目标测试用例集用于待测服务的接口测试;基于目标测试用例集对待测服务的接口进行测试,生成测试结果。基于强化学习的智能体确定目标测试用例集,可以提高在DevOps流水线中对服务接口进行卡点测试过程中,测试用例集与被测试的服务接口之间的匹配性,提高测试用例集中各测试用例的测试效果,进而提高DevOps流水线中进行卡点测试的准确性和时效性。
图5为本公开实施例提供的服务接口测试方法的流程示意图二。本实施例在图2所示实施例的基础上,对步骤S101-S102的实现过程进行细化,该服务接口测试方法包括:
步骤S201:获取代码变更信息,代码变更信息用于指示代码仓库中受代码变更影响的函数。
步骤S202:根据代码变更信息,从受代码变更影响的函数中,确定待测服务的接口对应的待测函数,待测函数为实现待测服务的接口所需要的函数。
在代码仓库中,应用对应的代码发生变化时,需要对服务接口进行测试。其中,代码变更信息是用于表征代码变化的位置以及对应的受影响的函数的位置的相关信息。根据代码变更信息,可以实现对受代码变更影响的函数的定位,进而,根据代码变更信息,确定受代码变更影响的函数为待测函数。示例性地,在微服务体系中,一个应用所用到的服务以及对应的函数的数量是非常多的,而相对的,应用在升级或更新过程中代码的修改量则较少,因此,确定代码变化所对应的函数为待测函数,并基于待测函数进行后续的测试用例的确定,可以实现对应用的代码变更位置的针对性测试,提高测试效果,并且能够减少智能体进行判断的动作空间,提高测试效率。
步骤S203:根据待测服务的接口,以及待测服务的接口对应的待测函数,生成第一映射关系,其中,第一映射关系表征待测服务的接口与待测函数的对应关系。
示例性地,在所有待测函数中,确定出于目标测试点的接口对应的待测函数,例如,目标测试点为A服务,其对应的接口即为A服务对应的接口,A服务接口对应的待测函数,即为所有待测函数中与A服务相关的函数,进而,根据服务与函数之间的对应关系,构建第一映射关系,该第一映射关系可以用于表征目标测试点的接口与待测函数的对应关系,根据第一映射关系,可以在后续的步骤中,确定测试目标测试点的接口所需要的测试用例。
步骤S204:根据第一映射关系,确定与待测服务的接口对应的待测函数。
步骤S205:根据待测服务的接口对应的待测函数,确定对应的相关测试用例,相关测试用例为用于测试待测服务的接口对应的待测函数的测试用例。
示例性地,根据第一映射关系,可以确定待测服务的接口对应的待测函数,其中,待测函数可能包括一个或多个。对于各待测函数,存在对应的测试用例,即相关测试用例,该相关测试用例是***在数据库中,并可以根据需求进行调用的。在一种可能的实现方式中,根据待测服务的接口对应的待测函数,确定对应的相关测试用例,包括:根据待测服务的接口对应的待测函数,确定至少两个备选相关测试用例;根据各备选相关测试用例的代码覆盖率,确定相关测试用例。
示例性地,接口对应的待测函数,可以同时对应一个或多个测试用例,其中,不同测试用例的代码覆盖率不同,在微服务体系下,由于各服务之间存在关联性,较高代码覆盖率的测试用例,可以有效的提高测试效果。
步骤S206:基于相关测试用例,以及基于智能体的用例排序策略,确定智能体的动作空间。
示例性地,进一步地,在确定相关测试用例后,不同相关测试用例之间的排序,也会影响其形成的测试用例集的测试效果。而智能体在与环境(DevOps流水线卡点)进行交互学习的过程中,获得了用于确定测试用例之间的排序的用例排序策略,因此,基于智能体的用例排序策略,确定各相关测试用例之间的排序,从而形成不同测试用例排序组成的动作空间。其中,动作空间中的每一组测试用例排序,相当于一组测试用例集的子集,本实施例中,通过智能体的用例排序策略,减少动作空间中的子集数量,从而使智能体在后续基于动作空间确定目标测试用例集时,由于减少了需要进行计算的动作空间内测试用例子集的数量,因此能够在保证测试效果的前提下,减少计算耗时,从而提高对待测服务进行测试的时效性。
步骤S207:基于动作空间,通过智能体确定目标测试用例集。
步骤S208:基于目标测试用例集对待测服务的接口进行测试,生成测试结果。
本实施例中,通过第一映射关系确定智能体的动作空间,实现了对动作空间中待分析的测试用例子集数量的缩减,从而缩短了确定目标测试用例集的过程中的耗时,提高了对待测服务的接口进行测试的时效性。
图6为本公开实施例提供的服务接口测试方法的流程示意图三。本实施例在图5所示实施例的基础上,增加了微服务链路作为对动作空间的影响因素,以及基于微服务链路确定智能体的动作空间的步骤,该服务接口测试方法包括:
步骤S301:获取代码变更信息,代码变更信息用于指示代码仓库中受代码变更影响的函数
步骤S302:根据代码变更信息,从受代码变更影响的函数中,确定待测服务的接口对应的待测函数,待测函数为实现待测服务的接口所需要的函数。
步骤S303:根据待测服务的接口,以及待测服务的接口对应的待测函数,生成第一映射关系,其中,第一映射关系表征待测服务的接口与待测函数的对应关系。
步骤S304:获取微服务链路标识,微服务链路标识用于表征待测服务的接口对应的微服务链路,微服务链路包括至少一个服务。
步骤S305:根据微服务链路标识和第一映射关系,生成第二映射关系,第二映射关系表征待测服务的接口与对应的微服务链路、待测函数的对应关系。
步骤S306:根据第二映射关系,确定智能体的动作空间。
示例性地,DevOps流水线的测试卡点场景下,传统的接口测试只是触发了对上线服务的测试,而在微服务架构体系中,一个服务的代码修改,有可能对其上下游的服务也造成影响。本实施例中,基于微服务链路标识(Track ID)的特性,获取表征服务、接口与函数三者的映射关系的第二映射关系,并基于第二映射关系确定智能体的动作空间,除了保证更为全面的评估测试用例的排序权重,还可以在当前服务上线时,同时触发对其上下游服务的接口测试。
步骤S307:基于动作空间,通过智能体确定目标测试用例集。
步骤S308:基于目标测试用例集对待测服务的接口进行测试,生成测试结果。
本实施例中,在基于图5所示实施例的基础上,利用微服务链路标识(Track ID)的特性,获取不同接口用例时在请求过程中,该接口经过的各个服务与函数,再抽象出服务、接口与函数三者的映射关系,以保证智能体在优化排序策略时,提供更加全面的评估。此外,任务调度执行时,除了对当前小流量机器发起接口请求时,同时会触发上下游服务的接口请求,有效提高测试覆盖面。
图7为本公开实施例提供的一种确定动作空间的过程示意图,参考图7,在本实施例中,DevOps流水线的操作对象依次为:开发终端设备、代码仓库、编译、部署、小流量机器、全流量机器,本公开实施例提供的方法在部署完小流量机器后进行DevOps流水线测试卡点,可以避免全量且无序的测试用例进行请求到小流量机器,测试卡点开始后,通过数据库中获取持久化测试用例集合,即服务接口测试用例。本发明基于强化学习,通过用例历史记录来构建智能体,学习测试用例的排序策略。学习过程基于用例历史记录,主要考虑历史中曾经发现过Bug的用例,在后续的测试过程中,很有可能再发现新的Bug,基于此来设计奖励函数。奖励函数的设计,除了以发现问题为奖励值,同时还考虑了用例在不同的排序次序,获得的奖励值不同,以保证智能体可以更好的学习到如何通过优化排序策略。根据代码仓库中变更的代码,确定表征受代码变更影响的函数的代码变更信息,进而基于接口与函数的映射关系,以及接口、函数和服务之间的映射关系,依次确定第一映射关系和第二映射关系,从而确定相关测试用例。根据相关测试用例以及在基于智能体的测试卡点过程中生成的用例排序策略,共同确定智能体的动作空间。进而,基于动作空间完成目标测试用例集的确定。
本实施例中,步骤S301-步骤S303、步骤S307-步骤S308的实现方式与本公开图4所示实施例中的对应步骤的实现方式相同,在此不再一一赘述。
对应于上文实施例的服务接口测试方法,图8为本公开实施例提供的服务接口测试装置的结构框图。为了便于说明,仅示出了与本公开实施例相关的部分。参照图8,服务接口测试装置4包括:
设置模块41,用于确定待测服务,并获取待测服务对应的第一映射关系,第一映射关系表征待测服务的接口与待测函数的对应关系,其中,待测函数为实现待测服务的接口所需要的函数;
第一确定模块42,用于根据第一映射关系,确定基于强化学习的智能体的动作空间;
第二确定模块43,用于基于动作空间,通过智能体确定目标测试用例集,其中,目标测试用例集用于测试待测服务的接口测试,动作空间表征智能体确定目标测试用例集的过程中,目标测试用例集中的各测试用例之间所有可能的排列组合;
测试模块44,用于基于目标测试用例集对目标测试点的接口进行测试,生成测试结果。
在本公开的一个实施例中,第一确定模块42,具体用于:根据第一映射关系,确定与待测服务的接口对应的待测函数;根据待测服务的接口对应的待测函数,确定对应的相关测试用例,相关测试用例为用于测试待测服务的接口对应的待测函数的测试用例;基于相关测试用例,以及基于智能体的用例排序策略,确定智能体的动作空间。
在本公开的一个实施例中,第一确定模块42在根据待测服务的接口对应的待测函数,确定对应的相关测试用例时,具体用于:根据待测服务的接口对应的待测函数,确定至少两个备选相关测试用例;根据各备选相关测试用例的代码覆盖率,确定相关测试用例。
在本公开的一个实施例中,在获取待测服务对应的第一映射关系之前,设置模块41,还用于:获取代码变更信息,代码变更信息用于指示代码仓库中受代码变更影响的函数;根据代码变更信息,从受代码变更影响的函数中,确定待测服务的接口对应的待测函数;根据待测服务的接口,以及待测服务的接口对应的待测函数,生成第一映射关系。
在本公开的一个实施例中,设置模块41在获取待测服务对应的第一映射关系之后,还用于:获取微服务链路标识,微服务链路标识用于表征待测服务的接口对应的微服务链路,微服务链路包括至少一个服务;第一确定模块42,具体用于:根据微服务链路标识和第一映射关系,生成第二映射关系,第二映射关系表征待测服务的接口与对应的微服务链路、待测函数的对应关系;根据第二映射关系,确定基于强化学习的智能体的动作空间。
在本公开的一个实施例中,第一确定模块42在根据第二映射关系,确定基于强化学习的智能体的动作空间时,具体用于:根据第二映射关系,确定与待测服务的接口对应的待测函数以及微服务链路;根据待测服务的接口对应的待测函数,以及微服务链路中的各服务,确定对应的相关测试用例,相关测试用例为用于测试待测服务的接口对应的待测函数的测试用例,以及微服务链路中的各服务;基于相关测试用例,以及基于智能体的用例排序策略,确定智能体的动作空间。
在本公开的一个实施例中,第一确定模块42,还用于:获取用例历史记录,用例历史记录用于表征测试用例在用于之前的接口测试的过程中,发现问题的概率,和/或次数;根据用例历史记录,设置奖励值,并基于奖励值对智能体进行训练,生成基于智能体的用例排序策略,用例排序策略用于表征目标测试用例集中测试用例的测试排序;第一确定模块42,具体用于:根据第一映射关系和基于智能体的用例排序策略,确定目标测试用例集中的测试用例,以及各测试用例的测试排序;根据目标测试用例集中的测试用例,以及各测试用例的测试排序,确定智能体的动作空间。
在本公开的一个实施例中,用例历史记录包括通过不同的用例排序策略生成的测试用例集对应的测试效果信息,测试效果信息用于表征测试用例集进行接口测试的过程中,发现问题的概率,和/或数量,和/或不同排序策略的测试用例集的代码覆盖率;第一确定模块42在根据用例历史记录,设置奖励值时,具体用于:根据测试用例集对应的测试效果信息,设置奖励值。
其中,设置模块41、第一确定模块42、第二确定模块43、测试模块44依次连接。本实施例提供的服务接口测试装置4可以执行上述方法实施例的技术方案,其实现原理和技术效果类似,本实施例此处不再赘述。
图9为本公开实施例提供的一种电子设备的结构示意图,如图9所示,该电子设备5包括
处理器51,以及与处理器51通信连接的存储器52;
存储器52存储计算机执行指令;
处理器51执行存储器52存储的计算机执行指令,以实现如图2-图8所示实施例中的服务接口测试方法。
其中,可选地,处理器51和存储器52通过总线53连接。
相关说明可以对应参见图2-图7所对应的实施例中的步骤所对应的相关描述和效果进行理解,此处不做过多赘述。
参考图10,其示出了适于用来实现本公开实施例的电子设备900的结构示意图,该电子设备900可以为终端设备或服务器。其中,终端设备可以包括但不限于诸如移动电话、笔记本电脑、数字广播接收器、个人数字助理(Personal Digital Assistant,简称PDA)、平板电脑(Portable Android Device,简称PAD)、便携式多媒体播放器(Portable MediaPlayer,简称PMP)、车载终端(例如车载导航终端)等等的移动终端以及诸如数字TV、台式计算机等等的固定终端。图10示出的电子设备仅仅是一个示例,不应对本公开实施例的功能和使用范围带来任何限制。
如图10所示,电子设备900可以包括处理装置(例如中央处理器、图形处理器等)901,其可以根据存储在只读存储器(Read Only Memory,简称ROM)902中的程序或者从存储装置908加载到随机访问存储器(Random Access Memory,简称RAM)903中的程序而执行各种适当的动作和处理。在RAM 903中,还存储有电子设备900操作所需的各种程序和数据。处理装置901、ROM 902以及RAM 903通过总线904彼此相连。输入/输出(I/O)接口905也连接至总线904。
通常,以下装置可以连接至I/O接口905:包括例如触摸屏、触摸板、键盘、鼠标、摄像头、麦克风、加速度计、陀螺仪等的输入装置906;包括例如液晶显示器(Liquid CrystalDisplay,简称LCD)、扬声器、振动器等的输出装置907;包括例如磁带、硬盘等的存储装置908;以及通信装置909。通信装置909可以允许电子设备900与其他设备进行无线或有线通信以交换数据。虽然图10示出了具有各种装置的电子设备900,但是应理解的是,并不要求实施或具备所有示出的装置。可以替代地实施或具备更多或更少的装置。
特别地,根据本公开的实施例,上文参考流程图描述的过程可以被实现为计算机软件程序。例如,本公开的实施例包括一种计算机程序产品,其包括承载在计算机可读介质上的计算机程序,该计算机程序包含用于执行流程图所示的方法的程序代码。在这样的实施例中,该计算机程序可以通过通信装置909从网络上被下载和安装,或者从存储装置908被安装,或者从ROM902被安装。在该计算机程序被处理装置901执行时,执行本公开实施例的方法中限定的上述功能。
需要说明的是,本公开上述的计算机可读介质可以是计算机可读信号介质或者计算机可读存储介质或者是上述两者的任意组合。计算机可读存储介质例如可以是——但不限于——电、磁、光、电磁、红外线、或半导体的***、装置或器件,或者任意以上的组合。计算机可读存储介质的更具体的例子可以包括但不限于:具有一个或多个导线的电连接、便携式计算机磁盘、硬盘、随机访问存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、光纤、便携式紧凑磁盘只读存储器(CD-ROM)、光存储器件、磁存储器件、或者上述的任意合适的组合。在本公开中,计算机可读存储介质可以是任何包含或存储程序的有形介质,该程序可以被指令执行***、装置或者器件使用或者与其结合使用。而在本公开中,计算机可读信号介质可以包括在基带中或者作为载波一部分传播的数据信号,其中承载了计算机可读的程序代码。这种传播的数据信号可以采用多种形式,包括但不限于电磁信号、光信号或上述的任意合适的组合。计算机可读信号介质还可以是计算机可读存储介质以外的任何计算机可读介质,该计算机可读信号介质可以发送、传播或者传输用于由指令执行***、装置或者器件使用或者与其结合使用的程序。计算机可读介质上包含的程序代码可以用任何适当的介质传输,包括但不限于:电线、光缆、RF(射频)等等,或者上述的任意合适的组合。
上述计算机可读介质可以是上述电子设备中所包含的;也可以是单独存在,而未装配入该电子设备中。
上述计算机可读介质承载有一个或者多个程序,当上述一个或者多个程序被该电子设备执行时,使得该电子设备执行上述实施例所示的方法。
可以以一种或多种程序设计语言或其组合来编写用于执行本公开的操作的计算机程序代码,上述程序设计语言包括面向对象的程序设计语言—诸如Java、Smalltalk、C++,还包括常规的过程式程序设计语言—诸如“C”语言或类似的程序设计语言。程序代码可以完全地在用户计算机上执行、部分地在用户计算机上执行、作为一个独立的软件包执行、部分在用户计算机上部分在远程计算机上执行、或者完全在远程计算机或服务器上执行。在涉及远程计算机的情形中,远程计算机可以通过任意种类的网络——包括局域网(LocalArea Network,简称LAN)或广域网(Wide Area Network,简称WAN)—连接到用户计算机,或者,可以连接到外部计算机(例如利用因特网服务提供商来通过因特网连接)。
附图中的流程图和框图,图示了按照本公开各种实施例的***、方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上,流程图或框图中的每个方框可以代表一个模块、程序段、或代码的一部分,该模块、程序段、或代码的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。也应当注意,在有些作为替换的实现中,方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如,两个接连地表示的方框实际上可以基本并行地执行,它们有时也可以按相反的顺序执行,这依所涉及的功能而定。也要注意的是,框图和/或流程图中的每个方框、以及框图和/或流程图中的方框的组合,可以用执行规定的功能或操作的专用的基于硬件的***来实现,或者可以用专用硬件与计算机指令的组合来实现。
描述于本公开实施例中所涉及到的单元可以通过软件的方式实现,也可以通过硬件的方式来实现。其中,单元的名称在某种情况下并不构成对该单元本身的限定,例如,第一获取单元还可以被描述为“获取至少两个网际协议地址的单元”。
本文中以上描述的功能可以至少部分地由一个或多个硬件逻辑部件来执行。例如,非限制性地,可以使用的示范类型的硬件逻辑部件包括:现场可编程门阵列(FPGA)、专用集成电路(ASIC)、专用标准产品(ASSP)、片上***(SOC)、复杂可编程逻辑设备(CPLD)等等。
在本公开的上下文中,机器可读介质可以是有形的介质,其可以包含或存储以供指令执行***、装置或设备使用或与指令执行***、装置或设备结合地使用的程序。机器可读介质可以是机器可读信号介质或机器可读储存介质。机器可读介质可以包括但不限于电子的、磁性的、光学的、电磁的、红外的、或半导体***、装置或设备,或者上述内容的任何合适组合。机器可读存储介质的更具体示例会包括基于一个或多个线的电气连接、便携式计算机盘、硬盘、随机存取存储器(RAM)、只读存储器(ROM)、可擦除可编程只读存储器(EPROM或快闪存储器)、光纤、便捷式紧凑盘只读存储器(CD-ROM)、光学储存设备、磁储存设备、或上述内容的任何合适组合。
第一方面,根据本公开的一个或多个实施例,提供了一种服务接口测试方法,包括:
确定待测服务,并获取所述待测服务对应的第一映射关系,所述第一映射关系表征所述待测服务的接口与待测函数的对应关系,其中,所述待测函数为实现所述待测服务的接口所需要的函数;根据所述第一映射关系,确定基于强化学习的智能体的动作空间;基于所述动作空间,通过所述智能体确定目标测试用例集,其中,所述目标测试用例集用于测试所述待测服务的接口测试,所述动作空间表征所述智能体确定目标测试用例集的过程中,所述目标测试用例集中的各测试用例之间所有可能的排列组合;基于所述目标测试用例集对所述目标测试点的接口进行测试,生成测试结果。
根据本公开的一个或多个实施例,根据所述第一映射关系,确定基于强化学习的智能体的动作空间,包括:根据所述第一映射关系,确定与所述待测服务的接口对应的待测函数;根据所述待测服务的接口对应的待测函数,确定对应的相关测试用例,所述相关测试用例为用于测试所述待测服务的接口对应的待测函数的测试用例;基于所述相关测试用例,以及基于所述智能体的用例排序策略,确定所述智能体的动作空间。
根据本公开的一个或多个实施例,根据所述待测服务的接口对应的待测函数,确定对应的相关测试用例,包括:根据所述待测服务的接口对应的待测函数,确定至少两个备选相关测试用例;根据各所述备选相关测试用例的代码覆盖率,确定所述相关测试用例。
根据本公开的一个或多个实施例,在获取所述待测服务对应的第一映射关系之前,还包括:获取代码变更信息,所述代码变更信息用于指示代码仓库中受代码变更影响的函数;根据所述代码变更信息,从所述受代码变更影响的函数中,确定所述待测服务的接口对应的待测函数;根据所述待测服务的接口,以及所述待测服务的接口对应的待测函数,生成所述第一映射关系。
根据本公开的一个或多个实施例,在获取所述待测服务对应的第一映射关系之后,还包括:获取微服务链路标识,所述微服务链路标识用于表征所述待测服务的接口对应的微服务链路,所述微服务链路包括至少一个服务;根据所述第一映射关系,确定基于强化学习的智能体的动作空间,包括:根据所述微服务链路标识和所述第一映射关系,生成第二映射关系,所述第二映射关系表征所述待测服务的接口与对应的微服务链路、待测函数的对应关系;根据所述第二映射关系,确定基于强化学习的智能体的动作空间。
根据本公开的一个或多个实施例,根据所述第二映射关系,确定基于强化学习的智能体的动作空间,包括:根据所述第二映射关系,确定与所述待测服务的接口对应的待测函数以及微服务链路;根据所述待测服务的接口对应的待测函数,以及微服务链路中的各服务,确定对应的相关测试用例,所述相关测试用例为用于测试所述待测服务的接口对应的待测函数的测试用例,以及所述微服务链路中的各服务;基于所述相关测试用例,以及基于所述智能体的用例排序策略,确定所述智能体的动作空间。
根据本公开的一个或多个实施例,所述方法还包括:获取用例历史记录,所述用例历史记录用于表征测试用例在用于之前的接口测试的过程中,发现问题的概率,和/或次数;根据所述用例历史记录,设置奖励值,并基于所述奖励值对所述智能体进行训练,生成基于智能体的用例排序策略,所述用例排序策略用于表征所述目标测试用例集中测试用例的测试排序;所述根据所述第一映射关系,确定基于强化学习的智能体的动作空间,包括:根据所述第一映射关系和所述基于智能体的用例排序策略,确定所述目标测试用例集中的测试用例,以及各所述测试用例的测试排序;根据所述目标测试用例集中的测试用例,以及各所述测试用例的测试排序,确定所述智能体的动作空间。
根据本公开的一个或多个实施例,所述用例历史记录包括通过不同的用例排序策略生成的测试用例集对应的测试效果信息,所述测试效果信息用于表征测试用例集进行接口测试的过程中,发现问题的概率,和/或数量,和/或不同排序策略的测试用例集的代码覆盖率;根据用例历史记录,设置奖励值,包括:根据所述测试用例集对应的测试效果信息,设置奖励值。
第二方面,根据本公开的一个或多个实施例,提供了一种服务接口测试装置,包括:
设置模块,用于确定待测服务,并获取所述待测服务对应的第一映射关系,所述第一映射关系表征所述待测服务的接口与待测函数的对应关系,其中,所述待测函数为实现所述待测服务的接口所需要的函数;
第一确定模块,用于根据所述第一映射关系,确定基于强化学习的智能体的动作空间;
第二确定模块,用于基于所述动作空间,通过所述智能体确定目标测试用例集,其中,所述目标测试用例集用于测试所述待测服务的接口测试,所述动作空间表征所述智能体确定目标测试用例集的过程中,所述目标测试用例集中的各测试用例之间所有可能的排列组合;
测试模块,用于基于所述目标测试用例集对所述目标测试点的接口进行测试,生成测试结果。
根据本公开的一个或多个实施例,所述第一确定模块,具体用于:根据所述第一映射关系,确定与所述待测服务的接口对应的待测函数;根据所述待测服务的接口对应的待测函数,确定对应的相关测试用例,所述相关测试用例为用于测试所述待测服务的接口对应的待测函数的测试用例;基于所述相关测试用例,以及基于所述智能体的用例排序策略,确定所述智能体的动作空间。
根据本公开的一个或多个实施例,所述第一确定模块在根据所述待测服务的接口对应的待测函数,确定对应的相关测试用例时,具体用于:根据所述待测服务的接口对应的待测函数,确定至少两个备选相关测试用例;根据各所述备选相关测试用例的代码覆盖率,确定所述相关测试用例。
根据本公开的一个或多个实施例,在获取所述待测服务对应的第一映射关系之前,所述设置模块,还用于:获取代码变更信息,所述代码变更信息用于指示代码仓库中受代码变更影响的函数;根据所述代码变更信息,从所述受代码变更影响的函数中,确定所述待测服务的接口对应的待测函数;根据所述待测服务的接口,以及所述待测服务的接口对应的待测函数,生成所述第一映射关系。
根据本公开的一个或多个实施例,所述设置模块在获取所述待测服务对应的第一映射关系之后,还用于:获取微服务链路标识,所述微服务链路标识用于表征所述待测服务的接口对应的微服务链路,所述微服务链路包括至少一个服务;所述第一确定模块,具体用于:根据所述微服务链路标识和所述第一映射关系,生成第二映射关系,所述第二映射关系表征所述待测服务的接口与对应的微服务链路、待测函数的对应关系;根据所述第二映射关系,确定基于强化学习的智能体的动作空间。
根据本公开的一个或多个实施例,所述第一确定模块在根据所述第二映射关系,确定基于强化学习的智能体的动作空间时,具体用于:根据所述第二映射关系,确定与所述待测服务的接口对应的待测函数以及微服务链路;根据所述待测服务的接口对应的待测函数,以及微服务链路中的各服务,确定对应的相关测试用例,所述相关测试用例为用于测试所述待测服务的接口对应的待测函数的测试用例,以及所述微服务链路中的各服务;基于所述相关测试用例,以及基于所述智能体的用例排序策略,确定所述智能体的动作空间。
根据本公开的一个或多个实施例,所述第一确定模块,还用于:获取用例历史记录,所述用例历史记录用于表征测试用例在用于之前的接口测试的过程中,发现问题的概率,和/或次数;根据所述用例历史记录,设置奖励值,并基于所述奖励值对所述智能体进行训练,生成基于智能体的用例排序策略,所述用例排序策略用于表征所述目标测试用例集中测试用例的测试排序;所述第一确定模块,具体用于:根据所述第一映射关系和所述基于智能体的用例排序策略,确定所述目标测试用例集中的测试用例,以及各所述测试用例的测试排序;根据所述目标测试用例集中的测试用例,以及各所述测试用例的测试排序,确定所述智能体的动作空间。
根据本公开的一个或多个实施例,所述用例历史记录包括通过不同的用例排序策略生成的测试用例集对应的测试效果信息,所述测试效果信息用于表征测试用例集进行接口测试的过程中,发现问题的概率,和/或数量,和/或不同排序策略的测试用例集的代码覆盖率;第一确定模块在根据用例历史记录,设置奖励值时,具体用于:根据所述测试用例集对应的测试效果信息,设置奖励值。
第三方面,根据本公开的一个或多个实施例,提供了一种电子设备,包括:处理器,以及与所述处理器通信连接的存储器;
所述存储器存储计算机执行指令;
所述处理器执行所述存储器存储的计算机执行指令,以实现如上第一方面以及第一方面各种可能的设计所述的服务接口测试方法。
第四方面,根据本公开的一个或多个实施例,提供了一种计算机可读存储介质,所述计算机可读存储介质中存储有计算机执行指令,当处理器执行所述计算机执行指令时,实现如上第一方面以及第一方面各种可能的设计所述的服务接口测试方法。
第五方面,本公开实施例提供一种计算机程序产品,包括计算机程序,该计算机程序被处理器执行时实现如上第一方面以及第一方面各种可能的设计所述的服务接口测试方法。
以上描述仅为本公开的较佳实施例以及对所运用技术原理的说明。本领域技术人员应当理解,本公开中所涉及的公开范围,并不限于上述技术特征的特定组合而成的技术方案,同时也应涵盖在不脱离上述公开构思的情况下,由上述技术特征或其等同特征进行任意组合而形成的其它技术方案。例如上述特征与本公开中公开的(但不限于)具有类似功能的技术特征进行互相替换而形成的技术方案。
此外,虽然采用特定次序描绘了各操作,但是这不应当理解为要求这些操作以所示出的特定次序或以顺序次序执行来执行。在一定环境下,多任务和并行处理可能是有利的。同样地,虽然在上面论述中包含了若干具体实现细节,但是这些不应当被解释为对本公开的范围的限制。在单独的实施例的上下文中描述的某些特征还可以组合地实现在单个实施例中。相反地,在单个实施例的上下文中描述的各种特征也可以单独地或以任何合适的子组合的方式实现在多个实施例中。
尽管已经采用特定于结构特征和/或方法逻辑动作的语言描述了本主题,但是应当理解所附权利要求书中所限定的主题未必局限于上面描述的特定特征或动作。相反,上面所描述的特定特征和动作仅仅是实现权利要求书的示例形式。

Claims (12)

1.一种服务接口测试方法,其特征在于,包括:
确定待测服务,并获取所述待测服务对应的第一映射关系,所述第一映射关系表征所述待测服务的接口与待测函数的对应关系,其中,所述待测函数为实现所述待测服务的接口所需要的函数;
根据所述第一映射关系,确定基于强化学习的智能体的动作空间;
基于所述动作空间,通过所述智能体确定目标测试用例集,其中,所述目标测试用例集用于测试所述待测服务的接口测试,所述动作空间表征所述智能体确定目标测试用例集的过程中,所述目标测试用例集中的各测试用例之间所有可能的排列组合;
基于所述目标测试用例集对所述目标测试点的接口进行测试,生成测试结果。
2.根据权利要求1所述的方法,其特征在于,根据所述第一映射关系,确定基于强化学习的智能体的动作空间,包括:
根据所述第一映射关系,确定与所述待测服务的接口对应的待测函数;
根据所述待测服务的接口对应的待测函数,确定对应的相关测试用例,所述相关测试用例为用于测试所述待测服务的接口对应的待测函数的测试用例;
基于所述相关测试用例,以及基于所述智能体的用例排序策略,确定所述智能体的动作空间。
3.根据权利要求2所述的方法,其特征在于,根据所述待测服务的接口对应的待测函数,确定对应的相关测试用例,包括:
根据所述待测服务的接口对应的待测函数,确定至少两个备选相关测试用例;
根据各所述备选相关测试用例的代码覆盖率,确定所述相关测试用例。
4.根据权利要求2所述的方法,其特征在于,在获取所述待测服务对应的第一映射关系之前,还包括:
获取代码变更信息,所述代码变更信息用于指示代码仓库中受代码变更影响的函数;
根据所述代码变更信息,从所述受代码变更影响的函数中,确定所述待测服务的接口对应的待测函数;
根据所述待测服务的接口,以及所述待测服务的接口对应的待测函数,生成所述第一映射关系。
5.根据权利要求1所述的方法,其特征在于,在获取所述待测服务对应的第一映射关系之后,还包括:
获取微服务链路标识,所述微服务链路标识用于表征所述待测服务的接口对应的微服务链路,所述微服务链路包括至少一个服务;
根据所述第一映射关系,确定基于强化学习的智能体的动作空间,包括:
根据所述微服务链路标识和所述第一映射关系,生成第二映射关系,所述第二映射关系表征所述待测服务的接口与对应的微服务链路、待测函数的对应关系;
根据所述第二映射关系,确定基于强化学习的智能体的动作空间。
6.根据权利要求5所述的方法,其特征在于,根据所述第二映射关系,确定基于强化学习的智能体的动作空间,包括:
根据所述第二映射关系,确定与所述待测服务的接口对应的待测函数以及微服务链路;
根据所述待测服务的接口对应的待测函数,以及微服务链路中的各服务,确定对应的相关测试用例,所述相关测试用例为用于测试所述待测服务的接口对应的待测函数的测试用例,以及所述微服务链路中的各服务;
基于所述相关测试用例,以及基于所述智能体的用例排序策略,确定所述智能体的动作空间。
7.根据权利要求1-6任一项所述的方法,其特征在于,所述方法还包括:
获取用例历史记录,所述用例历史记录用于表征测试用例在用于之前的接口测试的过程中,发现问题的概率,和/或次数;
根据所述用例历史记录,设置奖励值,并基于所述奖励值对所述智能体进行训练,生成基于智能体的用例排序策略,所述用例排序策略用于表征所述目标测试用例集中测试用例的测试排序;
所述根据所述第一映射关系,确定基于强化学习的智能体的动作空间,包括:
根据所述第一映射关系和所述基于智能体的用例排序策略,确定所述目标测试用例集中的测试用例,以及各所述测试用例的测试排序;
根据所述目标测试用例集中的测试用例,以及各所述测试用例的测试排序,确定所述智能体的动作空间。
8.根据权利要求7所述的方法,其特征在于,所述用例历史记录包括通过不同的用例排序策略生成的测试用例集对应的测试效果信息,所述测试效果信息用于表征测试用例集进行接口测试的过程中,发现问题的概率,和/或数量,和/或不同排序策略的测试用例集的代码覆盖率;
根据用例历史记录,设置奖励值,包括:
根据所述测试用例集对应的测试效果信息,设置奖励值。
9.一种服务接口测试装置,其特征在于,包括:
设置模块,用于确定待测服务,并获取所述待测服务对应的第一映射关系,所述第一映射关系表征所述待测服务的接口与待测函数的对应关系,其中,所述待测函数为实现所述待测服务的接口所需要的函数;
第一确定模块,用于根据所述第一映射关系,确定基于强化学习的智能体的动作空间;
第二确定模块,用于基于所述动作空间,通过所述智能体确定目标测试用例集,其中,所述目标测试用例集用于测试所述待测服务的接口测试,所述动作空间表征所述智能体确定目标测试用例集的过程中,所述目标测试用例集中的各测试用例之间所有可能的排列组合;
测试模块,用于基于所述目标测试用例集对所述目标测试点的接口进行测试,生成测试结果。
10.一种电子设备,其特征在于,包括:处理器,以及与所述处理器通信连接的存储器;
所述存储器存储计算机执行指令;
所述处理器执行所述存储器存储的计算机执行指令,以实现如权利要求1至8中任一项所述的服务接口测试方法。
11.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质中存储有计算机执行指令,当处理器执行所述计算机执行指令时,实现如权利要求1至8任一项所述的服务接口测试方法。
12.一种计算机程序产品,包括计算机程序,该计算机程序被处理器执行时实现权利要求1至8中任一项所述的服务接口测试方法。
CN202111388322.4A 2021-11-22 2021-11-22 服务接口测试方法、装置、电子设备及存储介质 Pending CN116149978A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202111388322.4A CN116149978A (zh) 2021-11-22 2021-11-22 服务接口测试方法、装置、电子设备及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202111388322.4A CN116149978A (zh) 2021-11-22 2021-11-22 服务接口测试方法、装置、电子设备及存储介质

Publications (1)

Publication Number Publication Date
CN116149978A true CN116149978A (zh) 2023-05-23

Family

ID=86339454

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202111388322.4A Pending CN116149978A (zh) 2021-11-22 2021-11-22 服务接口测试方法、装置、电子设备及存储介质

Country Status (1)

Country Link
CN (1) CN116149978A (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN117435516A (zh) * 2023-12-21 2024-01-23 江西财经大学 一种测试用例优先级排序方法和***

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN117435516A (zh) * 2023-12-21 2024-01-23 江西财经大学 一种测试用例优先级排序方法和***
CN117435516B (zh) * 2023-12-21 2024-02-27 江西财经大学 一种测试用例优先级排序方法和***

Similar Documents

Publication Publication Date Title
US10671933B2 (en) Method and apparatus for evaluating predictive model
CN107506300B (zh) 一种用户界面测试方法、装置、服务器和存储介质
CN110674047B (zh) 软件测试方法、装置及电子设备
CN107451062B (zh) 一种用户界面遍历测试方法、装置、服务器、存储介质
CN107391362A (zh) 应用测试方法、移动终端及存储介质
CN113392018B (zh) 流量分发方法、装置、存储介质及电子设备
CN111353601A (zh) 用于预测模型结构的延时的方法和装置
CN111190657B (zh) 活动配置方法、装置、可读介质及电子设备
CN116149978A (zh) 服务接口测试方法、装置、电子设备及存储介质
CN111625291B (zh) 数据处理模型自动迭代方法、装置及电子设备
CN116932373A (zh) 测试用例筛选方法、设备、存储介质及程序产品
CN117493150A (zh) 代码质量检测方法、装置、设备、存储介质及程序
CN117251355A (zh) 性能测试方法、装置、设备、计算机可读存储介质及产品
CN112380118A (zh) 单元测试方法、装置、介质及电子设备
CN114116480A (zh) 应用程序测试覆盖率的确定方法、装置、介质及设备
CN111382057A (zh) 测试用例生成方法,测试方法及装置,服务器及存储介质
CN115309622A (zh) 基于概率模型的软件测试方法、装置、设备及存储介质
CN117907809B (zh) 批量芯片测试方法、装置及电子设备
CN116048948A (zh) 页面测试方法、装置、电子设备及存储介质
CN116467178B (zh) 数据库检测方法、装置、电子设备和计算机可读介质
CN115470292B (zh) 区块链共识方法、装置、电子设备及可读存储介质
CN111367555B (zh) 断言的方法、装置、电子设备及计算机可读介质
CN117389877A (zh) 测试方法、装置、计算机可读介质及电子设备
CN117707916A (zh) 代码测试方法、装置、设备、计算机可读存储介质及产品
CN117290201A (zh) 应用软件测试方法、装置、设备、可读存储介质及产品

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination