CN109062809B

CN109062809B - 一种线上测试用例生成方法、装置及电子设备

Info

Publication number: CN109062809B
Application number: CN201811099593.6A
Authority: CN
Inventors: 周正; 王平; 王杨; 段光磊; 张大虎; 徐婷
Original assignee: Beijing QIYI Century Science and Technology Co Ltd
Current assignee: Beijing QIYI Century Science and Technology Co Ltd
Priority date: 2018-09-20
Filing date: 2018-09-20
Publication date: 2022-01-21
Anticipated expiration: 2038-09-20
Also published as: CN109062809A

Abstract

本发明实施例提供了一种线上测试用例生成方法、装置电子设备。所述方法包括：服务器获取待测应用程序对应的程序日志信息；根据所述程序日志信息中的用户标识及调用链路标识，统计所述待测功能对应的各个调用链路的访问次数；将所述待测功能对应的调用链路中访问次数满足预设条件的各个调用链路，确定为所述待测功能的特征链路；根据所述待测功能的各个特征链路及用户按该特征链路执行后的每个接口的实际调用结果，分别生成按照所述各个特征链路进行测试的测试用例。可见，由于本发明实施例中根据用户实际操作的调用链路生成测试用例，因此更接近用户的实际操作，便于提高测试的准确性。

Description

一种线上测试用例生成方法、装置及电子设备

技术领域

本发明涉及互联网信息处理技术领域，特别是涉及一种线上测试用例生成方法、装置及电子设备。

背景技术

随着计算机技术的发展，具有各种功能的应用程序被开发，在应用程序开发完上线之后，需要对应用程序进行线上测试，从而确定应用程序是否正常运行。

目前，对应用程序进行线上测试通常都采用定期回归测试，来验证上线或修复后的应用程序的正确性。具体的，定期回归测试就是按预设的时间间隔，用研发人员预先针对待测试应用程序的各个待测试功能分别编写的测试用例，对待测试应用程序进行测试。

发明人在实现本发明的过程中发现，现有技术至少存在如下问题：

当前回归测试采用的测试用例都是研发人员针对不同应用程序的功能分别编写的，其中对各个接口的调用，并没有考虑用户操作过程中对各个接口的实际调用情况，导致测试结果不够准确。

发明内容

本发明实施例的目的在于提供一种线上测试用例生成方法、装置及电子设备，以使测试用例更接近用户实际操作，便于提高测试的准确性。

具体技术方案如下：

第一方面，本发明实施例提供了一种线上测试用例生成方法，应用于服务器，所述方法包括：

获取线上待测应用程序对应的程序日志信息；所述程序日志信息包括：执行所述待测应用程序的待测功能的各个用户的用户标识、各个用户针对所述待测功能调用的各个接口构成的调用链路及调用链路标识；

根据所述程序日志信息中的用户标识及调用链路标识，统计所述待测功能对应的各个调用链路的访问次数；

将所述待测功能对应的调用链路中访问次数满足预设条件的各个调用链路，确定为所述待测功能的特征链路；

根据所述待测功能的各个特征链路及用户按该特征链路执行后的每个接口的实际调用结果，分别生成按照所述各个特征链路进行测试的测试用例。

可选的，所述将所述待测功能对应的调用链路中访问次数满足预设条件的调用链路，确定为所述待测功能的特征链路的步骤，可以包括：

将所述待测功能对应的调用链路中访问次数大于预设访问次数阈值的调用链路，确定为所述待测功能的特征链路。

按照访问次数从多到少的顺序，选择预设数量个调用链路，确定为所述待测功能的特征链路。

可选的，所述根据所述待测功能的特征链路及用户按该特征链路执行后的每个接口的实际调用结果，生成按照所述特征链路进行测试的测试用例的步骤之后，还可以包括：

将生成的按照所述特征链路进行测试的测试用例存储至测试用例库中；

在所述线上待测程序需要进行线上测试时，从所述测试用例库中读取测试用例；

执行读取的测试用例，得到测试结果；其中，所述测试用例的测试结果包括：所述测试用例针对其对应的线上待测程序的待测功能调用的各个接口的调用成功或失败信息；

将所述测试结果中调用失败的接口对应的待测程序的待测功能，确定为所述应用程序的异常功能并对其进行预警。

可选的，所述在所述根据所述待测功能的各个特征链路及用户按该特征链路执行后的每个接口的实际调用结果，分别生成按照所述各个特征链路进行测试的测试用例的步骤之后，还可以包括：

启动定时器，当到达预设测试用例更新时长时，执行所述获取待测应用程序对应的程序日志信息的步骤。

第二方面，本发明实施例提供了一种线上测试用例生成装置，所述装置包括：

日志信息获取单元，用于获取线上待测应用程序对应的程序日志信息；所述程序日志信息包括：执行所述待测应用程序的待测功能的各个用户的用户标识、各个用户针对所述待测功能调用的各个接口构成的调用链路及调用链路标识；

访问次数统计单元，用于根据所述程序日志信息中的用户标识及调用链路标识，统计所述待测功能对应的各个调用链路的访问次数；

特征链路确定单元，用于将所述待测功能对应的调用链路中访问次数满足预设条件的调用链路，确定为所述待测功能的特征链路；

测试用例生成单元，用于根据所述待测功能的特征链路及用户按该特征链路执行后的每个接口的实际调用结果，生成按照所述特征链路进行测试的测试用例。

可选的，所述特征链路确定单元，具体可以用于：

可选的，所述装置还可以包括：

测试用例存储单元，用于将生成的按照所述特征链路进行测试的测试用例存储至测试用例库中；

测试用例读取单元，用于在所述线上待测程序需要进行线上测试时，从所述测试用例库中读取测试用例；

测试用例执行单元，用于执行读取的测试用例，得到测试结果；其中，所述测试用例的测试结果包括：所述测试用例针对其对应的线上待测程序的待测功能调用的各个接口的调用成功或失败信息；

异常功能确定单元，用于将所述测试结果中调用失败的接口对应的待测程序的待测功能，确定为所述应用程序的异常功能并对其进行预警。

可选的，所述装置，还可以包括：

定时器启动单元，用于启动定时器，当到达预设测试用例更新时长时，调用所述日志信息获取单元。

第三方面，本发明实施例提供了一种电子设备，包括处理器、通信接口、存储器和通信总线，其中，处理器，通信接口，存储器通过通信总线完成相互间的通信；

存储器，用于存放计算机程序；

处理器，用于执行存储器上所存放的程序时，实现以下方法步骤：

第四方面，本发明实施例还提供了一种计算机可读存储介质，所述计算机可读存储介质内存储有计算机程序，所述计算机程序被处理器执行时实现上述任一线上测试用例的生成方法步骤。

本发明实施例提供一种线上测试用例生成方法、装置及电子设备，根据获取的线上待测应用程序对应的程序日志信息中的用户标识、调用链路及调用链路标识，确定出所述待测功能的特征链路；根据所述待测功能的各个特征链路及用户按该特征链路执行后的每个接口的实际调用结果，分别生成针对各个特征链路进行测试的测试用例。由于本发明实施例中根据用户实际操作的调用链路生成测试用例，因此更接近用户的实际操作，便于提高测试的准确性。

当然，实施本发明的任一产品或方法必不一定需要同时达到以上所述的所有优点。

附图说明

为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍。

图1为本发明实施例提供的线上测试用例的生成方法的一种流程示意图；

图2为本发明实施例提供的一种生成测试用例之后的处理流程示意图；

图3为本发明实施例提供的线上测试用例的生成装置的一种结构示意图；

图4为本发明实施例提供的一种电子设备的结构示意图。

具体实施方式

下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述。

为了使测试用例更接近用户的实际操作，便于提高测试的准确性，本发明实施例的目的在于提供一种线上测试用例的生成方法、装置及电子设备，以下分别进行详细说明。

下面首先对本发明实施例提供的一种线上测试用例生成方法进行介绍。

参见图1所示，为本发明实施例中线上中测试用例的生成方法的一种流程示意图，该方法应用于服务器，可以包括如下步骤：

S110，获取线上待测应用程序对应的程序日志信息；

在实际应用中，客户端的终端设备在运行各个应用程序时，客户端都将对应生成一个程序日志，用于记录终端设备运行某个应用程序时，用户的访问操作过程和输入参数等信息。

其中，待测应用程序对应的程序日志信息，可以包括：执行待测应用程序的待测功能的各个用户的用户标识、各个用户针对该待测功能调用的各个接口构成的调用链路及调用链路标识。

具体的，在步骤110中获取线上待测应用程序对应的程序日志信息的具体实施方式可以为：

服务器可以先接收客户端发送的待测应用程序对应的程序日志信息，并将接收到的程序日志信息存储至预设的日志库中；然后，从上述日志库中，读取待测应用程序对应的程序日志信息。

应用程序对应的程序日志信息的内容参见表1。

表1

S120，根据所述程序日志信息中的用户标识及调用链路标识，统计所述待测功能对应的各个调用链路的访问次数；

通常，用户对应用程序的某功能的一次调用，应用程序的程序日志对应生成一条调用链路和一个与调用链路对应的调用链标识。

在本实施例中，上述程序日志信息中的用户标识及调用链路标识可以包括多种形式，例如，可以是用户ID和调用链ID，也可以是用户名称和调用链名称等。当然，上述程序日志信息中的用户标识及调用链路标识可以是任何用于区别各个不同用户对应用程序的调用情况的标识信息，本实施例对此不做具体限定。

S130，将所述待测功能对应的调用链路中访问次数满足预设条件的各个调用链路，确定为所述待测功能的特征链路；

在本实施例中，应用程序对应的任一待测功能的特征链路是指可以用于标识用户，在对该应用程序的某待测功能的实际操作中，多数用户使用的调用链路。

S140，根据所述待测功能的各个特征链路及用户按该特征链路执行后的每个接口的实际调用结果，分别生成按照所述各个特征链路进行测试的测试用例。本步骤中，服务器可以根据预设的测试用例生成方法，分别自动生成按照上述各个特征链路进行测试的测试用例。

具体的，可以预先设置测试用例模板程序，该模板程序用于实现针对测试用例对应的特征链路，模拟用户操作对所述待测功能的各个接口进行调用，并对调用结果和预期的调用结果进行比较，从而获得测试结果。在生成测试用例时，只需将特征链路，及用户按该特征链路执行后的每个接口的实际调用结果，也就是预期的调用结果，添加至测试用例模板程序中，即可生成对应的测试用例。

需要说明的是，本发明实施例中的预设测试用例生成方法可以是自动生成测试用例的任何方法，这里不做限定。

本发明实施例提供一种线上测试用例生成方法，根据获取的线上待测应用程序对应的程序日志信息中的用户标识、调用链路及调用链路标识，确定出所述待测功能的特征链路；根据所述待测功能的各个特征链路及用户按该特征链路执行后的每个接口的实际调用结果，分别生成针对各个特征链路进行测试的测试用例。由于本发明实施例中根据用户实际操作的调用链路生成测试用例，因此更接近用户的实际操作，便于提高测试的准确性。

在本发明实施例中，具体提供了两种方式来确定上述待测功能的特征链路：

第一种，将所述待测功能对应的调用链路中访问次数大于预设访问次数阈值的调用链路，确定为所述待测功能的特征链路。

可以理解的是，上述预设访问次数阈值可以是根据实际中上述待测功能对应的各个调用链路的访问次数，设置的经验阈值；因此，本发明实施例中确定出的不同的待测功能的特征链路个数可以不同，也可以相同。并且，上述待测功能的特征链路的数量至少为一个。

第二种，按照访问次数从多到少的顺序，选择预设数量个调用链路，确定为所述待测功能的特征链路。

在实际应用中，在步骤S120中，统计出的待测功能对应的各个调用链路的访问次数可能非常接近，例如，终端设备运行某应用程序的功能A时，对应的调用链路标识为1的调用链路的访问次数为100；终端设备运行某应用程序的功能A时，对应的调用链路标识为2的调用链路的访问次数为98；这时，上述调用链路标识为1的调用链路和调用链路标识为2的调用链路都能代表用户通过终端设备访问某应用程序的某功能的实际操作流程和操作习惯，从而都应该将其确定为上述待测功能的特征链路。

在本发明实施例中，由于待测功能的各个特征链路，更接近用户的实际操作；因此，根据上述确定的待测功能的各个特征链路，分别生成针对各个特征链路进行测试的测试用例，便于提高测试的准确性。

在本发明实施例中，如图2所示，在步骤S140根据待测功能的各个特征链路及用户按该特征链路执行后的每个接口的实际调用结果，分别生成按照所述各个特征链路进行测试的测试用例之后，还可以包括以下步骤：

S140a，将生成的按照所述特征链路进行测试的测试用例存储至测试用例库中。

S140b，在所述线上待测程序需要进行线上测试时，从所述测试用例库中读取测试用例。

具体的，在进行线上测试时，服务器执行上述测试用例，可以先按照读取的测试用例对应的特征链路，模拟用户操作对上述待测功能的各个接口进行调用，得到各个接口的调用结果信息；然后，分别判断各个接口的调用结果信息与测试用例中各个接口预期的调用结果是否一致；如果接口的调用结果信息与测试用例中该接口预期的调用结果一致，则该接口调用成功；否则该接口调用失败。

S140c，执行读取的测试用例，得到测试结果。

其中，测试用例的测试结果可以包括：测试用例针对其对应的待测程序的待测功能调用的各个接口的调用成功或失败信息。

S140d，将所述测试结果中调用失败的接口对应的待测程序的待测功能，确定为所述应用程序的异常功能并对其进行预警。

其中，测试用例中各个接口预期的调用结果为所述程序日志中记录的用户按该特征链路执行后的每个接口的实际调用结果。

在本实施例中，执行根据用户实际操作的调用链路生成的测试用例，得到上述测试用例对应的测试结果；通过读取上述测试用例的测试结果，确定出应用程序的异常功能，并对其进行预警，从而提高了应用程序的开发效率。

在本发明实施例中，在上述确定出应用程序的异常功能并对其进行预警的步骤之后，还可以包括步骤：

在实际应用中，具有各种功能的应用程序被开发，在应用程序开发完上线之后，需要对应用程序进行线上测试；所以，为了更准确的确定应用程序是否正常运行，上述测试用例库中的测试用例需要定期的更新，即定期的生成新的测试用例。

通常，服务器预置的定时器的预设测试用例更新时长为一周的时长。

在本发明实施例中，服务器通过预置的定时器，定时自动生成更接近用户的实际操作的测试用例，无需研发人员编写，从而提高了测试用例的生成效率，降低了测试用例的维护成本。

基于相同的技术构思，相应于图1所示方法实施例，本发明实施例还提供了一种线上测试用例的生成装置，如图3所示，该装置包括：

日志信息获取单元310，用于获取线上待测应用程序对应的程序日志信息；所述程序日志信息包括：执行所述待测应用程序的待测功能的各个用户的用户标识、各个用户针对所述待测功能调用的各个接口构成的调用链路及调用链路标识；

访问次数统计单元320，用于根据所述程序日志信息中的用户标识及调用链路标识，统计所述待测功能对应的各个调用链路的访问次数；

特征链路确定单元330，用于将所述待测功能对应的调用链路中访问次数满足预设条件的调用链路，确定为所述待测功能的特征链路；

测试用例生成单元340，用于根据所述待测功能的特征链路及用户按该特征链路执行后的每个接口的实际调用结果，生成按照所述特征链路进行测试的测试用例。

在本发明实施例中，上述特征链路确定单元，具体可以用于：

在本发明实施例中，上述装置还可以包括：

日志信息存储单元，用于接收客户端发送的线上待测应用程序对应的程序日志信息，并将所述接收到的程序日志信息存储至预设的日志库中；

日志信息读取单元，用于从所述日志库中，读取待测应用程序对应的程序日志信息；

在本发明实施例中，上述测试用例执行单元，可以包括：

调用子单元，用于按照读取的测试用例对应的特征链路，模拟用户操作对所述待测功能的各个接口进行调用，得到各个接口的调用结果信息；

判断子单元，用于分别判断各个接口的调用结果信息与测试用例中各个接口预期的调用结果是否一致；如果接口的调用结果信息与测试用例中该接口预期的调用结果一致，则该接口调用成功；如果接口的调用结果信息与测试用例中该接口预期的调用结果不一致，则该接口调用失败。

在本发明实施例中，上述装置，还可以包括：

本发明实施例提供一种线上测试用例生成装置，根据获取的线上待测应用程序对应的程序日志信息中的用户标识、调用链路及调用链路标识，确定出所述待测功能的特征链路；根据所述待测功能的各个特征链路及用户按该特征链路执行后的每个接口的实际调用结果，分别生成针对各个特征链路进行测试的测试用例。由于本发明实施例中根据用户实际操作的调用链路生成测试用例，因此更接近用户的实际操作，便于提高测试的准确性。

本发明实施例还提供了一种电子设备，如图4所示，包括处理器401、通信接口402、存储器403和通信总线404，其中，处理器401，通信接口402，存储器303通过通信总线404完成相互间的通信，

存储器403，用于存放计算机程序；

处理器401，用于执行存储器303上所存放的程序时，实现本发明实施例提供的一种线上测试用例的生成方法。

具体的，上述一种线上测试用例的生成方法，包括：

关于该方法各个步骤的具体实现以及相关解释内容可以参见上述图1所示的方法实施例，在此不做赘述。

另外，处理器301执行存储器303上所存放的程序而实现的一种线上测试用例的生成方法的其他实现方式，与前述方法实施例部分所提及的实现方式相同，这里也不再赘述。

上述电子设备提到的通信总线可以是外设部件互连标准(Peripheral ComponentInterconnect，PCI)总线或扩展工业标准结构(Extended Industry StandardArchitecture，EISA)总线等。该通信总线可以分为地址总线、数据总线、控制总线等。为便于表示，图中仅用一条粗线表示，但并不表示仅有一根总线或一种类型的总线。

通信接口用于上述电子设备与其他设备之间的通信。

存储器可以包括随机存取存储器(Random Access Memory，RAM)，也可以包括非易失性存储器(Non-Volatile Memory，NVM)，例如至少一个磁盘存储器。可选的，存储器还可以是至少一个位于远离前述处理器的存储装置。

上述的处理器可以是通用处理器，包括中央处理器(Central Processing Unit，CPU)、网络处理器(Network Processor，NP)等；还可以是数字信号处理器(Digital SignalProcessing，DSP)、专用集成电路(Application Specific Integrated Circuit，ASIC)、现场可编程门阵列(Field-Programmable Gate Array，FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件。

在本发明提供的又一实施例中，还提供了一种计算机可读存储介质，该计算机可读存储介质中存储有指令，当其在计算机上运行时，使得计算机执行上述实施例中任一所述的线上测试用例的生成方法。

在上述实施例中，可以全部或部分地通过软件、硬件、固件或者其任意组合来实现。当使用软件实现时，可以全部或部分地以计算机程序产品的形式实现。所述计算机程序产品包括一个或多个计算机指令。在计算机上加载和执行所述计算机程序指令时，全部或部分地产生按照本发明实施例所述的流程或功能。所述计算机可以是通用计算机、专用计算机、计算机网络、或者其他可编程装置。所述计算机指令可以存储在计算机可读存储介质中，或者从一个计算机可读存储介质向另一个计算机可读存储介质传输，例如，所述计算机指令可以从一个网站站点、计算机、服务器或数据中心通过有线(例如同轴电缆、光纤、数字用户线(DSL))或无线(例如红外、无线、微波等)方式向另一个网站站点、计算机、服务器或数据中心进行传输。所述计算机可读存储介质可以是计算机能够存取的任何可用介质或者是包含一个或多个可用介质集成的服务器、数据中心等数据存储设备。所述可用介质可以是磁性介质，(例如，软盘、硬盘、磁带)、光介质(例如，DVD)、或者半导体介质(例如固态硬盘SolidState Disk(SSD))等。

需要说明的是，在本文中，诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来，而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。

本说明书中的各个实施例均采用相关的方式描述，各个实施例之间相同相似的部分互相参见即可，每个实施例重点说明的都是与其他实施例的不同之处。尤其，对于装置、电子设备以及计算机可读存储介质实施例而言，由于其基本相似于方法实施例，所以描述的比较简单，相关之处参见方法实施例的部分说明即可。

以上所述仅为本发明的较佳实施例而已，并非用于限定本发明的保护范围。凡在本发明的精神和原则之内所作的任何修改、等同替换、改进等，均包含在本发明的保护范围内。

Claims

1.一种线上测试用例生成方法，其特征在于，应用于服务器，所述方法包括：

2.根据权利要求1所述的方法，其特征在于，所述将所述待测功能对应的调用链路中访问次数满足预设条件的调用链路，确定为所述待测功能的特征链路的步骤，包括：

3.根据权利要求1所述的方法，其特征在于，所述将所述待测功能对应的调用链路中访问次数满足预设条件的调用链路，确定为所述待测功能的特征链路的步骤，包括：

4.根据权利要求1所述的方法，其特征在于，

所述根据所述待测功能的特征链路及用户按该特征链路执行后的每个接口的实际调用结果，生成按照所述特征链路进行测试的测试用例的步骤之后，还包括：

5.根据权利要求1所述的方法，其特征在于，

所述在所述根据所述待测功能的各个特征链路及用户按该特征链路执行后的每个接口的实际调用结果，分别生成按照所述各个特征链路进行测试的测试用例的步骤之后，还包括：

6.一种线上测试用例生成装置，其特征在于，所述装置包括：

7.根据权利要求6所述的装置，其特征在于，

所述特征链路确定单元，具体用于将所述待测功能对应的调用链路中访问次数大于预设访问次数阈值的调用链路，确定为所述待测功能的特征链路。

8.根据权利要求6所述的装置，其特征在于，

所述特征链路确定单元，具体用于按照访问次数从多到少的顺序，选择预设数量个调用链路，确定为所述待测功能的特征链路。

9.根据权利要求6所述的装置，其特征在于，所述装置，还包括：

10.根据权利要求6所述的装置，其特征在于，所述装置，还包括：

11.一种电子设备，其特征在于，包括处理器、通信接口、存储器和通信总线，其中，处理器，通信接口，存储器通过通信总线完成相互间的通信；

存储器，用于存放计算机程序；

处理器，用于执行存储器上所存放的程序时，实现权利要求1-5任一所述的方法步骤。