CN111782502A - 一种自动化测试的方法及装置 - Google Patents
一种自动化测试的方法及装置 Download PDFInfo
- Publication number
- CN111782502A CN111782502A CN201911283601.7A CN201911283601A CN111782502A CN 111782502 A CN111782502 A CN 111782502A CN 201911283601 A CN201911283601 A CN 201911283601A CN 111782502 A CN111782502 A CN 111782502A
- Authority
- CN
- China
- Prior art keywords
- test
- execution
- result
- case
- block chain
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000012360 testing method Methods 0.000 title claims abstract description 463
- 238000000034 method Methods 0.000 claims abstract description 31
- 238000004590 computer program Methods 0.000 claims description 11
- 239000000126 substance Substances 0.000 claims description 3
- 238000010586 diagram Methods 0.000 description 14
- 238000004891 communication Methods 0.000 description 7
- 230000006870 function Effects 0.000 description 6
- 238000012545 processing Methods 0.000 description 5
- 230000003287 optical effect Effects 0.000 description 4
- 230000008569 process Effects 0.000 description 4
- 238000012986 modification Methods 0.000 description 3
- 230000004048 modification Effects 0.000 description 3
- 238000010998 test method Methods 0.000 description 3
- 230000002159 abnormal effect Effects 0.000 description 2
- 230000008901 benefit Effects 0.000 description 2
- 239000000835 fiber Substances 0.000 description 2
- 230000000644 propagated effect Effects 0.000 description 2
- 230000004044 response Effects 0.000 description 2
- 239000004065 semiconductor Substances 0.000 description 2
- 230000005856 abnormality Effects 0.000 description 1
- 230000002411 adverse Effects 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 238000010276 construction Methods 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000011156 evaluation Methods 0.000 description 1
- 238000012854 evaluation process Methods 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 239000013307 optical fiber Substances 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/36—Preventing errors by testing or debugging software
- G06F11/3668—Software testing
- G06F11/3672—Test management
- G06F11/3688—Test management for test execution, e.g. scheduling of test suites
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/36—Preventing errors by testing or debugging software
- G06F11/3668—Software testing
- G06F11/3672—Test management
- G06F11/3684—Test management for test design, e.g. generating new test cases
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/36—Preventing errors by testing or debugging software
- G06F11/3668—Software testing
- G06F11/3672—Test management
- G06F11/3692—Test management for test results analysis
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F9/00—Arrangements for program control, e.g. control units
- G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
- G06F9/46—Multiprogramming arrangements
- G06F9/54—Interprogram communication
- G06F9/542—Event management; Broadcasting; Multicasting; Notifications
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Computer Hardware Design (AREA)
- Quality & Reliability (AREA)
- Software Systems (AREA)
- Multimedia (AREA)
- Hardware Redundancy (AREA)
Abstract
本发明公开了一种自动化测试的方法及装置,涉及计算机技术领域。该方法的一具体实施方式包括:接收测试请求,所述测试请求指示了用于自动化测试的多个测试用例;区块链节点分别执行所述多个测试用例,并广播所述测试用例的执行结果;根据所广播的执行结果,确定所述测试请求的测试结果。该实施方式提高了自动化测试结果的可靠性。
Description
技术领域
本发明涉及计算机技术领域,尤其涉及一种自动化测试的方法及装置。
背景技术
在现代软件开发和***性能评价流程中,自动化测试已成为必不可少的一个环节,测试结果的可靠性对于评价软件质量和***性能具有重要影响。
自动化测试的测试结果一般根据多个测试用例的执行结果来确定,也就是说,每个测试用例的执行结果都可能影响自动化测试的整体测试结果。而由于在自动化测试的过程中,能影响测试用例的执行结果的因素较多,如硬件配置和网络传输等,不良因素可能降低测试用例的执行结果的可靠性,从而降低自动化测试结果的可靠性。
发明内容
有鉴于此,本发明实施例提供一种自动化测试的方法及装置,能够提高自动化测试结果的可靠性。
为实现上述目的,根据本发明实施例的一个方面,提供了一种自动化测试的方法。
本发明实施例的一种自动化测试的方法包括:接收测试请求,所述测试请求指示了用于自动化测试的多个测试用例;
区块链节点分别执行所述多个测试用例,并广播所述测试用例的执行结果;
根据所广播的执行结果,确定所述测试请求的测试结果。
可选地,所述多个测试用例相互独立;
所述根据所广播的执行结果,确定所述测试请求的测试结果,包括:
根据所述区块链节点分别执行多个测试用例而得到的执行结果,利用拜占庭容错共识算法确定所述测试请求的测试结果。
可选地,所述利用拜占庭容错共识算法确定所述测试请求的测试结果,包括:
区块链节点根据自身得到的所述执行结果以及通过广播得到的其他所述区块链节点的执行结果,确定自身对应的共识结果;
根据所述区块链节点分别对应的共识结果,确定所述测试请求的测试结果。
可选地,所述执行结果指示了所述测试用例执行成功或执行失败;
区块链节点确定自身得到的以及通过广播得到的其他所述区块链节点的多个执行结果中,指示执行成功或执行失败的执行结果分别对应的数量,将数量较大的执行结果作为所述共识结果。
可选地,所述执行结果指示了所述测试用例执行成功或执行失败,所述根据所广播的执行结果,确定所述测试请求的测试结果,包括:
根据所广播的执行结果,统计指示执行成功的执行结果与指示执行失败的统计结果的比例,当所述比例小于第一阈值时,确定所述测试结果为测试失败,当所述比例大于第二阈值时,确定所述测试结果为测试成功,所述第一阈值小于或等于所述第二阈值。
可选地,所述多个测试用例具有依赖关系;
所述区块链节点分别执行所述多个测试用例,并广播所述测试用例的执行结果,包括:
区块链节点根据广播得到的所述多个测试用例中第一测试用例的执行结果,执行所述多个测试用例中与所述第一测试用例具有依赖关系的第二测试用例,并广播所述第二测试用例的执行结果。
可选地,当所述第一测试用例的执行结果指示所述第一测试用例执行成功时,根据执行成功的执行结果,执行所述第二测试用例;
当所述第一用例的执行结果指示所述第一测试用例执行失败时,根据区块链节点中预存的所述第一测试用例的测试参数,执行所述第二测试用例。
为实现上述目的,根据本发明实施例的又一方面,提供了一种自动化测试的装置。
本发明实施例的一种自动化测试的装置包括:请求接收模块、用例执行模块和结果确定模块;其中,
所述请求接收模块,用于接收测试请求,所述测试请求指示了用于自动化测试的多个测试用例;
所述用例执行模块,用于利用区块链节点分别执行所述多个测试用例,并广播所述测试用例的执行结果;
所述结果确定模块,用于根据所广播的执行结果,确定所述测试要求的测试结果。
可选地,当所述多个测试用例相互独立时,所述结果确定模块,用于根据所述区块链节点分别执行多个测试用例而得到的执行结果,利用拜占庭容错共识算法确定所述测试请求的测试结果。
可选地,当所述多个测试用例具有依赖关系时,所述用例执行模块,用于利用区块链节点根据广播得到的所述多个测试用例中第一测试用例的执行结果,执行所述多个测试用例中与所述第一测试用例具有依赖关系的第二测试用例,并广播所述第二测试用例的执行结果。
为实现上述目的,根据本发明实施例的又一方面,提供了一种自动化测试的电子设备。
本发明实施例的一种自动化测试的电子设备包括:一个或多个处理器;存储装置,用于存储一个或多个程序,当所述一个或多个程序被所述一个或多个处理器执行时,所述一个或多个处理器实现本发明实施例的一种自动化测试的方法。
为实现上述目的,根据本发明实施例的再一方面,提供了一种计算机可读存储介质。
本发明实施例的一种计算机可读存储介质,其上存储有计算机程序,所述程序被处理器执行时实现本发明实施例的一种自动化测试的方法。
上述发明中的一个实施例具有如下优点或有益效果:在接收到指示了多个测试用例的测试请求后,可利用区块链节点分别执行多个测试用例,并根据区块链节点广播的测试用例的执行结果来确定测试请求的测试结果,由于区块链节点具有数据不可篡改的特性,可保证测试用例的执行结果不会被篡改,因此可提高测试结果的可靠性。
上述的非惯用的可选方式所具有的进一步效果将在下文中结合具体实施方式加以说明。
附图说明
附图用于更好地理解本发明,不构成对本发明的不当限定。其中:
图1是根据本发明实施例的一种自动化测试的方法的主要步骤的示意图;
图2是根据本发明实施例的另一种自动化测试的方法的主要步骤的示意图;
图3是根据本发明实施例的又一种自动化测试的方法的主要步骤的示意图;
图4是根据本发明实施例的再一种自动化测试的方法的主要步骤的示意图;
图5是根据本发明实施例的自动化测试的装置的主要模块的示意图;
图6是本发明实施例可以应用于其中的示例性***架构图;
图7是适于用来实现本发明实施例的终端设备或服务器的计算机***的结构示意图。
具体实施方式
以下结合附图对本发明的示范性实施例做出说明,其中包括本发明实施例的各种细节以助于理解,应当将它们认为仅仅是示范性的。因此,本领域普通技术人员应当认识到,可以对这里描述的实施例做出各种改变和修改,而不会背离本发明的范围和精神。同样,为了清楚和简明,以下的描述中省略了对公知功能和结构的描述。
需要指出的是,在不冲突的情况下,本发明的实施例以及实施例中的技术特征可以相互结合。
图1是根据本发明实施例的一种自动化测试的方法的主要步骤的示意图。
如图1所示,本发明实施例的一种自动化测试的方法主要包括以下步骤:
步骤S101:接收测试请求,所述测试请求指示了用于自动化测试的多个测试用例。
步骤S102:区块链节点分别执行所述多个测试用例,并广播所述测试用例的执行结果。
步骤S103:根据所广播的执行结果,确定所述测试请求的测试结果。
测试请求指示的多个测试用例可能相互独立,也可能具有依赖关系。当多个测试用例中,任意一个测试用例的执行结果与其他测试用例的执行结果之间没有相关性时,则说明多个测试用例相互独立。反之,当测试用例的执行结果与其他测试用例的执行结果之间具有相关性时,则说明多个用例之间具有依赖性。
在本发明一个实施例中,当多个测试用例相互独立时,可根据所述区块链节点分别执行多个测试用例而得到的执行结果,利用拜占庭容错共识算法确定所述测试请求的测试结果。
可以理解的是,利用拜占庭共识算法确定测试结果时,执行测试用例的区块链节点也为采用拜占庭共识算法的区块链网络中的节点。在进行自动化测试时,测试人员通过客户端向区块链节点的主节点发送测试请求,该主节点是采用拜占庭共识算法的区块链网络中各个节点预先商定好的,然后主节点将多个测试用例分别分配给区块链网络中的其他区块链节点,以使多个区块链节点分别执行多个测试用例。
各个区块链节点分别执行多个测试用例后,可得到各个测试用例的执行结果,先执行完测试用例的区块链节点可先将执行结果写入缓存区,待各个区块链节点均执行完测试用例后,可通过区块链节点对执行结果的广播,每个区块链节点可得到其他区块链节点的执行结果,然后综合自身执行测试用例得到的执行结果以及通过广播得到的其他区块链节点的执行结果,可确定出自身对应的共识结果。当然,每个区块链节点在执行完测试用例后,也可直接对测试结果进行广播,以使其他区块链通过广播得到测试结果。例如,当区块链节点执行测试用例的执行结果指示该测试用例执行成功时,则该区块链节点广播1,当执行结果指示执行失败时,该区块链节点广播0,然后,每个区块链根据自身的执行结果以及通过广播得到的其他区块链节点的执行结果,可确定出自身对应的共识结果。
在确定共识结果时,区块链节点可根据自身得到的执行结果以及广播得到的其他区块链节点的多个执行结果中,执行结果所指示的测试用例时执行成功还是执行失败的数量,将数量较大的执行结果作为其对应的共识结果。例如,当采用拜占庭共识算法的区块链网络中共有4个区块链节点(节点0、节点1、节点2和节点3)时,若4个区块链节点均广播1,则各个区块链节点所得到的关于执行结果的数据及其对应的共识结果如表1所示:
表1
如表1所示,当各个区块链节点均广播1时,每个区块链节点得到的执行结果均为1,则区块链节点的共识结果也为1,将该共识结果发送给客户端,则客户端可根据4个共识结果(1)确定测试结果为测试成功。
另外,若拜占庭共识算法的区块链网络中4个区块链节点中有1个区块链节点的执行结果为执行失败,例如,节点3的执行结果为执行失败,则节点3广播0,其余区块链节点广播1,则4个区块链节点所得到的关于执行结果的数据及其对应的共识结果如表2所示:
表2
由表2可知,当1个区块链节点广播0,其余区块链节点广播1时,各个区块链节点的共识结果也为1,将该共识结果发送给客户端,则客户端可根据4个共识结果(1)确定测试结果为测试成功。
再不如,若拜占庭共识算法的区块链网络中4个区块链节点中有2个区块链节点的执行结果为执行失败,例如,节点3和节点2的执行结果为执行失败,则节点3和节点2广播0,节点0和节点1广播1,则4个区块链节点所得到的关于执行结果的数据及其对应的共识结果如表3所示:
表3
在表3中,N/A表征无法识别的共识结果。由表3可知,当2个区块链节点广播0,另2个区块链节点广播1时,各个区块链节点的共识结果为无法识别,将该共识结果发送给客户端,则客户端确定测试结果为表征无法确定成功或失败的测试结果,并可同时输出执行结果为执行失败的区块链节点所对应的测试用例,以使测试人员对测试用例进行调试后,再次进行自动化测试。
可以理解的是,除了在测试结果表征无法确定成功或失败时输出执行结果为执行失败的区块链节点所对应的测试用例,在测试结果为测试失败时,甚至在测试结果为测试成功时(若存在执行结果为执行失败的测试用例),均可输出执行结果为执行失败的测试用例,以便于测试人员对这些测试用例进行调试。
其中,每个区块链节点可对应一个执行测试用例的线程,由表1至表3可知,当测试线程与测试用例一一对应时,也就是利用一个测试线程执行一个测试用例时,当执行结果为执行失败的测试线程的数量f与测试线程的总数量p满足以下计算式(1)时,各个区块链节点的共识结果可明确表征测试成功或测试失败:
p>3f+1(f>0)…………………(1)
在自动化测试过程中,经常涉及不同的测试环境、预发布环境及生产环境等,在各个测试环境中,各个测试机器的硬件配置不尽相同,硬件响应可能也会出现一定程度的偏差,另外还可能由于一些物理因素导致某台测试机器出现异常。在测试用例的响应周期中可能由于这些外部因素(测试环境或硬件配置等)导致测试用例的执行结果异常,这些外部因素可能对最终的自动化测试结果产生偏差,需要测试人员多次执行测试用例来校验这些外部因素,从而排除外部因素对自动化测试结果的干扰。
如图2所示,本发明实施例提供的自动化测试方法可以包括以下步骤:
步骤S201:接收测试请求,所述测试请求指示了用于自动化测试的多个测试用例,区块链节点分别执行所述多个测试用例,并广播所述测试用例的执行结果。
步骤S202:每个区块链节点确定自身得到的以及通过广播得到的其他所述区块链节点的多个执行结果中,指示执行成功或执行失败的执行结果分别对应的数量,将数量较大的执行结果作为所述共识结果。
步骤S203:根据所述区块链节点分别对应的共识结果,确定所述测试请求的测试结果。
在本发明实施例中,利用拜占庭容错共识算法来确定自动化测试的测试结果,可有效避免外部因素对测试结果的干扰。例如,外部因素的干扰因子会使单条测试用例有x的概率出现结果异常,且用于自动化测试的多个测试用例的数量为y,假设单条测试用例成功率为r,测试用例集合成功概率为R。则在没有干扰的情况下,测试用例执行成功的概率为100%,即预期结果为测试用例全部通过,测试结果的成功率也就为1。
当存在扰动时,传统自动化测试中,每个测试用例的成功率r可通过公式(2)计算:
r=(1-x)………………..(2)
在本发明实施例中,通过拜占庭容错共识算法来确定测试结果时,当区块链节点的总数量为p,执行结果为执行失败的测试用例的数量为f,且p=3f+1(f>0时,每个测试用例的成功率r可通过公式(3)计算:
计算出每个测试用例的成功率后,测试用例集合成功概率R与r的关系如公式(4)所示:
R=ry…………………………..….(4)
假设x的值为0.002,y的值为80,p的值为4,f的值为1时,传统自动化测试中,每个测试用例的成功概率r1为0.998,测试用例集合成功概率R1为85.2007%;在本发明实施例中,拜占庭容错共识网络中,每个测试用例的成功概率r2为0.99997,测试用例集合成功概率R2为99.8086%。由此可见,R2结果明显优于R1,且随着用例集合中测试用例y的增多,以及线程p的增加,在相同的测试时间中,拜占庭容错共识算法应用于自动化测试时,其在消除外部扰动方面将会明显优于传统自动化测试方法,以提高自动化测试过程中对于外部物理因素的抗干扰能力,在一定程度上可节约测试资源,提高测试效率,从而有利于实现更高效的自动化测试方法。
除了利用拜占庭容错共识算法确定所述测试请求的测试结果,还可直接根据各个区块链节点广播的执行结果,统计出测试结果,具体地,可根据所广播的执行结果,统计指示执行成功的执行结果与指示执行失败的统计结果的比例,当所述比例小于第一阈值时,确定所述测试结果为测试失败,当所述比例大于第二阈值时,确定所述测试结果为测试成功,所述第一阈值小于或等于所述第二阈值。例如,当测试用例总共有100条时,指示执行成功的测试用例为80条,指示执行失败的测试用例为20条,则指示执行成功的执行结果与指示执行失败的统计结果的比例为80/20,若第二阈值为3,则测试结果为测试成功。再比如,当测试用例总共有100条时,指示执行失败的测试用例为20条,指示执行成功的测试用例为80条,则指示执行成功的执行结果与指示执行失败的统计结果的比例为20/80,若第一阈值为1/3,则测试结果为测试失败。其中,第一阈值和第二阈值可以相等,也可以不相等,当第一阈值和第二阈值不相等时,第一阈值小于第二阈值,第一阈值和第二阈值的具体数值可根据实际需求进行自定义。
由此,如图3所示,本发明实施例提供的自动化测试方法可以包括以下步骤:
步骤S301:接收测试请求,所述测试请求指示了用于自动化测试的多个测试用例。
步骤S302:区块链节点分别执行所述多个测试用例,并广播所述测试用例的执行结果。
步骤S303:根据所广播的执行结果,统计指示执行成功的执行结果与指示执行失败的统计结果的比例m,当所述比例m小于第一阈值a1时,执行步骤S304;当所述比例大于第二阈值a2时,执行步骤S305。
其中,所述第一阈值小于或等于所述第二阈值,在本发明一个优选的实施方式中,第一阈值小于第二阈值。
步骤S304:确定所述测试结果为测试失败。
步骤S305:确定所述测试结果为测试成功。
另外,当用于自动化测试的多个测试用例具有依赖关系时,各个区块链节点根据广播得到的所述多个测试用例中第一测试用例的执行结果,执行所述多个测试用例中与所述第一测试用例具有依赖关系的第二测试用例,并广播所述第二测试用例的执行结果。其中,测试用例具有相关性说明测试用例的执行结果与其他测试用例的执行结果之间具有相关性时,例如,测试用例A的执行需利用测试用例B的执行结果,则说明测试用例A与测试用例B具有依赖关系。
当所述第一测试用例的执行结果指示所述第一测试用例执行成功时,根据执行成功的执行结果,执行所述第二测试用例;当所述第一用例的执行结果指示所述第一测试用例执行失败时,根据区块链节点中预存的所述第一测试用例的测试参数,执行所述第二测试用例。
可以理解的是,测试用例的执行结果除了可指示该测试用例执行成功或执行失败,还可指示执行该测试用例后得到的测试参数。则当第一区块链节点执行测试用例B,并将测试用例B的执行结果进行广播后,执行测试用例A的第二区块链节点在通过广播获取到测试用例B的执行结果后,可先确定测试用例B的执行结果为执行成功或执行失败,当测试用例B执行成功时,第二区块链节点可根据测试用例B的执行结果所指示的测试参数,执行测试用例A。当测试用例B的执行结果指示其执行失败时,第二区块链节点可利用预存的测试参数来执行测试用例A。其中,每个区块链节点均可预存各个测试用例所对应的测试参数,以当待执行的测试用例所依赖的测试用例执行失败时,利用区块链节点中预存的测试参数来执行待执行的测试用例,从而保证测试用例的正常进行,提高自动化测试的效率,并保证各个测试用例的执行结果不会被篡改,提高测试结果的可靠性。
在各个区块链节点均执行完测试用例后,可输出执行成功与执行失败的测试用例的比例作为测试结果,并同时输出执行失败的测试用例的标识信息作为测试结果,以使测试人员根据测试结果,对执行失败的测试用例进行调试。
由此,如图4所示,本发明实施例提供的一种自动化测试方法可以包括以下步骤:
步骤S401:接收测试请求,所述测试请求指示了用于自动化测试的多个测试用例。
步骤S402:根据多个测试用例的依赖关系确定多个测试用例的执行顺序,利用第一区块链执行根据执行顺序中第一个测试用例,并广播第一个测试用例的执行结果。
步骤S403:第二区块链链节点根据广播得到的执行结果,当执行结果指示执行成功时,执行步骤S404和步骤S406;当执行结果执行失败时,执行步骤S405和步骤S406。
步骤S404:根据执行成功的执行结果,执行所述第二测试用例,并广播第二测试用例的执行结果。
步骤S405:根据区块链节点中预存的所述第一测试用例的测试参数,执行所述第二测试用例,并广播第二测试用例的执行结果。
步骤S406:确定多个测试用例中是否存在未被执行的测试用例,如果是,执行步骤S403,否则执行步骤S407。
当返回执行步骤S403时,第二区块链节点通过广播获取的为第二测试用例的执行结果,则步骤S404和步骤S405中的第二测试用例即为执行顺序中第二测试用例后未被执行的下一个测试用例,也即当前正准备被执行的测试用例。
步骤S407:根据所广播的多个测试用例的执行结果,确定所述测试请求的测试结果。
根据本发明实施例的一种自动化测试的方法可以看出,在接收到指示了多个测试用例的测试请求后,可利用区块链节点分别执行多个测试用例,并根据区块链节点广播的测试用例的执行结果来确定测试请求的测试结果,由于区块链节点具有数据不可篡改的特性,可保证测试用例的执行结果不会被篡改,因此可提高测试结果的可靠性。
图5是根据本发明实施例的一种自动化测试的装置的主要模块的示意图。
如图5所示,本发明实施例的一种自动化测试的装置500包括:请求接收模块501、用例执行模块502和结果确定模块503;其中,
所述请求接收模块501,用于接收测试请求,所述测试请求指示了用于自动化测试的多个测试用例;
所述用例执行模块502,用于利用区块链节点分别执行所述多个测试用例,并广播所述测试用例的执行结果;
所述结果确定模块503,用于根据所广播的执行结果,确定所述测试要求的测试结果。
在本发明一个实施例中,当所述多个测试用例相互独立时,所述结果确定模块503,用于根据所述区块链节点分别执行多个测试用例而得到的执行结果,利用拜占庭容错共识算法确定所述测试请求的测试结果。
在本发明一个实施例中,所述结果确定模块503,用于利用区块链节点根据自身得到的所述执行结果以及通过广播得到的其他所述区块链节点的执行结果,确定自身对应的共识结果;根据所述区块链节点分别对应的共识结果,确定所述测试请求的测试结果。
在本发明一个实施例中,所述结果确定模块503,用于利用区块链节点确定自身得到的以及通过广播得到的其他所述区块链节点的多个执行结果中,指示执行成功或执行失败的执行结果分别对应的数量,将数量较大的执行结果作为所述共识结果。
在本发明一个实施例中,所述结果确定模块503,用于根据所广播的执行结果,统计指示执行成功的执行结果与指示执行失败的统计结果的比例,当所述比例小于第一阈值时,确定所述测试结果为测试失败,当所述比例大于第二阈值时,确定所述测试结果为测试成功,所述第一阈值小于或等于所述第二阈值。
在本发明一个实施例中,当所述多个测试用例具有依赖关系时,所述用例执行模块502,用于利用区块链节点根据广播得到的所述多个测试用例中第一测试用例的执行结果,执行所述多个测试用例中与所述第一测试用例具有依赖关系的第二测试用例,并广播所述第二测试用例的执行结果。
在本发明一个实施例中,所述用例执行模块502,用于当所述第一测试用例的执行结果指示所述第一测试用例执行成功时,根据执行成功的执行结果,执行所述第二测试用例;当所述第一用例的执行结果指示所述第一测试用例执行失败时,根据区块链节点中预存的所述第一测试用例的测试参数,执行所述第二测试用例。
根据本发明实施例的一种自动化测试的装置可以看出,在接收到指示了多个测试用例的测试请求后,可利用区块链节点分别执行多个测试用例,并根据区块链节点广播的测试用例的执行结果来确定测试请求的测试结果,由于区块链节点具有数据不可篡改的特性,可保证测试用例的执行结果不会被篡改,因此可提高测试结果的可靠性。
本发明实施例还提供了一种自动化测试的电子设备,该电子设备包括:一个或多个处理器;存储装置,用于存储一个或多个程序,当所述一个或多个程序被所述一个或多个处理器执行时,所述一个或多个处理器实现本发明实施例的一种自动化测试的方法。
本发明实施例还提供了一种计算机可读存储介质,其上存储有计算机程序,所述程序被处理器执行时实现本发明实施例的一种自动化测试的方法。
图6示出了可以应用本发明实施例的一种自动化测试的方法或一种自动化测试的装置的示例性***架构600。
如图6所示,***架构600可以包括终端设备601、602、603,网络604和服务器605。网络604用以在终端设备601、602、603和服务器605之间提供通信链路的介质。网络604可以包括各种连接类型,例如有线、无线通信链路或者光纤电缆等等。
用户可以使用终端设备601、602、603通过网络604与服务器605交互,以接收或发送消息等。终端设备601、602、603上可以安装有各种通讯客户端应用,例如购物类应用、网页浏览器应用、搜索类应用、即时通信工具、邮箱客户端、社交平台软件等。
终端设备601、602、603可以是具有显示屏并且支持网页浏览的各种电子设备,包括但不限于智能手机、平板电脑、膝上型便携计算机和台式计算机等等。
服务器605可以是提供各种服务的服务器,例如对用户利用终端设备601、602、603所浏览的购物类网站提供支持的后台管理服务器。后台管理服务器可以对接收到的产品信息查询请求等数据进行分析等处理,并将处理结果(例如目标推送信息、产品信息)反馈给终端设备。
需要说明的是,本发明实施例所提供的一种自动化测试的方法一般由服务器605执行,相应地,一种自动化测试的装置一般设置于服务器605中。
应该理解,图6中的终端设备、网络和服务器的数目仅仅是示意性的。根据实现需要,可以具有任意数目的终端设备、网络和服务器。
下面参考图7,其示出了适于用来实现本发明实施例的终端设备的计算机***700的结构示意图。图7示出的终端设备仅仅是一个示例,不应对本发明实施例的功能和使用范围带来任何限制。
如图7所示,计算机***700包括中央处理单元(CPU)701,其可以根据存储在只读存储器(ROM)702中的程序或者从存储部分708加载到随机访问存储器(RAM)703中的程序而执行各种适当的动作和处理。在RAM 703中,还存储有***700操作所需的各种程序和数据。CPU 701、ROM 702以及RAM 703通过总线704彼此相连。输入/输出(I/O)接口705也连接至总线704。
以下部件连接至I/O接口705:包括键盘、鼠标等的输入部分706;包括诸如阴极射线管(CRT)、液晶显示器(LCD)等以及扬声器等的输出部分707;包括硬盘等的存储部分708;以及包括诸如LAN卡、调制解调器等的网络接口卡的通信部分709。通信部分709经由诸如因特网的网络执行通信处理。驱动器710也根据需要连接至I/O接口705。可拆卸介质711,诸如磁盘、光盘、磁光盘、半导体存储器等等,根据需要安装在驱动器710上,以便于从其上读出的计算机程序根据需要被安装入存储部分708。
特别地,根据本发明公开的实施例,上文参考流程图描述的过程可以被实现为计算机软件程序。例如,本发明公开的实施例包括一种计算机程序产品,其包括承载在计算机可读介质上的计算机程序,该计算机程序包含用于执行流程图所示的方法的程序代码。在这样的实施例中,该计算机程序可以通过通信部分709从网络上被下载和安装,和/或从可拆卸介质711被安装。在该计算机程序被中央处理单元(CPU)701执行时,执行本发明的***中限定的上述功能。
需要说明的是,本发明所示的计算机可读介质可以是计算机可读信号介质或者计算机可读存储介质或者是上述两者的任意组合。计算机可读存储介质例如可以是——但不限于——电、磁、光、电磁、红外线、或半导体的***、装置或器件,或者任意以上的组合。计算机可读存储介质的更具体的例子可以包括但不限于:具有一个或多个导线的电连接、便携式计算机磁盘、硬盘、随机访问存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、光纤、便携式紧凑磁盘只读存储器(CD-ROM)、光存储器件、磁存储器件、或者上述的任意合适的组合。在本发明中,计算机可读存储介质可以是任何包含或存储程序的有形介质,该程序可以被指令执行***、装置或者器件使用或者与其结合使用。而在本发明中,计算机可读的信号介质可以包括在基带中或者作为载波一部分传播的数据信号,其中承载了计算机可读的程序代码。这种传播的数据信号可以采用多种形式,包括但不限于电磁信号、光信号或上述的任意合适的组合。计算机可读的信号介质还可以是计算机可读存储介质以外的任何计算机可读介质,该计算机可读介质可以发送、传播或者传输用于由指令执行***、装置或者器件使用或者与其结合使用的程序。计算机可读介质上包含的程序代码可以用任何适当的介质传输,包括但不限于:无线、电线、光缆、RF等等,或者上述的任意合适的组合。
附图中的流程图和框图,图示了按照本发明各种实施例的***、方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上,流程图或框图中的每个方框可以代表一个模块、程序段、或代码的一部分,上述模块、程序段、或代码的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。也应当注意,在有些作为替换的实现中,方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如,两个接连地表示的方框实际上可以基本并行地执行,它们有时也可以按相反的顺序执行,这依所涉及的功能而定。也要注意的是,框图或流程图中的每个方框、以及框图或流程图中的方框的组合,可以用执行规定的功能或操作的专用的基于硬件的***来实现,或者可以用专用硬件与计算机指令的组合来实现。
描述于本发明实施例中所涉及到的模块可以通过软件的方式实现,也可以通过硬件的方式来实现。所描述的模块也可以设置在处理器中,例如,可以描述为:一种处理器包括请求接收模块、用例执行模块和结果确定模块。其中,这些模块的名称在某种情况下并不构成对该模块本身的限定,例如,请求接收模块还可以被描述为“接收测试请求的模块”。
作为另一方面,本发明还提供了一种计算机可读介质,该计算机可读介质可以是上述实施例中描述的设备中所包含的;也可以是单独存在,而未装配入该设备中。上述计算机可读介质承载有一个或者多个程序,当上述一个或者多个程序被一个该设备执行时,使得该设备包括:接收测试请求,所述测试请求指示了用于自动化测试的多个测试用例;区块链节点分别执行所述多个测试用例,并广播所述测试用例的执行结果;根据所广播的执行结果,确定所述测试请求的测试结果。
根据本发明实施例的技术方案,在接收到指示了多个测试用例的测试请求后,可利用区块链节点分别执行多个测试用例,并根据区块链节点广播的测试用例的执行结果来确定测试请求的测试结果,由于区块链节点具有数据不可篡改的特性,可保证测试用例的执行结果不会被篡改,因此可提高测试结果的可靠性。
上述具体实施方式,并不构成对本发明保护范围的限制。本领域技术人员应该明白的是,取决于设计要求和其他因素,可以发生各种各样的修改、组合、子组合和替代。任何在本发明的精神和原则之内所作的修改、等同替换和改进等,均应包含在本发明保护范围之内。
Claims (12)
1.一种自动化测试的方法,其特征在于,包括:
接收测试请求,所述测试请求指示了用于自动化测试的多个测试用例;
区块链节点分别执行所述多个测试用例,并广播所述测试用例的执行结果;
根据所广播的执行结果,确定所述测试请求的测试结果。
2.根据权利要求1所述的方法,其特征在于,所述多个测试用例相互独立;
所述根据所广播的执行结果,确定所述测试请求的测试结果,包括:
根据所述区块链节点分别执行多个测试用例而得到的执行结果,利用拜占庭容错共识算法确定所述测试请求的测试结果。
3.根据权利要求2所述的方法,其特征在于,所述利用拜占庭容错共识算法确定所述测试请求的测试结果,包括:
区块链节点根据自身得到的所述执行结果以及通过广播得到的其他所述区块链节点的执行结果,确定自身对应的共识结果;
根据所述区块链节点分别对应的共识结果,确定所述测试请求的测试结果。
4.根据权利要求3所述的方法,其特征在于,所述执行结果指示了所述测试用例执行成功或执行失败;
区块链节点确定自身得到的以及通过广播得到的其他所述区块链节点的多个执行结果中,指示执行成功或执行失败的执行结果分别对应的数量,将数量较大的执行结果作为所述共识结果。
5.根据权利要求1所述的方法,其特征在于,所述执行结果指示了所述测试用例执行成功或执行失败,所述根据所广播的执行结果,确定所述测试请求的测试结果,包括:
根据所广播的执行结果,统计指示执行成功的执行结果与指示执行失败的统计结果的比例,当所述比例小于第一阈值时,确定所述测试结果为测试失败,当所述比例大于第二阈值时,确定所述测试结果为测试成功,所述第一阈值小于或等于所述第二阈值。
6.根据权利要求1所述的方法,其特征在于,所述多个测试用例具有依赖关系;
所述区块链节点分别执行所述多个测试用例,并广播所述测试用例的执行结果,包括:
区块链节点根据广播得到的所述多个测试用例中第一测试用例的执行结果,执行所述多个测试用例中与所述第一测试用例具有依赖关系的第二测试用例,并广播所述第二测试用例的执行结果。
7.根据权利要求6所述的方法,其特征在于,
当所述第一测试用例的执行结果指示所述第一测试用例执行成功时,根据执行成功的执行结果,执行所述第二测试用例;
当所述第一用例的执行结果指示所述第一测试用例执行失败时,根据区块链节点中预存的所述第一测试用例的测试参数,执行所述第二测试用例。
8.一种自动化测试的装置,其特征在于,包括:请求接收模块、用例执行模块和结果确定模块;其中,
所述请求接收模块,用于接收测试请求,所述测试请求指示了用于自动化测试的多个测试用例;
所述用例执行模块,用于利用区块链节点分别执行所述多个测试用例,并广播所述测试用例的执行结果;
所述结果确定模块,用于根据所广播的执行结果,确定所述测试要求的测试结果。
9.根据权利要求8所述的装置,其特征在于,当所述多个测试用例相互独立时,所述结果确定模块,用于根据所述区块链节点分别执行多个测试用例而得到的执行结果,利用拜占庭容错共识算法确定所述测试请求的测试结果。
10.根据权利要求8所述的装置,其特征在于,当所述多个测试用例具有依赖关系时,所述用例执行模块,用于利用区块链节点根据广播得到的所述多个测试用例中第一测试用例的执行结果,执行所述多个测试用例中与所述第一测试用例具有依赖关系的第二测试用例,并广播所述第二测试用例的执行结果。
11.一种自动化测试的电子设备,其特征在于,包括:
一个或多个处理器;
存储装置,用于存储一个或多个程序,
当所述一个或多个程序被所述一个或多个处理器执行时,所述一个或多个处理器实现如权利要求1-7中任一所述的方法。
12.一种计算机可读介质,其上存储有计算机程序,其特征在于,所述程序被处理器执行时实现如权利要求1-7中任一所述的方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201911283601.7A CN111782502A (zh) | 2019-12-13 | 2019-12-13 | 一种自动化测试的方法及装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201911283601.7A CN111782502A (zh) | 2019-12-13 | 2019-12-13 | 一种自动化测试的方法及装置 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN111782502A true CN111782502A (zh) | 2020-10-16 |
Family
ID=72755406
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201911283601.7A Pending CN111782502A (zh) | 2019-12-13 | 2019-12-13 | 一种自动化测试的方法及装置 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN111782502A (zh) |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN112256593A (zh) * | 2020-12-18 | 2021-01-22 | 腾讯科技(深圳)有限公司 | 一种程序处理方法、装置、计算机设备和可读存储介质 |
CN113282496A (zh) * | 2021-05-31 | 2021-08-20 | 平安国际智慧城市科技股份有限公司 | 接口自动测试方法、装置、设备及存储介质 |
CN117118986A (zh) * | 2023-10-25 | 2023-11-24 | 腾讯科技(深圳)有限公司 | 基于区块链的容错验证方法、装置、设备、介质及产品 |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN109508295A (zh) * | 2018-11-14 | 2019-03-22 | 联动优势科技有限公司 | 区块链共识算法测试方法、装置、计算装置和存储介质 |
CN109753433A (zh) * | 2018-12-26 | 2019-05-14 | 中链科技有限公司 | 基于区块链的自动化测试方法、装置及电子设备 |
CN110162470A (zh) * | 2019-04-28 | 2019-08-23 | 阿里巴巴集团控股有限公司 | 一种区块链的测试方法和装置 |
-
2019
- 2019-12-13 CN CN201911283601.7A patent/CN111782502A/zh active Pending
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN109508295A (zh) * | 2018-11-14 | 2019-03-22 | 联动优势科技有限公司 | 区块链共识算法测试方法、装置、计算装置和存储介质 |
CN109753433A (zh) * | 2018-12-26 | 2019-05-14 | 中链科技有限公司 | 基于区块链的自动化测试方法、装置及电子设备 |
CN110162470A (zh) * | 2019-04-28 | 2019-08-23 | 阿里巴巴集团控股有限公司 | 一种区块链的测试方法和装置 |
Non-Patent Citations (2)
Title |
---|
"《电网技术》第42卷(2018)总目次", 电网技术, no. 12, 5 December 2018 (2018-12-05), pages 360 - 385 * |
"《计算机科学》2018年第45卷总目次", 计算机科学, no. 12, 15 December 2018 (2018-12-15), pages 320 - 326 * |
Cited By (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN112256593A (zh) * | 2020-12-18 | 2021-01-22 | 腾讯科技(深圳)有限公司 | 一种程序处理方法、装置、计算机设备和可读存储介质 |
CN112256593B (zh) * | 2020-12-18 | 2021-04-02 | 腾讯科技(深圳)有限公司 | 一种程序处理方法、装置、计算机设备和可读存储介质 |
CN113282496A (zh) * | 2021-05-31 | 2021-08-20 | 平安国际智慧城市科技股份有限公司 | 接口自动测试方法、装置、设备及存储介质 |
CN113282496B (zh) * | 2021-05-31 | 2024-04-02 | 深圳赛安特技术服务有限公司 | 接口自动测试方法、装置、设备及存储介质 |
CN117118986A (zh) * | 2023-10-25 | 2023-11-24 | 腾讯科技(深圳)有限公司 | 基于区块链的容错验证方法、装置、设备、介质及产品 |
CN117118986B (zh) * | 2023-10-25 | 2024-02-06 | 腾讯科技(深圳)有限公司 | 基于区块链的容错验证方法、装置、设备及介质 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US9350633B2 (en) | Dynamic optimization of command issuance in a computing cluster | |
CN111198813B (zh) | 一种接口测试方法和装置 | |
CN111782502A (zh) | 一种自动化测试的方法及装置 | |
CN111897633A (zh) | 一种任务处理的方法和装置 | |
CN104991821A (zh) | 批量处理监控任务的方法及装置 | |
CN110620722B (zh) | 一种订单处理的方法和装置 | |
CN113760522A (zh) | 一种任务处理方法和装置 | |
US11734057B2 (en) | Method and apparatus for processing a service of an abnormal server | |
CN116545905A (zh) | 一种服务健康检测方法、装置、电子设备及存储介质 | |
CN112817687A (zh) | 一种数据同步方法和装置 | |
CN112052152A (zh) | 一种模拟测试的方法和装置 | |
CN114049065A (zh) | 一种数据处理方法、装置及*** | |
CN113760874A (zh) | 数据质量检测的方法、装置、电子设备和存储介质 | |
CN114064403A (zh) | 一种任务延迟分析处理方法和装置 | |
CN111950232B (zh) | 一种自动切换号段的方法和装置 | |
CN112131077A (zh) | 故障节点的定位方法和定位装置、以及数据库集群*** | |
CN113760469A (zh) | 分布式计算的方法和装置 | |
CN110868477A (zh) | 任务调度方法、装置及*** | |
CN112783903A (zh) | 生成更新日志的方法和装置 | |
CN113726885B (zh) | 一种流量配额的调整方法和装置 | |
CN110806967A (zh) | 一种单元测试方法和装置 | |
CN111371900B (zh) | 一种监测同步链路健康状态的方法及*** | |
CN113468053B (zh) | 一种应用***的测试方法和装置 | |
CN114089712B (zh) | 一种数据处理方法和装置 | |
CN113726885A (zh) | 一种流量配额的调整方法和装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |