CN117093503B - 一种客户端测试管理方法与*** - Google Patents
一种客户端测试管理方法与*** Download PDFInfo
- Publication number
- CN117093503B CN117093503B CN202311343124.5A CN202311343124A CN117093503B CN 117093503 B CN117093503 B CN 117093503B CN 202311343124 A CN202311343124 A CN 202311343124A CN 117093503 B CN117093503 B CN 117093503B
- Authority
- CN
- China
- Prior art keywords
- test
- determining
- historical
- client
- concurrent
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000012360 testing method Methods 0.000 title claims abstract description 427
- 238000007726 management method Methods 0.000 title claims abstract description 20
- 238000000034 method Methods 0.000 claims description 32
- 238000011156 evaluation Methods 0.000 claims description 12
- 238000006243 chemical reaction Methods 0.000 claims description 11
- 238000012937 correction Methods 0.000 claims description 8
- 230000008859 change Effects 0.000 claims description 5
- 238000012216 screening Methods 0.000 claims description 5
- 238000012163 sequencing technique Methods 0.000 claims 1
- 238000012545 processing Methods 0.000 description 3
- 230000004048 modification Effects 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000008569 process Effects 0.000 description 2
- 230000004075 alteration Effects 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 238000010586 diagram Methods 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 230000007246 mechanism Effects 0.000 description 1
- 238000005457 optimization Methods 0.000 description 1
- 230000000750 progressive effect Effects 0.000 description 1
- 230000004044 response Effects 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/36—Preventing errors by testing or debugging software
- G06F11/3668—Software testing
- G06F11/3672—Test management
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q10/00—Administration; Management
- G06Q10/06—Resources, workflows, human or project management; Enterprise or organisation planning; Enterprise or organisation modelling
- G06Q10/063—Operations research, analysis or management
- G06Q10/0631—Resource planning, allocation, distributing or scheduling for enterprises or organisations
- G06Q10/06311—Scheduling, planning or task assignment for a person or group
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q10/00—Administration; Management
- G06Q10/06—Resources, workflows, human or project management; Enterprise or organisation planning; Enterprise or organisation modelling
- G06Q10/063—Operations research, analysis or management
- G06Q10/0631—Resource planning, allocation, distributing or scheduling for enterprises or organisations
- G06Q10/06316—Sequencing of tasks or work
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
- Y02D—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
- Y02D10/00—Energy efficient computing, e.g. low power processors, power management or thermal management
Landscapes
- Business, Economics & Management (AREA)
- Human Resources & Organizations (AREA)
- Engineering & Computer Science (AREA)
- Strategic Management (AREA)
- Entrepreneurship & Innovation (AREA)
- Economics (AREA)
- Theoretical Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Physics & Mathematics (AREA)
- Quality & Reliability (AREA)
- Development Economics (AREA)
- Educational Administration (AREA)
- Game Theory and Decision Science (AREA)
- Marketing (AREA)
- Operations Research (AREA)
- Tourism & Hospitality (AREA)
- General Business, Economics & Management (AREA)
- General Engineering & Computer Science (AREA)
- Computer Hardware Design (AREA)
- Debugging And Monitoring (AREA)
Abstract
本发明提供一种客户端测试管理方法与***,属于客户端管理技术领域,具体包括:根据目标测试任务所对应的客户端的操作类型的差异划分为多个测试子任务,并通过所述测试子任务所对应的客户端的操作类型进行不同的测试子任务的历史使用数据的确定,通过测试子任务所对应的操作类型的不同的客户端的数据类型和数据量进行统一测试指令的解析复杂度的确定,并结合测试时长以及并发测试用户的数量进行统一测试指令的测试复杂度的确定;基于不同的测试子任务的统一测试指令的类型进行测试子任务的测试优先级的确定,并基于测试优先级和测试复杂度进行不同的测试子任务的统一测试指令的测试顺序的确定,实现了对不同的客户端的差异化的测试管理。
Description
技术领域
本发明属于客户端管理技术领域,尤其涉及一种客户端测试管理方法与***。
背景技术
为了满足用户的使用便利性,消费金融公司往往有多个针对不同终端以及操作***的客户端。但是在提高用户的使用便利性的同时,由于客户端的数量较多,一旦在版本更新或者某一场景更新时,测试人员需要对所有的客户端进行测试,极大的降低了测试的效率。
为了解决上述技术问题,现有技术方案给出了不同的客户端协同测试的技术手段,具体的在发明专利CN201610195842.6《多客户端协同测试方法和装置》中通过解析测试指令,获取对每一客户端进行操作的接口和参数,并向每一客户端对应的接口发送对应参数,以使每一客户端执行所述参数对应的操作,提升了测试的效率,但是与此同时,存在以下技术问题:
现有技术方案中忽视了根据客户端的使用数据的差异采用差异化的测试并发用户的数量的确定,具体的,由于不同的客户端的使用数据的差异导致不同的客户端在使用过程中的并发用户的数量存在一定程度的差异,因此若不能根据不同的客户端的使用数据进行差异化的测试并发用户的数量的确定,则无法实现对不同的客户端的使用情况的准确确定。
现有技术方案中忽视了根据测试用例的复杂度进行测试顺序的确定,具体的,由于不同的客户端支持的数据类型和测试耗时的差异,因此不同的测试用例的测试复杂度也存在一定程度的差异,因此若不能进行针对性的测试顺序的优化,则有可能导致测试效率会受到一定程度的影响。
针对上述技术问题,本发明提供了一种客户端测试管理方法与***。
发明内容
为实现本发明目的,本发明采用如下技术方案:
根据本发明的一个方面,提供了一种客户端测试管理方法。
一种客户端测试管理方法,其特征在于,具体包括:
S1根据目标测试任务所对应的客户端的操作类型的差异划分为多个测试子任务,并通过所述测试子任务所对应的客户端的操作类型进行不同的测试子任务的历史使用数据的确定,基于所述历史使用数据进行不同的客户端的测试子任务的历史并发用户数据的确定,并结合所述历史并发用户数据的变动情况进行不同的客户端的并发测试用户的数量的确定;
S2基于历史使用数据进行不同的客户端的测试子任务所对应的客户端的操作类型历史高峰使用时段的确定,并结合所述操作类型的不同时段的历史使用情况进行测试子任务的测试时长的确定;
S3通过所述测试子任务所对应的操作类型的不同的客户端的数据类型和数据量进行统一测试指令的解析复杂度的确定,并结合测试时长以及并发测试用户的数量进行所述统一测试指令的测试复杂度的确定;
S4基于不同的测试子任务的统一测试指令的类型进行测试子任务的测试优先级的确定,并基于所述测试优先级和测试复杂度进行不同的测试子任务的统一测试指令的测试顺序的确定。
本发明的有益效果在于:
通过结合测试子任务的历史并发用户数据以及历史并发用户数据的变动情况进行不同的客户端的并发测试用户的数量的确定,不仅考虑到不同的测试子任务所对应的操作类型和组成模块的使用差异性,同时通过对并发测试用户的数量的动态调整,也使得测试结果能够更加准确的反应程序问题。
通过历史高峰使用时段以及操作类型的不同时段的历史使用情况进行测试子任务的测试时长的确定,不仅考虑到不同的操作类型的历史使用情况的时间分布情况的差异,同时还考虑到不同的高峰使用情况的差异,从而实现了针对性的进行测试时长的调整,也为进一步保证测试结果的准确性和可靠性奠定了基础。
通过结合统一测试指令的解析复杂度、测试时长以及并发测试用户的数量进行所述统一测试指令的测试复杂度的确定,不仅考虑到统一测试指令转换为不同的客户端所需求的测试指令的转换复杂度,同时进一步与测试时长和用户的数量的结合,实现了对不同的测试子任务的测试复杂度的确定,也为进一步实现对不同的测试子任务的测试顺序的动态调整奠定了基础。
进一步的技术方案在于,所述客户端的操作类型根据目标测试任务的操作目标所对应的客户端的功能模块以及在所述功能模块中的功能子模块进行确定。
进一步的技术方案在于,所述历史使用数据包括历史并发用户数量以及不同时段的历史并发用户数量的变动数据、历史使用高峰时段的时长以及在单位时间内的历史使用高峰时段的分布数据。
进一步的技术方案在于,所述统一测试指令的测试复杂度的确定的方法为:
通过所述统一测试指令的解析复杂度进行单一的测试用户的测试复杂度的确定,并通过所述并发测试用户的数量、单一的测试用户的测试复杂度进行所述统一测试指令的用户的测试复杂度的确定,并结合所述测试时长进行所述统一测试指令的测试复杂度的确定。
第二方面,本发明提供了一种客户端测试管理***,采用上述的一种客户端测试管理方法,其特征在于,具体包括:
测试用户评估模块,测试时长评估模块,测试复杂度确定模块,测试顺序确定模块;
其中所述测试用户评估模块负责根据目标测试任务所对应的客户端的操作类型的差异划分为多个测试子任务,并通过所述测试子任务所对应的客户端的操作类型进行不同的测试子任务的历史使用数据的确定,基于所述历史使用数据进行不同的客户端的测试子任务的历史并发用户数据的确定,并结合所述历史并发用户数据的变动情况进行不同的客户端的并发测试用户的数量的确定;
所述测试时长评估模块负责基于历史使用数据进行不同的客户端的测试子任务所对应的客户端的操作类型历史高峰使用时段的确定,并结合所述操作类型的不同时段的历史使用情况进行测试子任务的测试时长的确定;
所述测试复杂度确定模块负责通过所述测试子任务所对应的操作类型的不同的客户端的数据类型和数据量进行统一测试指令的解析复杂度的确定,并结合测试时长以及并发测试用户的数量进行所述统一测试指令的测试复杂度的确定;
所述测试顺序确定模块负责基于不同的测试子任务的统一测试指令的类型进行测试子任务的测试优先级的确定,并基于所述测试优先级和测试复杂度进行不同的测试子任务的统一测试指令的测试顺序的确定。
其他特征和优点将在随后的说明书中阐述,并且,部分地从说明书中变得显而易见,或者通过实施本发明而了解。本发明的目的和其他优点在说明书以及附图中所特别指出的结构来实现和获得。
为使本发明的上述目的、特征和优点能更明显易懂,下文特举较佳实施例,并配合所附附图,作详细说明如下。
附图说明
通过参照附图详细描述其示例实施方式,本发明的上述和其它特征及优点将变得更加明显;
图1是一种客户端测试管理方法的流程图;
图2是并发测试用户的数量的确定的方法的流程图;
图3是测试子任务的测试时长的确定的方法的流程图;
图4是统一测试指令的解析复杂度的确定的方法的流程图;
图5是一种客户端测试管理***的框架图。
具体实施方式
为了使本技术领域的人员更好地理解本说明书中的技术方案,下面将结合本说明书实施例中的附图,对本说明书实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本说明书一部分实施例,而不是全部的实施例。基于本说明书实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都应当属于本说明书保护的范围。
申请人发现,为了提升授信申请的处理的实时性和效率,现有的授信处理机构往往设置有多个授信申请渠道,即存在多个客户端,同时这也为测试人员的测试效率和测试难度带来一定程度的挑战,现有技术方案中给出了通过统一的测试指令进行对不同的客户端的统一测试,但是忽视了不同的客户端的并发用户数量存在一定程度的差异,同时不同的客户端的使用数据也存在一定程度的差异,若不考虑上述因素进行动态调整,则无法实现对客户端的可靠测试。
针对上述技术问题,申请人采用以下技术方案:
首先通过不同的测试子任务所对应的操作类型获取其对应的客户端中的模块的使用数据,包括历史并发用户数量以及不同时刻的历史并发用户数量的变动情况,通过上述数据可以实现对不同的测试子任务的并发测试用户数量的动态调整,具体的可以通过历史并发用户数量的最大值进行并发测试用户数量的确定;
紧接着考虑到不同的测试子任务所对应的操作类型获取其对应的客户端中的模块的高峰使用时段的数量和分布情况,从而可以实现对不用的测试子任务的测试时长的确定,具体的可以通过高峰使用时段的最长持续时长或者平均持续时长进行确定;
由于统一操作指令转化为不同的客户端的指令的转化难度存在差异,同时不同的客户端在响应操作指令时的处理的数据类型和数据量也存在一定程度的差异,通过综合考虑上述多方面因素可以实现对不同的测试子任务的测试难度的确定;
根据测试难度可以动态的确定不同的测试子任务的测试优先级,一般来说测试难度较大或者较为复杂的测试子任务的测试优先级较高,并根据测试优先级进行不同的测试子任务的测试。
为便于理解,下面将通过方法类实施例和***类实施例进行方案的说明。
为解决上述问题,根据本发明的一个方面,如图1所示,提供了根据本发明的一个方面,提供了一种客户端测试管理方法,其特征在于,具体包括:
S1根据目标测试任务所对应的客户端的操作类型的差异划分为多个测试子任务,并通过所述测试子任务所对应的客户端的操作类型进行不同的测试子任务的历史使用数据的确定,基于所述历史使用数据进行不同的客户端的测试子任务的历史并发用户数据的确定,并结合所述历史并发用户数据的变动情况进行不同的客户端的并发测试用户的数量的确定;
需要说明的是,所述客户端的操作类型根据目标测试任务的操作目标所对应的客户端的功能模块以及在所述功能模块中的功能子模块进行确定。
进一步的,所述历史使用数据包括历史并发用户数量以及不同时段的历史并发用户数量的变动数据、历史使用高峰时段的时长以及在单位时间内的历史使用高峰时段的分布数据。
在其中的一个可能的实施例中,如图2所示,上述步骤S1中的所述并发测试用户的数量的确定的方法为:
S11通过所述客户端的测试子任务的历史并发用户数据进行所述测试子任务的历史并发用户的数量峰值的确定,并判断单位时间内在所述客户端的历史并发用户的数量峰值的出现次数是否大于预设次数,若是,则通过所述历史并发用户的数量峰值进行所述客户端的并发测试用户的数量的确定,若否,则进入下一步骤;
S12通过所述测试子任务的历史并发用户数据进行所述客户端的测试子任务的历史并发用户的数量的确定,并结合所述预设次数进行所述客户端的并发测试用户的推荐数量的确定;
S13将所述历史并发用户的数量大于所述并发测试用户的推荐数量的出现次数作为高峰出现次数,并判断所述高峰出现次数是否处于预设次数范围内,若是,则进入下一步骤,若否,则进入步骤S15;
S14将所述高峰出现次数所对应的历史并发用户作为筛选并发用户,并通过所述筛选并发用户的数量与所述并发测试用户的推荐数量的差值以及所述高峰出现次数是否可以将所述推荐数量作为所述客户端的并发测试用户的数量,若是,则将所述推荐数量作为所述客户端的并发测试用户的数量,若否,则进入下一步骤;
S15通过所述筛选并发用户的数量与所述并发测试用户的推荐数量的差值、在所述筛选并发用户的数量下的出现次数以及所述高峰出现次数进行所述推荐数量的修正数量的确定,并通过所述修正数量以及所述推荐数量进行所述客户端的并发测试用户的数量的确定。
在另外的一个可能的实施例中,上述步骤S1中的所述并发测试用户的数量的确定的方法为:
通过所述测试子任务的历史并发用户数据进行所述客户端的测试子任务的历史并发用户的数量的确定,并结合所述预设次数进行所述客户端的并发测试用户的推荐数量的确定;
将所述历史并发用户的数量大于所述并发测试用户的推荐数量的出现次数作为高峰出现次数,并将所述历史并发用户的数量与所述并发测试用户的推荐数量的差值大于预设偏差量的出现次数作为数量峰值出现次数;
当所述高峰出现次数以及数量峰值出现次数均满足要求时:
将所述推荐数量作为所述客户端的并发测试用户的数量;
当所述高峰出现次数以及数量峰值出现次数任意一项不满足要求时:
将所述高峰出现次数所对应的历史并发用户作为筛选并发用户,通过所述筛选并发用户的数量与所述并发测试用户的推荐数量的差值、在所述筛选并发用户的数量下的出现次数以及所述高峰出现次数进行所述推荐数量的修正数量的确定,并通过所述修正数量以及所述推荐数量进行所述客户端的并发测试用户的数量的确定。
S2基于历史使用数据进行不同的客户端的测试子任务所对应的客户端的操作类型历史高峰使用时段的确定,并结合所述操作类型的不同时段的历史使用情况进行测试子任务的测试时长的确定;
在其中的一个可能的实施例中,如图3所示,所述测试子任务的测试时长的确定的方法为:
S21通过所述历史使用数据获取所述测试子任务所对应的客户端的操作类型的不同的预设时长内的使用人数和使用次数,并基于所述使用人数和使用次数进行历史高峰使用时段以及连续的历史高峰使用时段的最大持续时长的确定;
S22判断所述用户在单位时间内的历史高峰使用时段的数量是否大于预设数量,若是,则进入下一步骤,若否,则进入步骤S24;
S23获取所述用户在单位时间内的连续的历史高峰使用时段的最大持续时长,并结合所述用户在单位时间内的连续的历史高峰使用时段的持续时长的平均值以及持续时长大于预设时长历史高峰使用时段的数量进行所述测试子任务所对应的客户端的操作类型的使用频繁度的确定,并判断所述使用频繁度是否大于预设频繁度,若是,则通过所述用户在单位时间内的连续的历史高峰使用时段的最大持续时长进行所述测试子任务的测试时长的确定,若否,则进入下一步骤;
S24通过所述测试子任务所对应的客户端的操作类型的使用频繁度、在单位时间内使用人数、使用次数以及历史高峰使用时段的数量使用进行所述测试子任务的测试时长修正量的确定,并结合所述用户在单位时间内的连续的历史高峰使用时段的持续时长的平均值进行所述测试时长的确定。
进一步的,所述预设繁忙度根据所述操作类型的重要程度进行确定,具体的根据所述操作类型的适用客户数量、历史使用人数和历史使用次数进行确定,当所述操作类型的适用客户数量越多、历史使用人数越多、历史使用次数越多,则所述
S3通过所述测试子任务所对应的操作类型的不同的客户端的数据类型和数据量进行统一测试指令的解析复杂度的确定,并结合测试时长以及并发测试用户的数量进行所述统一测试指令的测试复杂度的确定;
在其中的一个可能的实施例中,如图4所示,所述统一测试指令的解析复杂度的确定的方法为:
S31获取所述测试子任务所对应的操作类型的客户端的数据类型和数据量,并判断所述数据类型和数据量是否均在预设区间内,若是,则进入下一步骤,若否,则进入步骤S33;
S32通过所述测试子任务的统一测试指令以及所述操作类型进行所述客户端的统一测试指令的指令转换复杂度的确定,并判断所述客户端的统一测试指令的指令转换复杂度是否小于预设复杂度,若是,则通过所述客户端的统一测试指令的指令转换复杂度进行所述统一测试指令的解析复杂度的确定,若否,则进入下一步骤;
S33通过所述测试子任务所对应的操作类型的客户端的数据类型和数据量进行所述客户端的数据测试复杂度的确定;
S34通过所述客户端的数据测试复杂度以及客户端的统一测试指令的指令转换复杂度进行所述统一测试指令的解析复杂度的确定。
在其中的一个可能的实施例中,所述统一测试指令的测试复杂度的确定的方法为:
通过所述统一测试指令的解析复杂度进行单一的测试用户的测试复杂度的确定,并通过所述并发测试用户的数量、单一的测试用户的测试复杂度进行所述统一测试指令的用户的测试复杂度的确定,并结合所述测试时长进行所述统一测试指令的测试复杂度的确定。
S4基于不同的测试子任务的统一测试指令的类型进行测试子任务的测试优先级的确定,并基于所述测试优先级和测试复杂度进行不同的测试子任务的统一测试指令的测试顺序的确定。
另一方面,如图5所示,本发明提供了一种客户端测试管理***,采用上述的一种客户端测试管理方法,其特征在于,具体包括:
测试用户评估模块,测试时长评估模块,测试复杂度确定模块,测试顺序确定模块;
其中所述测试用户评估模块负责根据目标测试任务所对应的客户端的操作类型的差异划分为多个测试子任务,并通过所述测试子任务所对应的客户端的操作类型进行不同的测试子任务的历史使用数据的确定,基于所述历史使用数据进行不同的客户端的测试子任务的历史并发用户数据的确定,并结合所述历史并发用户数据的变动情况进行不同的客户端的并发测试用户的数量的确定;
所述测试时长评估模块负责基于历史使用数据进行不同的客户端的测试子任务所对应的客户端的操作类型历史高峰使用时段的确定,并结合所述操作类型的不同时段的历史使用情况进行测试子任务的测试时长的确定;
所述测试复杂度确定模块负责通过所述测试子任务所对应的操作类型的不同的客户端的数据类型和数据量进行统一测试指令的解析复杂度的确定,并结合测试时长以及并发测试用户的数量进行所述统一测试指令的测试复杂度的确定;
所述测试顺序确定模块负责基于不同的测试子任务的统一测试指令的类型进行测试子任务的测试优先级的确定,并基于所述测试优先级和测试复杂度进行不同的测试子任务的统一测试指令的测试顺序的确定。
通过上述实施例,本发明主要具有以下有益效果:
通过结合测试子任务的历史并发用户数据以及历史并发用户数据的变动情况进行不同的客户端的并发测试用户的数量的确定,不仅考虑到不同的测试子任务所对应的操作类型和组成模块的使用差异性,同时通过对并发测试用户的数量的动态调整,也使得测试结果能够更加准确的反应程序问题。
通过历史高峰使用时段以及操作类型的不同时段的历史使用情况进行测试子任务的测试时长的确定,不仅考虑到不同的操作类型的历史使用情况的时间分布情况的差异,同时还考虑到不同的高峰使用情况的差异,从而实现了针对性的进行测试时长的调整,也为进一步保证测试结果的准确性和可靠性奠定了基础。
通过结合统一测试指令的解析复杂度、测试时长以及并发测试用户的数量进行所述统一测试指令的测试复杂度的确定,不仅考虑到统一测试指令转换为不同的客户端所需求的测试指令的转换复杂度,同时进一步与测试时长和用户的数量的结合,实现了对不同的测试子任务的测试复杂度的确定,也为进一步实现对不同的测试子任务的测试顺序的动态调整奠定了基础。
本说明书中的各个实施例均采用递进的方式描述,各个实施例之间相同相似的部分互相参见即可,每个实施例重点说明的都是与其他实施例的不同之处。尤其,对于装置、设备、非易失性计算机存储介质实施例而言,由于其基本相似于方法实施例,所以描述的比较简单,相关之处参见方法实施例的部分说明即可。
上述对本说明书特定实施例进行了描述。其它实施例在所附权利要求书的范围内。在一些情况下,在权利要求书中记载的动作或步骤可以按照不同于实施例中的顺序来执行并且仍然可以实现期望的结果。另外,在附图中描绘的过程不一定要求示出的特定顺序或者连续顺序才能实现期望的结果。在某些实施方式中,多任务处理和并行处理也是可以的或者可能是有利的。
以上所述仅为本说明书的一个或多个实施例而已,并不用于限制本说明书。对于本领域技术人员来说,本说明书的一个或多个实施例可以有各种更改和变化。凡在本说明书的一个或多个实施例的精神和原理之内所作的任何修改、等同替换、改进等,均应包含在本说明书的权利要求范围之内。
Claims (9)
1.一种客户端测试管理方法,其特征在于,具体包括:
根据目标测试任务所对应的客户端的操作类型的差异划分为多个测试子任务,并通过所述测试子任务所对应的客户端的操作类型进行不同的测试子任务的历史使用数据的确定,基于历史使用数据进行不同的客户端的测试子任务的历史并发用户数据的确定,并结合历史并发用户数据的变动情况进行不同的客户端的并发测试用户的数量的确定;
基于历史使用数据进行不同的客户端的测试子任务所对应的客户端的操作类型历史高峰使用时段的确定,并结合所述操作类型的不同时段的历史使用情况进行测试子任务的测试时长的确定;
通过所述测试子任务所对应的操作类型的不同的客户端的数据类型和数据量进行统一测试指令的解析复杂度的确定,并结合测试时长以及并发测试用户的数量进行所述统一测试指令的测试复杂度的确定;
所述统一测试指令的解析复杂度的确定的方法为:
S31获取所述测试子任务所对应的操作类型的客户端的数据类型和数据量,并判断所述数据类型和数据量是否均在预设区间内,若是,则进入下一步骤,若否,则进入步骤S33;
S32通过所述测试子任务的统一测试指令以及所述操作类型进行所述客户端的统一测试指令的指令转换复杂度的确定,并判断所述客户端的统一测试指令的指令转换复杂度是否小于预设复杂度,若是,则通过所述客户端的统一测试指令的指令转换复杂度进行所述统一测试指令的解析复杂度的确定,若否,则进入下一步骤;
S33通过所述测试子任务所对应的操作类型的客户端的数据类型和数据量进行所述客户端的数据测试复杂度的确定;
S34通过所述客户端的数据测试复杂度以及客户端的统一测试指令的指令转换复杂度进行所述统一测试指令的解析复杂度的确定;
基于不同的测试子任务的统一测试指令的类型进行测试子任务的测试优先级的确定,并基于所述测试优先级和测试复杂度进行不同的测试子任务的统一测试指令的测试顺序的确定。
2.如权利要求1所述的一种客户端测试管理方法,其特征在于,所述客户端的操作类型根据目标测试任务的操作目标所对应的客户端的功能模块以及在所述功能模块中的功能子模块进行确定。
3.如权利要求1所述的一种客户端测试管理方法,其特征在于,所述历史使用数据包括历史并发用户数量以及不同时段的历史并发用户数量的变动数据、历史使用高峰时段的时长以及在单位时间内的历史使用高峰时段的分布数据。
4.如权利要求1所述的一种客户端测试管理方法,其特征在于,所述并发测试用户的数量的确定的方法为:
S11通过所述客户端的测试子任务的历史并发用户数据进行所述测试子任务的历史并发用户的数量峰值的确定,并判断单位时间内在所述客户端的历史并发用户的数量峰值的出现次数是否大于预设次数,若是,则通过所述历史并发用户的数量峰值进行所述客户端的并发测试用户的数量的确定,若否,则进入下一步骤;
S12通过所述测试子任务的历史并发用户数据进行所述客户端的测试子任务的历史并发用户的数量的确定,并结合所述预设次数进行所述客户端的并发测试用户的推荐数量的确定;
S13将所述历史并发用户的数量大于所述并发测试用户的推荐数量的出现次数作为高峰出现次数,并判断所述高峰出现次数是否处于预设次数范围内,若是,则进入下一步骤,若否,则进入步骤S15;
S14将所述高峰出现次数所对应的历史并发用户作为筛选并发用户,并通过所述筛选并发用户的数量与所述并发测试用户的推荐数量的差值以及所述高峰出现次数是否可以将所述推荐数量作为所述客户端的并发测试用户的数量,若是,则将所述推荐数量作为所述客户端的并发测试用户的数量,若否,则进入下一步骤;
S15通过所述筛选并发用户的数量与所述并发测试用户的推荐数量的差值、在所述筛选并发用户的数量下的出现次数以及所述高峰出现次数进行所述推荐数量的修正数量的确定,并通过所述修正数量以及所述推荐数量进行所述客户端的并发测试用户的数量的确定。
5.如权利要求4所述的一种客户端测试管理方法,其特征在于,所述客户端的并发测试用户的推荐数量的确定的方法为:
获取所述客户端的测试子任务的历史并发用户的数量以及不同的历史并发用户的数量在单位时间内的出现次数的确定;
按照所述测试子任务的历史并发用户的数量从大到小进行排序,直到测试子任务的历史并发用户的数量在单位时间内的出现次数的次数和大于所述预设次数时,则将此时对应的测试子任务的历史并发用户的数量的最小值作为所述客户端的并发测试用户的推荐数量。
6.如权利要求1所述的一种客户端测试管理方法,其特征在于,所述测试子任务的测试时长的确定的方法为:
S21通过所述历史使用数据获取所述测试子任务所对应的客户端的操作类型的不同的预设时长内的使用人数和使用次数,并基于所述使用人数和使用次数进行历史高峰使用时段以及连续的历史高峰使用时段的最大持续时长的确定;
S22判断所述用户在单位时间内的历史高峰使用时段的数量是否大于预设数量,若是,则进入下一步骤,若否,则进入步骤S24;
S23获取所述用户在单位时间内的连续的历史高峰使用时段的最大持续时长,并结合所述用户在单位时间内的连续的历史高峰使用时段的持续时长的平均值以及持续时长大于预设时长历史高峰使用时段的数量进行所述测试子任务所对应的客户端的操作类型的使用频繁度的确定,并判断所述使用频繁度是否大于预设频繁度,若是,则通过所述用户在单位时间内的连续的历史高峰使用时段的最大持续时长进行所述测试子任务的测试时长的确定,若否,则进入下一步骤;
S24通过所述测试子任务所对应的客户端的操作类型的使用频繁度、在单位时间内使用人数、使用次数以及历史高峰使用时段的数量使用进行所述测试子任务的测试时长修正量的确定,并结合所述用户在单位时间内的连续的历史高峰使用时段的持续时长的平均值进行所述测试时长的确定。
7.如权利要求6所述的一种客户端测试管理方法,其特征在于,所述预设频繁度根据所述操作类型的重要程度进行确定,具体的根据所述操作类型的适用客户数量、历史使用人数和历史使用次数进行确定,当所述操作类型的适用客户数量越多、历史使用人数越多、历史使用次数越多,则所述预设频繁度越小。
8.如权利要求1所述的一种客户端测试管理方法,其特征在于,所述统一测试指令的测试复杂度的确定的方法为:
通过所述统一测试指令的解析复杂度进行单一的测试用户的测试复杂度的确定,并通过所述并发测试用户的数量、单一的测试用户的测试复杂度进行所述统一测试指令的用户的测试复杂度的确定,并结合所述测试时长进行所述统一测试指令的测试复杂度的确定。
9.一种客户端测试管理***,采用权利要求1-8任一项所述的一种客户端测试管理方法,其特征在于,具体包括:
测试用户评估模块,测试时长评估模块,测试复杂度确定模块,测试顺序确定模块;
其中所述测试用户评估模块负责根据目标测试任务所对应的客户端的操作类型的差异划分为多个测试子任务,并通过所述测试子任务所对应的客户端的操作类型进行不同的测试子任务的历史使用数据的确定,基于所述历史使用数据进行不同的客户端的测试子任务的历史并发用户数据的确定,并结合所述历史并发用户数据的变动情况进行不同的客户端的并发测试用户的数量的确定;
所述测试时长评估模块负责基于历史使用数据进行不同的客户端的测试子任务所对应的客户端的操作类型历史高峰使用时段的确定,并结合所述操作类型的不同时段的历史使用情况进行测试子任务的测试时长的确定;
所述测试复杂度确定模块负责通过所述测试子任务所对应的操作类型的不同的客户端的数据类型和数据量进行统一测试指令的解析复杂度的确定,并结合测试时长以及并发测试用户的数量进行所述统一测试指令的测试复杂度的确定;
所述测试顺序确定模块负责基于不同的测试子任务的统一测试指令的类型进行测试子任务的测试优先级的确定,并基于所述测试优先级和测试复杂度进行不同的测试子任务的统一测试指令的测试顺序的确定。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202311343124.5A CN117093503B (zh) | 2023-10-17 | 2023-10-17 | 一种客户端测试管理方法与*** |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202311343124.5A CN117093503B (zh) | 2023-10-17 | 2023-10-17 | 一种客户端测试管理方法与*** |
Publications (2)
Publication Number | Publication Date |
---|---|
CN117093503A CN117093503A (zh) | 2023-11-21 |
CN117093503B true CN117093503B (zh) | 2024-02-06 |
Family
ID=88773819
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202311343124.5A Active CN117093503B (zh) | 2023-10-17 | 2023-10-17 | 一种客户端测试管理方法与*** |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN117093503B (zh) |
Citations (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101140541A (zh) * | 2007-09-29 | 2008-03-12 | 中兴通讯股份有限公司 | 一种分布式软件***的集成测试***及方法 |
CN107735771A (zh) * | 2015-06-09 | 2018-02-23 | 机械地带有限公司 | 分布式可扩展工作负载测试 |
CN107908566A (zh) * | 2017-11-27 | 2018-04-13 | 平安科技(深圳)有限公司 | 自动化测试管理方法、装置、终端设备及存储介质 |
CN108108297A (zh) * | 2016-11-25 | 2018-06-01 | 腾讯科技(深圳)有限公司 | 自动化测试的方法和装置 |
CN112579422A (zh) * | 2019-09-27 | 2021-03-30 | 腾讯科技(深圳)有限公司 | 一种方案测试方法、装置、服务器及存储介质 |
CN114490404A (zh) * | 2022-02-10 | 2022-05-13 | 中国农业银行股份有限公司 | 一种测试用例确定方法、装置、电子设备及存储介质 |
CN116302930A (zh) * | 2022-12-26 | 2023-06-23 | 中国工商银行股份有限公司 | 应用测试方法和装置 |
CN116737597A (zh) * | 2023-08-10 | 2023-09-12 | 杭银消费金融股份有限公司 | 测试用例处理方法、***与存储介质 |
CN116841870A (zh) * | 2023-06-05 | 2023-10-03 | 联宝(合肥)电子科技有限公司 | 一种测试方法、***、装置、设备及存储介质 |
Family Cites Families (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US11099973B2 (en) * | 2019-01-28 | 2021-08-24 | Salesforce.Com, Inc. | Automated test case management systems and methods |
-
2023
- 2023-10-17 CN CN202311343124.5A patent/CN117093503B/zh active Active
Patent Citations (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101140541A (zh) * | 2007-09-29 | 2008-03-12 | 中兴通讯股份有限公司 | 一种分布式软件***的集成测试***及方法 |
CN107735771A (zh) * | 2015-06-09 | 2018-02-23 | 机械地带有限公司 | 分布式可扩展工作负载测试 |
CN108108297A (zh) * | 2016-11-25 | 2018-06-01 | 腾讯科技(深圳)有限公司 | 自动化测试的方法和装置 |
CN107908566A (zh) * | 2017-11-27 | 2018-04-13 | 平安科技(深圳)有限公司 | 自动化测试管理方法、装置、终端设备及存储介质 |
CN112579422A (zh) * | 2019-09-27 | 2021-03-30 | 腾讯科技(深圳)有限公司 | 一种方案测试方法、装置、服务器及存储介质 |
CN114490404A (zh) * | 2022-02-10 | 2022-05-13 | 中国农业银行股份有限公司 | 一种测试用例确定方法、装置、电子设备及存储介质 |
CN116302930A (zh) * | 2022-12-26 | 2023-06-23 | 中国工商银行股份有限公司 | 应用测试方法和装置 |
CN116841870A (zh) * | 2023-06-05 | 2023-10-03 | 联宝(合肥)电子科技有限公司 | 一种测试方法、***、装置、设备及存储介质 |
CN116737597A (zh) * | 2023-08-10 | 2023-09-12 | 杭银消费金融股份有限公司 | 测试用例处理方法、***与存储介质 |
Non-Patent Citations (3)
Title |
---|
Test Optimization Using Combinatorial Test Design: Real-World Experience in Deployment of Combinatorial Testing at Scale;Saritha R.等;2017 IEEE International Conference on Software Testing, Verification and Validation Workshops (ICSTW);全文 * |
一种高重用性的IEC 61850服务器一致性自动测试***的设计与实现;姬希娜;徐云松;周水斌;张保善;浮明军;刘洋;王梦琦;;南方电网技术(第08期);全文 * |
基于持续集成的自动化单元测试;桂文军 等;指挥信息***与技术;全文 * |
Also Published As
Publication number | Publication date |
---|---|
CN117093503A (zh) | 2023-11-21 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
Ali et al. | Batch: Machine learning inference serving on serverless platforms with adaptive batching | |
Herbst et al. | BUNGEE: an elasticity benchmark for self-adaptive IaaS cloud environments | |
US8726243B2 (en) | Method and system for automatically testing performance of applications run in a distributed processing structure and corresponding computer program product | |
Zhang et al. | Treadmill: Attributing the source of tail latency through precise load testing and statistical inference | |
US9135074B2 (en) | Evaluating performance of workload manager based on QoS to representative workload and usage efficiency of shared resource for plurality of minCPU and maxCPU allocation values | |
US8392927B2 (en) | System and method for determining a partition of a consumer's resource access demands between a plurality of different classes of service | |
US8756586B2 (en) | System and method for automated performance testing in a dynamic production environment | |
Domingues et al. | Resource usage of windows computer laboratories | |
US7334032B2 (en) | System for allocating storage performance resource | |
US20220035667A1 (en) | Resource availability-based workflow execution timing determination | |
Tang et al. | Data-aware resource scheduling for multicloud workflows: A fine-grained simulation approach | |
Misa et al. | Dynamic scheduling of approximate telemetry queries | |
CN117093503B (zh) | 一种客户端测试管理方法与*** | |
Chen et al. | Performance prediction of COTS component-based enterprise applications | |
Versluis et al. | A trace-based performance study of autoscaling workloads of workflows in datacenters | |
Katz et al. | Cyberinfrastructure usage modalities on the TeraGrid | |
Sahoo et al. | Feedback control for real-time scheduling | |
Bartalos et al. | Modeling energy-aware web services and application | |
CN115292176A (zh) | 一种压力测试方法、装置、设备及存储介质 | |
Lee et al. | Software reliability prediction for open source software adoption systems based on early lifecycle measurements | |
US20230161769A1 (en) | Method for Dynamic Resource Scheduling of Programmable Dataplanes for Network Telemetry | |
Kain et al. | DRUDGE: Dynamic Resource Usage Data Generation for Extreme Edge Devices | |
Chris et al. | Dynamic Scheduling of Approximate Telemetry Queries | |
Rohr et al. | Trace-context sensitive performance models from monitoring data of software systems | |
Liao et al. | STAAF: Spatial-Temporal Correlations Aware AutoScaling Framework for Microservices |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |