CN109388535A - 一种存储性能测试方法、装置及应用服务器 - Google Patents
一种存储性能测试方法、装置及应用服务器 Download PDFInfo
- Publication number
- CN109388535A CN109388535A CN201811172484.2A CN201811172484A CN109388535A CN 109388535 A CN109388535 A CN 109388535A CN 201811172484 A CN201811172484 A CN 201811172484A CN 109388535 A CN109388535 A CN 109388535A
- Authority
- CN
- China
- Prior art keywords
- tested
- software package
- performance
- performance test
- version
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Withdrawn
Links
- 238000012360 testing method Methods 0.000 title claims abstract description 103
- 238000011056 performance test Methods 0.000 claims abstract description 137
- 238000000034 method Methods 0.000 claims abstract description 51
- 238000004590 computer program Methods 0.000 claims description 11
- 238000009434 installation Methods 0.000 claims description 11
- 238000007619 statistical method Methods 0.000 claims description 10
- 238000013507 mapping Methods 0.000 claims description 4
- 230000008569 process Effects 0.000 description 35
- 230000006870 function Effects 0.000 description 6
- 238000010586 diagram Methods 0.000 description 3
- 238000004422 calculation algorithm Methods 0.000 description 2
- 235000013399 edible fruits Nutrition 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 238000012545 processing Methods 0.000 description 2
- 230000003252 repetitive effect Effects 0.000 description 2
- 230000009471 action Effects 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 230000007613 environmental effect Effects 0.000 description 1
- 239000000203 mixture Substances 0.000 description 1
- 238000005457 optimization Methods 0.000 description 1
- 230000000750 progressive effect Effects 0.000 description 1
- 230000009467 reduction Effects 0.000 description 1
- 238000012827 research and development Methods 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/22—Detection or location of defective computer hardware by testing during standby operation or during idle time, e.g. start-up testing
- G06F11/26—Functional testing
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/36—Preventing errors by testing or debugging software
- G06F11/3668—Software testing
- G06F11/3672—Test management
- G06F11/368—Test management for test version control, e.g. updating test cases to a new software version
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/36—Preventing errors by testing or debugging software
- G06F11/3668—Software testing
- G06F11/3672—Test management
- G06F11/3688—Test management for test execution, e.g. scheduling of test suites
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Computer Hardware Design (AREA)
- Quality & Reliability (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Debugging And Monitoring (AREA)
Abstract
本发明公开了一种存储性能测试方法、装置、应用服务器及计算机可读存储介质,该方法包括:解析测试配置文件,获得待测试软件包版本信息以及待执行性能测试任务;根据待测试软件包版本信息下载各版本对应的待测试软件包;将各待测试软件包部署至存储服务器;利用性能测试工具对各待测试软件包执行待执行性能测试任务,得到各待测试软件包对应的性能测试结果;该方法通过调用脚本自动实现各待测试软件包的自动部署以及待执行性能测试任务的自动执行,因此能够自动化测试存储产品不同版本性能,增强了性能测试准确度,同时减少工作量,提高效率;进一步,还可以实现自动输出性能对比结果,以对不同版本的性能测试结果进行自动对比。
Description
技术领域
本发明涉及存储设备技术领域,特别涉及一种存储性能测试方法、装置、应用服务器及计算机可读存储介质。
背景技术
目前在项目管理过程中,性能测试是非常重要的一环。随着版本演进,需要验证多个版本的性能测试结果。且需要将多个版本的性能测试结果进行对比,以便及时识别出产品性能的波动。后续可以及时根据该波动提出性能优化。
对于存储产品来说由于其涉及周边硬件较多,测试环境变动频繁,导致不同的测试环境使用统一测试场景验证的结果不具备可对比性,以及当前版本测试的性能结果不能和前一版本的性能测试结果进行对比等问题。因此,需要使用同一测试环境验证不同版本的性能,实现存储产品不同版本之间性能及结果差异的对比统计。然而使用同一测试环境验证不同版本的性能的过程中重复性工作较多,其次多个版本的性能测试结果对比也较繁琐。
发明内容
本发明的目的是提供一种存储性能测试的方法、装置、终端及计算机可读存储介质,能够自动化测试存储产品不同版本性能,增强了性能测试准确度,同时减少工作量,提高效率。
为解决上述技术问题,本发明提供一种存储性能测试方法,包括:
解析测试配置文件,获得待测试软件包版本信息以及待执行性能测试任务;
根据所述待测试软件包版本信息下载各版本对应的待测试软件包;
将各所述待测试软件包部署至存储服务器;
利用性能测试工具对各所述待测试软件包执行所述待执行性能测试任务,得到各所述待测试软件包对应的性能测试结果。
可选的,将任一所述待测试软件包部署至存储服务器,包括:
获取所述待测试软件包的md5值;
判断所述待测试软件包的md5值是否与归档服务器上对应软件包的md5值一致;
若一致,则在存储服务器中安装所述待测试软件包;
若不一致,则重新下载对应的待测试软件包。
可选的,所述在存储服务器中安装所述待测试软件包之后,还包括:
判断所述待测试软件包是否安装成功;
若否,则将重复安装次数加1,并判断所述重复安装次数是否超过阈值;若超过所述阈值,则安装失败;若未超过所述阈值,则执行所述在存储服务器中安装所述待测试软件包的步骤。
可选的,利用性能测试工具对所述待测试软件包执行所述待执行性能测试任务,包括:
利用所述待执行性能测试任务确定需要的LUN;
在所述存储服务器中划分所述LUN,并将所述LUN映射到对应的应用服务器;
配置paramfile文件并将运行模式设置为多客户端模式;
执行vdbench性能测试并保存vdbench测试结果到对应文件;其中,所述文件的名称为所述待测试软件包的版本号。
可选的,得到各所述待测试软件包对应的性能测试结果之后,还包括:
对各所述待测试软件包对应的性能测试结果进行统计分析,输出各版本性能差异数据。
可选的,对各所述待测试软件包对应的性能测试结果进行统计分析,输出各版本性能差异数据,包括:
汇总各所述待测试软件包对应的性能测试结果;
利用paramfile文件中定义的测试场景逐项对比不同版本的性能测试结果中各性能指标的波动值,并汇总得到各版本性能差异文件;
输出所述各版本性能差异文件。
本发明还提供一种存储性能测试装置,包括:
解析模块,用于解析测试配置文件,获得待测试软件包版本信息以及待执行性能测试任务;
下载模块,用于根据所述待测试软件包版本信息下载各版本对应的待测试软件包;
部署模块,用于将各所述待测试软件包部署至存储服务器;
性能测试模块,用于利用性能测试工具对各所述待测试软件包执行所述待执行性能测试任务,得到各所述待测试软件包对应的性能测试结果。
可选的,所述存储性能测试装置还包括:
性能对比模块,用于对各所述待测试软件包对应的性能测试结果进行统计分析,输出各版本性能差异数据。
本发明还提供一种应用服务器,包括:
存储器,用于存储计算机程序;
处理器,用于执行所述计算机程序时实现上述所述的存储性能测试方法的步骤。
本发明还提供一种计算机可读存储介质,所述计算机可读存储介质上存储有计算机程序,所述计算机程序被处理器执行时实现上述所述的存储性能测试方法的步骤。
本发明所提供的一种存储性能测试方法,包括:解析测试配置文件,获得待测试软件包版本信息以及待执行性能测试任务;根据待测试软件包版本信息下载各版本对应的待测试软件包;将各待测试软件包部署至存储服务器;利用性能测试工具对各待测试软件包执行待执行性能测试任务,得到各待测试软件包对应的性能测试结果。
可见,该方法通过脚本自动实现各待测试软件包的自动部署以及待执行性能测试任务的自动执行,因此能够自动化测试存储产品不同版本性能,减少人工重复执行每一个版本的性能测试的过程,提高同一测试环境验证不同版本性能的效率;进一步,还可以实现自动输出性能对比结果,以对不同版本的性能测试结果进行自动对比。本发明还提供了一种存储性能测试装置、应用服务器及计算机可读存储介质,具有上述有益效果,在此不再赘述。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据提供的附图获得其他的附图。
图1为本发明实施例所提供的存储性能测试方法的流程图;
图2为本发明实施例所提供的存储性能测试装置的结构框图;
图3为本发明实施例所提供的另一存储性能测试装置的结构框图。
具体实施方式
为使本发明实施例的目的、技术方案和优点更加清楚,下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
现有技术中使用同一测试环境验证不同版本性能的过程,需要相关技术人员手动部署当前版本的软件包,并在配置完成后执行对应的性能测试任务,在其性能测试任务完成后再手动部署下一个版本的软件包并按照上述过程执行对应的性能测试任务;重复执行上述整个过程直到全部版本均执行完成。可以看到现有技术中使用同一测试环境验证不同版本的性能的过程中重复性工作较多,测试效率低,且人工参与过多会降低性能测试过程的可靠性。本实施例中能够自动化测试存储产品不同版本性能,增强了性能测试准确度,同时减少工作量,提高效率。本实施例并不对执行主体进行限定,例如可以是应用服务器。具体请参考图1,图1为本发明实施例所提供的存储性能测试方法的流程图;该方法可以包括:
S101:解析测试配置文件,获得待测试软件包版本信息以及待执行性能测试任务。
本实施例中通过调用脚本自动执行本实施例中各个步骤。本实施例并不对该脚本的具体内容进行限定,可以是一个脚本实现本实施例中全部的功能,当然也可以是按照功能模块对脚本进行划分,例如一个功能模块对应一个脚本(如具体的,将步骤S101中解析过程设置一个解析脚本,调用该解析脚本实现步骤S101中解析过程得到待测试软件包版本信息以及待执行性能测试任务;将步骤S102中下载过程设置一个下载脚本,调用该下载脚本实现步骤S102中下载各版本对应的待测试软件包;即可以是每个步骤对应一个脚本);当然也可以是按照大的功能模块进行设置,利用将整个过程分为部署各版本软件包的过程以及性能测试的过程(如具体的,设置软件部署脚本用于解析测试配置文件,获得待测试软件包版本信息以及待执行性能测试任务以及根据待测试软件包版本信息下载各版本对应的待测试软件包并将各待测试软件包部署至存储服务器;设置性能测试脚本用于利用性能测试工具对各待测试软件包执行待执行性能测试任务,得到各待测试软件包对应的性能测试结果)。无论是哪种设置脚本的形式,都能够实现自动化执行存储性能测试的整个过程,在此过程中无需技术人员人工干预,即实现自动化测试存储产品不同版本性能,增强了性能测试准确度,同时减少工作量,提高效率。本实施例中并不限定自动执行的脚本的编写方式,例如通过Python(解析脚本语言)编写。即采用Python脚本自动安装存储产品不同软件版本(自动安装各待测试软件包)。
本实施例中并不限定测试配置文件中的具体内容,至少需要包括待测试软件包版本信息以及待执行性能测试任务。通过待测试软件包版本信息来下载对应的待测试软件包。通过待执行性能测试任务确定所需的性能测试。本实施例并不限定待测试软件包版本信息以及待执行性能测试任务的数据形式,例如待测试软件包版本信息以及待执行性能测试任务均可以以列表的形式存储。通过调用脚本实现自动解析测试配置文件,获得待测试软件包版本信息以及待执行性能测试任务的过程。
S102:根据待测试软件包版本信息下载各版本对应的待测试软件包。
本实施例中通过脚本自动执行根据待测试软件包版本信息下载各版本对应的待测试软件包的过程。但是本实施例并不对下载的具体顺序进行限定。例如可以是根据待测试软件包版本信息依次下载对应的待测试软件包。也可以是根据待测试软件包版本信息同时下载对应的待测试软件包。本实施例也不限定下载各版本对应的待测试软件包的方式,其可以根据具体的待测试软件包版本信息存储形式进行对应设置。例如当待测试软件包版本信息为待测试软件包版本列表时,后续可以通过遍历该待测试软件包版本列表来下载各版本对应的待测试软件包。
当然本实施例也不限定在遍历过程中每次下载的判定条件。例如可以是当前版本的待测试软件包下载完成后就按照待测试软件包版本列表下载下一个版本的待测试软件包。也可以是当前版本的待测试软件包下载完成且执行完对应的待执行性能测试任务后,按照待测试软件包版本列表下载下一个版本的待测试软件包。
S103:将各待测试软件包部署至存储服务器。
本实施例中通过脚本自动执行将各待测试软件包部署至存储服务器的过程。本实施例并不对部署的具体过程进行限定,只要可以实现在存储服务器成功安装对应待测试软件即可。由于在存储服务器中部署的待测试软件仅仅是版本的不同,因此每个版本的待测试软件部署过程可以相同。本实施例提供一种具体的部署过程,即优选的,将任一待测试软件包部署至存储服务器,可以包括:
获取待测试软件包的md5值;其中,本实施例并不会限定获取待测试软件包的md5值的具体方式。
判断待测试软件包的md5值是否与归档服务器上对应软件包的md5值一致;
若一致,则在存储服务器中安装待测试软件包;
若不一致,则重新下载对应的待测试软件包。
具体的,本实施例中在安装待测试软件包时,需要首先通过md5值来验证下载的待测试软件包是否正确,只有在得到正确的待测试软件包后,才会将其部署至存储服务器中。在得到错误的待测试软件包时,会重新下载对应的待测试软件包。当然若存在下载不到正确的待测试软件包时,可以提示用户下载出错(本实施例并不限定提示的具体形式,以及提示信息的具体内容),使得用户可以及时了解到性能测试的具体过程。当然优选的,自动跳转到下一个版本的待测试软件包的下载,可以使得整个过程都能自动化执行完成,中间不会由于存在某个死循环而导致存储性能测试过程无法实现,可以进一步实现没有人工干预的存储性能测试,提高性能测试效率。
进一步,为了提高存储服务器中安装待测试软件包的可靠性。优选的,在存储服务器中安装待测试软件包之后还可以包括:
判断待测试软件包是否安装成功;
若否,则将重复安装次数加1,并判断重复安装次数是否超过阈值;若超过阈值,则安装失败;若未超过阈值,则执行在存储服务器中安装待测试软件包的步骤。
具体的,本实施例中并不限定判定待测试软件包是否安装成功的方式,例如可以是通过校验待测试软件包对应的安装的存储软件的版本号是否正确来确定该版本号的待测试软件包是否安装成功。若安装成功则可以继续执行后续步骤,当然在执行后续步骤的过程中也可以输出该版本软件部署成功的提示信息(本实施例并不限定提示的具体形式,以及提示信息的具体内容)。使得用户可以及时了解到性能测试的具体过程。若未安装成功,则重新按照上述过程进行安装。
当然在该过程中为了避免由于一直安装不成功而导致的重复安装的死循环,本实施例中可以通过设置最多重复安装的次数即上述阈值,来防止出现重复安装的死循环。本实施例中并不对该阈值的具体数值进行限定,例如可以是3。进一步,本实施例也不限定重复安装次数的具体计数方式,例如可以通过计数器实现。可以进一步实现没有人工干预的存储性能测试,提高性能测试效率。当然在安装失败时(即超过重复安装次数超过阈值)可以输出该版本软件部署失败的提示信息(本实施例并不限定提示的具体形式,以及提示信息的具体内容)。使得用户可以及时了解到性能测试的具体过程。下面举一个具体的例子说明将各待测试软件包部署至存储服务器的一个具体实现过程:
(1)根据待测试软件包的版本号从归档服务器上下载相应待测试软件包,并上传到存储服务器;
(2)校验待测试软件包的md5值,如果与归档服务器上对应的软件包的md5不一致,重新获取该待测试软件包;
(3)登陆存储服务器(远程登录存储服务器),执行命令进行软件部署;
(4)校验待测试软件包对应的存储软件版本号是否正确;
(5)若正确,返回部署成功;
(6)若不正确,则软件部署失败,重复第(3)步骤,重试3次都失败,返回部署失败。
S104、利用性能测试工具对各待测试软件包执行待执行性能测试任务,得到各待测试软件包对应的性能测试结果。
具体的,本实施例中通过脚本自动执行利用性能测试工具对各待测试软件包执行待执行性能测试任务,得到各待测试软件包对应的性能测试结果的过程。本实施例并不对部署的性能测试工具进行限定,只要可以实现存储性能测试任务即可。例如通过vdbench(一种磁盘性能测试工具)实现存储性能测试任务。对应的本实施例并不限定利用性能测试工具对各待测试软件包执行待执行性能测试任务的具体过程,其依据所选择的具体的性能测试工具进行相应设置。进一步,本实施例并不限定调用性能测试工具执行待执行性能测试任务的时机。例如可以是在一个版本对应的待测试软件包安装成功后立刻执行其对应的待执行性能测试任务。即按照待测试软件包版本信息按照版本号依次循环执行存储性能测试过程(即部署待测试软件包以及执行待执行性能测试任务)。也就是说一个版本号对应的待测试软件包完成部署以及性能测试任务后再执行下一个版本号对应的待测试软件包完成部署以及性能测试任务。
当利用vdbench作为性能测试工具时,本实施例中利用性能测试工具对待测试软件包执行待执行性能测试任务可以包括:
利用待执行性能测试任务确定需要的LUN;
在存储服务器中划分LUN,并将LUN映射到对应的应用服务器;
配置paramfile文件并将运行模式设置为多客户端模式;
执行vdbench性能测试并保存vdbench测试结果到对应文件;其中,文件的名称为待测试软件包的版本号。
其中,在得到vdbench测试结果时可以输出该版本软件存储性能测试成功的提示信息(本实施例并不限定提示的具体形式,以及提示信息的具体内容)。
具体过程可以是:(1)根据测试配置文件中的待执行性能测试任务,解析需要准备的LUN,登陆存储服务器划分LUN,并映射到多台应用服务器;(2)vdbench工具部署到多台应用服务器,配置paramfile文件,运行模式为多客户端方式;(3)执行vdbench性能测试;(4)保存vdbench测试结果到文件,文件名对应软件版本号。
当然在该过程中为了避免由于一直不能成功执行待执行性能测试任务而导致的重复执行待执行性能测试任务的死循环,本实施例中可以通过设置最多重复执行的次数即执行阈值,来防止出现重复执行待执行性能测试任务的死循环。本实施例中并不对该执行阈值的具体数值进行限定,例如可以是3。进一步,本实施例也不限定重复执行次数的具体计数方式,例如可以通过计数器实现。可以进一步实现没有人工干预的存储性能测试,提高性能测试效率。当然在执行失败时(即超过重复执行次数超过执行阈值)可以输出该版本软件性能测试失败的提示信息(本实施例并不限定提示的具体形式,以及提示信息的具体内容)。使得用户可以及时了解到性能测试的具体过程。具体的,当执行vdbench性能测试不能得到vdbench测试结果时,将重复执行次数加1,并判断重复执行次数是否超过执行阈值;若超过执行阈值,则性能测试失败;若未超过执行阈值,则重复执行配置paramfile文件并将运行模式设置为多客户端模式;执行vdbench性能测试并保存vdbench测试结果到对应文件的步骤。
基于上述技术方案,本发明实施例提供的存储性能测试方法,通过脚本自动实现各待测试软件包的自动部署以及待执行性能测试任务的自动执行,因此能够自动化测试存储产品不同版本性能,减少人工重复执行每一个版本的性能测试的过程,提高同一测试环境验证不同版本性能的效率。
基于上述实施例,本实施例中为了能够自动化测试存储产品不同版本性能的基础上,实现自动输出性能对比结果,以便解决现有技术中当前版本测试的性能结果不能和前一版本的性能测试结果进行对比的问题。优选的,得到各待测试软件包对应的性能测试结果之后还可以包括:
对各待测试软件包对应的性能测试结果进行统计分析,输出各版本性能差异数据。
具体的,本实施例提供脚本自动实现将各个待测试软件包对应的性能测试结果进行汇总分析,得到待执行性能测试任务中每一个测试性能每个版本对应的测试结果是否存在差异,并将各版本性能差异数据输出,以便用户根据该输出数据即可以快速了解各版本之间的性能差异。
本实施例中并不对统计分析的具体方式,以及各版本性能差异数据的具体输出形式以及输出具体内容进行限定,用户可以自定义输出形式(例如重点标注出差异较大的测试分项)。甚至可以设置差异数据输出的条件,例如某一项测试任务对应的各版本差异数据大于某个差异程度时才能够作为差异数据输出(例如针对I/O大小的性能测试,只有存在不同版本的I/O数值的差值大于I/O阈值时,才会将对应的各版本的I/O数值作为差异数据输出,当然还可以输出具体计算得到的差异程度)。当然也可以是只要存在不同版本针对同一个测试任务对应的测试结果不相同,即可以作为差异数据输出。
具体的,当利用vdbench作为性能测试工具时,对各待测试软件包对应的性能测试结果进行统计分析,输出各版本性能差异数据具体可以包括:
汇总各待测试软件包对应的性能测试结果;
利用paramfile文件中定义的测试场景逐项对比不同版本的性能测试结果中各性能指标的波动值,并汇总得到各版本性能差异文件;
输出各版本性能差异文件。
具体过程可以是:汇总并解析vdbench生成的各版本测试结果;根据paramfile文件中定义的测试场景逐项对比不同版本间的差异。计算性能波动值(如I/O大小、带宽等),输出各版本性能差异文件。即调用vdbench工具进行性能测试,输出性能对比结果。
基于上述技术方案,本发明实施例提供的存储性能测试方法,该方法首先读取测试配置文件,获取需要部署的待测试软件包版本信息以及待执行性能测试任务。循环遍历待测试软件包版本信息,对存储服务器进行相应软件的部署,并在部署成功后执行待执行性能测试任务,待所有版本均执行完待执行性能测试任务后对性能结果统计分析,输出各版本性能差异。因此本发明通过自动化部署存储产品不同软件版本,并自动执行存储性能测试对比各版本性能结果差异(即全过程自动化执行);进而提高存储产品性能对比测试的效率,减少重复工作,提高存储软件不同版本性能对比可信度,为产品研发提高产品效能提供客观可信的数据来源。
下面对本发明实施例提供的存储性能测试装置、应用服务器及计算机可读存储介质进行介绍,下文描述的存储性能测试装置、应用服务器及计算机可读存储介质与上文描述的存储性能测试方法可相互对应参照。
请参考图2,图2为本发明实施例所提供的存储性能测试装置的结构框图;该装置可以包括:
解析模块100,用于解析测试配置文件,获得待测试软件包版本信息以及待执行性能测试任务;
下载模块200,用于根据待测试软件包版本信息下载各版本对应的待测试软件包;
部署模块300,用于将各待测试软件包部署至存储服务器;
性能测试模块400,用于利用性能测试工具对各待测试软件包执行待执行性能测试任务,得到各待测试软件包对应的性能测试结果。
基于上述实施例,部署模块300具体用于获取待测试软件包的md5值;判断待测试软件包的md5值是否与归档服务器上对应软件包的md5值一致;若一致,则在存储服务器中安装待测试软件包;若不一致,则重新下载对应的待测试软件包。
基于上述实施例,部署模块300在存储服务器中安装待测试软件包之后还用于判断待测试软件包是否安装成功;若否,则将重复安装次数加1,并判断重复安装次数是否超过阈值;若超过阈值,则安装失败;若未超过阈值,则执行在存储服务器中安装待测试软件包的步骤。
基于上述任意实施例,性能测试模块400具体用于利用待执行性能测试任务确定需要的LUN;在存储服务器中划分LUN,并将LUN映射到对应的应用服务器;配置paramfile文件并将运行模式设置为多客户端模式;执行vdbench性能测试并保存vdbench测试结果到对应文件;其中,文件的名称为待测试软件包的版本号。
基于上述任意实施例,请参考图3,该装置还可以包括:
性能对比模块500,用于对各待测试软件包对应的性能测试结果进行统计分析,输出各版本性能差异数据。
基于上述实施例,性能对比模块500具体用于汇总各待测试软件包对应的性能测试结果;利用paramfile文件中定义的测试场景逐项对比不同版本的性能测试结果中各性能指标的波动值,并汇总得到各版本性能差异文件;输出各版本性能差异文件。
需要说明的是,基于上述任意实施例,所述装置可以是基于可编程逻辑器件实现的,可编程逻辑器件包括FPGA,CPLD,单片机等。这些可编程逻辑器件可以设置于用于服务器中。
本发明实施例还提供一种应用服务器,包括:存储器,用于存储计算机程序;处理器,用于执行计算机程序时实现上述任意实施例所述的存储性能测试方法的步骤。如处理器用于执行计算机程序时实现解析测试配置文件,获得待测试软件包版本信息以及待执行性能测试任务;根据待测试软件包版本信息下载各版本对应的待测试软件包;将各待测试软件包部署至存储服务器;利用性能测试工具对各待测试软件包执行待执行性能测试任务,得到各待测试软件包对应的性能测试结果。
本发明还提供一种计算机可读存储介质,计算机可读存储介质上存储有计算机程序,计算机程序被处理器执行时实现上述任意实施例所述的存储性能测试方法的步骤。如计算机程序被处理器执行时实现解析测试配置文件,获得待测试软件包版本信息以及待执行性能测试任务;根据待测试软件包版本信息下载各版本对应的待测试软件包;将各待测试软件包部署至存储服务器;利用性能测试工具对各待测试软件包执行待执行性能测试任务,得到各待测试软件包对应的性能测试结果。
该计算机可读存储介质可以包括:U盘、移动硬盘、只读存储器(Read-OnlyMemory,ROM)、随机存取存储器(Random Access Memory,RAM)、磁碟或者光盘等各种可以存储程序代码的介质。
说明书中各个实施例采用递进的方式描述,每个实施例重点说明的都是与其他实施例的不同之处,各个实施例之间相同相似部分互相参见即可。对于实施例公开的装置而言,由于其与实施例公开的方法相对应,所以描述的比较简单,相关之处参见方法部分说明即可。
专业人员还可以进一步意识到,结合本文中所公开的实施例描述的各示例的单元及算法步骤,能够以电子硬件、计算机软件或者二者的结合来实现,为了清楚地说明硬件和软件的可互换性,在上述说明中已经按照功能一般性地描述了各示例的组成及步骤。这些功能究竟以硬件还是软件方式来执行,取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能,但是这种实现不应认为超出本发明的范围。
结合本文中所公开的实施例描述的方法或算法的步骤可以直接用硬件、处理器执行的软件模块,或者二者的结合来实施。软件模块可以置于随机存储器(RAM)、内存、只读存储器(ROM)、电可编程ROM、电可擦除可编程ROM、寄存器、硬盘、可移动磁盘、CD-ROM、或技术领域内所公知的任意其它形式的存储介质中。
以上对本发明所提供的一种存储性能测试方法、装置、应用服务器及计算机可读存储介质进行了详细介绍。本文中应用了具体个例对本发明的原理及实施方式进行了阐述,以上实施例的说明只是用于帮助理解本发明的方法及其核心思想。应当指出,对于本技术领域的普通技术人员来说,在不脱离本发明原理的前提下,还可以对本发明进行若干改进和修饰,这些改进和修饰也落入本发明权利要求的保护范围内。
Claims (10)
1.一种存储性能测试方法,其特征在于,包括:
解析测试配置文件,获得待测试软件包版本信息以及待执行性能测试任务;
根据所述待测试软件包版本信息下载各版本对应的待测试软件包;
将各所述待测试软件包部署至存储服务器;
利用性能测试工具对各所述待测试软件包执行所述待执行性能测试任务,得到各所述待测试软件包对应的性能测试结果。
2.根据权利要求1所述的存储性能测试方法,其特征在于,将任一所述待测试软件包部署至存储服务器,包括:
获取所述待测试软件包的md5值;
判断所述待测试软件包的md5值是否与归档服务器上对应软件包的md5值一致;
若一致,则在存储服务器中安装所述待测试软件包;
若不一致,则重新下载对应的待测试软件包。
3.根据权利要求2所述的存储性能测试方法,其特征在于,所述在存储服务器中安装所述待测试软件包之后,还包括:
判断所述待测试软件包是否安装成功;
若否,则将重复安装次数加1,并判断所述重复安装次数是否超过阈值;若超过所述阈值,则安装失败;若未超过所述阈值,则执行所述在存储服务器中安装所述待测试软件包的步骤。
4.根据权利要求1所述的存储性能测试方法,其特征在于,利用性能测试工具对所述待测试软件包执行所述待执行性能测试任务,包括:
利用所述待执行性能测试任务确定需要的LUN;
在所述存储服务器中划分所述LUN,并将所述LUN映射到对应的应用服务器;
配置paramfile文件并将运行模式设置为多客户端模式;
执行vdbench性能测试并保存vdbench测试结果到对应文件;其中,所述文件的名称为所述待测试软件包的版本号。
5.根据权利要求1-4任一项所述的存储性能测试方法,其特征在于,得到各所述待测试软件包对应的性能测试结果之后,还包括:
对各所述待测试软件包对应的性能测试结果进行统计分析,输出各版本性能差异数据。
6.根据权利要求5所述的存储性能测试方法,其特征在于,对各所述待测试软件包对应的性能测试结果进行统计分析,输出各版本性能差异数据,包括:
汇总各所述待测试软件包对应的性能测试结果;
利用paramfile文件中定义的测试场景逐项对比不同版本的性能测试结果中各性能指标的波动值,并汇总得到各版本性能差异文件;
输出所述各版本性能差异文件。
7.一种存储性能测试装置,其特征在于,包括:
解析模块,用于解析测试配置文件,获得待测试软件包版本信息以及待执行性能测试任务;
下载模块,用于根据所述待测试软件包版本信息下载各版本对应的待测试软件包;
部署模块,用于将各所述待测试软件包部署至存储服务器;
性能测试模块,用于利用性能测试工具对各所述待测试软件包执行所述待执行性能测试任务,得到各所述待测试软件包对应的性能测试结果。
8.根据权利要求7所述的存储性能测试装置,其特征在于,还包括:
性能对比模块,用于对各所述待测试软件包对应的性能测试结果进行统计分析,输出各版本性能差异数据。
9.一种应用服务器,其特征在于,包括:
存储器,用于存储计算机程序;
处理器,用于执行所述计算机程序时实现如权利要求1至6任一项所述的存储性能测试方法的步骤。
10.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质上存储有计算机程序,所述计算机程序被处理器执行时实现如权利要求1至6任一项所述的存储性能测试方法的步骤。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201811172484.2A CN109388535A (zh) | 2018-10-09 | 2018-10-09 | 一种存储性能测试方法、装置及应用服务器 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201811172484.2A CN109388535A (zh) | 2018-10-09 | 2018-10-09 | 一种存储性能测试方法、装置及应用服务器 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN109388535A true CN109388535A (zh) | 2019-02-26 |
Family
ID=65426761
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201811172484.2A Withdrawn CN109388535A (zh) | 2018-10-09 | 2018-10-09 | 一种存储性能测试方法、装置及应用服务器 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN109388535A (zh) |
Cited By (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN110134574A (zh) * | 2019-04-19 | 2019-08-16 | 平安普惠企业管理有限公司 | 一种软件性能测试方法、***、介质及电子设备 |
CN110659167A (zh) * | 2019-09-12 | 2020-01-07 | 苏州浪潮智能科技有限公司 | 一种服务器硬件的测试方法、设备以及存储介质 |
CN110765006A (zh) * | 2019-10-08 | 2020-02-07 | 贝壳技术有限公司 | 流程测试方法和装置、计算机可读存储介质、电子设备 |
CN110837455A (zh) * | 2019-11-07 | 2020-02-25 | 北京宝兰德软件股份有限公司 | 一种基于脚本的应用配置信息获取方法及装置 |
CN111026656A (zh) * | 2019-11-29 | 2020-04-17 | 浪潮商用机器有限公司 | 分布式存储的自动化测试***、方法、设备及存储介质 |
CN111797018A (zh) * | 2020-07-01 | 2020-10-20 | 卡斯柯信号(北京)有限公司 | 一种stp测试环境部署方法及装置 |
CN112035365A (zh) * | 2020-09-01 | 2020-12-04 | 中国银行股份有限公司 | 支持多测试环境的版本部署方法及装置 |
CN112164414A (zh) * | 2020-09-25 | 2021-01-01 | 北京浪潮数据技术有限公司 | 一种测试存储设备稳定性的方法及组件 |
CN112256579A (zh) * | 2020-10-23 | 2021-01-22 | 展讯通信(上海)有限公司 | 自动化集成测试方法、装置、***、设备及介质 |
CN112346975A (zh) * | 2020-11-09 | 2021-02-09 | 广州小鹏自动驾驶科技有限公司 | 一种汽车软件评估装置 |
CN112468355A (zh) * | 2019-09-09 | 2021-03-09 | 北京奇虎科技有限公司 | 一种iot设备管理应用测试方法、装置、电子设备和存储介质 |
-
2018
- 2018-10-09 CN CN201811172484.2A patent/CN109388535A/zh not_active Withdrawn
Cited By (15)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN110134574A (zh) * | 2019-04-19 | 2019-08-16 | 平安普惠企业管理有限公司 | 一种软件性能测试方法、***、介质及电子设备 |
CN112468355A (zh) * | 2019-09-09 | 2021-03-09 | 北京奇虎科技有限公司 | 一种iot设备管理应用测试方法、装置、电子设备和存储介质 |
CN112468355B (zh) * | 2019-09-09 | 2024-01-19 | 北京奇虎科技有限公司 | 一种iot设备管理应用测试方法、装置、电子设备和存储介质 |
CN110659167A (zh) * | 2019-09-12 | 2020-01-07 | 苏州浪潮智能科技有限公司 | 一种服务器硬件的测试方法、设备以及存储介质 |
CN110765006A (zh) * | 2019-10-08 | 2020-02-07 | 贝壳技术有限公司 | 流程测试方法和装置、计算机可读存储介质、电子设备 |
CN110837455A (zh) * | 2019-11-07 | 2020-02-25 | 北京宝兰德软件股份有限公司 | 一种基于脚本的应用配置信息获取方法及装置 |
CN110837455B (zh) * | 2019-11-07 | 2023-04-14 | 北京宝兰德软件股份有限公司 | 一种基于脚本的应用配置信息获取方法及装置 |
CN111026656A (zh) * | 2019-11-29 | 2020-04-17 | 浪潮商用机器有限公司 | 分布式存储的自动化测试***、方法、设备及存储介质 |
CN111797018A (zh) * | 2020-07-01 | 2020-10-20 | 卡斯柯信号(北京)有限公司 | 一种stp测试环境部署方法及装置 |
CN112035365A (zh) * | 2020-09-01 | 2020-12-04 | 中国银行股份有限公司 | 支持多测试环境的版本部署方法及装置 |
CN112035365B (zh) * | 2020-09-01 | 2023-08-18 | 中国银行股份有限公司 | 支持多测试环境的版本部署方法及装置 |
CN112164414B (zh) * | 2020-09-25 | 2023-12-22 | 北京浪潮数据技术有限公司 | 一种测试存储设备稳定性的方法及组件 |
CN112164414A (zh) * | 2020-09-25 | 2021-01-01 | 北京浪潮数据技术有限公司 | 一种测试存储设备稳定性的方法及组件 |
CN112256579A (zh) * | 2020-10-23 | 2021-01-22 | 展讯通信(上海)有限公司 | 自动化集成测试方法、装置、***、设备及介质 |
CN112346975A (zh) * | 2020-11-09 | 2021-02-09 | 广州小鹏自动驾驶科技有限公司 | 一种汽车软件评估装置 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN109388535A (zh) | 一种存储性能测试方法、装置及应用服务器 | |
US10872034B2 (en) | Method, device and computer program product for executing test cases | |
US11720334B2 (en) | Inductive equivalence in machine-based instruction editing | |
CN111124919A (zh) | 一种用户界面的测试方法、装置、设备及存储介质 | |
EP3975482A1 (en) | Quantitative network testing framework for 5g and subsequent generation networks | |
CN106940695B (zh) | 数据源信息的校验方法及装置 | |
US9274930B2 (en) | Debugging system using static analysis | |
CN107329889B (zh) | 一种c编译器自动化测试的方法 | |
CN108446224B (zh) | 移动端上应用程序的性能分析方法、存储介质 | |
CN111679982A (zh) | 一种rest api接口软件自动化测试方法 | |
CN110990289B (zh) | 一种自动提交bug的方法、装置、电子设备及存储介质 | |
CN111400171B (zh) | 一种接口测试方法、***、装置及可读存储介质 | |
CN107590064A (zh) | 一种应用升级测试方法、装置和*** | |
CN113721948A (zh) | 一种数据库升级方法、***及存储介质 | |
CN112084108A (zh) | 一种测试脚本生成方法、装置及相关组件 | |
CN114385493A (zh) | 一种性能测试方法、装置、电子设备及存储介质 | |
CN103019927B (zh) | 一种性能测试方法和*** | |
CN115034165A (zh) | 一种芯片仿真验证方法、***、设备以及存储介质 | |
CN113849484A (zh) | 一种大数据组件升级方法、装置、电子设备及存储介质 | |
CN110674024A (zh) | 电子设备集成测试***及其方法 | |
CN113986263A (zh) | 代码自动化测试方法、装置、电子设备、存储介质 | |
CN113377413A (zh) | 一种基于麒麟桌面操作***的软件批量适配方法 | |
CN109800170B (zh) | 一种基于api测试平台的测试方法,设备及可读存储介质 | |
CN112346994A (zh) | 一种测试信息关联方法、装置、计算机设备及存储介质 | |
CN114490413A (zh) | 测试数据的准备方法及装置、存储介质和电子设备 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
WW01 | Invention patent application withdrawn after publication | ||
WW01 | Invention patent application withdrawn after publication |
Application publication date: 20190226 |