CN112420019B - 设备的测试方法及装置 - Google Patents
设备的测试方法及装置 Download PDFInfo
- Publication number
- CN112420019B CN112420019B CN202011296504.4A CN202011296504A CN112420019B CN 112420019 B CN112420019 B CN 112420019B CN 202011296504 A CN202011296504 A CN 202011296504A CN 112420019 B CN112420019 B CN 112420019B
- Authority
- CN
- China
- Prior art keywords
- tested
- test
- function
- semantic
- testing
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000012360 testing method Methods 0.000 title claims abstract description 323
- 238000013507 mapping Methods 0.000 claims abstract description 59
- 238000000034 method Methods 0.000 claims abstract description 32
- 230000006870 function Effects 0.000 claims description 223
- 238000004590 computer program Methods 0.000 claims description 18
- 230000004044 response Effects 0.000 claims description 15
- 238000010998 test method Methods 0.000 claims description 4
- 230000000694 effects Effects 0.000 abstract description 5
- 238000011161 development Methods 0.000 description 11
- 238000013473 artificial intelligence Methods 0.000 description 10
- 238000010586 diagram Methods 0.000 description 7
- 230000005540 biological transmission Effects 0.000 description 6
- 230000008569 process Effects 0.000 description 4
- 238000004891 communication Methods 0.000 description 3
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 238000012545 processing Methods 0.000 description 2
- 230000008859 change Effects 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 238000010295 mobile communication Methods 0.000 description 1
- 230000001360 synchronised effect Effects 0.000 description 1
- 238000012795 verification Methods 0.000 description 1
- 238000005406 washing Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/01—Assessment or evaluation of speech recognition systems
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F40/00—Handling natural language data
- G06F40/30—Semantic analysis
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/26—Speech to text systems
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Computational Linguistics (AREA)
- Health & Medical Sciences (AREA)
- Audiology, Speech & Language Pathology (AREA)
- Acoustics & Sound (AREA)
- Human Computer Interaction (AREA)
- Multimedia (AREA)
- Theoretical Computer Science (AREA)
- Artificial Intelligence (AREA)
- General Health & Medical Sciences (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Machine Translation (AREA)
Abstract
本发明提供了一种设备的测试方法及装置,包括:获取待测试设备的语义功能测试模板,其中,语义功能测试模板记录了待测试设备的待测试功能和测试语义之间的映射关系;根据测试语义获取测试语料,其中,每个测试语义对应于一组测试语料;使用测试语料对待测试设备的待测试功能进行测试,得到测试结果。通过本发明,解决了设备测试结果准确率较低的问题,进而达到了提高设备测试结果准确率的效果。
Description
技术领域
本发明涉及通信领域,具体而言,涉及一种设备的测试方法及装置。
背景技术
语音控制需要使用带麦克装置设备为前提进行语音采集,才可以进行命令下发,控制设备。然而开发者一般基于web浏览器进行开发,但是web浏览器不具备语音采集功能。对于开发者来说,大多在web浏览器进行设备功能配置,无法进行语音的采集从而控制设备。
例如,开发者需进行设备的语音功能灰度测试,首先开发者需在web端进行数据配置,然后使用灰度应用程序进行语音功能测试。但是对于测试结果,以及数据上线流程,web端无法感知,因此完全依赖开发者人工判断,容易出错,并且对于设备接入流程来说,无法严格控制数据质量。
针对相关技术中,设备测试结果准确率较低的问题,目前尚无存在有效的解决方案。
发明内容
本发明实施例提供了一种设备的测试方法及装置,以至少解决相关技术中设备测试结果准确率较低的问题。
根据本发明的一个实施例,提供了一种设备的测试法,包括:获取待测试设备的语义功能测试模板,其中,所述语义功能测试模板记录了所述待测试设备的待测试功能和测试语义之间的映射关系;根据所述测试语义获取测试语料,其中,每个所述测试语义对应于一组测试语料;使用所述测试语料对所述待测试设备的待测试功能进行测试,得到测试结果。
可选地,使用所述测试语料对所述待测试设备的待测试功能进行测试,包括:将第一组测试语料中的每个测试语料分别依次发送至待测试设备,以控制所述待测试设备根据每个所述测试语料依次执行相应的操作,得到一组操作响应,其中,所述第一组测试语料用于对所述待测试设备的第一待测试功能进行测试,所述待测试功能包括所述第一待测试功能;在所述一组操作响应与第一待测试功能的匹配率大于或等于第一阈值的情况下,确定所述待测试设备的第一待测试功能合格,否则确定所述待测试设备的第一待测试功能不合格。
可选地,在所述获取待测试设备的语义功能测试模板之前,所述方法还包括:确定待测试设备的待测试功能;根据所述待测试功能,在语义语料库中选取测试语义,其中,所述语义语料库中记录了每个测试语义与对应的一组测试语料之间的映射关系;建立所述待测试功能与所述测试语义之间的映射关系,并将所述映射关系存储在所述语义功能测试模板。
可选地,在所述将所述映射关系存储在所述语义功能测试模板之后,所述方法还包括:将所述待测试设备将所述语义功能测试模板进行绑定。
可选地,所述方法还包括以下至少之一:在确定所述待测试设备新增第二待测试功能的情况下,在所述语义语料库中获取与所述第二待测试功能相对应的第一测试语义,并在所述语义功能测试模板创建所述第二待测试功能与所述第一测试语义之间的映射关系;在确定所述待测试设备删除第三待测试功能的情况下,在所述语义功能测试模板中删除所述第三待测试功能与第二测试语义之间的映射关系,其中,所述第二测试语义用于对所述待测试设备的所述第三待测试功能进行测试。
根据本发明的另一个实施例,提供了一种设备的测试***,包括:第一获取模块,用于获取待测试设备的语义功能测试模板,其中,所述语义功能测试模板记录了所述待测试设备的待测试功能和测试语义之间的映射关系;第二获取模块,用于根据所述测试语义获取测试语料,其中,每个所述测试语义对应于一组测试语料;测试模块,用于使用所述测试语料对所述待测试设备的待测试功能进行测试,得到测试结果。
可选地,所述测试模块包括:发送单元,用于将第一组测试语料中的每个测试语料分别依次发送至待测试设备,以控制所述待测试设备根据每个所述测试语料依次执行相应的操作,得到一组操作响应,其中,所述第一组测试语料用于对所述待测试设备的第一待测试功能进行测试,所述待测试功能包括所述第一待测试功能;确定单元,用于在所述一组操作响应与第一待测试功能的匹配率大于或等于第一阈值的情况下,确定所述待测试设备的第一待测试功能合格,否则确定所述待测试设备的第一待测试功能不合格。
可选地,所述***还包括:确定模块,用于在所述获取待测试设备的语义功能测试模板之前,确定待测试设备的待测试功能;选取模块,用于根据所述待测试功能,在语义语料库中选取测试语义,其中,所述语义语料库中记录了每个测试语义与对应的一组测试语料之间的映射关系;建立模块,用于建立所述待测试功能与所述测试语义之间的映射关系,并将所述映射关系存储在所述语义功能测试模板。
根据本发明的又一个实施例,还提供了一种存储介质,所述存储介质中存储有计算机程序,其中,所述计算机程序被设置为运行时执行上述任一项方法实施例中的步骤。
根据本发明的又一个实施例,还提供了一种电子装置,包括存储器和处理器,所述存储器中存储有计算机程序,所述处理器被设置为运行所述计算机程序以执行上述任一项方法实施例中的步骤。
通过本发明,由于通过获取待测试设备的语义功能测试模板,语义功能测试模板记录了待测试设备的待测试功能和测试语义之间的映射关系;根据测试语义获取测试语料,每个测试语义对应于一组测试语料;使用测试语料对待测试设备的待测试功能进行测试,得到测试结果。因此,可以解决设备测试结果准确率较低问题,达到提高设备测试结果准确率的效果。
附图说明
此处所说明的附图用来提供对本发明的进一步理解,构成本申请的一部分,本发明的示意性实施例及其说明用于解释本发明,并不构成对本发明的不当限定。在附图中:
图1是本发明实施例的一种设备的测试方法的移动终端的硬件结构框图;
图2是根据本发明实施例的设备的测试的流程图;
图3是根据本发明可选实施例的***流程示意图;
图4是根据本发明可选实施例的统时序图;
图5是根据本发明实施例的设备的测试***的结构框图。
具体实施方式
下文中将参考附图并结合实施例来详细说明本发明。需要说明的是,在不冲突的情况下,本申请中的实施例及实施例中的特征可以相互组合。
需要说明的是,本发明的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象,而不必用于描述特定的顺序或先后次序。
本申请实施例一所提供的方法实施例可以在移动终端、计算机终端或者类似的运算装置中执行。以运行在移动终端上为例,图1是本发明实施例的一种设备的测试方法的移动终端的硬件结构框图。如图1所示,移动终端10可以包括一个或多个(图1中仅示出一个)处理器102(处理器102可以包括但不限于微处理器MCU或可编程逻辑器件FPGA等的处理装置)和用于存储数据的存储器104,可选地,上述移动终端还可以包括用于通信功能的传输设备106以及输入输出设备108。本领域普通技术人员可以理解,图1所示的结构仅为示意,其并不对上述移动终端的结构造成限定。例如,移动终端10还可包括比图1中所示更多或者更少的组件,或者具有与图1所示不同的配置。
存储器104可用于存储计算机程序,例如,应用软件的软件程序以及模块,如本发明实施例中的设备的测试方法对应的计算机程序,处理器102通过运行存储在存储器104内的计算机程序,从而执行各种功能应用以及数据处理,即实现上述的方法。存储器104可包括高速随机存储器,还可包括非易失性存储器,如一个或者多个磁性存储装置、闪存、或者其他非易失性固态存储器。在一些实例中,存储器104可进一步包括相对于处理器102远程设置的存储器,这些远程存储器可以通过网络连接至移动终端10。上述网络的实例包括但不限于互联网、企业内部网、局域网、移动通信网及其组合。
传输装置106用于经由一个网络接收或者发送数据。上述的网络具体实例可包括移动终端10的通信供应商提供的无线网络。在一个实例中,传输装置106包括一个网络适配器(Network Interface Controller,简称为NIC),其可通过基站与其他网络设备相连从而可与互联网进行通讯。在一个实例中,传输装置106可以为射频(Radio Frequency,简称为RF)模块,其用于通过无线方式与互联网进行通讯。
在本实施例中提供了一种运行于上述移动终端的设备的测试方法,图2是根据本发明实施例的设备的测试的流程图,如图2所示,该流程包括如下步骤:
步骤S202,获取待测试设备的语义功能测试模板,其中,所述语义功能测试模板记录了所述待测试设备的待测试功能和测试语义之间的映射关系;
步骤S204,根据所述测试语义获取测试语料,其中,每个所述测试语义对应于一组测试语料;
步骤S206,使用所述测试语料对所述待测试设备的待测试功能进行测试,得到测试结果。
通过上述步骤,由于通过获取待测试设备的语义功能测试模板,语义功能测试模板记录了待测试设备的待测试功能和测试语义之间的映射关系;根据测试语义获取测试语料,每个测试语义对应于一组测试语料;使用测试语料对待测试设备的待测试功能进行测试,得到测试结果。因此,可以解决设备测试结果准确率较低问题,达到提高设备测试结果准确率的效果。
可选地,上述步骤的执行主体可以为终端等,但不限于此。
作为一个可选的实施方式,上述待测试设备可以是具有语音功能的智能家居设备,如智能电冰箱、智能洗衣机、智能空调等。上述语音功能测试模板可以是预先制定的,该语音待测试功能模板中记录了待测试功能和测试语义之间的映射关系,例如,待测试的功能是控制智能家居设备的开启,那么可以将待测试的功能“控制设备开启”,以及测试语义“开启”之间建立映射关系。上述测试语义用于表示测试设备功能的语义,可以用文字表示,也可以用字符表示,还可以用数字表示,例如,也可以用语义“1”表示测试设备开启功能的语义,那么语义功能测试模板中记录了“控制设备开启”,以及测试语义“1”之间建立映射关系。上述待测试功能和测试语义仅为了举例说明本实施例,具体待测试功能和测试语义可以根据实际情况选取,在此不做限定。
作为一个可选的实施方式,一种语义可以对应于多种语料,例如,对于语料“开启电视机”“打开电视”“播放节目”均可以用于表示控制电视机开启,由此一个测试语义可以对应于多个测试语料。测试预料可以是预先设置好的。根据设备的待测试功能确定出测试语义后,根据测试语义在预先设置好的测试预料中选取与测试语义对应的多个测试预料,使用测试预料对设备的待测试功能进行测试。在本实施例中,通过使用测试语义对设备的待测试功能进行测试,避免了web浏览器不具备语音功能导致的测试结果不准确的问题,达到了提高设备测试结果准确率的技术效果。
可选地,使用所述测试语料对所述待测试设备的待测试功能进行测试,包括:将第一组测试语料中的每个测试语料分别依次发送至待测试设备,以控制所述待测试设备根据每个所述测试语料依次执行相应的操作,得到一组操作响应,其中,所述第一组测试语料用于对所述待测试设备的第一待测试功能进行测试,所述待测试功能包括所述第一待测试功能;在所述一组操作响应与第一待测试功能的匹配率大于或等于第一阈值的情况下,确定所述待测试设备的第一待测试功能合格,否则确定所述待测试设备的第一待测试功能不合格。
作为一个可选的实施方式,可以在web端将测试预料依次发送至待测试设备,以控制待测试设备根据获取到的测试预料执行相应的操作,根据测试结果确定该待测试设备的待测试功能是否合格。在本实施例中,以待测试为电视机,待测试功能为控制电视机开启为例,测试预料为“开启电视机”“打开电视”“播放节目”,开发者可以通过web端将上述三个测试语料依次发送至待测试的电视机,电视机接收到上述预料后执行相应的操作,得到电视机的操作响应。例如,开启电视机。电视机也有可能执行错误的操作或者不执行任何操作。电视机所执行的结果将会反馈给web端,web端将电视机的操作响应与待测试功能进行匹配,若匹配率大于或等于第一阈值,则确定控制电视机开启功能是合格的。在本实施例中,第一阈值可以根据实际情况而定,例如,在上述测试电视机开启功能的例子中,第一阈值可以设置为2,也就是“开启电视机”“打开电视”“播放节目”三个测试预料中,有两个测试预料成功控制电视机开启,则确定电视机的开启功能是合格的,否则确定电视机的开启功能不合格。在本实施例中,通过将测试语料依次控制待测试设备执行相应的操作,根据操作响应以及待测试功能之间的匹配率确定该待测设备的待测试功能是否合格,可以对待测试的每项待测试功能进行全面的测试,提高测试结果的准确率。
可选地,在所述获取待测试设备的语义功能测试模板之前,所述方法还包括:确定待测试设备的待测试功能;根据所述待测试功能,在语义语料库中选取测试语义,其中,所述语义语料库中记录了每个测试语义与对应的一组测试语料之间的映射关系;建立所述待测试功能与所述测试语义之间的映射关系,并将所述映射关系存储在所述语义功能测试模板。
作为一个可选的实施方式,上述语义预料库可以是预先设置的,可以通过网上获取预料,将相同语义的预料与该语义建立映射关系存储在语义预料库中。例如,语料“打开”“开启”“播放”均可以用于表示开启设备,那么可以将语义“开启”与语料“打开”“开启”“播放”之间建立映射关系,并将该映射关系存储在语义语料库中。在本实施例中,通过预先建立语义和语料之间的映射关系,可以在对待测试设备进行测试时,在语义预料库中选取合适的语料作为测试数据,提高测试的效率。
作为一个可选的实施方式,以待测试设备为电视机为例,待测试功能为控制电视机开启,建立待测试功能“控制电视机开启”与语义“开启”之间的映射关系,并将该映射关系存储在语义功能测试模板中,开发者在测试电视机的开启功能时,在语义功能测试模板中查找到对应的语义,由于语义语料库中建立了语义“开启”与语料“打开”“开启”“播放”之间建立映射关系,进而在语义预料库中可以获取到相应的语料,使用该语料可以对电视机的开启功能进行测试。在本实施例中,通过语义预料库中建立语义和预料之间的映射关系,在语义功能测试模板中建立待测试功能与语义之间的关系,可以根据待测试功能获取到相应的语料对待测试设备的待测试功能进行测试,可以达到提高测试效率和准确率的效果。
可选地,在所述将所述映射关系存储在所述语义功能测试模板之后,所述方法还包括:将所述待测试设备将所述语义功能测试模板进行绑定。在本实施例中,由于通常情况下待测试设备的待测试功能可以有很多,可以将所有的待测试功能和相应的语义存储在语义功能测试模板中,将待测试设备和语义功能测试模板进行绑定,待测试设备和语义功能测试模板可以是一对一的关系的,也就是一个待测试设备对应于一个语义功能测试模板,也可以是多对一的关系,也就是多个待测试设备对应于一个语义功能测试模板。通过将待测试设备与语义功能测试模板进行绑定的方式,可以根据待测试设备的身份标识快速的查找到对应的语义功能测试模板,进而方便对待测试设备进行测试,提高测试效率。此外,也可以在测试完成后根据绑定的语义功能测试模板进行校对,提高测试的准确率。
可选地,所述方法还包括以下至少之一:在确定所述待测试设备新增第二待测试功能的情况下,在所述语义语料库中获取与所述第二待测试功能相对应的第一测试语义,并在所述语义功能测试模板创建所述第二待测试功能与所述第一测试语义之间的映射关系;在确定所述待测试设备删除第三待测试功能的情况下,在所述语义功能测试模板中删除所述第三待测试功能与第二测试语义之间的映射关系,其中,所述第二测试语义用于对所述待测试设备的所述第三待测试功能进行测试。
作为一个可选的实施方式,可以根据待测试功能的变化对与待测试设备绑定的语义功能测试模板进行更新。例如,新增或者删除某项待测试功能。在新增待测试功能的情况下,在语义预料库中查找到与新增测试功能对应的测试语义,在语义功能测试模板中增加相应的新增测试功能与该测试语义之间的映射关系。在删除待测试设备的某项待测试功能的情况下,在与该待测试设备绑定的语义功能测试模板中删除该待测试功能以及对应的测试语义之间的映射关系。在本实施例中,可以对于待测试设备相绑定的语义功能测试模板进行实时更新,可以提高对设备测试结果的准确性。
下面通过一个具体实施例说明本申请。
如图3所示是根据本发明可选实施例的***流程示意图,其中,包括如下步骤:
步骤S31,开发者可以通过开发平台进行设备测试,通过开发平台从人工智能平台获取语义语料信息;
步骤S32,开发者可以在开发平台配置测试语义和待测试功能之间的映射关系,并将该映射关系同步到人工智能平台;
步骤S33,开发者在开发平台发起设备绑定,并调用物联云绑定设备;
步骤S34,开发者在开发平台选择语义对应的语料,进行语料下发,实现设备的语音功能控制;
步骤S35,人工智能平台拿到语料,匹配对应的设备功能,组装成命令调用物联云进行设备控制;
步骤S36,人工智能平台将控制结果同步到开发平台,使开发平台完成语义功能验证流程。
如图4所示是根据本发明可选实施例的***时序图,其中,包括如下步骤:
步骤S41,将人工智能平台上分配的语义语料映射关系到人工智能平台;
步骤S42,基于应用类型配置语义与模板功能映射关系,可以制定语义功能测试模板;
步骤S43,开发者可以配置型号功能,开发平台监测到型号功能变化时,自动匹配功能与语义映射关系,并同步到人工智能平台;
步骤S44,启动语义在线测试,通过开发平台调用物联云接口实现web端设备绑定,以满足接下来的设备控制;
步骤S45,开发者选择某一个语义下的某一个语料,进行测试;开发平台可以将语料下发到人工智能平台;
步骤S46,人工智能平台根据语料匹配到语义,再匹配到功能命令,调用物联云接口下发功能命令;
步骤S47,物联云返回命令执行结果到人工智能凭他,同步返回到开发平台。
通过本申请,简化了开发者进行数据的繁琐配置,减少了在web端与设备切换使用的频率;在线化测试数据,在线化判断测试结果;规范、完善设备接入流程,提高可测试设备功能的效率,提高了测试结果的准确率。
通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到根据上述实施例的方法可借助软件加必需的通用硬件平台的方式来实现,当然也可以通过硬件,但很多情况下前者是更佳的实施方式。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质(如ROM/RAM、磁碟、光盘)中,包括若干指令用以使得一台终端设备(可以是手机,计算机,服务器,或者网络设备等)执行本发明各个实施例所述的方法。
在本实施例中还提供了一种设备的测试***,该***用于实现上述实施例及优选实施方式,已经进行过说明的不再赘述。如以下所使用的,术语“模块”可以实现预定功能的软件和/或硬件的组合。尽管以下实施例所描述的装置较佳地以软件来实现,但是硬件,或者软件和硬件的组合的实现也是可能并被构想的。
图5是根据本发明实施例的设备的测试***的结构框图,如图5所示,该***包括:第一获取模块52,用于获取待测试设备的语义功能测试模板,其中,所述语义功能测试模板记录了所述待测试设备的待测试功能和测试语义之间的映射关系;第二获取模块54,用于根据所述测试语义获取测试语料,其中,每个所述测试语义对应于一组测试语料;测试模块56,用于使用所述测试语料对所述待测试设备的待测试功能进行测试,得到测试结果。
可选地,所述测试模块包括:发送单元,用于将第一组测试语料中的每个测试语料分别依次发送至待测试设备,以控制所述待测试设备根据每个所述测试语料依次执行相应的操作,得到一组操作响应,其中,所述第一组测试语料用于对所述待测试设备的第一待测试功能进行测试,所述待测试功能包括所述第一待测试功能;确定单元,用于在所述一组操作响应与第一待测试功能的匹配率大于或等于第一阈值的情况下,确定所述待测试设备的第一待测试功能合格,否则确定所述待测试设备的第一待测试功能不合格。
可选地,所述***还包括:确定模块,用于在所述获取待测试设备的语义功能测试模板之前,确定待测试设备的待测试功能;选取模块,用于根据所述待测试功能,在语义语料库中选取测试语义,其中,所述语义语料库中记录了每个测试语义与对应的一组测试语料之间的映射关系;建立模块,用于建立所述待测试功能与所述测试语义之间的映射关系,并将所述映射关系存储在所述语义功能测试模板。
可选地,上述***还用于在所述将所述映射关系存储在所述语义功能测试模板之后,将所述待测试设备将所述语义功能测试模板进行绑定。
可选地,上述***还用于在确定所述待测试设备新增第二待测试功能的情况下,在所述语义语料库中获取与所述第二待测试功能相对应的第一测试语义,并在所述语义功能测试模板创建所述第二待测试功能与所述第一测试语义之间的映射关系;在确定所述待测试设备删除第三待测试功能的情况下,在所述语义功能测试模板中删除所述第三待测试功能与第二测试语义之间的映射关系,其中,所述第二测试语义用于对所述待测试设备的所述第三待测试功能进行测试。
需要说明的是,上述各个模块是可以通过软件或硬件来实现的,对于后者,可以通过以下方式实现,但不限于此:上述模块均位于同一处理器中;或者,上述各个模块以任意组合的形式分别位于不同的处理器中。
本发明的实施例还提供了一种存储介质,该存储介质中存储有计算机程序,其中,该计算机程序被设置为运行时执行上述任一项方法实施例中的步骤。
可选地,在本实施例中,上述存储介质可以被设置为存储用于执行以下步骤的计算机程序:
S1,获取待测试设备的语义功能测试模板,其中,所述语义功能测试模板记录了所述待测试设备的待测试功能和测试语义之间的映射关系;
S2,根据所述测试语义获取测试语料,其中,每个所述测试语义对应于一组测试语料;
S3,使用所述测试语料对所述待测试设备的待测试功能进行测试,得到测试结果。
可选地,存储介质还被设置为存储用于执行以下步骤的计算机程序:
可选地,在本实施例中,上述存储介质可以包括但不限于:U盘、只读存储器(Read-Only Memory,简称为ROM)、随机存取存储器(Random Access Memory,简称为RAM)、移动硬盘、磁碟或者光盘等各种可以存储计算机程序的介质。
本发明的实施例还提供了一种电子装置,包括存储器和处理器,该存储器中存储有计算机程序,该处理器被设置为运行计算机程序以执行上述任一项方法实施例中的步骤。
可选地,上述电子装置还可以包括传输设备以及输入输出设备,其中,该传输设备和上述处理器连接,该输入输出设备和上述处理器连接。
可选地,在本实施例中,上述处理器可以被设置为通过计算机程序执行以下步骤:
S1,获取待测试设备的语义功能测试模板,其中,所述语义功能测试模板记录了所述待测试设备的待测试功能和测试语义之间的映射关系;
S2,根据所述测试语义获取测试语料,其中,每个所述测试语义对应于一组测试语料;
S3,使用所述测试语料对所述待测试设备的待测试功能进行测试,得到测试结果。
可选地,本实施例中的具体示例可以参考上述实施例及可选实施方式中所描述的示例,本实施例在此不再赘述。
显然,本领域的技术人员应该明白,上述的本发明的各模块或各步骤可以用通用的计算装置来实现,它们可以集中在单个的计算装置上,或者分布在多个计算装置所组成的网络上,可选地,它们可以用计算装置可执行的程序代码来实现,从而,可以将它们存储在存储装置中由计算装置来执行,并且在某些情况下,可以以不同于此处的顺序执行所示出或描述的步骤,或者将它们分别制作成各个集成电路模块,或者将它们中的多个模块或步骤制作成单个集成电路模块来实现。这样,本发明不限制于任何特定的硬件和软件结合。
以上所述仅为本发明的优选实施例而已,并不用于限制本发明,对于本领域的技术人员来说,本发明可以有各种更改和变化。凡在本发明的原则之内,所作的任何修改、等同替换、改进等,均应包含在本发明的保护范围之内。
Claims (8)
1.一种设备的测试方法,其特征在于,包括:
获取待测试设备的语义功能测试模板,其中,所述语义功能测试模板记录了所述待测试设备的待测试功能和测试语义之间的映射关系;
根据所述测试语义获取测试语料,其中,每个所述测试语义对应于一组测试语料;
使用所述测试语料对所述待测试设备的待测试功能进行测试,得到测试结果;
使用所述测试语料对所述待测试设备的待测试功能进行测试,包括:将第一组测试语料中的每个测试语料分别依次发送至待测试设备,以控制所述待测试设备根据每个所述测试语料依次执行相应的操作,得到一组操作响应,其中,所述第一组测试语料用于对所述待测试设备的第一待测试功能进行测试,所述待测试功能包括所述第一待测试功能;在所述一组操作响应与第一待测试功能的匹配率大于或等于第一阈值的情况下,确定所述待测试设备的第一待测试功能合格,否则确定所述待测试设备的第一待测试功能不合格。
2.根据权利要求1所述的方法,其特征在于,在所述获取待测试设备的语义功能测试模板之前,所述方法还包括:
确定待测试设备的待测试功能;
根据所述待测试功能,在语义语料库中选取测试语义,其中,所述语义语料库中记录了每个测试语义与对应的一组测试语料之间的映射关系;
建立所述待测试功能与所述测试语义之间的映射关系,并将所述映射关系存储在所述语义功能测试模板。
3.根据权利要求2所述的方法,其特征在于,在所述将所述映射关系存储在所述语义功能测试模板之后,所述方法还包括:
将所述待测试设备将所述语义功能测试模板进行绑定。
4.根据权利要求3所述的方法,其特征在于,所述方法还包括以下至少之一:
在确定所述待测试设备新增第二待测试功能的情况下,在所述语义语料库中获取与所述第二待测试功能相对应的第一测试语义,并在所述语义功能测试模板创建所述第二待测试功能与所述第一测试语义之间的映射关系;
在确定所述待测试设备删除第三待测试功能的情况下,在所述语义功能测试模板中删除所述第三待测试功能与第二测试语义之间的映射关系,其中,所述第二测试语义用于对所述待测试设备的所述第三待测试功能进行测试。
5.一种设备的测试***,其特征在于,包括:
第一获取模块,用于获取待测试设备的语义功能测试模板,其中,所述语义功能测试模板记录了所述待测试设备的待测试功能和测试语义之间的映射关系;
第二获取模块,用于根据所述测试语义获取测试语料,其中,每个所述测试语义对应于一组测试语料;
测试模块,用于使用所述测试语料对所述待测试设备的待测试功能进行测试,得到测试结果;
所述测试模块包括:发送单元,用于将第一组测试语料中的每个测试语料分别依次发送至待测试设备,以控制所述待测试设备根据每个所述测试语料依次执行相应的操作,得到一组操作响应,其中,所述第一组测试语料用于对所述待测试设备的第一待测试功能进行测试,所述待测试功能包括所述第一待测试功能;确定单元,用于在所述一组操作响应与第一待测试功能的匹配率大于或等于第一阈值的情况下,确定所述待测试设备的第一待测试功能合格,否则确定所述待测试设备的第一待测试功能不合格。
6.根据权利要求5所述的***,其特征在于,所述***还包括:
确定模块,用于在所述获取待测试设备的语义功能测试模板之前,确定待测试设备的待测试功能;
选取模块,用于根据所述待测试功能,在语义语料库中选取测试语义,其中,所述语义语料库中记录了每个测试语义与对应的一组测试语料之间的映射关系;
建立模块,用于建立所述待测试功能与所述测试语义之间的映射关系,并将所述映射关系存储在所述语义功能测试模板。
7.一种存储介质,其特征在于,所述存储介质中存储有计算机程序,其中,所述程序可被终端设备或计算机运行时执行所述权利要求1至4任一项中所述的方法。
8.一种电子装置,包括存储器和处理器,其特征在于,所述存储器中存储有计算机程序,所述处理器被设置为运行所述计算机程序以执行所述权利要求1至4任一项中所述的方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202011296504.4A CN112420019B (zh) | 2020-11-18 | 2020-11-18 | 设备的测试方法及装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202011296504.4A CN112420019B (zh) | 2020-11-18 | 2020-11-18 | 设备的测试方法及装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN112420019A CN112420019A (zh) | 2021-02-26 |
CN112420019B true CN112420019B (zh) | 2023-02-03 |
Family
ID=74773462
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202011296504.4A Active CN112420019B (zh) | 2020-11-18 | 2020-11-18 | 设备的测试方法及装置 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN112420019B (zh) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN115146650B (zh) * | 2022-06-27 | 2023-06-30 | 西安羚控电子科技有限公司 | 一种基于语义识别的试验过程创建方法及*** |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106202045A (zh) * | 2016-07-08 | 2016-12-07 | 成都之达科技有限公司 | 基于车联网的专项语音识别方法 |
CN110221969A (zh) * | 2019-05-21 | 2019-09-10 | 深圳壹账通智能科技有限公司 | 一种页面功能测试方法及相关装置 |
Family Cites Families (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US9734821B2 (en) * | 2015-06-30 | 2017-08-15 | International Business Machines Corporation | Testing words in a pronunciation lexicon |
US10204033B2 (en) * | 2017-03-11 | 2019-02-12 | Wipro Limited | Method and system for semantic test suite reduction |
US10748526B2 (en) * | 2018-08-28 | 2020-08-18 | Accenture Global Solutions Limited | Automated data cartridge for conversational AI bots |
CN111145737B (zh) * | 2018-11-06 | 2022-07-01 | 中移(杭州)信息技术有限公司 | 语音测试方法、装置和电子设备 |
CN109637536B (zh) * | 2018-12-27 | 2020-11-13 | 苏州思必驰信息科技有限公司 | 一种自动化识别语义准确性的方法及装置 |
CN111488436B (zh) * | 2019-01-29 | 2023-05-05 | 阿里巴巴集团控股有限公司 | 多轮对话模型的生成方法、测试方法、装置及电子设备 |
US10997965B2 (en) * | 2019-04-02 | 2021-05-04 | Accenture Global Solutions Limited | Automated voice processing testing system and method |
CN110415681B (zh) * | 2019-09-11 | 2022-02-18 | 北京声智科技有限公司 | 一种语音识别效果测试方法及*** |
CN111079441A (zh) * | 2019-12-16 | 2020-04-28 | 深圳市三宝创新智能有限公司 | 一种知音语义*** |
CN111488735B (zh) * | 2020-04-09 | 2023-10-27 | 中国银行股份有限公司 | 测试语料生成方法、装置及电子设备 |
CN111916088B (zh) * | 2020-08-12 | 2022-09-27 | 腾讯科技(深圳)有限公司 | 一种语音语料的生成方法、设备及计算机可读存储介质 |
-
2020
- 2020-11-18 CN CN202011296504.4A patent/CN112420019B/zh active Active
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106202045A (zh) * | 2016-07-08 | 2016-12-07 | 成都之达科技有限公司 | 基于车联网的专项语音识别方法 |
CN110221969A (zh) * | 2019-05-21 | 2019-09-10 | 深圳壹账通智能科技有限公司 | 一种页面功能测试方法及相关装置 |
Also Published As
Publication number | Publication date |
---|---|
CN112420019A (zh) | 2021-02-26 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN106776294B (zh) | 安卓手机自动化测试方法和*** | |
CN110493812B (zh) | 配网测试的处理方法、装置、***、处理器及主控设备 | |
CN108712300A (zh) | 一种智能设备配网的自动化测试方法及*** | |
CN110032507A (zh) | 应用程序测试方法、装置、***、电子设备及存储介质 | |
CN109450708A (zh) | 一种Nginx动态配置方法及*** | |
CN108228444A (zh) | 一种测试方法和装置 | |
CN104427547A (zh) | 业务和网络关联测试方法、装置及*** | |
CN112420019B (zh) | 设备的测试方法及装置 | |
CN110019916A (zh) | 基于用户画像的事件处理方法、装置、设备和存储介质 | |
CN115391219A (zh) | 测试用例生成方法、装置、电子设备及存储介质 | |
CN113452556A (zh) | 产品技能的配置方法、装置、存储介质及电子装置 | |
CN113434422A (zh) | 虚拟设备的调试方法及装置、虚拟设备的调试*** | |
CN110990381B (zh) | 服务器的处理方法及装置、存储介质和电子装置 | |
CN113434184A (zh) | 设备升级方法、装置、存储介质及电子装置 | |
CN210016474U (zh) | 配网测试控制设备及*** | |
CN116074228A (zh) | 网卡测试方法、装置、存储介质及电子设备 | |
CN116150029A (zh) | 一种贷款***逾期跑批自动化测试方法及装置 | |
CN115442266A (zh) | 网关性能测试方法、装置、存储介质及电子装置 | |
CN112994973B (zh) | 物联网设备的自动化批量测试方法及装置、计算机可读存储介质 | |
CN114676043A (zh) | 智能语音模组的测试方法和装置、存储介质及电子装置 | |
CN112698948A (zh) | 产品资源的获取方法及装置、存储介质、电子装置 | |
CN113110991A (zh) | 页面元素的定位方法及装置、存储介质及电子装置 | |
CN113110982A (zh) | 数据访问层验证方法及装置、存储介质及电子装置 | |
CN112328439A (zh) | 硬件设备的稳定性测试方法和*** | |
CN112650815A (zh) | 环境数据的同步方法及装置、存储介质及电子装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |