CN105095067A - 用户界面元素对象识别及自动化测试的方法和装置 - Google Patents

Abstract

本发明公开了用户界面元素对象识别及自动化测试的方法和装置；其中用户界面元素对象识别方法包括：对用户界面进行解析，获取元素对象的属性信息；根据设定分类规则对所述元素对象进行分类，以确定所述元素的类别；存储所述分类后的元素对象，完成用户界面元素的识别。本发明实施例方便了元素对象的快速准确识别及统一管理，在无需人为参与的情况下实现了用户界面元素对象的自动识别，为用户界面自动化测试提供支持。

Description

用户界面元素对象识别及自动化测试的方法和装置

技术领域

本发明涉及用户界面测试技术，具体涉及一种用户界面元素对象识别及自动化测试的方法和装置。

背景技术

UI(UserInterface，用户界面)自动化测试的任务是找到页面元素对象并获取元素对象的基本属性及方法，然后模拟人工测试步骤对元素对象进行操作。UI自动化测试分为三个部分：页面元素的识别与定位、元素信息获取、业务逻辑自动化。目前，UI自动化测试过程中对元素信息获取和业务逻辑自动化两部分都已经有比较好的技术支持，但页面元素的识别与定位仍然需要人工来完成，致使UI自动化测试无法形成通用的工具，也就无法实现真正的自动化。

因此，自动识别与定位页面元素，自动构建页面元素对象库，以保证UI功能测试形成一个良性的闭环，是目前UI自动化测试的一项重要挑战。

现有技术中，HTML(HypertextMarkupLanguage，超文本标记语言)Parser是一个纯的Java写的HTML解析的库，是一种主要用于html网页转换以及网页内容抽取的技术。HTMLParser是通过一个URL(UniformResourceLocator，统一资源定位符)地址或一个保存有网页内容的字符串来初始化解析器对象，或者使用静态函数来生成一个解析器对象。解析器对象的存储结构为一树型结构，树中节点Node是信息保存的数据类型基础。HTMLParser对解析器对象中的每一个节点Node按照深度优先算法进行遍历，在遍历的过程中通过Filter或Visitor两种方法提取网页特定节点，其中，Filter是根据特定条件过滤提取出需要的节点再进行处理，Visitor则是遍历内容树的每一个节点对于符合条件的节点进行处理。

发明人在实现本发明过程中发现，现有技术HTMLParser至少存在以下缺点：

1)以节点为数据类型基础存储页面元素，在使用元素时，需要先根据条件对元素进行过滤，得到所需元素对象，然后才能进行属性信息的获取和操作元素。该过程不能快速的识别元素的类型，以获取指定类型的元素属性信息并对元素进行操作。

2)定位元素对象是通过元素的唯一的属性信息进行的。对于HTML页面来说，元素的基本属性中只有其ID值是唯一的，但现实中很多页面元素无此属性(ID值)，这导致精准的定位每一个元素比较困难，很容易出现元素无法定位的情况。

3)只支持对HTML页面的解析，并没有构建对象库的逻辑。

依上述描述可见，现有技术HTMLParser无法有效的完成页面元素的自动识别与定位，以及无法自动构建页面元素对象库，因此无法实现真正的UI自动化测试。

发明内容

鉴于上述问题，提出了本发明以便提供一种克服上述问题或者至少部分地解决上述问题的用户界面元素对象识别及自动化测试的方法和相应的用户界面元素对象识别及自动化测试的装置。

依据本发明的第一个方面，提供了一种用户界面自动化测试的方法，其包括：对用户界面进行解析，获取元素对象的属性信息；根据设定分类规则对所述元素对象进行分类，以确定所述元素对象的类别；存储分类后的所述元素对象，完成用户界面元素对象识别。

依据本发明的第二个方面，提供了一种实现用户界面元素对象识别装置，其包括：解析获取单元，适于对用户界面进行解析，获取元素对象的属性信息；分类单元，适于根据设定分类规则对所述获取的元素对象进行分类，以确定所述元素对象的类别；存储单元，适于存储分类后的所述元素对象，完成用户界面元素对象识别。

依据本发明的第三个方面，提供了一种用户界面自动化测试的方法，其包括：对用户界面进行解析，获取元素对象的属性信息；根据设定分类规则对所述元素对象进行分类存储，得到用户界面元素对象的原始对象库；按照设定规则将所述原始对象库转换成与用户界面自动化框架匹配的子对象库；利用所述子对象库生成可执行的Java页面类代码；根据测试逻辑设计代码逻辑，操作所述可执行的Java页面类，执行用户界面自动化测试。

依据本发明的第四个方面，提供了一种用户界面自动化测试的装置，其包括：解析获取单元，适于对用户界面进行解析，获取元素对象的属性信息；分类存储单元，适于根据设定分类规则对所述获取的元素对象进行分类存储，得到用户界面元素对象的原始对象库；转换单元，适于按照设定规则将所述原始对象库转换成与用户界面自动化框架匹配的子对象库；代码生成单元，适于利用所述子对象库生成可执行的Java页面类代码；测试单元，适于根据测试逻辑设计代码逻辑操作所述可执行的Java页面类，执行用户界面自动化测试。

本发明实施例通过对用户界面解析，获取用户界面所有元素对象的属性信息，并对元素对象按照设定分类规则进行分类存储，方便了元素对象的快速准确识别及统一管理。本方案在无需人为参与的情况下实现了用户界面元素对象的自动识别，为用户界面自动化测试提供支持。

同时，本发明实施例将分类存储后得到的原始对象库按照设定规则转换成与用户界面自动化框架匹配的子对象库，再利用所述子对象库生成可执行的Java页面类代码，实现了用户界面进行自动化测试过程中的对象类库的自动编写，不需要人工编写对象类库，从而有效缩短自动化代码的构建时间，节省人力资源。

上述说明仅是本发明技术方案的概述，为了能够更清楚了解本发明的技术手段，而可依照说明书的内容予以实施，并且为了让本发明的上述和其它目的、特征和优点能够更明显易懂，以下特举本发明的具体实施方式。

附图说明

通过阅读下文优选实施方式的详细描述，各种其他的优点和益处对于本领域普通技术人员将变得清楚明了。说明书附图仅用于示出优选实施方式的目的，而并不认为是对本发明的限制。而且在整个附图中，用相同的参考符号表示相同的部件。在附图中：

图1示出了根据本发明实施例一用户界面元素对象识别方法流程图；

图2示出了根据本发明实施例一获取元素对象Xpath信息示意图；

图3示出了根据本发明实施例二用户界面元素对象识别装置结构示意图；

图4示出了根据本发明实施例三用户界面自动化测试的方法流程图；

图5示出了根据本发明实施例四原始对象库转换为子对象库以及根据子对象库生成页面类代码示意图；

图6示出了根据本发明实施例五用户界面自动化测试的装置结构示意图。

具体实施方式

下面将参照附图更详细地描述本公开的示例性实施例。虽然附图中显示了本公开的示例性实施例，然而应当理解，可以以各种形式实现本公开而不应被这里阐述的实施例所限制。相反，提供这些实施例是为了能够更透彻地理解本公开，并且能够将本公开的范围完整的传达给本领域的技术人员。

实施例一、用户界面元素对象识别方法，参见图1，本实施例所述用户界面元素对象识别方法具体包括：

S100、对用户界面进行解析，获取元素对象的属性信息；

本实施例对给定用户界面进行解析时需获取元素对象的属性信息，本实施例所述元素对象的属性信息包括三类：元素对象的基本属性、元素对象的自定义属性、元素对象在文档中的路径信息，即Xpath信息。对于HTML元素对象，其本身包含基本属性和自定义属性，其中，元素对象的基本属性包括Id,Name,Class,Css,Value等；元素对象的自定义属性一般是为了满足开发者的某些特殊需求的“键-值”,例如myid＝”123”,“键”可以任意起名，只要不与基本属性名称相同即可。需要说明的是，元素对象的自定义属性由于随意性较大，不适用于元素的识别和定位，因此在本实施例对元素对象进行定位及识别过程中不会使用到。

其中，对于HTML用户界面，元素对象的基本属性中只有其ID值是唯一的。但现实中很多元素对象无此属性，如果单纯通过元素对象的ID对元素对象进行定位，将导致元素对象无法定位的情况发生。而对于一个元素对象来说，它在页面中的路径也是唯一存在的，因此，本发明实施例在对HTML用户界面进行解析时，除了获取元素对象的基本属性外，同时获取了元素对象的Xpath信息，有效克服了元素对象无法定位的情况发生。

其中，元素对象的基本属性以及自定义属性，都可以在获取元素对象之后直接提取。而元素对象在文档中的Xpath信息却不能直观的得到，需要通过计算获得，本发明实施例提供的获取元素对象Xpath信息的方法包括如下操作：

S1100：对用户界面的DOM(DocumentObjectModel，文件对象模型)树结构进行遍历及标记，得到带有标记的DOM树结构；

其中，本实施例对DOM树结构遍历可以采用标签匹配的方法，根据深度优先算法进行遍历。对于同一层级的兄弟结点，按照读取顺序依次从左向右存储，并对每一个结点进行数字序号标记，例如，从数字1开始，每次递增1，这样就获得带有标记的DOM树结构。

可以理解的是，上述描述的方法仅为发明人所列举的一种实施例，本发明实施例并不局限于此。

S1110：对所述带有标记的DOM树的结点和标记按照键值对的形式顺序存储，得到所述元素对象的Xpath信息。

参见图2所示，图2中左侧为对HTML用户界面进行解析获得的部分元素对象的DOM树结构，该DOM树结构为被遍历及标记后的带有标记的DOM树结构，图2中右侧表格所示为根据图2中左侧的DOM树结构获得的以键值对的形式存储的元素对象“a”和元素对象“img”的Xpath信息。

S110、根据设定分类规则对所述元素对象进行分类，以确定所述元素对象的类别；

本实施例对获取的元素对象按照设定的分类规则进行分类，其中，设定的分类规则的一种实施例如下表1所示：

表1

对象类别	包含的常用元素对象
		静态文本对象	p、li、title、label、h、pre
输入框对象	textarea、<input type＝’text’>、<input type＝’password’>
		按钮对象	<input type＝’button’>、<input type＝’submit’>
超链接对象	a
		单选按钮对象	<input type＝’radio’>
复选按钮对象	<input type＝’checkbox’>
		图片对象	img
表格对象	table

S120、存储分类后的所述元素对象，完成用户界面元素对象识别。

本实施例通过上述表1的分类规则，可以确定步骤S100中所获取的所有元素对象的类别，从而可以对元素对象分类存储，以方便对元素对象进行查找及统一管理。

本实施例通过对用户界面解析，获取元素对象的属性信息，并对元素对象进行分类存储，完成了用户界面元素对象的自动识别。其中，本实施例分类存储的所述元素对象包含如下信息：tagName和type，还包括如下任一个或多个：Id、Name、Class、Css、Value、Xpath、Other。

一种实施例对获取的元素对象的属性信息以及类别采用如下表2格式存储。

表2

tagName

Id

Name

Class

Css

Value

Xpath

Other

type

表2中各字段含义如下：

a.tagName：标签名称，例如a,div等，必须存在；

b.Id：元素对象的唯一标识，存在形式Id＝XXX；

c.Name：元素对象名称，存在形式Name＝XXX；

d.Class：元素对象的类名，存在形式Class＝XXX；

e.Css：元素对象的样式类型，存在形式Css＝XXX；

f.Value：指元素对象的Value对应的值，或者文本对象的内容，静态对象的文本值，链接对象的文本值；

g.Xpath：元素对象在页面中的路径信息，通过计算获得；

h.Other：元素对象自定义属性，以键值对的形式存在；

i.type：是指表2中规定的元素对象的类别，必须填写，即值必须存在；

本实施例识别元素对象还包括：选择元素对象定位方式定位元素对象，其中选择定位方式的方法包括：在保证所选择的属性的值对于整个页面是唯一的情况下，按照Id>Name>Class>Xpath先后顺序选择属性作为元素定位方式。

元素的定位要具有唯一性，因此在确定元素定位方式时，首先要判断该属性的值是否对于整个页面是唯一的，然后依次按照Id>Name>Class>Xpath先后顺序选择定位方式。也就是优先选择的属性为Id，如果Id不存在，则选择属性Name，如果Name不存在或不唯一，则再选择属性Class，如果Class不存在或不唯一，则再选择Xpath。需要说明的是，在其他属性值都不能唯一定位元素的时候，才选择Xpath定位，是因为在定位元素时使用Xpath的效率比较低。

本发明实施例通过对用户界面解析，获取用户界面所有元素对象的属性信息，并对元素对象按照设定分类规则进行分类存储，方便了元素对象的快速准确识别及统一管理。本方案在无需人为参与的情况下实现了用户界面元素对象的自动识别，为用户界面自动化测试提供支持。

实施例二、用户界面元素对象识别装置，下面结合图3对本实施例的装置进行说明。

图3所示的装置主要包括：解析获取单元300、分类单元310、存储单元320。其中分类单元310与解析获取单元300及存储单元320相连。其中，解析获取单元300进一步包括：遍历及标记子单元3010及存储子单元3020。

其中，解析获取单元300，主要适于对用户界面进行解析，获取元素对象的属性信息；

本实施例解析获取单元300对给定用户界面进行解析时，获取元素对象的属性信息，本实施例所述元素对象的属性信息包括三类：元素对象的基本属性、元素对象的自定义属性、元素对象在文档中的路径信息，即Xpath信息。对于HTML元素对象，其本身包含基本属性和自定义属性，其中，元素对象的基本属性包括Id,Name,Class,Css,Value等；元素对象的自定义属性一般是为了满足开发者的某些特殊需求的“键-值”,例如myid＝”123”,“键”可以任意起名，只要不与基本属性名称相同即可。需要说明的是，元素对象的自定义属性由于随意性较大，不适用于元素的识别和定位，因此在本实施例对元素对象进行定位及识别过程中不会使用到。

对于一个元素对象来说，它在页面中的路径是唯一存在的，因此，本发明实施例在对用户界面进行解析时，解析获取单元400除了获取元素对象的基本属性外，同时获取了元素对象的Xpath信息，实现了有效克服元素对象无法定位的情况发生。

其中，元素对象的基本属性以及自定义属性，都可以在获取元素对象之后直接提取。而元素对象在文档中的Xpath信息却不能直观的得到，需要通过计算获得，本发明实施例所述解析获取单元300进一步包括遍历及标记子单元3010及存储子单元3020，用于获取元素对象的Xpath信息，

其中，遍历及标记子单元3010，主要适于对用户界面的DOM树结构进行遍历及标记，得到带有标记的DOM树结构；对DOM树结构遍历可以采用标签匹配的方法，根据深度优先算法进行遍历。对于同一层级的兄弟结点，按照读取顺序依次从左向右存储，并对每一个结点进行数字序号标记，例如，从数字1开始，每次递增1，这样就获得带有标记的DOM树结构。

可以理解的是，上述描述的方法仅为发明人所列举的一种实施例，本发明实施例并不局限于此。

其中，存储子单元3020，主要适于对所述带有标记的DOM树的结点和标记按照键值对的形式顺序存储，得到所述元素对象的Xpath信息。

其中，分类单元310，主要适于根据设定分类规则对所述获取的元素对象进行分类，以确定所述元素对象的类别；

本实施例所述分类存储单元310对元素对象的分类规则参见表1中所示，通过表1的分类规则，可以确定解析获取单元300获取的元素对象的类别，只有确定元素对象的类别，才能确定元素对象都包含哪些属性以及可以对元素对象进行哪些操作。

其中，存储单元320，主要适于存储分类后的所述元素对象，完成用户界面元素对象识别。

本实施例对获取的元素对象的属性信息以及类别可采用表2格式存储。此处不再赘述。

本实施例对于已经识别的元素对象按照分类规则采用分类存储方式，方便了元素对象的快速准确识别及统一管理，整个元素对象识别过程无需人为参与，为用户界面的自动化测试提供了支持。

实施例三、用户界面自动化测试的方法。下面结合图4对本实施例的方法进行说明。

图1中，S400、对用户界面进行解析，获取元素对象的属性信息；

本实施例对给定用户界面进行解析时需获取元素对象的属性信息，本实施例所述元素对象的属性信息包括三类：元素对象的基本属性、元素对象的自定义属性、元素对象在文档中的路径信息，即Xpath信息。对于HTML元素对象，其本身包含基本属性和自定义属性，其中，元素对象的基本属性包括Id,Name,Class,Css,Value等；元素对象的自定义属性一般是为了满足开发者的某些特殊需求的“键-值”,例如myid＝”123”,“键”可以任意起名，只要不与基本属性名称相同即可。需要说明的是，元素对象的自定义属性由于随意性较大，不适用于元素的识别和定位，因此在本实施例对元素对象进行定位及识别过程中不会使用到。

其中，对于HTML用户界面，元素对象的基本属性中只有其Id值是唯一的。但现实中很多元素对象无此属性，如果单纯通过元素对象的Id对元素对象进行定位，将导致元素对象无法定位的情况发生。而对于一个元素对象来说，它在页面中的路径也是唯一存在的，因此，本发明实施例在对HTML用户界面进行解析时，除了获取元素对象的基本属性外，同时获取了元素对象的Xpath信息，有效克服了元素对象无法定位的情况发生。

其中，元素对象的基本属性以及自定义属性，都可以在获取元素对象之后直接提取。而元素对象在文档中的Xpath信息却不能直观的得到，需要通过计算获得，本发明实施例提供的获取元素对象Xpath信息的方法同实施例一中所述，此处不再赘述。

S410、根据设定分类规则对所述元素对象进行分类存储，得到用户界面元素对象的原始对象库；

本实施例对获取的元素对象按照设定的分类规则进行分类存储，其中，设定的分类规则同实施例一中表1所示，通过表1的分类规则，可以确定所有获取的元素对象的类别，从而可以对元素对象分类存储，以方便对元素对象快速准确的识别及统一管理。

本实施例通过对用户界面解析，获取元素对象的属性信息，并对元素对象进行分类存储，完成了用户界面元素对象的自动识别，得到一个用户界面元素对象信息最完整的原始对象库。其中，本实施例所述原始对象库中包含tagName和type，还包括如下任一个或多个：Id、Name、Class、Css、Value、Xpath、Other。

本实施例对获取的元素对象的属性信息以及类别可采用实施例一中表2格式存储。

S420、按照设定规则将所述原始对象库转换成与用户界面自动化框架匹配的子对象库；

其中，对于不同的用户界面自动化框架，需要的元素对象的信息只是原始对象库的一个子集，因此，针对不同的用户界面自动化框架，需进一步生成与用户界面自动化框架匹配的子对象库，即按照设定规则将所述原始对象库转换成与用户界面自动化框架匹配的子对象库，以更好的支持用户界面自动化测试。

本实施例以一种常规的用户界面自动化测试框架为例，该框架的页面类结构代码如下所示：

从上述代码结构可以看出，生成该页面类代码需要的元素对象信息包括：元素对象的类型、元素对象的名称、元素定位方式、元素定位值以及元素描述信息，如表3所示。

表3

元素对象类型

元素对象名称

元素定位方式

元素定位值

元素描述信息

根据以上需求，将原始对象库自动转换成匹配的子对象库需要特定的转换算法来实现，本实施例提供的具体转换规则如下：

其中，对于元素对象类型：元素对象类型与原始文档的元素对象类别有一个转换配置文件进行对应，其对应关系参见下表4：

表4

原始文档的元素对象类别	元素对象类型
		静态文本对象	Label
输入框对象	TextField
		按钮对象	Button
超链接对象	Link
		单选按钮对象	RadioButton
复选按钮对象	RichTextField
		图片对象	Image
表格对象	Tabel

其中，对于元素对象名称：元素对象名称首先使用元素对象的Name属性值，在没有Name属性值时，按照Id>Value>type+全局变量递增的顺序依次选择其他属性值。一种实施例描述如下：

其中，对于元素定位方式及元素定位值：元素的定位要具有唯一性，因此在确定元素定位方式时，首先要判断该属性的值是否对于整个页面是唯一的，然后依次按照Id>Name>Class>Xpath先后顺序选择定位方式。也就是优先选择的属性为Id，如果Id不存在，则选择属性Name，如果Name不存在或不唯一，则再选择属性Class，如果Class不存在或不唯一，则再选择Xpath。需要说明的是，在其他属性值都不能唯一定位元素的时候，才选择Xpath定位，是因为在定位元素时使用Xpath的效率比较低。

其中元素定位值为所选择的元素定位方式的属性的值，例如选择属性Id定位时，若Id＝”MyID1”,则元素定位值即为myID1，此时，

其中，对于元素描述信息：元素描述信息按照如下先后顺序选取属性值作为元素描述信息：Value>Other属性中值为中文的内容>type；一个实施例具体描述如下：

通过上述规则可以实现将原始对象库转换成与用户界面实际框架相匹配的子对象库。

S430、利用所述子对象库生成可执行的Java页面类代码；

本实施例采用FreeMaker模板引擎，将所述子对象库中的数据作为所述模板引擎的输入参数，生成可执行的Java页面类代码，所述可执行的Java页面类代码形成对象类库，为用户界面自动化测试提供基础支持。

S440、根据测试逻辑设计代码逻辑，操作所述可执行的Java页面类，执行用户界面自动化测试。

本实施例对后续的自动化测试过程不做具体限定。

本发明实施例在获取元素对象的属性信息时，获取了元素对象的Xpath信息，有效避免了元素对象无法定位的情况发生。

本实施例对于获取的元素对象采用分类存储的方式，方便了元素对象的快速准确识别及统一管理，在无需人为参与的情况下实现了用户界面元素对象的自动识别，为用户界面自动化测试提供支持。

本实施例对于自动生成的原始对象库按照自定义规则算法转换成与用户界面框架匹配的子对象库。最后采用FreeMaker模板引擎，将子对象库数据作为所述模板引擎的输入，生成可执行的Java页面类代码，形成用户界面自动化测试需要的对象类库。这样，在对用户界面进行自动化测试时，不需要人工编写对象类库，只需要关注业务逻辑，从而有效缩短自动化代码的构建时间，节省人力资源，保证了用户界面自动化测试操作形成一个良性的闭环。

实施例四、参见图5，为本实施例原始对象库转换为子对象库以及根据子对象库生成页面类代码示意图。本实施例具体过程如下：

图5左侧表格为对一HTML用户界面进行解析，获取元素对象的基本属性、自定义属性以及Xpath信息后，对所获得的元素对象进行分类，其分类存储的一个元素对象。其中

按照本发明实施例的转换规则，将上述原始对象库转换为与用户界面实际框架匹配的子对象库，其子对象库如图5中右侧上方表格所示，该子对象库中根据<inputtype＝’text’>，得知该元素对象是一个“输入框对象”，再根据表4的对应关系，输入框对象对应的元素对象类型为TextField；元素对象名称根据属性Name确定为q，元素定位方式优先选择为Id，定位值为Id的值input，元素描述信息为输入框对象。

将上述子对象库的数据作为FreeMaker模板引擎的输入参数，得到的java页面类代码如图5中右侧下方所示。

本实施例实现了用户界面进行自动化测试过程中的对象类库的自动编写，不需要人工编写对象类库，只需要关注业务逻辑，从而有效缩短自动化代码的构建时间，节省人力资源，保证了用户界面自动化测试操作形成一个通用的工具。

实施例五、用户界面自动化测试的装置。下面结合图6对该装置进行详细说明。

图6所示的装置主要包括：解析获取单元600、分类存储单元610、转换单元620、代码生成单元630及测试单元640。其中分类存储单元610与解析获取单元600及转换单元620相连，代码生成单元630与转换单元620及测试单元640相连。其中，解析获取单元600进一步包括：遍历及标记子单元6010及存储子单元6020。

其中，解析获取单元600，主要适于对用户界面进行解析，获取元素对象的属性信息；

本实施例解析获取单元600对给定用户界面进行解析时，获取元素对象的属性信息，本实施例所述元素对象的属性信息包括三类：元素对象的基本属性、元素对象的自定义属性、元素对象在文档中的路径信息，即Xpath信息。对于HTML元素对象，其本身包含基本属性和自定义属性，其中，元素对象的基本属性包括Id,Name,Class,Css,Value等；元素对象的自定义属性一般是为了满足开发者的某些特殊需求的“键-值”,例如myid＝”123”,“键”可以任意起名，只要不与基本属性名称相同即可。需要说明的是，元素对象的自定义属性由于随意性较大，不适用于元素的识别和定位，因此在本实施例对元素对象进行定位及识别过程中不会使用到。

对于HTML用户界面，元素对象的基本属性中只有其Id值是唯一的。但现实中很多元素对象无此属性，如果单纯通过元素对象的Id对元素对象进行定位，将导致元素对象无法定位的情况发生。而对于一个元素对象来说，它在页面中的路径也是唯一存在的，因此，本发明实施例在对HTML用户界面进行解析时，解析获取单元600除了获取元素对象的基本属性外，同时获取了元素对象的Xpath信息，实现了有效克服元素对象无法定位的情况发生。

其中，元素对象的基本属性以及自定义属性，都可以在获取元素对象之后直接提取。而元素对象在文档中的Xpath信息却不能直观的得到，需要通过计算获得，本发明实施例所述解析获取单元600进一步包括遍历及标记子单元6010及存储子单元6020，用于获取元素对象的Xpath信息，

其中，遍历及标记子单元6010，主要适于对用户界面的DOM树结构进行遍历及标记，得到带有标记的DOM树结构；对DOM树结构遍历可以采用标签匹配的方法，根据深度优先算法进行遍历。对于同一层级的兄弟结点，按照读取顺序依次从左向右存储，并对每一个结点进行数字序号标记，例如，从数字1开始，每次递增1，这样就获得带有标记的DOM树结构。

可以理解的是，上述描述的方法仅为发明人所列举的一种实施例，本发明实施例并不局限于此。

其中，存储子单元6020，主要适于对所述带有标记的DOM树的结点和标记按照键值对的形式顺序存储，得到所述元素对象的Xpath信息。

其中，分类存储单元610，主要适于根据设定分类规则对所述获取的元素对象进行分类存储，得到用户界面元素对象的原始对象库；

本实施例所述分类存储单元610对元素对象的分类规则参见上表1中所示，通过表1的分类规则，可以确定解析获取单元600获取的元素对象的类别，只有确定元素对象的类别，才能确定元素对象都包含哪些属性以及可以对元素对象进行哪些操作。本实施例对获取的元素对象的属性信息以及类别采用上表2格式存储。此处不再赘述。本实施例对于已经识别的元素对象按照分类规则采用分类存储方式，方便了元素对象的查找及统一管理。

其中，转换单元620，主要适于按照设定规则将分类存储单元610生成的所述原始对象库转换成与用户界面自动化框架匹配的子对象库；

其中，对于不同的用户界面自动化框架，需要的元素对象的信息都只是原始对象库的一个子集，因此，针对不同的用户界面自动化框架，需进一步生成与用户界面自动化框架匹配的子对象库，即按照设定规则将所述原始对象库转换成与用户界面自动化框架匹配的子对象库，以更好的支持用户界面自动化测试。

将原始对象库自动转换成匹配的子对象库需要特定的转换算法来实现，本实施例提供的具体转换规则如下：

其中，对于元素对象类型：元素对象类型与原始文档的元素对象类别的对应关系参见表4，此处不再赘述。

其中，对于元素对象名称：元素对象名称首先使用元素对象的Name属性值，在没有Name属性值时，按照Id>Value>type+全局变量递增的顺序依次选择其他属性值。

其中，对于元素定位方式及元素定位值：元素的定位要具有唯一性，因此在确定元素定位方式时，首先要判断该属性的值是否对于整个页面是唯一的，然后依次按照Id>Name>Class>Xpath先后顺序选择定位方式。也就是优先选择的属性为Id，如果Id不存在，则选择属性Name，如果Name不存在或不唯一，则再选择属性Class，如果Class不存在或不唯一，则再选择Xpath。需要说明的是，在其他属性值都不能唯一定位元素的时候，才选择Xpath定位，因为在定位元素时使用Xpath的效率比较低。

其中元素定位值为所选择的元素定位方式的属性的值，例如选择属性Id定位时，若Id＝”MyID1”,则元素定位值即为myID1，此时，

元素定位方式＝“id”

元素定位值＝“myID1。

其中，对于元素描述信息：元素描述信息按照如下先后顺序选取属性值作为元素描述信息：Value>Other属性中值为中文的内容>type；

通过上述规则转换单元620可以实现将原始对象库转换成与用户界面实际框架相匹配的子对象库。

其中，代码生成单元630，主要适于利用所述子对象库生成可执行的Java页面类代码；本实施例代码生成单元630采用FreeMaker模板引擎，将所述子对象库中的数据作为所述模板引擎的输入参数，生成可执行的Java页面类代码，为用户界面自动化测试提供基础支持。

其中，测试单元640，主要适于根据测试逻辑设计代码逻辑操作所述可执行的Java页面类，执行用户界面自动化测试。本实施例对测试单元640执行的后续的自动化测试过程不做具体限定，可以采用现有技术执行后续的自动化测试。

本发明实施例在解析获取单元600获取元素对象的属性信息时，获取了元素对象的Xpath信息，有效避免了对元素对象进行定位时无法定位元素对象的情况发生。

本实施例对于已经识别的元素对象由分类存储单元610采用分类存储的方式进行存储，方便了元素对象的快速准确识别及统一管理。

本实施例对于自动生成的原始对象库按照自定义规则算法转换成与用户界面框架匹配的子对象库。最后采用FreeMaker模板引擎，将子对象库数据作为所述模板引擎的输入，生成可执行的Java页面类代码，形成自动化测试需要的对象类库。这样，在对用户界面进行自动化测试时，不需要人工编写对象类库，只需要关注业务逻辑，从而有效缩短自动化代码的构建时间，节省人力资源，保证了用户界面自动化测试操作形成一个良性的闭环。

综上所述，本发明实施例通过对用户界面解析，获取用户界面所有元素对象的属性信息，并对元素对象按照设定分类规则进行分类存储，方便了元素对象的快速准确识别及统一管理。本方案在无需人为参与的情况下实现了用户界面元素对象的自动识别，为用户界面自动化测试提供支持。

同时，本发明实施例将分类存储后得到的原始对象库按照设定规则转换成与用户界面自动化框架匹配的子对象库，再利用所述子对象库生成可执行的Java页面类代码，实现了用户界面进行自动化测试过程中的对象类库的自动编写，不需要人工编写对象类库，有效缩短自动化代码的构建时间，实现了用户界面的真正自动化测试，使用户界面自动测试操作形成一个通用的工具，有效提高了用户界面自动化测试的效率，节省了人力资源。

A1、一种用户界面元素对象识别方法，其包括：

对用户界面进行解析，获取元素对象的属性信息；

根据设定分类规则对所述元素对象进行分类，以确定所述元素对象的类别；

存储分类后的所述元素对象，完成用户界面元素对象识别。

A2、如A1所述的方法，其中，所述元素对象的属性信息包括：元素对象的基本属性、元素对象的自定义属性，及元素对象在文档中的路径Xpath信息。

A3、如A2所述的方法，其中，所述获取所述元素对象在文档中的Xpath信息包括：

对用户界面的文件对象模型DOM树结构进行遍历及标记，得到带有标记的DOM树结构；

对所述带有标记的DOM树的结点和标记按照键值对的形式顺序存储，得到所述元素对象的Xpath信息。

A4、如A1所述的方法，其中，存储的所述分类后的所述元素对象包括的信息如下：标签名称tagName和元素对象的类别type，还包括如下任一个或多个：

元素对象的唯一标识Id、元素对象名称Name、元素对象的类名Class、元素对象样式类型Css、元素的Value对于的值Value、元素对象路径信息Xpath、元素对象自定义属性Other。

A5、如A4所述的方法，其中，还包括：选择元素对象定位方式定位元素对象，具体包括：

在保证所选择的属性的值对于整个页面是唯一的情况下，按照Id>Name>Class>Xpath先后顺序选择属性作为元素定位方式。

A6、如A1至A5任一项所述的方法，其中，所述用户界面为超文本标记语言HTML用户界面。

B7、一种实现用户界面元素对象识别装置，其包括：

解析获取单元，适于对用户界面进行解析，获取元素对象的属性信息；

分类单元，适于根据设定分类规则对所述获取的元素对象进行分类，以确定所述元素对象的类别；

存储单元，适于存储分类后的所述元素对象，完成用户界面元素对象识别。

B8、如B7所述的装置，其中，所述解析获取单元获取的所述元素对象的属性信息包括：元素对象的基本属性、元素对象的自定义属性，及元素对象在文档中的路径Xpath信息。

B9、如B8所述的装置，其中，所述解析获取单元进一步包括：

遍历及标记子单元，适于对用户界面的文件对象模型DOM树结构进行遍历及标记，得到带有标记的DOM树结构；

存储子单元，适于对所述带有标记的DOM树的结点和标记按照键值对的形式顺序存储，得到所述元素对象的Xpath信息。

B10、如B7所述的装置，其中，所述存储单元存储的所述分类后的所述元素对象包括的信息如下：标签名称tagName和元素对象的类别type，还包括如下任一个或多个：

元素对象的唯一标识Id、元素对象名称Name、元素对象的类名Class、元素对象样式类型Css、元素的Value对于的值Value、元素对象路径信息Xpath、元素对象自定义属性Other。

B11、如B10所述的装置，其中，还包括：

元素对象定位单元，适于按照如下顺序选择元素对象定位方式定位元素对象，具体包括：

在保证所选择的属性的值对于整个页面是唯一的情况下，按照Id>Name>Class>Xpath先后顺序选择属性作为元素定位方式。

B12、如B7至B11中任一项所述的装置，其中，所述用户界面为超文本标记语言HTML用户界面。

C13、一种用户界面自动化测试的方法，其包括：

对用户界面进行解析，获取元素对象的属性信息；

根据设定分类规则对所述元素对象进行分类存储，得到用户界面元素对象的原始对象库；

按照设定规则将所述原始对象库转换成与用户界面自动化框架匹配的子对象库；

利用所述子对象库生成可执行的Java页面类代码；

根据测试逻辑设计代码逻辑，操作所述可执行的Java页面类，执行用户界面自动化测试。

C14、如C13所述的方法，其中，所述元素对象的属性信息包括：元素对象的基本属性、元素对象的自定义属性及元素对象在文档中的路径Xpath信息。

C15、如C14所述的方法，其中，所述获取所述元素对象的Xpath信息包括：

对用户界面的文件对象模型DOM树结构进行遍历及标记，得到带有标记的DOM树结构；

对所述带有标记的DOM树的结点和标记按照键值对的形式顺序存储，得到所述元素对象的Xpath信息。

C16、如C13、C14或C15所述的方法，其中，所述原始对象库中包含的信息包括标签名称tagName、元素对象的类别type，还包括如下任一个或多个：

元素对象的唯一标识Id、元素对象名称Name、元素对象的类名Class、元素对象样式类型Css、元素的Value对于的值Value、元素对象路径信息Xpath、元素对象自定义属性Other。

C17、如C16所述的方法，其中，所述按照设定规则将所述原始对象库转换成与用户界面自动化框架匹配的子对象库包括：按照设定规则确定子对象库中元素定位方式及元素定位值，具体包括：

在保证所选择的属性的值对于整个页面是唯一的情况下，按照Id>Name>Class>Xpath先后顺序选择属性作为子对象库中的元素定位方式，所选择的元素定位方式的属性的值作为元素定位值。

C18、如16所述的方法，其中，所述按照设定规则将所述原始对象库转换成与用户界面自动化框架匹配的子对象库包括：按照设定规则确定子对象库中的元素描述信息，具体包括：

按照Value>Other属性中值为中文的内容>type，顺序选择属性值作为子对象库中的元素描述信息。

C19、如C16所述的方法，其中，所述按照设定规则将所述原始对象库转换成与用户界面自动化框架匹配的子对象库包括：按照设定规则确定子对象库中元素对象名称，具体包括：

子对象库中元素对象名称首先使用元素对象的Name属性值，在没有Name属性值时，按照Id>Value>type+全局变量递增的顺序选择属性值来作为元素对象名称。

C20、如C13所述的方法，其中，所述利用所述子对象库生成可执行的Java页面类代码包括：

采用FreeMaker模板引擎，将所述子对象库中的数据作为所述模板引擎的输入参数，生成可执行的Java页面类代码。

C21、如C13所述的方法，其中，所述用户界面为超文本标记语言HTML用户界面。

D22、一种用户界面自动化测试的装置，其包括：

解析获取单元，适于对用户界面进行解析，获取元素对象的属性信息；

分类存储单元，适于根据设定分类规则对所述获取的元素对象进行分类存储，得到用户界面元素对象的原始对象库；

转换单元，适于按照设定规则将所述原始对象库转换成与用户界面自动化框架匹配的子对象库；

代码生成单元，适于利用所述子对象库生成可执行的Java页面类代码；

测试单元，适于根据测试逻辑设计代码逻辑操作所述可执行的Java页面类，执行用户界面自动化测试。

D23、如D22所述的装置，其中，所述元素对象的属性信息包括：元素对象的基本属性、自定义属性以及元素对象的Xpath信息。

D24、如D23所述的装置，其中，所述解析获取单元进一步包括：

遍历及标记子单元，适于对用户界面的文件对象模型DOM树结构进行遍历及标记，得到带有标记的DOM树结构；

存储子单元，适于对所述带有标记的DOM树的结点和标记按照键值对的形式顺序存储，得到所述元素对象的Xpath信息。

D25、如D22所述的装置，其中，所述分类存储单元存储的原始对象库中的信息包括标签名称tagName、元素对象的类别type，还包括如下任一个或多个：

元素对象的唯一标识Id、元素对象名称Name、元素对象的类名Class、元素对象样式类型Css、元素的Value对于的值Value、元素对象路径信息Xpath、元素对象自定义属性Other。

D26、如D25所述的装置，其中，所述转换单元按照如下规则确定子对象库中元素定位方式及定位值：

在保证所选择的属性的值对于整个页面是唯一的情况下，按照Id>Name>Class>Xpath先后顺序选择属性作为子对象库中的元素定位方式，所选择的元素定位方式的属性的值作为元素定位值。

D27、如D25所述的装置，其中，所述转换单元按照如下规则确定子对象库中元素描述信息：

按照Value>Other属性中值为中文的内容>type，顺序选择属性值作为子对象库中的元素描述信息。

D28、如D25所述的装置，其中，所述转换单元按照如下规则确定子对象库中元素对象名称：

首先使用元素对象的Name属性值，在没有Name属性值时，按照Id>Value>type+全局变量递增的顺序选择属性值来作为元素对象名称。

D29、如D22所述的装置，其中，所述代码生成单元采用FreeMaker模板引擎，将所述子对象库中的数据作为所述模板引擎的输入参数，生成可执行的Java页面类代码。

D30、如D22至D29中任一项所述的装置，其中，所述用户界面为超文本标记语言HTML用户界面。

在此提供的算法和显示不与任何特定计算机、虚拟***或者其它设备固有相关。各种通用***也可以与基于在此的示教一起使用。根据上面的描述，构造这类***所要求的结构是显而易见的。此外，本发明也不针对任何特定编程语言。应当明白，可以利用各种编程语言实现在此描述的本发明的内容，并且上面对特定语言所做的描述是为了披露本发明的最佳实施方式。

在此处所提供的说明书中，说明了大量具体细节。然而，能够理解，本发明的实施例可以在没有这些具体细节的情况下实践。在一些实例中，并未详细示出公知的方法、结构和技术，以便不模糊对本说明书的理解。

类似地，应当理解，为了精简本公开并帮助理解各个发明方面中的一个或多个，在上面对本发明的示例性实施例的描述中，本发明的各个特征有时被一起分组到单个实施例、图、或者对其的描述中。然而，并不应将该公开的方法解释成反映如下意图：即所要求保护的本发明要求比在每个权利要求中所明确记载的特征更多的特征。更确切地说，如下面的权利要求书所反映的那样，发明方面在于少于前面公开的单个实施例的所有特征。因此，遵循具体实施方式的权利要求书由此明确地并入该具体实施方式，其中每个权利要求本身都作为本发明的单独实施例。

本领域那些技术人员可以理解，可以对实施例中的设备中的模块进行自适应性地改变并且把它们设置在与该实施例不同的一个或多个设备中。可以把实施例中的模块或单元或组件组合成一个模块或单元或组件，以及此外可以把它们分成多个子模块或子单元或子组件。除了这样的特征和/或过程或者单元中的至少一些是相互排斥之外，可以采用任何组合对本说明书(包括伴随的权利要求、摘要和附图)中公开的所有特征以及如此公开的任何方法或者设备的所有过程或单元进行组合。除非另外明确陈述，本说明书(包括伴随的权利要求、摘要和附图)中公开的每个特征可以由提供相同、等同或相似目的的替代特征来代替。

此外，本领域的技术人员能够理解，尽管在此所述的一些实施例包括其它实施例中所包括的某些特征而不是其它特征，但是不同实施例的特征的组合意味着处于本发明的范围之内并且形成不同的实施例。例如，在下面的权利要求书中，所要求保护的实施例的任意之一都可以以任意的组合方式来使用。

本发明的各个部件实施例可以以硬件实现，或者以在一个或者多个处理器上运行的软件模块实现，或者以它们的组合实现。本领域的技术人员应当理解，可以在实践中使用微处理器或者数字信号处理器(DSP)来实现根据本发明实施例的电子设备中的病毒防御装置中的一些或者全部部件的一些或者全部功能。本发明还可以实现为用于执行这里所描述的方法的一部分或者全部的设备或者装置程序(例如，计算机程序和计算机程序产品)。这样的实现本发明的程序可以存储在计算机可读介质上，或者可以具有一个或者多个信号的形式。这样的信号可以从因特网网站上下载得到，或者在载体信号上提供，或者以任何其他形式提供。

应该注意的是，上述实施例对本发明进行说明而不是对本发明进行限制，并且本领域技术人员在不脱离所附权利要求的范围的情况下可设计出替换实施例。在权利要求中，不应将位于括号之间的任何参考符号构造成对权利要求的限制。单词“包含”不排除存在未列在权利要求中的元件或步骤。位于元件之前的单词“一”或“一个”不排除存在多个这样的元件。本发明可以借助于包括有若干不同元件的硬件以及借助于适当编程的计算机来实现。在列举了若干装置的单元权利要求中，这些装置中的若干个可以是通过同一个硬件项来具体体现。单词第一、第二以及第三等的使用不表示任何顺序。可将这些单词解释为名称。

Claims (10)

1.一种用户界面元素对象识别方法，其包括：

对用户界面进行解析，获取元素对象的属性信息；

根据设定分类规则对所述元素对象进行分类，以确定所述元素对象的类别；

存储分类后的所述元素对象，完成用户界面元素对象识别。

2.如权利要求1所述的方法，其中，所述元素对象的属性信息包括：元素对象的基本属性、元素对象的自定义属性，及元素对象在文档中的路径Xpath信息。

3.如权利要求2所述的方法，其中，所述获取所述元素对象在文档中的Xpath信息包括：

对用户界面的文件对象模型DOM树结构进行遍历及标记，得到带有标记的DOM树结构；

对所述带有标记的DOM树的结点和标记按照键值对的形式顺序存储，得到所述元素对象的Xpath信息。

4.如权利要求1所述的方法，其中，存储的所述分类后的所述元素对象包括的信息如下：标签名称tagName和元素对象的类别type，还包括如下任一个或多个：

元素对象的唯一标识Id、元素对象名称Name、元素对象的类名Class、元素对象样式类型Css、元素的Value对于的值Value、元素对象路径信息Xpath、元素对象自定义属性Other。

5.如权利要求4所述的方法，其中，还包括：选择元素对象定位方式定位元素对象，具体包括：

在保证所选择的属性的值对于整个页面是唯一的情况下，按照Id>Name>Class>Xpath先后顺序选择属性作为元素定位方式。

6.如权利要求1至5任一项所述的方法，其中，所述用户界面为超文本标记语言HTML用户界面。

7.一种实现用户界面元素对象识别装置，其包括：

解析获取单元，适于对用户界面进行解析，获取元素对象的属性信息；

分类单元，适于根据设定分类规则对所述获取的元素对象进行分类，以确定所述元素对象的类别；

存储单元，适于存储分类后的所述元素对象，完成用户界面元素对象识别。

8.如权利要求7所述的装置，其中，所述解析获取单元获取的所述元素对象的属性信息包括：元素对象的基本属性、元素对象的自定义属性，及元素对象在文档中的路径Xpath信息。

9.一种用户界面自动化测试的方法，其包括：

对用户界面进行解析，获取元素对象的属性信息；

根据设定分类规则对所述元素对象进行分类存储，得到用户界面元素对象的原始对象库；

按照设定规则将所述原始对象库转换成与用户界面自动化框架匹配的子对象库；

利用所述子对象库生成可执行的Java页面类代码；

根据测试逻辑设计代码逻辑，操作所述可执行的Java页面类，执行用户界面自动化测试。

10.一种用户界面自动化测试的装置，其包括：

解析获取单元，适于对用户界面进行解析，获取元素对象的属性信息；

分类存储单元，适于根据设定分类规则对所述获取的元素对象进行分类存储，得到用户界面元素对象的原始对象库；

转换单元，适于按照设定规则将所述原始对象库转换成与用户界面自动化框架匹配的子对象库；

代码生成单元，适于利用所述子对象库生成可执行的Java页面类代码；

测试单元，适于根据测试逻辑设计代码逻辑操作所述可执行的Java页面类，执行用户界面自动化测试。