一、技术解决方案要求说明
不管选择什么技术解决方案,总得来说,应该要满足下面几个条件:
1、支持目前主流的脚本语言,如ruby,python,java,C#等;
2、易于编写、维护测试用例;
3、测试数据应与脚本分离;
4、易于收集执行情况,执行错误,以及生成可视的测试结果报告;
5、能进行可视化操作,尽可能做到让没有编程经验的人员也能上手;
6、处于国内主流技术方案,相关技术社区活跃,遇到问题能够快速得到解决;
二、自动化测试技术选型说明
1、选择自动化测试框架
根据自动化框架的演进,目前主流为关键字驱动的自动化测试框架。用关键字的形式将测试逻辑封装在数据文件中,测试工具只要能够解释这些关键字即可对其应用自动化,它的核心思想可以概括为三个分离。
1)界面元素名与测试内部对象名的分离
在被测应用程序和录制生成的测试脚本之间增加一个抽象层,它可以将界面上的所有元素映射成相对应的一个逻辑对象,测试针对这些逻辑对象进行,界面元素的改变只会影响映射表,而不会影响测试。
2)测试描述与具体实现细节的分离
测试描述只说明软件测试要做什么以及期待什么样的结果,而不管怎样执行测试或怎样证实结果。这样做是因为测试的实现细节通常与特定的平台以及特定的测试执行工具有着密切的联系。这种分离使得测试描述对于应用实现细节是不敏感的,而且有利于测试在工具和平台间的移植。
3)脚本与数据的分离
最后,可以把测试执行过程中所需的测试数据从脚本中提取出来,在运行时测试脚本再从数据存放处读取预先定制好的数据,这样脚本和数据可以独立维护。
根据这样的框架选型,最终选定目前主流的自动化框架Robotframework+RIDE:
Robotframework是一个通用的验收测试和验收测试驱动开发的自动化测试框架(ATDD)。它具有易于使用的表格来组织测试过程和测试数据。
RIDE,即robotframework的IDE环境,即Robot framework-ride,方便可视化操作,执行结果变得容易管理,生成HTML报告,方便共享和查阅。
图 自动化测试框架
并且Robotframework+RIDE可以套用在绝大多数的自动化测试上,例如WEB自动化测试,APP自动化测试,接口自动化测试等,只需要相应的关键字库支持(官方网站也提供了一些目前主要的库文件),同时也很容易让用户扩展自定义关键字库。
2、选择WEB自动化测试工具Selenium2
Selenium2 是用于测试 Web 应用程序用户界面 (UI) 的成熟框架。它是一款用于运行端到端功能测试的工具。拥有简洁的API,WebDriver和WebElement对象,更好的抽象。且支持多中操作系统,多语言,多浏览器。
3、选择APP自动化测试工具APPIUM
Appium是目前国内主流的APP自动化测试框架,功能非常强大,相对技术支持较多,所以采用此作为APP的自动化测试工具:
1)优点:
开源;支持Native App、Hybird App、Web App;支持Android、iOS、Firefox OS;
Server也是跨平台的,可以使用Mac OS X、Windows或者Linux;
2)它的思想是:
Appium自动化测试不需要重新编译App;
支持多种语言来编写测试脚本,Java、Javascript、PHP、Python、C#、Ruby等主流语言;
不需要为了自动化测试来重造轮子,因为扩展了WebDriver。(WebDriver是测试WebApps的一种简单、快速的自动化测试框架,所以有Web自动化测试经验的测试人员可以直接上手);
移动端自动化测试应该是开源的;
3)它的设计理念:
Client/Server架构,运行的时候Server端会监听Client端发过来的命令,翻译这些命令发送给移动设备或模拟器,然后移动设备或模拟器做出响应的反应。正是因为这种架构,所以Client可以使用Appium client libraries多种语言的测试脚本,而且Server端完全可以部署在服务器上,甚至云服务器。
Session,每个Client连接到Server以后都会有一个Session ID,而且Client发送命令到Server端都需要这个Session ID,因为这个seesion id代表了你所打开的浏览器或者是移动设备的模拟器。所以你甚至可以打开N个Session,同时测试不同的设备或模拟器。
Desired Capabilities,其实就是一个键值对,设置一些测试的相关信息来告诉Server端,我们需要测试iOS、还是Android,或者换是WebApp等信息。
Appium Server是Node.js写的,所以可以直接用NPM来进行安装。
Appium Clients,Mac OS和Win下提供GUI,不需要装Node.js,方便测试人员操作。
4)相关限制:
如果你在Windows使用Appium,你没法使用预编译专用于OS X的.app文件,因为Appium依赖OS X专用的库来支持iOS测试,所以在Windows平台你不能测试iOS Apps。这意味着你只能通过在Mac上来运行iOS测试。
5)总结:
在iOS部分是封装了UIAutomation;Android 4.2以上是用UiAutomator,Android 2.3 ~ 4.1用的是 Instrumentation,也就说Appium同时封装了UiAutomator和Instrumentation。所以Appium拥有了以上几大框架的所有优点:跨App,支持Native App、Hybird App、Web App,还支持N种语言来编写你的测试脚本。
4、选择脚本语言Python
基于易于上手,国内相关资料支持等考虑,脚本语言采用Python。
三、技术解决方案说明
1、WEB自动化测试
各种webdriver的工作原理图:
方案说明
RobotFramewok+RIDE+Selenium2+python:该自动化解决方案,能很好的编写用例和查看分析测试结果,并且Selenium2Library已经提供了常用的web操作关键字库,能满足我们大部分的用例编写需要。当然,也能利用python非常方便的扩展关键字库,满足我们的特殊需要。
适用范围
适用于基于WEB开发应用的自动化测试。
要求说明
页面控件主要通过id,name来定位识别,所以在前端开发时需要引入这方面的规范要求。
2、APP自动化测试
RobotFramewok+RIDE+Appium+python:该自动化解决方案,能很好的编写用例和查看分析测试结果,同样AppiumLibrary已经提供了常用的手机操作关键字库,能满足我们大部分的用例编写需要。也能利用python非常方便的扩展关键字库,满足我们的特殊需要。同时,只要有相应库的支持,可以对android和IOS应用实现自动化,并且可以在对应虚拟机和真机上运行。