自动化测试框架的搭建

说起自动化测试，我想大家都会有个疑问，要不要做自动化测试？ 自动化测试给我们带来的收益是否会超出在建设时所投入的成本，这个嘛别说是我，即便是高手也很难回答，自动化测试的初衷是美好的，而测试工程师往往在实现过程中花费了很多成本、精力，而最终以失败告终。 失败的原因会很多，我总结几项：

1.    太过依赖测试工具，高估了工具的力量，最终会以失望告终。

2.     项目紧急的情况，为了规避那些多余的环节，干脆人工测试，结果整个链路中断。

3.     研发和测试人员不能很好的交互，如果这两个角色之间有了一道防火墙，那别说自动化测试了，手工测试也不会有好的效果。测试人员可以把研发想象成自己的女朋友， 努力培养相互之间的感情。

4.     自动化测试人员实力被低估而导致的情绪低落，这个问题在所有岗位上都会发生，当然要看领导重视程度了。

5.     资源不够，公司不舍得资源投入，或者蹑手蹑脚，那就不要浪费时间了。

6.     太高的期望，过低的回报。

现在国内没有几家公司说能玩转自动化测试的，在看国外那些耳熟能详的企业像google ，microsoft ，它们反而搞得热火朝天的。可笑的是在微软中国的测试部门工作过几年的测试经理，出来搞个什么《微软自动化测试体系最佳实践课程》，就能忽悠国内的那些知名的企业掏钱去听，我这也不是说他们的东西不好， 只是希望我们自己也能够重视起来，要知道人家“卓越”体系也是由那些“专业团队”花了很多的时间和精力才搭建起来的，所以先不说收益如何，即便是为了这一个美好的初衷，我们也应该去尝试一下，即使是失败。

我也做了几年的测试，但也是最近才开始研究自动化测试的，在工作中多多少少接触过几种常见的工具，如 silktest 和selenium ，搞过测试的应该都听过，我最近刚刚为现有项目搭建了一个测试框架，为其中的部分模块编写了一些测试case, 收益还是颇丰的，先说说这两种工具吧。

silktest 是商业工具，想使用是需要花钱的，但是有现成的平台和框架，也比较容易学习，可以基于windows ，unix 平台。ie ，firefox （部分）浏览器。可以录制回放，对象识别或者手工编程，也能基于数据驱动，关键字驱动等等测试框架。silktest 里面的语言4test 其实是类c （也有silk4j ，用java 写），编程能力相对较强。

selenium 是免费的，需要有类似ide （如eclipse ），原先是thoughtworks 的几个牛人开发的，现在google 维护（人都跳槽过去了）。可以基于windows ，unix ，mac 等平台。ie ，firefox 等浏览器。 测试团队，经费不足，能力很强（java 上面），有对测试平台和环境要求比较高（ie ，firefox ，safari 等等），那么selenium 是很不错的选择。

       今天我就简单入个门，先介绍通过junit+selenium+coverlipse+ant 来搭建一整套自动化测试框架，开始之前我先提出几个问题，请大家根据下面的问题来阅读本篇文章。

1. 如何录制脚本？

2. 如何转换成junit 脚本?

3. 如何生成junit 日志?

4. 如何回放selenium 及查看回放日志?

5. 如何查看代码的覆盖率?

一、工具准备

工具

 说明

 下载

junit

 junit 是一个开发源代码的java 测试框架，用于编写和运行可重复的测试。

 http://www.junit.org

selenium

 先介绍两个重要的组件selenium-ide 来录制脚本；selenium-rc selenium-remote control 缩写，是使用具体的语言来编写测试类

 http://seleniumhq.org/download/

coverlipse

 coverlipse 这个eclipse 插件能够把junit 测试的代码覆盖直观化。

 http://coverlipse.sourceforge.net/download.php

ant

 ant 是一个类似make 的工具, 大家都已经很熟悉了，这里我们可以利用其中的ant task 来生成junit 日志

 http://ant.apache.org/bindownload.cgi

二、junit 的安装

1.         eclipse 本身会自带junit.jar 包，所一般情况下是不需要额外下载junit 的。

2.         将junit3 的library 添加到工程的buildpath 中

3.         因为junit 的日志是通过ant 来生成的，所以一定要将junit.jar 添加到ant_home 里

三、selenium 的安装

1.         安装seleniumide ，打开火狐浏览器，然后进入工具—> 添加附件，搜索seleniumide

2.         查询出对应的ide 后，点击直接安装，安装结束后重启firefox ，看到下面的菜单说明安装成功

3.         安装selenium-rc ，先去http://www.openqa.org/selenium/ 下载selenium 包。用命令行来到解压到文件夹下：d:\autotesting\ selenium-server-standalone-2.0b1.jar 目录下

4.         运行java -jar selenium-server-standalone-2.0b1.jar ，启动selenium server 。为了在运行时应用运行的浏览器与selenium 服务的浏览器分开可在其后面加–multiwindow 。

5.         在eclipse 创建一个项目，在项目的build path 里面加上elenium-server-1.0-beta-1 下selenium-server.jar 、selenium-java-client-driver-1.0-beta-1 下selenium-java-client-driver.jar （这两个在刚解压的包里面）和eclipse\plugins\org.junit_3.8.1 下junit.jar 。

6.         将制定的jar 包导入到工程里，然后你就可以集成并使用相应的api ，编写自己的测试case 了。

四、coverlipse 的安装

1.         直接通过eclipse 即可安装，步骤如下

•in eclipse, click help -> software updates -> find and install.

•in the dialog, select search for new features to install, then next.

•in the next step, add a new remote site. name it "coverlipse update site", the url is "http://coverlipse.sf.net/update/".

•press finish. eclipse now searches for the coverlipse feature to install and shows that to you. 2.         配置 coverlipse 以获取代码覆盖

3.         一旦单击了 run ，eclipse 会运行 coverlipse 并在源代码（如图 7 所示）中嵌入标记，该标记显示了具有相关 junit 测试的代码部分

4.     coverlipse 生成的具有嵌入类标记的报告

5.      正如您所见，使用 coverlipse eclipse 插件可以更快地确定代码覆盖率。例如，这种实时数据功能有助于在将代码签入 cm 系统前 更好地进行测试。

五、ant 安装，eclipse 自带，只需要配置环境变量ant_home 即可。

六、创建一个案例

1.         创建一个工程testselenium 安装下面目录结构

2.         录制脚本，打开firefox 浏览器，进入selenium ide 菜单

3.         输入相应录制的地址，点击红色按钮，开始录制

4.         将脚本转换成junit 代码，然后将其拷贝到测试类中做为测试case 编码的雏形。

六、如何查看日志，这里日志分两类：

l          junit 日志，通过junit 写的断言，和标准输出，这些操作产生的日志记录。

l          selenium 日志，当运行junit 脚本时，selenium 相关的脚本就会产生回放日志，例如打开界面的url ，标准输入，输出等信息。

    虽然这两种日志没有交集，需要分开查看。但一般情况下我们只需要观察selenium 日志已经足够用了，与其相比junit 日志更适用于编码阶段。

1.       junit 日志， 只需要配置脚本build-selenium.xml ，如下

<project name="seleniumtest" default="junit" basedir=".">

       <property environment="env" />

       <condition property="ia.home" value="${env.ia_home}">

              <isset property="env.ia_home" />

       </condition>

       <property name="run.classpath" value="../class">

       </property>

       <property name="run.srcpath" value="../testselenium">

       <property name="test.xml" value="../xml">

       <property name="test.report" value="../report">

       <property name="lib.dir" value="../lib" />

       <path id="compile.path">

              <fileset dir="${lib.dir}">

                     <include name="junit.jar" />

                     <include name="ant.jar" />

              </fileset>

       </path>

       <target name="init">

              <delete dir="${run.classpath}" />

              <mkdir dir="${run.classpath}" />

              <delete dir="${test.report}" />

              <mkdir dir="${test.report}" />

              <delete dir="${test.xml}" />

              <mkdir dir="${test.xml}" />

       </target>

       <target name="compile" depends="init">

              <javac destdir="${run.classpath}" srcdir="${run.srcpath}" />

       <target name="junit" depends="compile">

              <junit printsummary="false">

                     <classpath path="${run.classpath}">

                            <path refid="compile.path" />

                     </classpath>

                     <formatter type="xml" />

                     <batchtest todir="${test.xml}">

                            <fileset dir="${run.classpath}">

                                   <include name="**/test*.class" />

                                   <include name="**/*test.class" />

                            </fileset>

                     </batchtest>

              </junit>

              <junitreport todir="${test.xml}">

                     <fileset dir="${test.xml}">

                            <include name="test-*.xml" />

                     </fileset>

                     <report format="frames" todir="${test.report}" />

              </junitreport>

</project>

2.       运行ant 脚本以后，就可以生成相应的junit 日志。

1.selenium 日志

当运行junit 脚本时，selenium 相关的脚本就会产生回放日志，但默认记录的东西可读性太差了，所以我们使用loggingselenium （ http://loggingselenium.sourceforge.net/usage.html ） ，可以将每个case 可以生成记录selenium 命令的html 格式的result 了。

4.       plugin 的下载地址：

http://sourceforge.net/projects/loggingselenium/files/loggingselenium/release%201.2/logging-selenium-1.2.jar/download

5.       安装方法：只需要将下载的logging-selenium-1.2.jar 导入到工程里即可。

6.       编写代码如下

@before

public void setup() {

    final string resultpath = "absolute-path-to-where-your-result-will-be-written";

    final string resulthtmlfilename = resultpath + file.separator + "result.html";

    final string resultencoding = "utf-8"

    loggingwriter = loggingutils.createwriter(resulthtmlfilename, resultencoding);

    loggingresultsformatter htmlformatter =

        new htmlresultformatter(loggingwriter, resultencoding);

    htmlformatter.setscreenshotbaseuri(""); // this is for linking to the screenshots

    htmlformatter.setautomaticscreenshotpath(resultpath);

    // wrap httpcommandprocessor from remote-control

    loggingcommandprocessor myprocessor =

         new loggingcommandprocessor(new httpcommandprocessor(your-configs), htmlformatter);

    selenium = new loggingdefaultselenium(myprocessor);

    selenium.start();

}

@after

public void teardown() {

    selenium.stop();

    try {

        if (null != loggingwriter) {

            loggingwriter.close();

        }

    } catch (ioexception e) {

        // do nothing

    }

7.       运行成功以后在指定的目录中生成相应的reports

   七

七、框架优势

1.       记录测试的过程，所见即是所得，selenium 的所有内部程序都是用javascipt 编写的，比较灵活；

2.       可以通过selenium ide 录制脚本，脚本可以回放，可以作为junit 编码的雏形；

3.       支持多种操作系统;

4.       支持多种编码语言。java,.net, perl, python, ruby

八、框架劣势

1.      selenium 的录制工具只能安装在firefox 浏览器上， 如果系统界面不被firefox 支持，那就要花费一定的时间去手写case 。 不过最近听说有一个工具 叫 360webtester , 可以支持ie 的录制，而且是国产的评价还不错，有时间我要研究一下。