测者的测试技术手册:自动化的自动化EvoSuite:Maven项目集成EvoSuite实战

EvoSuite是由Sheffield等大学联合开发的一种开源工具,用于自动生成测试用例集,生成的测试用例均符合Junit的标准,可直接在Junit中运行。得到了Google和Yourkit的支持。

前期准备

本次所有内容的例子可以通过测者公众号后台,回复evo_mvn关键字获取下载地址

解压到自己的工程目录,在 Tutorial_Maven的示例目录运行如下命令:

  1. mvn compile

完成compile后代码中的classes的编译字节码放到target/classes目录下。在示例代码中 src/test/java目录下是有一些测试cases,可以通过如下命令运行一下:

  1. mvn test

如果运行ok,那么说明配置一切正常,就可以开始集成EvoSuite了。

  1. -------------------------------------------------------

  2. T E S T S

  3. -------------------------------------------------------

  4. Running tutorial.StackTest

  5. Tests run: 1, Failures: 0, Errors: 0, Skipped: 0, Time elapsed: 0.094 sec

加入EvoSuite生成Junit的Cases

要使用EvoSuite,就要在Maven工程的pom.xml文件中引入EvoSuite的插件如下(在 <project>的子节点加入如下内容):

  1. <build>

  2.    <plugins>

  3.      <plugin>

  4.        <groupId>org.evosuite.plugins</groupId>

  5.        <artifactId>evosuite-maven-plugin</artifactId>

  6.        <version>1.0.6</version>

  7.      </plugin>

  8.    </plugins>

  9.  </build>

Maven自动的就会下载EvoSuite的相关依赖,如果加入后,出现错误,那么需要加入EvoSuite的Maven Respository。

  1. <pluginRepositories>

  2.  <pluginRepository>

  3.    <id>EvoSuite</id>

  4.    <name>EvoSuite Repository</name>

  5.    <url>http://www.evosuite.org/m2</url>

  6.  </pluginRepository>

  7. </pluginRepositories>

完成后,通过如下命令进行一下evosuite的测试。

  1. mvn evosuite:help

第一次使用EvoSuite插件,Maven会下来和EvoSuite相关的所有依赖,下载完成后,出现如下相似信息表示配置成功:

  1. [INFO] --- evosuite-maven-plugin:1.0.6:help (default-cli) @ Tutorial_Maven ---

  2. [INFO] Maven Plugin for EvoSuite 1.0.6

  3.  Plugin used to run EvoSuite to automatically generate high coverage JUnit

  4.  tests

  5.  This plugin has 7 goals:

  6.  evosuite:clean

  7.    Remove all local files created by EvoSuite so far

  8.  evosuite:coverage

  9.    Execute the manually written test suites (usually located under src/test/java)

  10.    and return the coverage of each class.

  11.  evosuite:export

  12.    When run, EvoSuite generate tests in a specific folder. New runs of EvoSuite

  13.    can exploit the tests in such folder, and/or modify them.

  14.    So, with 'export' we can copy all generated tests to a specific folder, which

  15.    by default points to where Maven searches for tests. If another folder is

  16.    rather used (or if we want to run with Maven the tests in the default EvoSuite

  17.    folder), then Maven plugins like build-helper-maven-plugin are needed

  18. evosuite:generate

  19.    Generate JUnit tests

  20. evosuite:help

  21.    Display help information on evosuite-maven-plugin.

  22.    Call mvn evosuite:help -Ddetail=true -Dgoal=<goal-name> to display parameter

  23.    details.

  24. evosuite:info

  25.    Obtain info of generated tests so far

  26. evosuite:prepare

  27.    Workaround mojo to overcome bug in Maven. Needed when EvoSuite tests are run

  28.    together with manual ones

  29. [INFO] ------------------------------------------------------------------------

  30. [INFO] BUILD SUCCESS

  31. [INFO] ------------------------------------------------------------------------

  32. [INFO] Total time: 1.489 s

  33. [INFO] Finished at: 2016-04-04T10:55:45+01:00

  34. [INFO] Final Memory: 9M/109M

  35. [INFO] ------------------------------------------------------------------------

配置完成后,运行如下命令生成测试代码和mock数据:

  1. mvn evosuite:generate

这有可能需要一段时间,如果电脑性能比较好,可以通过参数设置多并发的generate:

  1. mvn -Dcores=4 evosuite:generate

完成后,可以看到生成了一个.evosuite的目录,里面的best-test就是你需要的代码了。可以通过如下的命令,查看一下generate脚本的信息怎么样:

  1. mvn evosuite:info

返回信息如下:

  1. As we have just invoked EvoSuite on 4 classes, you should get an output like this:

  2. [INFO] --- evosuite-maven-plugin:1.0.6:info (default-cli) @ Tutorial_Maven ---

  3. [INFO] Going to query EvoSuite info on current project

  4. [INFO] * EvoSuite 1.0.6

  5. [INFO] Total number of classes in the project: 4

  6. [INFO] Number of classes in the project that are testable: 4

  7. [INFO] Number of generated test suites: 4

  8. [INFO] Overall coverage: 0.99

  9. [INFO] ------------------------------------------------------------------------

Maven项目的JUnit的测试cases一般都是放在src/test/java下,但是EvoSuite生成实在.evosuite下,那么通过如下命令就可以完成对应脚本的而移动了。

  1. mvn evosuite:export

mvn test执行测试

要想通过 mvn test命令执行测试,还需要在pom的 <dependencies></dependencies>内加入如下内容:

  1. <dependency>

  2.  <groupId>org.evosuite</groupId>

  3.  <artifactId>evosuite-standalone-runtime</artifactId>

  4.  <version>1.0.6</version>

  5.  <scope>test</scope>

  6. </dependency>

EvoSuite的脚本和RD的脚本分开存放

通过如下命令可以制定脚本的移动位置

  1. mvn evosuite:export -DtargetFolder=src/test/evosuite

或者,通过添加properites制定移动位置

src/test/evosuite

若果在项目中配置了脚本的移动目录,要再次使用mvn test就会报错,因此需要显示指出测试脚本的位置:

  1. <plugin>

  2.    <groupId>org.codehaus.mojo</groupId>

  3.    <artifactId>build-helper-maven-plugin</artifactId>

  4.    <version>1.8</version>

  5.   <executions>

  6.     <execution>

  7.       <id>add-test-source</id>

  8.       <phase>generate-test-sources</phase>

  9.       <goals>

  10.         <goal>add-test-source</goal>

  11.       </goals>

  12.       <configuration>

  13.          <sources>

  14.            <source>${targetFolder}</source>

  15.          </sources>

  16.       </configuration>

  17.    </execution>

  18.  </executions>

  19. </plugin>

RD的Junit脚本和EvoSuite的脚本同时执

有时候,我们会同时执行两类脚本,一类是RD手写的代码,一类是EvoSuite自动生成的,进入同时测试并不会出现什么大问题,但是也会对测试结果有片面的影响,因此需要只能EvoSuite仅对其生成的脚本起作用,需要在pom中加入如下插件。

  1. <plugin>

  2.   <groupId>org.apache.maven.plugins</groupId>

  3.   <artifactId>maven-surefire-plugin</artifactId>

  4.   <version>2.17</version>

  5.   <configuration>

  6.     <properties>

  7.       <property>

  8.          <name>listener</name>

  9.          <value>org.evosuite.runtime.InitializingListener</value>

  10.      </property>

  11.     </properties>

  12.  </configuration>

  13. </plugin>

关注测者,关注测试

上一篇:递归循环是否失败到下一个项目?


下一篇:POJ 1637 混合图求欧拉回路 最大流实现