写点什么

Jacoco 统计 web 接口 / 功能测试的代码覆盖率

用户头像
夏兮。
关注
发布于: 2021 年 02 月 16 日

一、代码覆盖率


通常我们在做单元测试的时候会接触到代码覆盖率的概念,通过在单元测试的过程中收集代码覆盖率去判断测试用例是否充分,去更精准的定位问题。而对于功能测试或者接口测试比较少的去关注覆盖率数据,功能测试时覆盖率的收集也是比较困难的。然后对于功能测试而言进行代码覆盖率的收集有利于测试工程师去判断哪些分支没有被覆盖,判断是否是设计用例的时候没有做到覆盖,又或者是由于存在 bug 使得无法覆盖到,从而更精准的去定位 bug 的位置,去分析问题,节省时间。


二、工具简介


对于 java 的代码覆盖率的收集,比较常用的工具有 emma、jacoco,它们都是免费的代码覆盖率工具。emma 目前已经不维护,EclEmma 团队推出了 jacoco,jacoco 可以理解为 emma 的升级版本。Jacoco 可以跟 ant、maven、gradle 等集成,降低了使用成本,使用更灵活 ;同时它还引入了监控机制,通过 JJavaAgent 技术监控 Java 程序。Jacoco 还可以更第三方平台进行集成,比如 sonar、jenkins,通过第三方平台更友好的将覆盖率数据在 web 端展示。


Java Counters


Jacoco 提供了多维度的覆盖率统计方法,包含指令级(Instructions,C0coverage)覆盖,分支(Branches,C1coverage)覆盖、类(classes)覆盖、方法(non-abstract methods)覆盖、行(Lines)覆盖。同时还提供圈复杂度(CyclomaticComplexity)的统计,它会去计算每个类,方法的圈复杂度,根据 McCabe1996 的定义,圈复杂度可以理解为覆盖所有的可能情况最少使用的测试用例数,同时圈复杂度越高意味着程序越复杂,发生 bug 的概率越大。


2.1 Instructions


Jacoco 在统计覆盖率时最小的统计单位就是字节码指令。通过指令覆盖率统计的是所有的指令哪些被执行了哪些没有被执行,从而得出统计数据。这项规则完全独立于源码格式并且在任何情况下有效,不需要类文件的调试信息。


2.2 Branches


Jacoco 对所有的 if...else...和 switch...case...指令计算了分支覆盖率。分支覆盖会去统计程序中所有的分支数量,并统计哪些被执行哪些没有被执行,从而得出有效的覆盖率数据。


2.3 Classes


类覆盖是收集类的统计数据,计算中每个类中只要有一个方法被执行,这个类就被认定为被执行,那么它的覆盖率就是 100%。


2.4 Methods


方法覆盖是收集类中的方法的覆盖率,通常一个非抽象方法都至少有一条指令,只要改方法中有一行被执行,该统计规则就认为他被执行了,该方法的覆盖率就是 100%。


2.5 Lines


行覆盖,统计每行代码的覆盖率,只有当每一行代码都被执行到了才会是 100%,理论上保证 100%的覆盖率就能保证程序不会有 bug。


三、准备工作


进入 jacoco 官网:http://www.eclemma.org/jacoco/ ,下载 jacoco-0.7.8.zip。


进入 apache 官网:http://ant.apache.org/bindownload.cgi ,下载 apache-ant-1.9.6-bin.tar.gz。


四、Tomcat 服务配置


1、本地为 windows 系统,先关闭 tomcat 服务。


2、将下载得到的 jacocoagent.jar 拷贝至 D:\Program Files (x86)\apache-tomcat-8.0.30-windows-x86\apache-tomcat-8.0.30\lib\


3、修改 bin/catalina.bat 中 JAVA_OPTS 的配置


set JAVA_OPTS="-javaagent:%CATALINA_BASE%\lib\jacocoagent.jar=includes=com.yihu.qa.*,output=tcpserver,port=3344,address=192.168.1.103"


其中:%CATALINA_BASE%\lib\jacocoagent.jar 为安装 jacoco 的 jacocoagent.jar 包相对路径;output 覆盖率数据输出的形式,有 file, tcpserver, tcpclient, 默认是 file,file 是在 jvm 停掉时才将覆盖率数据 dump 出来;address 和 port 可以提供 client 访问,并 dump 出覆盖率数据文件,在 build.xml 会使用。


4、执行 startup.bat 启动 tomcat。


五、本地 ant 配置


1、ant 配置


将下载来的 ant 解压到某个目录下,添加 ant 环境变量,我的电脑->属性->高级系统设置->环境变量->新建


image.png

image.png

接下来查看 ant 配置是否 ok,打开命令行,执行 ant -version,如下图,表示 ant 安装成功


image.png

Ant -version


2、创建一个 ant 的目录 D:\Program Files (x86)\apache-tomcat-8.0.30-windows-x86\ant,将下载得到的 jacocoant.jar 拷贝至 D:\Program Files (x86)\apache-tomcat-8.0.30-windows-x86\ant


3、配置 build.xml


image.png

说明:主要需要配置 dump 任务,jacoco 生成报告任务;dump 任务主要是为了能够生成.exec 文件,在通过 jacoco 的任务根据源码跟.class 文件以及.exec 文件得出相应的 html 格式的覆盖率数据。


如何定义任务:


<target name=”***”>****</target>


如何执行任务:ant targetname


3、执行 ant dump,执行成功后可以在 ant 的目录下发行.exec 的文件


image.png

ant dump


4、执行 ant report,在 ant 目录下看到 coverage_ant_task 文件夹


image.png

image.png

5、查看报告


在报告中我们可以看到整个项目的各个覆盖率的情况,同时我们也可以查看到各个类方法的覆盖率数据,以及可以看到代码的行覆盖的情况,在方法里可以清晰的看到红色跟绿色,红色代表没有覆盖,绿色代表已经被覆盖了。从而我们可以推断出可能用例不完善这时候需要补充用例去覆盖改部分的内容,如果用例已经覆盖了,需要排查是否是出现了 bug。


发布于: 2021 年 02 月 16 日阅读数: 33
用户头像

夏兮。

关注

星辰大海... 2018.03.21 加入

测试开发工程师 热爱技术,热爱生活

评论 (1 条评论)

发布
用户头像
请问一下测试用例和jacoco的关联和运用是什么逻辑,测试用例是通过代码写还是正常功能用例也可以
4 小时前
回复
没有更多了
Jacoco统计web接口/功能测试的代码覆盖率