实验五 单元测试
实验五、单元测试
一、实验目的
1)掌握单元测试的方法
2) 学习XUnit测试原理及框架;
3)掌握使用测试框架进行单元测试的方法和过程。
二、实验内容与要求
1、了解单元测试的原理与框架
1.1 单元测试原理
单元测试(unit testing),是指对软件中的最小可测试单元进行检查和验证。对于单元测试中单元的含义,一般来说,要根据实际情况去判定其具体含义,如C语言中单元指一个函数,Java里单元指一个类,图形化的软件中可以指一个窗口或一个菜单等。总的来说,单元就是人为规定的最小的被测功能模块。单元测试是在软件开发过程中要进行的最低级别的测试活动,软件的独立单元将在与程序的其他部分相隔离的情况下进行测试。单元测试是由程序员自己来完成,最终受益的也是程序员自己。可以这么说,程序员有责任编写功能代码,同时也就有责任为自己的代码编写单元测试。执行单元测试,就是为了证明这段代码的行为和我们期望的一致。
单元测试的内容包括
模块接口测试、局部数据结构测试、路径测试、错误处理测试、边界测试
(1)模块接口测试
模块接口测试是单元测试的基础。只有在数据能正确流入、流出模块的前提下,其他测试才有意义。模块接口测试也是集成测试的重点,这里进行的测试主要是为后面打好基础。测试接口正确与否应该考虑下列因素:
-输入的实际参数与形式参数的个数是否相同
-输入的实际参数与形式参数的属性是否匹配
-输入的实际参数与形式参数的量纲是否一致
-调用其他模块时所给实际参数的个数是否与被调模块的形参个数相同;
-调用其他模块时所给实际参数的属性是否与被调模块的形参属性匹配;
-调用其他模块时所给实际参数的量纲是否与被调模块的形参量纲一致;
-调用预定义函数时所用参数的个数、属性和次序是否正确;
-是否存在与当前入口点无关的参数引用;
-是否修改了只读型参数;
-对全程变量的定义各模块是否一致;
-是否把某些约束作为参数传递。
如果模块功能包括外部输入输出,还应该考虑下列因素:
-文件属性是否正确;
-OPEN/CLOSE语句是否正确;
-格式说明与输入输出语句是否匹配;
-缓冲区大小与记录长度是否匹配;
-文件使用前是否已经打开;
-是否处理了文件尾;
-是否处理了输入/输出错误;
-输出信息中是否有文字性错误。
-局部数据结构测试;
-边界条件测试;
-模块中所有独立执行通路测试;
(2)局部数据结构测试
检查局部数据结构是为了保证临时存储在模块内的数据在程序执行过程中完整、正确,局部功能是整个功能运行的基础。重点是一些函数是否正确执行,内部是否运行正确。局部数据结构往往是错误的根源,应仔细设计测试用例,力求发现下面几类错误:
-不合适或不相容的类型说明;
-变量无初值;
-变量初始化或省缺值有错;
-不正确的变量名(拼错或不正确地截断);
-出现上溢、下溢和地址异常。
(3)边界条件测试
边界条件测试是单元测试中最重要的一项任务。众所周知,软件经常在边界上失效,采用边界值分析技术,针对边界值及其左、右设计测试用例,很有可能发现新的错误。边界条件测试是一项基础测试,也是后面系统测试中的功能测试的重点,边界测试执行的较好,可以大大提高程序健壮性。
(4)独立路径测试
在模块中应对每一条独立执行路径进行测试,单元测试的基本任务是保证模块中每条语句至少执行一次。测试目的主要是为了发现因错误计算、不正确的比较和不适当的控制流造成的错误。具体做法就是程序员逐条调试语句。常见的错误包括:
-误解或用错了算符优先级;
-混合类型运算;
-变量初值错;
-精度不够;
-表达式符号错。
(5)错误处理测试
检查模块的错误处理功能是否包含有错误或缺陷。例如,是否拒绝不合理的输入;出错的描述是否难以理解、是否对错误定位有误、是否出错原因报告有误、是否对错误条件的处理不正确;在对错误处理之前错误条件是否已经引起系统的干预等。
通常单元测试在编码阶段进行。在源程序代码编制完成,经过评审和验证,确认没有语法错误之后,就开始进行单元测试的测试用例设计。利用设计文档,设计可以验证程序功能、找出程序错误的多个测试用例。对于每一组输入,应有预期的正确结果。
1.2 测试框架
xUnit是各种代码驱动测试框架的统称,这些框架可以测试 软件的不同内容(单元),比如函数和类。xUnit框架的主要优点是,它提供了一个自动化测试的解决方案。可以避免多次编写重复的测试代码。
底层是xUnit的framwork,xUnit的类库,提供了对外的功能方法、工具类、api等
TestCase(具体的测试用例)去使用framwork
TestCase执行后会有TestResult
使用TestSuite控制TestCase的组合
TestRunner执行器,负责执行case
TestListener过程监听,监听case成功失败以及数据结果,输出到结果报告中。
Unit测试框架包括四个要素:
(1)测试目标(对象)
一组认定被测对象或被测程序单元测试成功的预定条件或预期结果的设定。Fixture就是被测试的目标,可以是一个函数、一组对象或一个对象。 测试人员在测试前应了解被测试的对象的功能或行为。
(2)测试集
测试集是一组测试用例,这些测试用例要求有相同的测试Fixture,以保证这些测试不会出现管理上的混乱。
(3)测试执行
单个单元测试的执行可以按下面的方式进行:
第一步 编写 setUp() 函数,目的是:建立针对被测试单元的独立测试环境;举个例子,这可能包含创建临时或代理的数据库、目录,再或者启动一个服务器进程。
第二步 编写所有测试用例的测试体或者测试程序;
第三步 编写tearDown()函数,目的是:无论测试成功还是失败,都将环境进行清理,以免影响后续的测试;
(4)断言
断言实际上就是验证被测程序在测试中的行为或状态的一个函数或者宏。断言的失败会引发异常,终止测试的执行。
1.3 面向特定语言的,基于xUnit框架的自动化测试框架
Junit : 主要测试用Java语言编写的代码
CPPunit:主要测试用C++语言编写的代码
unittest , PyUnit:主要测试用python语言编写的代码
MiniUnit: 主要用于测试C语言编写的代码
三、实验过程
本次实验,我使用的编程语言是Java,编程软件是Idea,采用的框架是Junit
1、测试方法源码
//cell.java public void setCellStatus(int sta) { if(sta!=0 && sta!=1){ System.out.println("illegal status"); return; } else{ System.out.println("legal"); } this.status = sta; } public void setLivingNum(int living) { if(living > 8 || living < 0){ System.out.println("illegal living number"); return; } else{ System.out.println("legal"); } this.livingNum = living; } public void setNextStatus() { if(this.getLivingNum() == 3) { this.setCellStatus(1); } else if(this.getLivingNum()<2 || this.getLivingNum()>3){ this.setCellStatus(0); } else { this.setCellStatus(this.status); } }
//map.java public boolean invalidCell(int x, int y) { return (x >= 0) && (x <this.HEIGHT) && (y >= 0) && (y < this.WIDTH); } public void setTime(int t){ if(t>5000){ System.out.println("time is too long"); return; } else if(t <= 0 ){ System.out.println("illegal time"); return; else{ System.out.println("legal"); } this.time = t; }
2、测试用例设计
(1)设置细胞状态测试
约定活细胞状态为1,死细胞状态为0。如果是错误状态输出"illegal status",正确状态输出"legal"。
用例类型 | 参数(细胞状态) | 期望值 |
错误用例 | -1 |
illegal status |
错误用例 | 2 |
illegal status |
正确用例 | 1 |
legal |
正确用例 | 0 |
legal |
测试结果如下:
(2)设置活细胞数量测试
一个细胞周围活细胞数量的合理值为0~8。数量在合理值范围内输出"legal",在合理范围之外输出"illgeal living num"
用例类型 | 参数(活细胞数) | 期望输出 |
错误用例 | -1 | illegal living num |
错误用例 | 9 | illegal living num |
正确用例 | 1 | legal |
测试结果如下:
(3)更新细胞状态测试
当一个细胞周围的活细胞数为3的时候死细胞变为活细胞,不为3的时候细胞会死亡。初始是细胞状态为死细胞
用例类型 | 参数(活细胞数) | 期望输出 |
正确用例 | 3 | 0->1 |
正确用例 | 5 | 1->0 |
正确用例 | 1 | 0->0 |
测试结果如下:
(4)创建地图测试
创建地图的时候,假设高度应小于1000,宽度小于1000,错误用例输出"illegal height or width",正确用例输出"legal"。
用例类型 | 参数(高,宽) | 期望输出 |
错误用例 | (-1,-1) | illegal height or width |
错误用例 | (1200,1200) | illegal height or width |
正确用例 | (30,30) | legal |
测试结果如下:
(5)细胞位置测试
细胞位置的测试主要是针对处在边界细胞,防止计算的时候出现数组越界。
用例类型 | 参数(坐标) | 期望输出 |
错误用例 | (-1,-1) | false |
正确用例 | (0,0) | true |
错误用例 | (3,3) | false |
正确用例 | (2,2) | true |
测试结果如下:
(6)线程测试
线程的刷新时间要在合理的范围之内,太快太慢都无法看清变化,取线程刷新时间在500ms到1000ms
用例类型 | 参数(时间) | 期望输出 |
错误用例 | 400 |
time is too short |
正确用例 | 1000 |
legal |
错误用例 | 8000 |
time is too long |
错误用例 | -1 |
illegal time |
测试结果如下:
3、选择的测试框架介绍及安装过程
我使用的编译器是Idea,安装Junit十分方便,首先打开File->settings->plugins
下载好标注的部分,然后在other settings中将默认模板设置为Junit 4
创建测试单元的话,打开对应类,使用快捷键Ctrl + shift + T即可
4、测试代码
//CellTest.java package methods; import static org.junit.Assert.*; /** * @author CS_WBR */ public class CellTest { @org.junit.Test public void setLivingNum() {
System.out.println("******setLivingNum_test*******"); Cell c = new Cell(1); System.out.print("case1:"); c.setLivingNum(-1); System.out.print("case2:"); c.setLivingNum(9); System.out.print("case3:"); c.setLivingNum(1); System.out.println("*************end**************"); } @org.junit.Test public void setNextStatus(){ System.out.println("******setLivingNum_test*******"); Cell c = new Cell(0); System.out.println("0:dead 1:living"); c.setLivingNum(3); System.out.print("case1:"); System.out.print(c.getCellStatus()+"->"); c.setNextStatus(); System.out.println(c.getCellStatus()); c.setLivingNum(5); System.out.print("case2:"); System.out.print(c.getCellStatus()+"->"); c.setNextStatus(); System.out.println(c.getCellStatus()); c.setLivingNum(1); System.out.print("case3:"); System.out.print(c.getCellStatus()+"->"); c.setNextStatus(); System.out.println(c.getCellStatus()); System.out.println("*************end**************"); } @org.junit.Test public void setCellStatus() { System.out.println("******setCellStatus_test*******"); Cell c = new Cell(1); System.out.print("case1:"); c.setCellStatus(-1); System.out.print("case2:"); c.setCellStatus(2); System.out.print("case3:"); c.setCellStatus(0); System.out.print("case4:"); c.setCellStatus(1); System.out.println("*************end**************"); } }
//MapTest.java package methods; import org.junit.Test; /** * @author CS_WBR */ public class MapTest { @Test public void Map(){ System.out.println("******Create_Map******"); System.out.print("case1:"); Map m = new Map(-1,-1); System.out.print("case2:"); Map c = new Map(1200,1200); System.out.print("case3:"); Map d = new Map(30,30); System.out.println("*************end*******"); } @Test public void invalidCell() { Map m = new Map(3,3); System.out.println("******invalidCell_test*******"); System.out.println("case1:"+m.invalidCell(-1,-1)); System.out.println("case2:"+m.invalidCell(0,0)); System.out.println("case3:"+m.invalidCell(3,3)); System.out.println("case4:"+m.invalidCell(2,2)); System.out.println("*************end*************"); } @Test public void setTime(){ Map m = new Map(3,3); System.out.println("******setTime_test*******"); System.out.print("case1:"); m.setTime(400); System.out.print("case2:"); m.setTime(1000); System.out.print("case3:"); m.setTime(8000); System.out.print("case4:"); m.setTime(-1); System.out.println("*************end**********"); } }
5、提交代码
四、思考题
比较以下二个工匠的做法,你认为哪种好?结合编码和单元测试,谈谈你的认识。
我认为两种方式各有优缺点,第一种方式适用于开发时间充足、要求比较严格的项目。每一个模块都进行测试检查,能够保证项目自上到下的问题和漏洞较少,但是十分耗费时间、人力和物力,;第二种适用于小型项目,项目开发周期短、需求性高。将多个模块堆加在一起,然后集中测试寻找错误,这种方式极大的缩短了开发时间,但是也容易引起更大的bug,甚至可能导致模块需要重构。
实验小结
本次实验使用的是idea,各种操作比较方便,这是一个非常不错的编辑器。由于我的代码写的时候模块没有划分好,导致测试的时候有很多逻辑上的问题,修改代码花费了不少时间。代码本身的bug不多,因为在之前的代码规范检查的时候已经检查出来了。同时我也了解到了Junit和其他语言的单元测试工具,认识到单元测试的重要性。对于一个比较大的项目,在写底层代码的时候如果不进行有效的测试检查,根基不稳,项目也就会面临巨大的问题。一个好的项目,必然要经过一定的检查测试,测试检查如根基,根基扎实,这个项目也会变得扎实。