软件测试的方法和模型
从测试设计方法分类
测试名称 |
测试内容 |
Black box黑盒测试 |
把软件系统当作一个“黑箱”,无法了解或使用系统的内部结构及知识。从软件的行为,而不是内部结构出发来设计测试. |
White box白盒测试 |
设计者可以看到软件系统的内部结构,并且使用软件的内部知识来指导测试数据及方法的选择。 |
Gray box. 灰盒测试 |
介于黑盒和白盒之间 |
总结: 实际工作中,对系统的了解越多越好。目前大多数的测试人员都是做黑盒测试,很少有做白盒测试的。 因为白盒测试对软件测试人员的要求非常高,需要有很多编程经验。做.NET程序的白盒测试你要能看得懂.NET代码。做JAVA程序的测试,需要你能看懂 JAVA的代码。 如果你都能看懂了,你还会做测试么?
从测试是手动还是自动上分类
测试名称 |
测试内容 |
Manual Test 手动测试 |
测试人员用鼠标去手动测试 (测试GUI) |
Automation 自动化测试 |
用程序测试程序 (测试API) |
对于项目来说, 手动测试和自动化测试同等重要,都是保障软件质量的方法。 目前大部分的项目组都是手动测试和自动化测试相结合。因为很多测试无法做成自动化,很多复杂的业务逻辑也很难自动化, 所以自动化测试无法取代手动测试。
对于软件测试人员个人发展来说, 做自动化测试是个挑战,也是测试人员发展的一个方向, 需要测试人员学习大量的开发知识(开发的知识真是学无止境啊)。 从长远角度来看,自动化测试肯定是越来越吃香的。
而手动测试比较适合刚工作不久的人,手动测试最大的缺点就是技术含量低,单调乏味,容易废人。
总的来说,手工测试胜在测试业务逻辑,而自动化测试胜在测试底层架构。
如果被测试的程序可测试性比较好, 很有必要做成自动化测试。 能做自动化的尽量做成自动化, 下面这些情形是可以做自动化的
1. 测试存储过程。 例如用C#去测试存储过程
2. 测试Web servies. 例如: 用SoupUI工具,或者C#,Java 去测试Web servies。
3. 界面和业务逻辑分离的系统,比如,MVC,MVP架构, 或者WPF 程序。 可以用测试脚本去测试这些程序的API。
从测试的目的分类
功能测试
测试的范围从小到大,从内到外, 从程序开发人员(单元测试)到测试人员,到一般用户Alpha/Beta测试
测试名称 |
测试内容 |
Unit Test 单元测试 |
在最低的功能/参数上验证程序的准确性,比如测试一个函数的正确性(开发人员做的) |
Functional Test 功能测试 |
验证模块的功能 (测试人员做的) |
Integration Test 集成测试 |
验证几个互相有依赖关系的模块的功能 (测试人员做的) |
Scenario Test 场景测试 |
验证几个模块是否能完成一个用户场景 (测试人员做的) |
System Test 系统测试 |
对于整个系统功能的测试 (测试人员做的) |
Alpha 测试 |
软件测试人员在真实用户环境中对软件进行全面的测试 (测试人员做的) |
Beta 测试 |
真实的用户在真实的用户环境中进行的测试, 也叫公测 (最终用户做的) |
非功能测试
一个软件除了基本功能之外,还有很多功能之外的特性,这些叫“Quality of Service requirement”服务质量需求。没有软件的功能,这些特性都无从表现出来,因此,我们要在软件开发的适当阶段-基本功能完成后做这些测试。
测试名称 |
测试内容 |
Stress test 压力测试 |
验证软件在超过负载设计的情况下仍能返回正确的结果,没有崩溃 |
Load test 负载测试 |
测试软件在负载情况下能否正常工作 |
Performance test性能测试 |
测试软件的效能,是否提供满意的服务质量 |
Accessibility test |
软件辅助功能测试-测试软件是否向残疾用户提供足够的辅助功能 |
Localization/Globalization |
本地化/全球化测试 |
Compatibility Test |
兼容性测试 |
Configuration Test |
配置测试-测试软件在各种配置下能否正常工作 |
Usability Test |
可用性测试 –测试软件是否好用 |
Security Test |
软件安全性测试 |
性能测试
性能测试要求测试人员熟练性能测试工具,比如QTP, LoadRunner, Jmeter。 Visual Studio也提供了很多性能测试的工具. 要求测试人员对低层协议非常理解和编写脚本。
性能测试非常有技术含量, 很有发展前途, 是软件测试人员的一个职业发展方向。
安全性测试
安全性测试的内容很广, 非常有难度啊。 我只接触过XSS(跨站脚本攻击)和SQL注入攻击。
安全性测试非常有技术含量, 我认为也是软件测试人员的一个职业发展方向
按测试的时机和作用分类
在开发软件的过程中,不少测试起着“烽火台”的作用,它们告诉我们软件开发的流程是否畅通。
测试名称 |
测试内容 |
Smoke Test |
“冒烟”–如果测试不通过,则不能进行下一步工作 |
Build Verification Test(BVT) |
验证构建是否通过基本测试。 |
Acceptance Test |
验收测试,为了全面考核某功能/特性而做的测试 |
BVT测试是一种Smoke Test, 指Build生成好之后,自动运行的自动化测试脚本来检查这个Build的基本功能。 如果BVT测试失败了,需要开发人员马上修改,重新生成Build
按测试测策略分类
测试名称 |
测试内容 |
Regression Test 回归测试 |
对一个新的版本,重新运行以往的测试用例,看看新版本和已知的版本相比是否有退化 (regression) |
Ad hoc Test 探索性测试 |
随机进行的,探索性的测试。 |
Sanity Test |
粗略的测试, 只需要执行部分的测试用例 |
Regression Test 回归测试:
对软件测试人员来说就是重复测试,所以回归测试最好是自动化的, 否则测试人员就要一遍又一遍地重复测试,
1. 开发人员做些小改动,就需要测试人员做回归测试。确保现有的功能没有被破坏
2. Bug Fix 也需要回归测试,确保新的代码修复了Fix, 也确保现有的功能没有被破坏
3. 项目后期,需要做一个完整回归测试, 确保所有的功能都是好的
Ad hoc Test 探索性测试:
平常我最喜欢做随机测试了, 抛开test case. 自己按照自己的思路,随便点点。 如果测试GUI,Ad hoc能发现大量的bug.
四大模型——
1、V模型
在软件测试方面,V模型是最广为人知的模 型,尽管很多富有实际经验的测试人员还是不太熟悉V模型,或者其它的模型。V模型已存在了很长时间,和瀑布开发模型有着一些共同的特性,由此也和瀑布模型 一样地受到了批评和质疑。V模型中的过程从左到右,描述了基本的开发 过程和测试行为。V模型的价值在于它非常明确地标明了测试过程中存在的不同级别,并且清楚地描述了这些测试阶段和开发过程期间各阶段的对应关系。局限性: 把测试作为编码之后的最后一个活动,需求分析等前期产生的错误直到后期的验收测试才能发现.
2、W模型
V模型的局限性在于没有明确地说明早期的 测试,无法体现“尽早地和不断地进行软件测试” 的原则。在V模型中增加软件各开发阶段应同步进行的测试,演化为W 模型(如下图)。在模型中不难看出,开发是“V”,测试是与此并行的“V”。基于“尽早地和不断地进行软件测试”的原则,在软件的需求和设计阶段的测试活 动应遵循IEEE1012-1998《软件验证与确认(V&V)》的原则。
W模型由Evolutif公司提出,相对于V模型,W模型更科学。W模型是V模型的发展,强调的是测试伴随着整个软件开发周期,而且测试的对象不仅仅是程序,需求、功能和设计同样要测试。测试与开发是同步进行的,从而有利于尽早地发现问题。
W模型也有局限性。W模型和V模型都把软件的开发视为需求、设计、编码等一系列串行的活动,无法支持迭代、自发性以及变更调整。
3、X模型
X模型也是对V模型的改进,X模型提出针对单独的程序片段进行相互分离的编码和测试,此后通过频繁的交接,通过集成最终合成为可执行的程序。
X模型的左边描述的是针对单独程序片段所 进行的相互分离的编码和测试,此后将进行频繁的交接,通过集成最终成为可执行的程序,然后再对这些可执 行程序进行测试。己通过集成测试的成品可以进行封装并提交给用户,也可以作为更大规模和范围内集成的一部分。多根并行的曲线表示变更可以在各个部分发生。 由图中可见,X模型还定位了探索性测试,这是不进行事先计划的特殊类型的测试,这一方式往往能帮助有经验的测试人员在测试计划之外发现更多的软件错误。但 这样可能对测试造成人力、物力和财力的浪费,对测试员的熟练程度要求比较高。
4、H模型
H模型中, 软件测试过程活动完全独立,贯穿于整个产品的周期,与其他流程并发地进行,某个测试点准备就绪时,就可以从测试准备阶段进行到测试执行阶段。软件测试可以尽早的进行,并且可以根据被测物的不同而分层次进行。
这个示意图演示了在整个生产周期中某个层次上的一次测试“微循环”。图中标注的其它流程可以是任意的开发流程,例如设计流程或者编码流程。也就是说, 只要测试条件成熟了,测试准备活动完成了,测试执行活动就可以进行了。
H模型揭示了一个原理:软件测试是一个独立的流程,贯穿产品整个生命周期,与其他流程并发地进行。H模型指出软件测试要尽早准备, 尽早执行。不同的测试活动可以是按照某个次序先后进行的,但也可能是反复的,只要某个测试达到准备就绪点,测试执行活动就可以开展