第1页:课程内容
课程内容
- 软件工程概述
- 软件需求分析
- 软件设计
- 软件编码
- 软件测试
- 软件维护
- 软件复用
- 软件工程管理
- 软件质量管理
第2页:软件测试的基本概念
- 测试(Testing)
- 测试的目的是发现程序错误;测试的任务是通过在计算机上执行程序,暴露程序中潜在的错误。
- 纠错(Debugging)
- 纠错的目的是定位和纠正错误;纠错的任务是软件故障,保证程序的可靠运行。
第3页:测试的特性
测试的特性
- 挑剔性
- 测试是对质量的监督与保证,所以“挑短”和“揭短”很自然成为测试人员的奉行的信条。
- 复杂性
- 设计测试用例是一项需要细致和高度技巧的工作。
- 不彻底性。程序测试只能证明错误存在,但不能证明错误不存在。
- 经济性。选择一些典型的、有代表性的测试用例,进行有限测试。
第4页:测试的分类
测试的分类:区分静态测试的代码评审与动态测试的程序执行两类方式。
第5页:测试的文档
测试的文档
- 测试计划
- 测试计划的主体是“测试内容说明”,包括测试项目的名称、各项测试的目的、步骤和进度,以及测试用例的设计等。
- 测试报告
- 测试报告的主体是“测试结果”,它包含测试项目的名称、实际测试结果与期望测试结果比较,发现问题,以及测试达到的效果。
第6页:等价测试
- 黑盒测试
- 等价测试
- 把输入数据的可能值划分为若干个等价类,使每类中的任何一个测试用例,都能代表同一等价类中的其它测试用例。
采用等价测试注意以下两点:
- 划分等价类不仅要考虑代表“有效”输入值的有效等价类,还要考虑代表“无效”输入值得无效等价类;
- 每一无效等价类至少要用一个测试用例,不然可能漏掉某一类错误,但允许若干个有效等价类合用一个测试用例,以便进一步减少测试的次数。
第7页:划分等价类
划分等价类:某工厂公开招工,规定报名者年龄在16周岁至35周岁(出生年月在1967年2月到1986年3月之间),超出范围将拒绝接受并显示“年龄不合格”。下表列出该程序输入条件的等价类划分。
招工年龄程序的等价类划分| 输入数据 | 有效等价类 | 无效等价类 |
|---|
| 出生年月 | (1)6位数字字符 | (2)有非数字字符;(3)少于6个数字字符;(4)多于6个数字字符 |
|---|
| 对应数值 | (5)在196702-198603之间 | (6)小于196702;(7)大于198603 |
|---|
| 月份对应数值 | (8)在1-12之间 | (9)等于“0”;(10)大于12 |
|---|
第8页:等价类测试用例
等价类测试用例:下表按前页划分的等价类,给出有效等价类所需测试用例与每一无效等价类的测试用例。
招工年龄程序的等价类测试用例| 测试范围 | 测试数据 | 期望结果 |
|---|
| (1)、(5)、(8) | 197011 | 输入有效 |
|---|
| (2) | MAY,70 | 输入无效 |
|---|
| (3) | 19705 | 输入无效 |
|---|
| (4) | 1968011 | 输入无效 |
|---|
| (6) | 195512 | 年龄不合格 |
|---|
| (7) | 196006 | 年龄不合格 |
|---|
| (9) | 196200 | 输入无效 |
|---|
| (10) | 197222 | 输入无效 |
|---|
第9页:边界测试
边界测试
- 边界测试
- 采用边界值分析法就是要这样来选择测试用例,使得被测试程序能在边界值及其附近运行,从而更有效地暴露程序中潜在的错误。
- 例如,
第10页:出生年月边界测试用例
出生年月的边界分析法测试用例:下表围绕出生年月字段的类型、长度与对应年龄三类条件,选取边界及边界附近的测试数据。
“出生年月”的边界分析法测试用例| 输入等价类 | 测试用例说明 | 测试数据 | 期望结果 | 选取理由 |
|---|
| 出生年月 | 1个数字字符 | 5 | 输入无效 | 仅有一个合法字符 |
|---|
| 出生年月 | 5个数字字符 | 19705 | 输入无效 | 比有效长度恰少一个字符 |
|---|
| 出生年月 | 7个数字字符 | 1968011 | 输入无效 | 比有效长度恰多一个字符 |
|---|
| 出生年月 | 有1个非数字字符 | 19705A | 输入无效 | 非法字符最少 |
|---|
| 出生年月 | 全是非数字字符 | AUGUST | 输入无效 | 非法字符最多 |
|---|
| 出生年月 | 6个数字字符 | 197011 | 输入有效 | 类型与长度均有效 |
|---|
| 对应数值 | 最大符合年龄 | 196702 | 合格年龄 | 35周岁 |
|---|
| 对应数值 | 最小符合年龄 | 198603 | 合格年龄 | 16周岁 |
|---|
| 对应数值 | 恰大于合格年龄 | 196701 | 不合格年龄 | 大于35周岁 |
|---|
| 对应数值 | 恰小于合格年龄 | 198604 | 不合格年龄 | 小于16周岁 |
|---|
第11页:月份边界测试用例
月份字段的边界分析法测试用例:下表针对月份对应的数值,选取最小值、最大值及紧邻边界两侧的数据。
月份字段的边界分析法测试用例| 输入等价类 | 测试用例说明 | 测试数据 | 期望结果 | 选取理由 |
|---|
| 月份对应数值 | 月份为1 | 196801 | 输入有效 | 最小月份 |
|---|
| 月份对应数值 | 月份为12 | 198512 | 输入有效 | 最大月份 |
|---|
| 月份对应数值 | 月份小于1 | 196800 | 输入无效 | 恰小于最小月份 |
|---|
| 月份对应数值 | 月份大于12 | 197413 | 输入无效 | 恰大于最大月份 |
|---|
第12页:错误猜测法
- 错误猜测法
- 猜错就是猜测被测程序放在哪些地方容易出错,然后针对可能的薄弱环节来设计测试用例。
- 一般先用等价分类法和边界值分析法设计测试用例,然后用猜错法补充一些例子作为辅助的手段。
- 其它黑盒测试法
因果图
第13页:逻辑覆盖测试
白盒测试
- 逻辑覆盖测试
- 用流程图来设计测计用例。主要考察的重点是图中的判定框(选择或循环)。按照被测试程序所作测试的有效程度,逻辑测试可由弱到强区分5种覆盖标准:
- 语句覆盖
- 每条语句至少执行一次。
- 判定覆盖
- 每一判定的每个分支至少执行一次。
- 条件覆盖
- 每一判定中的每个条件,分别按“真”、“假”至少各执行一次。
- 判定/条件覆盖
- 同时满足判定覆盖和条件覆盖的要求。
- 条件组合覆盖
- 求出判定中所有条件的各种可能组合值,每一可能的条件子和至少执行一次。
第14页:五种测试标准示例
五种测试标准示例:下表以前页程序结构为例,列出三种覆盖标准对应的测试用例应满足的条件。
五种逻辑覆盖标准示例| 覆盖标准 | 程序结构举例 | 测试用例应满足的条件 |
|---|
| 语句覆盖 | A∧B | A∧B=.T. |
|---|
| 判定覆盖 | A∧B | A∧B=.T.,A∧B=.F. |
|---|
| 条件覆盖 | A∧B | A=.T.,A=.F.,B=.T.,B=.F. |
|---|
第15页:五种测试标准示例续
五种测试标准示例(续):下表继续列出判定/条件覆盖与条件组合覆盖的要求。
五种逻辑覆盖标准示例(续)| 覆盖标准 | 程序结构举例 | 测试用例应满足的条件 |
|---|
| 判定/条件覆盖 | A∧B | A∧B=.T.,A∧B=.F.;A=.T.,A=.F.,B=.T.,B=.F. |
|---|
| 条件组合覆盖 | A∧B | A=.T.∧B=.T.;A=.T.∧B=.F.;A=.F.∧B=.T.;A=.F.∧B=.F. |
|---|
第16页:冒泡排序算法流程图
冒泡排序算法流程图:用于演示逻辑覆盖与路径测试的分析对象。
第17页:语句覆盖与判定覆盖
语句覆盖与判定覆盖:冒泡排序程序的语句覆盖与判定覆盖分析,说明仅用一组数据的测试漏洞。
只要送入先大后小的两个数,程序执行时就可以遍历流程图中的所有框。
第18页:语句覆盖的执行路径
语句覆盖的执行路径:标出未能执行到的分支与符号误写时的漏检情形。
第19页:判定覆盖的执行路径
判定覆盖的执行路径:说明测试数据在判定覆盖下仍可能漏检的错误。
第20页:条件覆盖
- 条件覆盖
- 使复合条件占的每个条件分别按“真”、“假”出现一次,才能克服前述缺点。因此,可以选择如下测试数据{A={8,4,9,6},K=4}{A={8,4,8,4},K=4}就能对程序实现条件覆盖。此时A[I](或A[J])大于、等于或小于A[I-1](或A[J-1])的3种将分别至少出现一次,无论把“
- ”误写为“>”或“=”,都可用这两组数据检查出来。因此,对于本例测试数据可以选择{A={8,4,9,6},K=4},{A={8,4,8,4},K=4}或合成一组{A={8,4,8,4,9,6},K=6}
第21页:判定覆盖与条件覆盖的差别
判定覆盖与条件覆盖差别:
- 判定覆盖把判定看成一个整体,后者则着眼于其中的一个条件。
- 如果一个判定含有一个以上条件,采用判定覆盖可能出现如下漏洞,即判定中有些条件得到测试,另一些条件却被忽略,从而掩盖程序的错误。
- 条件覆盖要求对每一条件进行单独的检查,一般来说它的差错能力比判定覆盖强,但也不尽然。
第22页:只覆盖一个分支的条件覆盖实例
只覆盖一个分支的条件覆盖实例:展示A与B真假组合下的路径覆盖情况。
第23页:路径测试法与程序图
路径测试法与程序图:路径测试法与程序图的概念,说明程序图是简化后的流程图。
第24页:程序图的说明
程序图的说明:程序图的画法说明,涵盖顺序节点合并与复合条件判定框的分解。
第25页:从流程图导出程序图
从流程图导出程序图:从流程图导出程序图的示例,展示含非正常出口的流程图转换结果。
第26页:冒泡排序的程序图
冒泡排序的程序图:冒泡排序程序的程序图,标出各节点与边的编号及非正常出口。
第27页:路径测试
- 路径测试
- 对程序图中每一条可能的程序执行路径至少测试一次。如果程序中含有循环(在程序中表现为环),则每个循环至少执行一次。
路径测试具有如下特征:
- 满足结构测试的最低要求。语句覆盖加判定覆盖是对白盒测试的最低要求,同时满足这两种标准的覆盖为“完全覆盖”。从对路径测试的要求可见,它本身就包含了语句覆盖和判定覆盖(在程序图上分别为点覆盖与边覆盖)。
第28页:循环测试
有利于安排循环测试。
单循环结构的测试包含:(1)零次循环,即不执行循环体,直接从循环入口跳到出口;(2)一次循环,循环体仅执行一次,主要检查在循环初始化中可能存在错误;(3)典型次数的循环;(4)最大值次循环,如果循环次数存在最大值,应按次最大值进行循环,需要时还可以增加比最大次数少一次或多一次的循环测试。
多重嵌套循环:可以对某一指定的循环层遍历单循环测试,而在其它各循环层取最小或典型次数进行循环测试。
第29页:选择测试路径的原则
- 选择测试路径的原则
- 选择具有功能含义的路径;
- 尽量用短路径代替长路径;
- 从上一条测试路径到下一条测试路径,应尽量减少变动的部分(包括变动的边和节点);
- 由简入繁,如果可能,应先考虑不含循环的测试路径,然后补充对循环的测试;
- 除非不得已(如为了要覆盖某条边),不要选取没有明显功能含义的复杂路径。
第30页:路径测试示例
路径测试示例:路径测试的示例图之一,标出所选路径经过的节点与边。
第31页:路径测试示例续
路径测试示例续:路径测试的示例图之二,展示另一条待测试路径的走向。
第32页:黑盒测试用例设计
- 测试三角形分类程序,该程序的功能是
- 读入三角形边长的3个整数,判断它们能否构成三角形。如果能够,则输出三角形是等边、等腰或任意三角形的分类信息。
第33页:三角形分类程序图
三角形分类程序图:三角形分类程序的程序图,标出各分支节点用于路径与覆盖分析。
第34页:纠错的策略
纠错的策略:涵盖凑试法、跟踪法与推理法的细分方式。
第35页:凑试法与跟踪法
- 凑试法
- 根据在测试中暴露的错误征兆,首先可设置一个可疑区,然后采用一些简单的纠错手段(例如在程序中插入打印语句),进一步获取与可疑区有关的信息,借以肯定或者修改原来的设想。
- 跟踪法
- 让带错的程序“分步执行”,即每执行完一条语句,就暂时停止下来检查执行的结果,确认正常后再继续执行。
第36页:推理法
- 推理法
- 分为归纳法和演绎法。
- 归纳法
- 是从个别到整体的推理过程。它从收集个别故障症状开始,分析各种症状的相互关系后,就有可能将它们归纳为某一假想的错误,如果这一假想错误被证实,就找到了真实的病根。
- 演绎法
- 是从一般到特殊的推理过程。根据测试获得的错误症状,可以先列出一批可能的病因,接着在这一大范围的设想中,逐一地排队根据不足或其它测试结果有明显矛盾的病因,然后对余下的一种或数种病因作详细的鉴别,确定真正的病因。
第37页:
第38页:常用的纠错技术
第39页:多模块程序的测试策略
多模块程序的测试策略
- 测试的层次性
- 单元测试、综合测试、确认测试、系统测试。
第40页:程序错误的类型
- 程序错误的类型
- 从层次测试的角度,可以把程序错误划分为语法错误、结构性错误和接口错误。
- 语法错误
- 刚结束编码的程序,常或多或少地含有语法错误,通过编译工具可以发现编译错误。
- 结构性错误
- 包括结构异常、结构不全和结构多余等错误,它们是代码评审的主要检查内容,也可以利用专门设计工具的软件工具对代码静态分析发现。
第41页:错误类型举例
错误类型举例:常见错误类型举例表,列出数据引用错误与变量说明等错误及对应例子。
第42页:功能性错误与接口错误
- 功能性错误
- 指程序功能与用户需求不相符引起的错误,功能性错误主要依靠动态测试来发现。功能性错误发生原因:
- 需求分析阶段定的需求说明比较含糊,导致疏忽或遗漏;
- 设计阶段对软件需求理解有错,或设计考虑不周;
- 开发过程中有过返工,需要多次修改需求说明或软件设计说明,出现设计走样、偏离用户需求错误。
- 接口错误
- 主要表现在调用子程序或函数时实际参数的类型、个数及顺序与形式参数不相一致;对全局量的引用不当;相关模块对全局性数据的相互矛盾等。接口错误是集成测试检测的重点,也可以通过代码评审来发现。
- 系统错误
- 系统本身错误和对系统使用不当引起错误。
第43页:单元测试
单元测试:单元测试在层次测试中的位置图,展示各模块单元测试后再集成的过程。
第44页:单元测试的目的与任务
- 单元测试的目的
- 通过对模块的静态分析与动态测试,使其代码达到模块说明的需求。
单元测试的任务:
- 对模块代码进行编译,发现并纠正其语法错误;
- 进行静态分析,验证模块结构及其内部调用序列是否正确;
- 确定模块的测试策略,并据此设计出一组测试用例和必要的测试软件;
- 用选定的测试用例对模块进行测试,直至满足测试终止标准为止。
- 静态分析与动态测试的重点,均应放在模块内部的重要执行路径、出错处理路径和局部数据结构,也要重视模块的对外接口。
- 编制测试报告。
第45页:单元测试的实施步骤
单元测试的实施步骤:展示编译、静态分析、代码评审到动态测试的流程。
编译静态分析器分析代码评审动态测试检查代码中的语法错误检查代码中的结构性错误重点发现功能性错误发现程序在结构、功能与编码风格方面的问题和错误。
第46页:集成测试
- 集成测试
- 通过单元测试的模块要按照一定的策略组装为完整的程序,在该组装过程中进行的测试称为集成测试或组装测试。
第47页:集成测试的原因
集成测试的原因:
- 单元测试中使用了测试软件,它们是真实模块的简化,与它们所代替的模块并不完全等效,因此,单元测试本身可能有不充分的地方,存在缺陷。
- 多模块程序各模块之间,可能有比较复杂的接口,稍有疏忽就易出错。例如,有些数据在穿过接口时会不慎丢失,有些全局性数据在引用中可能出问题等。
- 有些在单个模块中可以允许的误差,组装后的积累可能达到不能容忍的地步,或者模块的分功能似乎正常,组装后也可能产生不了预期的综合功能。
第48页:集成测试的目的与任务
集成测试的目的与任务
- 集成测试的目的
- 将经过单元测试的模块逐步组装成具有良好一致性的完整程序。
集成测试的任务:
- 确定集成测试的实施步骤,设计测试用例。二者的选择,应有利于揭露在接口关系、访问全局性数据(公用文件与数据结构)、模块调用序列和出错处理等方面存在的隐患。
- 进行测试,即在已通过单元测试的基础上,逐一地添加模块。每并入一个模块,除进行新的测试项目外,还须重复进行先前已经进行过的测试,后者也称为回归测试。
第49页:集成测试的策略
集成测试的策略:
- 自顶向下测试
- 从顶模块开始,沿被测程序的结构图逐渐向下测试。按照移动路线的差异,又可区分为两种不同的实施策略:
先广度后深度实施步骤。组装顺序:
先深度后广度实施步骤。组装顺序:
第50页:先深度后广度的桩模块
先深度后广度的桩模块:先深度后广度测试所需桩模块示意图,展示测试M1时用到的各桩模块。
第51页:自顶向下测试的组装过程
自顶向下测试的组装过程:展示逐层替换桩模块的三个阶段。
第52页:自底向上测试
- 自低向上测试
- (1)从下一层模块中找出一个没有下级模块的模块,由下向上地逐加新模块,组成程序中的一个子系统或模块群;(2)从另一个子系统或群中选出另一个无下级模块的模块,仿照前一步组成又一个子系统;(3)重复上一步,直至得出所有的子系统,把它们组装为完整的程序。M1M2M3M4M5M6M7M8多模块程序组装顺序:
第53页:混合测试方式
- 混合测试方式
- (1)对上层模块采取自顶向下测试;(2)对关键模块或子系统采取由底向上测试。
第54页:确认测试
确认测试
- 确认测试
- 其目的在于确认组装完毕的程序是否满足软件需求规格说明书的要求。
第55页:验收测试与Alpha、Beta测试
- 验收测试
- 如果软件是给一个客户开发的,需要进行一系列验收测试来保证满足客户所有的需求。验收测试主要由用户而不是开发者来进行的。
- Alpha测试与Beta测试
- 如果一个软件是给很多客户使用的,可使用Alpha测试与Beta测试。
- Alpha测试
- 是在一个受控的环境下,由用户在开发者的指导下进行测试,由开发者负责记录错误和使用中出现的问题。
- Beta测试
- 由最终用户在自己的场所进行,开发发者通常不在场,也不能控制应用的环境。由用户记录错误和使用中出现的问题,并定期地交给开发者来解决。
第56页:系统测试
- 系统测试
- 其目的是检查把确认测试合格的软件安装到系统中以后,能否与系统的其余部分协调运行,并且完成SRS对它的要求。系统测试由用户单位实施。
第57页:终止测试的标准
终止测试的标准
- 规定测试策略和应达到目标
- 白盒测试时一般可规定以完全覆盖为标准,语句覆盖和判定覆盖的覆盖率达100%。黑盒测试时,可结合程序的实际情况选择一或数种方法来设计测试用例,当把所有测试用例全部用完后测试便可结束。
- 规定至少要检查出的错误数量
- 如果已经积累了丰富的测试经验,可以把查出的预定数量的错误作为某类应用程序的测试终止标准。
第58页:面向对象测试的策略
- 面向对象系统的测试
- 面向对象测试与传统测试不同
- 面向对象测试扩大到包含对OOA和OOD模型的复审,以便及早发现错误;
- 面向对象软件是基于类/对象,而传统测试则基于模块。
- 面向对象软件的测试策略
- 面向对象软件的单元测试
- 最小的可测试单元是封装起来的类和对象。不能孤立地测试单个操作,而应该把操作作为类的一部分来测试。
第59页:面向对象软件的集成与确认测试
面向对象软件的集成与确认测试
面向对象软件的集成测试
- 基于线程的测试
- 用于集成系统中指对一个输入或一个事件作出回应的一组类,多少个线程就对应多个类组,每个线程被集成并分别测试。
- 基于使用的测试
- 从相对独立的类开始构造系统,然后集成并测试调用该独立类的类,一直持续到构造完整的系统。
- 面向对象软件的确认测试与系统测试
- 忽略类连接细节,主要采用传统的黑盒法对面向对象分析阶段的用例所描述的用户交互进行测试。
第60页:面向对象测试用例设计
- 面向对象软件测试测试用例设计
- 继承的成员函数需要测试
- 子类测试用例可以参考父类测试用例FatherA();B();SonA();B();Son::A()调用Son::B(),需要重新测试Son::B()作了修改,需要重新测试