单元测试大揭密

 EC）,段覆盖（segmentcoverage）和基本块覆盖（bAS）。它度量每一个可执行语句是否被执行到了。icblockcoverageoverage

·       判定覆盖（DecisionCoverage）：也被称为分支覆盖（branchcoverage），所有边界覆盖（all-edgescoverage），基本路径覆盖（basispathcoverage），判定路径覆盖（decision-decision-path或DDPtesting）。它度量是否每个BOO型的表达式取值true和false在控制结构中都被测试到了。L

·        条件覆盖（ConDI）：它独立的度量每一个子表达式，报告每一个子表达式的结果的true或false。这个度量和判定覆盖（decisioncoverage）相似，但是对控制流更敏感。不过，完全的条件覆盖并不能保证完全的判定覆盖。tionCoverage

·        路径覆盖（PathCoverage）：也称为断言覆盖（prEDI），它度量了是否函数的每一个可能的分支都被执行了。路径覆盖的一个好处是：需要彻底的测试。但有两个缺点：一是，路径是以分支的指数级别增加的，例如：一个函数包含10个IF语句，就有1024个路径要测试。如果加入一个IF语句，路径数就达到2048；二是，许多路径不可能与执行的数据无关。catecoverage

·       循环覆盖（LOOP）：这个度量报告你是否执行了每个循环体零次、只有一次还是多余一次（连续地）。对于do-while循环，循环覆盖报告你是否执行了每个循环体只有一次还是多余一次（连续地）。这个度量的有价值的方面是确定是否对于while循环和for循环执行了多于一次，这个信息在其它的覆盖率报告中是没有的。 

1)   模块接口：测试模块的数据流。如果数据不能正确地输入和输出，就谈不上进行其他测试。因此，对于模块接口需要如下的测试项目：

·       调用所测模块时的输入参数与模块的形式参数在个数、属性、顺序上是否匹配；

·       所测模块调用子模块时，它输入个子模块的参数与子模块的形式参数在个数、属性、顺序上是否匹配；

·       是否修改了只做输入用的形式参数；

·       输出给标准函数的参数在个数、属性、顺序上是否匹配；

·       全局变量的定义在各模块中是否一致；

·        限制是否通过形式参数来传送。

2)  局部数据结构测试：模块的局部数据结构是最常见的错误来源，应设计测试用例以检查以下各种错误：

·        检查不正确或不一致的数据类型说明；

·       使用尚未赋值或尚未初始化的变量；

·        错误的初始值或错误的默认值；

·       变量名拼写错误或书写错误；

·        不一致的数据类型。

3)路径测试：对基本执行路径和循环进行测试会发现大量的错误。根据白盒测试和黑盒测试用例设计方法设计测试用例。设计测试用例查找由于错误的计算、不正确的比较或不正常的控制流而导致的错误。

·       常见的不正确的计算有：

?         运算的优先次序不正确或误解了运算的优先次序；

?         运算的方式错误（运算的对象彼此在类型上不相容）；

?         算法错误；

?         初始化不正确；

?         运算精度不够；

?         表达式的符号表示不正确等。

·        常见的比较和控制流错误有：

?         不同数据类型的比较；

?         不正确的逻辑运算符或优先次序；

?         因浮点运算精度问题而造成的两值比较不等；

?         关系表达式中不正确的变量和比较符；

?         “差1错”，即不正确地多循环或少循环一次；

?         错误的或不可能的循环终止条件；

?         当遇到发散的迭代时不能终止循环；

?         不适当地修改了循环变量等。

4) 错误处理测试：比较完善的模块设计要求能预见出错的条件，并设置适当的出错处理对策，以便在程序出错时，能对出错程序重新做安排，保证其逻辑上的正确性。这种出错处理也是模块功能的一部分。表明出错处理模块有错误或缺陷的情况有：

·       出错的描述难以理解；

·       出错的描述不足以对错误定位和确定出错的原因；

·       显示的错误与实际的错误不符；

·       对错误条件的处理不正确；

·       在对错误进行处理之前，错误条件已经引起系统的干预；

·        如果出错情况不予考虑，那么检查恢复正常后模块可否正常工作。

5) 边界测试：边界上出现错误上常见的。设计测试用例检查：

·        在n次循环的第0次、1次、n次是否有错误；

·       运算或判断中取最大最小值时是否有错误；

·       数据流、控制流中刚好等于、大于、小于确定的比较值时是否出现错误。

3         测试方法与过程

3.1      用例设计

1.测试用例的组成（在单元测试中测试用例基本上由测试脚本组成）

·       用例运行前置条件

·       被测模块/单元所需环境（全局变量赋值或初始化实体）

·       启动测试驱动

·       设置桩

·       调用被测模块

·       设置预期输出条件判断

2.测试用例的设计原则

·       一个好的测试用例在于能够发现至今没有发现的错误；

·       测试用例应由测试输入数据和与之对应的预期输出结果这两部分组成；

·       在测试用例设计时，应当包含合理的输入条件和不合理的输入条件；

·       为系统运行起来而设计测试用例；

·       为正向测试而设计测试用例；

·       为逆向测试而设计测试用例；

·       为满足特殊需求而设计测试用例；

·       为代码覆盖而设计测试用例；

3.用例设计方法

1)        规范（规格）导出发

2)        等价类划分法

3)        边界值分析法

4)        状态转移测试法

5)        分支测试法

6)        条件测试法

7)        数据定义－使用测试法（又名数据流测试法）

8)        内部边界值测试法

9)        错误猜测法

4. 特定的用例测试设计

1)声明测试：检查模块中的所有变量是否被声明。经验表明，大量重要的错误都是由于变量没有被声明或没有被正确的声明而引起的。

2)路径测试：要求模块中所有可能的路径都被执行一遍，属逻辑覆盖测试。

基本路径测试：由于实际中，一个模块中的路径可能非常多，由于时间和资源有限，不可能一一测试到。这就需要把测试所有可能路径的目标减少到测试足够多的路径，以获得对模块的信心。要测试的最小路径集就是基本测试路径集。基本测试路径集要保证：

·       每个确定语句的每一个方向要测试到；

·       每条语句最少执行一次。

3)循环测试：重点检查循环的条件－判断部分以及边界条件。测试循环是一种特殊的路径测试，因为循环比其他语句都复杂一些。循环中错误的发生机会比其他代码构成部分多。因此，对于任何给定的循环测试应该包括测试下面每一条件的测试用例：

·        循环不执行；

·        执行一次循环；

·       执行两次循环；

·       反映执行典型的循环的执行次数；

·       如果有最大循环次数，最大循环次数减1；

·       最大循环次数；

·       大于最大循环次数。

对于增量和减量不是1的FOR语句，要特别注意，因为程序员习惯于增量1。

4) 循环嵌套：循环嵌套使逻辑的次数呈几何级数增长，设计测试嵌套循环的测试用例应该包括的测试条件有：

·       把外循环设置为最小值，并运行内循环所有可能的情况；

·       把内循环设置为最小值，并运行外循环所有可能的情况；

·       把所有的循环变量都设置为最小值运行；

·       把所有的循环变量都设置为最大值运行；

·        把外循环设置为最大值，并运行内循环所有可能的情况；

·       把内循环设置为最大值，并运行外循环所有可能的情况；

5) 边界值测试：指程序内部边界测试。检查确定代码在任何边界情况下都不会出差错。重点检查小于、等于和大于边界条件的情况。边界值测试是指专门设计用来测试当条件语句中引用的值处在边界或边界附近时系统反映的测试。被测试语句的最好的例子就是“IF-THEN…ELSE-ENDIF”部分。这样语句的例子如：

IF a <= 123 THEN

b = 1

ELSE IF a >= 123 THEN

b = 2

ELSE b = 3

END IF

           上面例子中的边界值测试用例应该至少包括a的以下值：122，123，124。当a=123时，b=1还是2。（找出逻辑判断的矛盾）

6)接口测试：检查模块的数据流（输入、输出）是否正确。检查输入的参数和声明的自变量的个数，数据类型和输入顺序是否一致。检查全局变量是否被正确的定义和使用等。

7)确认测试：是否接受有效输入数据（操作），拒绝无效数据（操作）。

8)事务测试：输入－>输出，错误处理。

3.2      用例执行

一般来说，做单元测试均采用的是商用的测试工具或自行开发的测试工具，用例的编写都是在测试工具上完成，测试用例都是一些测试脚本，都以文件的方式来保存，故其用例的执行过程主要是由测试工具根据所编写的具体的测试用例脚本来完成，这样对于用例的管理和执行也非常灵活。

在特定场合，比如某种压力测试或极限测试，对于测试执行过程时间很长时（几个小时以上），一般都预先编写好用例（确保用例无误），使用空闲机或非工作时间执行测试用例，这样操作起来较节约时间。

在用例的执行过程中务必注意如下事项：

·        程序的执行过程―――便于构造发散用例

·       不要放过任何细节―――这种细节可能就是问题

3.3      测试优化和策略

在测试的过程中为了提高测试效率和效果，不断的减少冗余劳动，也为后期的回归测试和测试管理带来很大的方便，不至于感到测试很混乱无序。因此我们要对测试用例和测试执行进行不断的优化，以测试策略为指导方针进行测试。

1、测试用例的优化

    测试用例的优化主要是指用例的合并、修改和删除，减少冗余的无价值的测试，其优化依据来源于测试后的测试数据分析和评估，其中测试覆盖也是用例优化的主要参考。

2、测试执行的优化

        测试执行的优化主要是指测试步骤的优化，减少测试人员的手工操作，因为太多的手工操作会导致测试人员很厌倦，直接影响测试效果，优化依据来源于测试总结。

3、测试策略

    在测试过程中由于时间或资源的原因可能会使测试处于紧张的局面，在此情况下我们要采取一定的策略来解决此局面。策略来源于测试数据的分析，主要的方法是：为各模块制定测试优先级，其优先级的划分依据如下：

·       哪些是重点模块？

·        哪些程序是最复杂、最容易出错的？

·        哪些程序是相对独立，应当提前测试的？

·        哪些程序最容易扩散错误？

·       哪些程序是开发者最没有信心的？

·        80-20原则：80％的缺陷聚集在20％的模块中，经常出错的模块改错后还会经常出错，这种应该列入测试重点。 

3.4      测试评估

   单元测试完成以后，需要对单元测试的执行效果进行评估，主要从以下几方面进行：

1)测试完备性评估，主要检查测试过程中是否已经执行了所有的测试用例，对新增的测试用例是否已及时更新测试方案等。

2)代码覆盖率评估，主要是根据代码覆盖率工具提供的语句覆盖情况报告，检查是否达到方案中的要求，公司要求语句覆盖达到100％。但很多情况下，第一轮测试用例执行完后是很难达到的，这时在评估过程中要对覆盖率进行分析，主要从以下方面来考虑：

·       不可能的路径或条件

·       不可达的或冗余的代码

·       不充分的测试用例

3) 从覆盖的角度看，测试应该覆盖：

·        功能覆盖

·        输入域覆盖

·       输出域覆盖

·       函数交互覆盖

·       代码执行覆盖

   大多数有效的测试用例都来自于分析，而不是仅仅为了达到测试覆盖率目标而草率设计测试用例。千万不要误解测试覆盖，测试覆盖并不是我们最求的目的，它只是评价测试的一种方式，为测试提供指导和依据。

3.5      测试过程

1.测试过程中各种人员的作用

·       系统分析设计人员

     进行需求跟踪，确保系统需求的实现和更新。进行软件单元可测性分析，确定单元测试的对象、范围和方法。

·       软件开发人员

     负责编码和单元测试过程，完成单元测试计划、方案和报告。

·       软件测试人员

     参与单元测试计划、方案和报告的评审，对单元测试的计划、设计和执行质量进行监控。根据实际情况，可选择参与由开发人员负责的代码检视、单元测试等活动。

·        配置管理人员

    对代码及单元测试文档进行配置管理。

·       质量保证（QA）人员

     参与编码与单元测试评审，对编码和单元测试过程进行审计。

2.  单元测试输入

·       《软件需求规格说明书》

·       《软件详细设计说明书》

·       《软件编码与单元测试工作任务书》

·       《软件集成测试计划》

·       《软件集成测试方案》

·       用户文档

3.单元测试的输出

·       《单元测试计划》

·       《单元测试方案》

·       《需求跟踪说明书》或需求跟踪记录

·        代码静态检查记录

·       《正规检视报告》

·        问题记录

·        问题跟踪和解决记录

·       软件代码开发版本

·       《单元测试报告》

·       《软件编码与单元测试任务总结报告》

3.6      测试实施

1.  单元测试实施步骤

1)        制定测试计划和测试方案（包括测试工具的选择）

2)        根据计划和方案及相关输入文档编写测试用例

3)        搭建测试环境

4)        执行测试

5)        记录和跟踪问题

6)        编写测试报告和总结报告

2.  单元测试实施遵循的原则

·        精心制定测试计划

·        严格评审测试计划

·        严格执行测试计划

·       系统分析测试结果并提交报告

4         常用测试工具介绍

常用的C语言单元测试工具介绍如下：

 winAMS、CasePlayer2

1)        简介

GAIO公司的覆盖率专家winAMS获得机能安全标百准ISO26262/IEC61508工具认证，是日本工业制造度领域普遍使用的针对C/C++的单元/集成测试工具。winAMS将通过交叉编译生成的原始代码作为评价代码，具有使用芯片仿真器进行仿真功能的测试工具。不仅可以对C/C++语言编写的程序进行逻辑水平的测试，还可以对嵌入式软件特有的依存于芯片的问题点进行确认。

2)        功能特性

·       尽可能使单元测试的环境与目标环境相同

·       采用全面支持嵌入式微机的微机化功能测试平台环境

·       不需要插入测试用代码直接使用目标机代码进行测试

·       取得第三方认证机构TUVSUD对适用于汽车机能安全ISO26262软件工具的认证

·       测试工程管理