第3章黑盒测试_边界值

SoftwareTesting软件测试技术软件学院第三章黑盒测试软件测试方法边界值测试等价类测试基于决策表的测试因果图软件测试方法软件测试方法一般分为两种：白盒测试(WhiteBoxTesting)黑盒测试（Black-boxTesting）黑盒测试黑盒测试（Black-boxTesting）软件输入输出又叫功能测试，数据驱动测试或基于规格说明的测试。3.1黑盒测试概述黑盒测试也称功能测试或数据驱动测试，它是在已知产品所应具有的功能，通过测试来检测每个功能是否都能正常使用。软件输入黑盒测试不深入代码细节输出3.1黑盒测试概述在测试时，把程序看作一个不能打开的黑盆子，在完全不考虑程序内部结构和内部特性的情况下，测试者在程序接口进行测试，它只检查程序功能是否按照需求规格说明书的规定正常使用，程序是否能适当地接收输入数锯而产生正确的输出信息，并且保持外部信息（如数据库或文件）的完整性，如图所示。1．“黑盒”的两种基本方法黑盒测试有两种基本方法，即通过测试和失败测试。在进行通过测试时，实际上是确认软件能做什么，而不会去考验其能力如何。软件测试员只运用最简单，最直观的测试案例。在设计和执行测试案例时，总是先要进行通过测试。在进行破坏性试验之前，看一看软件基本功能是否能够实现。这一点很重要，否则在正常使用软件时就会奇怪地发现，为什么会有那么多的软件缺陷出现？在确信了软件正确运行之后，就可以采取各种手段通过搞“垮”软件来找出缺陷。纯粹为了破坏软件而设计和执行的测试案例，被称为失败测试或迫使出错测试。2、黑盒测试过程需求说明产生被测程序测试结果输出比较3．黑盒测试的优、缺点黑盒测试的优点有：1）比较简单，不需要了解程序内部的代码及实现；2）与软件的内部实现无关；3）从用户角度出发，能很容易的知道用户会用到哪些功能，会遇到哪些问题；4）基于软件开发文档，所以也能知道软件实现了文档中的哪些功能；5）在做软件自动化测试时较为方便。黑盒测试的缺点有：1）不可能覆盖所有的代码，覆盖率较低，大概只能达到总代码量的30%；2）自动化测试的复用性较低。4、黑盒测试的目标黒盒测试试图发现以下类型的错误：功能错误或遗漏；界面错误，不美观；外部信息访问错误；性能错误；初始化和终止错误在接口上，能否正确地接受输入数据，能否产生正确地输出信息；5、黑盒测试的难点黒盒测试的难点在于如何构造有效的输入。由于输入空间通常是无限的，穷举测试显然行不通。寻找最小最重要的用例集合以精简测试复杂性。6、黑盒测试方法黑盒测试的测试用例设计方法边界值分析等价类划分基于决策表的测试因果图错误推测3.2边界值分析边界值分析健壮性测试最坏情况测试特殊值测试随机测试3.3.1边界值分析边界值分析法就是对输入或输出的边界值进行测试的一种黑盒测试方法。通常边界值分析法是作为对等价类划分法的补充，这种情况下，其测试用例来自等价类的边界。为什么使用边界值分析法？无数的测试实践表明，大量的故障往往发生在输入定义域或输出值域的边界上，而不是在其内部。因此，针对各种边界情况设计测试用例，通常会取得很好的测试效果。怎样用边界值分析法设计测试用例？（1）首先确定边界情况。通常输入或输出等价类的边界就是应该着重测试的边界情况。（2）选取正好等于、刚刚大于或刚刚小于边界的值作为测试数据，而不是选取等价类中的典型值或任意值。1.边界值分析概要边界值分析的原理边界值分析的思想边界值分析测试用例设计方法(1)边界值分析的基本原理边界值分析(BoundaryValueAnalysis)边界值分析关注输入空间的边界，并从中标识测试用例。基本原理错误更可能出现在输入变量的极值附近。常见的边界值举例对16-bit的整数而言32767和-32768是边界屏幕上光标在最左上、最右下位置报表的第一行和最后一行数组元素的第一个和最后一个C++语言中，intA[10]:A[0]…A[9]循环的第0次、第1次和倒数第2次、最后一次采用边界值分析测试的基本思想是：故障往往出现在输入变量的边界值附近。——因此，边界值分析法利用输入变量的最小值(min)、略大于最小值(min+)、输入值域内的任意值(nom)、略小于最大值(max-)和最大值(max)来设计测试用例。边界值分析法是基于可靠性理论中称为“单故障”的假设，即有两个或两个以上故障同时出现而导致软件失效的情况很少，也就是说，软件失效基本上是由单故障引起的。——因此，在边界值分析法中获取测试用例的方法是：(1)每次保留程序中一个变量，让其余的变量取正常值，被保留的变量依次取min、min+、nom、max-和max。(2)对程序中的每个变量重复(1)。(2)边界值分析的基本思想(2)边界值分析的基本思想在最小值、略高于最小值、正常值、略低于最大值和最大值处取输入变量值表示方法min、min+、nom、max-、和max例如：涉及两个变量的函数x1,x2X1的取值x1min,x1min+,x1nom,x1max-,x1maxX2的取值x2min,x2min+,x2nom,x2max-,x2max边界值分析的取值“单缺陷”假设“单缺陷”假设失效极少是由两个或多个缺陷的同时发生引起的“单缺陷”假设是边界值分析的关键假设(3)边界值分析测试用例边界值分析获得测试用例的方法：使所有变量取正常值，只使一个变量取极值；例1：有两个输入变量x1(a≤x1≤b)和x2(c≤x2≤d)的程序F的边界值分析测试用例如下：(3)边界值分析测试用例X1取值：x1min,x1min+,x1nom,x1max-,x1maxX2取值：x2min,x2min+,x2nom,x2max-,x2max两个变量函数的边界值分析测试用例{x1nom,x2min,x1nom,x2min+,x1nom,x2nom,x1nom,x2max-,x1nom,x2max,x1min,x2nom,x1min+,x2nom,x1max-,x2nom,x1max,x2nom}X2两个变量函数边界值分析测试用例边界值分析边界值分析使用与等价类划分法相同的划分，只是边界值分析假定错误更多地存在于划分的边界上，因此在等价类的边界上以及两侧的情况设计测试用例。例：测试计算平方根的函数——输入：实数——输出：实数——规格说明：当输入一个0或比0大的数的时候，返回其正平方根；当输入一个小于0的数时，显示错误信息“平方根非法-输入值小于0”并返回0；库函数Print-Line可以用来输出错误信息。实例分析边界值分析（续）通常情况下，软件测试所包含的边界检验有几种类型：数字、字符、位置、质量、大小、速度、方位、尺寸、空间等相应地，以上类型的边界值应该在：最大/最小、首位/末位、上/下、最快/最慢、最高/最低、最短/最长、空/满等情况下实例分析举例——利用边界值作为测试数据项边界值测试用例的设计思路字符起始-1个字符/结束+1个字符假设一个文本输入区域允许输入1个到255个字符，输入1个和255个字符作为有效等价类；输入0个和256个字符作为无效等价类，这几个数值都属于边界条件值。数值最小值-1/最大值+1假设某软件的数据输入域要求输入5位的数据值，可以使用10000作为最小值、99999作为最大值；然后使用刚好小于5位和大于5位的数值来作为边界条件。空间小于空余空间一点/大于满空间一点例如在用U盘存储数据时，使用比剩余磁盘空间大一点（几KB）的文件作为边界条件。内部边界值分析在多数情况下，边界值条件是基于应用程序的功能设计而需要考虑的因素，可以从软件的规格说明或常识中得到，也是最终用户可以很容易发现问题的。然而，在测试用例设计过程中，某些边界值条件是不需要呈现给用户的，或者说用户是很难注意到的，但同时确实属于检验范畴内的边界条件，称为内部边界值条件或子边界值条件。内部边界值条件主要有下面几种：数值的边界值检验字符的边界值检验其它边界值检验小结：在实际的测试用例设计中，需要将基本的软件设计要求和程序定义的要求结合起来，即结合基本边界值条件和内部边界值条件来设计有效的测试用例。2、选择测试用例的原则(1)如果输入条件规定了值的范围，则应取刚达到这个范围的边界值以及刚刚超过这个范围边界的值作为测试输入数据。(2)如果输入条件规定了值的个数，则用最大个数、最小个数和比最大个数多1个、比最小个数少1个的数作为测试数据。(3)根据程序规格说明的每个输出条件，使用原则(1)。(4)根据程序规格说明的每个输出条件，使用原则(2)。(5)如果程序的规格说明给出的输入域或输出域是有序集合（如有序表、顺序文件等），则应选取集合中的第一个和最后一个元素作为测试用例。(6)如果程序中使用了一个内部数据结构，则应当选择这个内部数据结构的边界上的值作为测试用例。(7)分析程序规格说明，找出其它可能的边界条件。3、边界值分析优缺点边界值测试分析采用了可靠性理论的单缺陷假设。优点：简便易行；生成测试数据的成本很低；局限性：测试用例不充分；不能发现测试变量之间的依赖关系；不考虑含义和性质;结论：只能作为初步测试用例使用4、边界值测试的指导方针除了特殊值测试，基于函数(程序)输入定义域的测试方法，是所有测试方法中最基本的。这类测试方法都有一种假设，即输入变量是真正独立的，如果不能保证这种假设，则这类方法会产生不能令人满意的测试用例(例如在Nextdate中的1912年2月31日)。另一种很有用的基于输出的测试用例形式，可用于生成错误消息的系统。测试人员应该设计测试用例，以检查在适当的时候，错误消息是否被生成，并且不会被错误地生成。3.3.2测试方案测试举例(1)三角形问题三条边a,b,c取整数值，且各边的取值范围是：[1，200]测试用例每条边的取值：1,2,100,199,200NextDate的测试用例输入条件1≤月份≤121≤日期≤311812≤年≤2012最坏情况测试用例设计月份取值：1,2,6,11,12日期取值：1,2,15,30,31年取值：1812,1813,1912,2011,2012测试举例(2)NextDate的测试用例测试用例错误的测试用例第41号：1812年2月30日遗漏重要的测试用例日期取28或29闰年：2000年测试举例(2)3.4.1边界值分析法概要怎样用边界值分析法设计测试用例？（1）首先确定边界情况。（2）将测试边界情况作为重点目标。边界值是位于有效等价类边缘的值，而次边界值是边界值周围的值。选取正好等于、刚刚大于或刚刚小于边界的值作为测试数据。应该设计多少个测试用例呢？边界为1和100，因此次边界可以选取2和99。构造测试用例:(1,1),(100,100)(0,0),(101,101)例如，对于加法器程序，设计测试用例健壮性边界值测试加法器边界值测试用例用例编号ab预期结果实际结果1112提示重新输入2100100200提示重新输入300提示重新输入提示重新输入4101101提示重新输入提示重新输入51.910.8提示重新输入提示重新输入6XY提示重新输入提示重新输入7$&提示重新输入提示重新输入8空格空格提示重新输入提示重新输入9提示重新输入提示重新输入出现实际结果与预期结果不相符的情况应该做如下改变:if((a=1&&a=100)&&(b=1&&b=100))改为实例1需求规格说明书规定交货数量的取值范围是[0,999]，交货数量这个输入的边界情况是什么？1）边界值：0，9992）次边界值：-1,1,998,1000测试用例如下：实例用例编号测试数据预期结果100299999931149989985-1提交的数据出错61000数据超出范围