学习探索式测试的问与答(2)

　　大量的详细测试脚本导致了沉重的维护代价。在进度压力下，测试人员可能没有时间更新测试脚本，这使得测试脚本不能随需求和产品一同演化。随着时间的推移，大量的测试脚本成为过时的、无人问津的“摆设”，原先投入大量资源所获得的测试资产几乎消耗殆尽。

　　要求测试人员编写求全责备的测试脚本，很可能带来不良的心理暗示：测试人员在不知不觉中将编写脚本看做测试的目的，而不是辅助测试的工具。他们会盲目追求脚本的数量，而很少关注产品和项目的风险，用看似“完备”的脚本集提供虚假的安全感。更糟糕的是，醉心于脚本数量的测试领导很可能会鼓励这种以“文案工作”为核心的测试流程，使测试的价值进一步流失。

　　相比“硬币”的比喻，笔者更喜欢Cem Kaner的观点：“纯粹的探索式测试和纯粹的脚本测试好似区间的两个端点。在实践中，大多数测试者位于这两者之间。然而，大多数好的测试非常接近探索式测试的一端。”[Kaner09]

　　此外，根据语境驱动测试的基本原则，测试人员需要经常反思：根据当前语境，测试策略是应该偏向探索式测试，还是脚本测试?如何综合它们的优势，以获得更好的测试结果?

　　问：探索式测试编写测试文档吗?

　　答：探索式测试者创建任何有助于实现其目标的文档 [Kaner08]，他会撰写并维护符合语境的测试文档。这里提出一种可能的测试计划编写方法，供读者参考。

　　在不同的开发组织，测试计划有不同的名称：测试计划、测试规格说明和测试设计文档等。但是，大多数测试计划会涵盖产品概述、测试范围、测试风险、测试策略、部分详细测试用例、资源分配和日程安排。

　　与脚本测试在测试执行前编写大量文档不同，探索式测试在整个测试过程中持续编写、修改、优化测试计划。测试计划的内容、格式、详略是由项目语境决定的。

　　在项目计划阶段，测试计划可以包含产品概述、测试范围、测试风险、测试策略、资源分配和进度安排。编写文档的目的是建立对产品的整体认知，根据风险提出相应的测试策略，并安排测试任务和日程。测试计划不必面面俱到，用精简的格式记录必要的内容即可。此时项目的不确定性较大，未知因素较多，很可能不适合做出详细的测试决策。

　　在项目计划阶段，应该邀请项目关系人对测试计划进行评审。评审的形式可以多种多样，会议评审、桌面走查、邮件评审、在线文档批注、头脑风暴皆可。评审的目的是发现“大图景”上的缺陷，并丰富测试策略。眼界开阔的项目经理、负责任的开发人员、经验丰富的测试同事能够提供很好的建议。

　　在测试阶段，测试人员需要根据测试进展持续更新测试计划，内容可能包括产品模型、检查列表、测试策略、覆盖大纲和风险列表等。测试计划应该是“活”的文档，能够反映测试人员对产品和项目的最新认识。对测试范围、测试风险、测试策略和进度安排的重大变化应该写入测试计划，重要的测试用例(如发现严重缺陷的测试用例)也应该及时融入测试策略。测试计划应该尽可能地精简，这有助于文档的持续更新，而冗长的文档将不利于阅读、增删和修订。

　　当测试人员认为测试计划相对完整之后，他还应该邀请项目关系人对测试计划进行评审。评审的目的是发现测试遗漏，补充测试策略，提高测试覆盖率。

　　以上方法有三个重要的特点。

　　测试计划的编写与改进贯穿整个测试过程。在测试执行之前，对测试计划不必求全责备。在测试执行中，测试人员根据测试反馈，动态地调整测试范围、项目风险和测试策略，生成新的测试用例，并对测试计划做必要的更新。

　　测试人员持续地收集对测试计划的意见，并将改进意见纳入测试实践。正式和非正式的测试计划评审可以识别潜在风险，丰富测试策略。在一些测试流程中，测试计划评审只发生在测试开始之前。但是，笔者建议在测试流程的中期再次评审测试计划，目的是进一步丰富测试策略的多样性，并发掘可能的测试遗漏。这时，测试团队对产品与风险拥有更深刻的理解，能够提出更具针对性和多样性的测试策略，也可以帮助测试人员发现测试盲点，从而提高测试覆盖率。

　　测试计划侧重测试规划(一组指导测试过程的想法)和测试策略(一组指导测试设计的想法)[Kaner01]，而不是脚本化(Scripted)的测试用例，即测试计划用精简的格式表达测试人员的测试想法，而不必详细记录测试用例的设置、步骤和预期结果。测试人员可以用文字、列表、表格、思维导图等任何合适的方式表达想法，目的是激发测试灵感，并促进测试思想的交流。此外，他会利用发现缺陷的测试用例来完善测试策略，而不是让过去的测试用例控制未来的测试。

　　关于其他形式和内容的测试文档，测试专家Michael Bolton的文章What Exploratory Testing Is Not: Undocumented Testing提出了很好的建议。

　　问：探索式测试的核心优势是什么?

　　答：探索式测试的核心优势是有助于“学习”。此处的学习是指学(获取知识)与习(应用知识)的持续过程。

　　对于测试人员，软件测试是一个持续学习并实践的过程。他的学习范围如下。

　　行业知识：为什么需要这个软件?软件如何帮助使用它的人和团体去获得成功?

　　用户角色：目标用户是谁?他们有什么特点，有什么期望?软件如何帮助他们去获得个人成就?

　　软件产品：产品是一种解决方案，它解决了行业和用户所面临的问题吗?

　　计算平台：只有深刻理解软件所依赖的计算平台(如操作系统、中间件和网络协议等)，才能更好地进行测试。

　　开发技能：理解项目所使用的具体技术，知晓典型的技术缺陷，具备测试开发的能力。

　　测试技术：针对当前项目，选择合适的测试技术，并能够熟练地应用。

　　程序缺陷：研究已知的软件缺陷，提炼错误模式，制订缓解或预防方案。

　　开发团队：语境决定策略和实践。在一起工作的人，是所有项目语境中最重要的组成部分。

　　测试人员不需要在项目之初就掌握所有知识，他可以通过每天的工作去逐步理解用户、项目、技术和团队。更重要的是，他需要在每天的工作中实践所学的内容：规划测试方案、创建并执行测试用例、分析测试结果和编写测试报告。实践是练习，是“学”的自然延伸。知行合一才构成“学习”的完整内核。

原文转自：http://www.ltesting.net