《软件测试经验与教训》--读书笔记

《软件测试经验与教训》--读书笔记

前言：
        《软件测试经验与教训》汇集了293条关于软件测试的经验及建议，全部来自作者的工作实践。作者组织这些经验教训时，分为散文式的十一个章节。我做
的笔记会重新组织，记录对我有用的部分。其实，一些经验教训是需要有相应工作经验才能够理解的。功力不够，可能产生歧义。所以，放到后面再做。






第1章 测试员的角色
    经验1：测试员是项目的前灯
    感受：若希望测试员是项目的前灯，则需要测试员在项目的需求阶段发挥更大的作用，且需要测试员对于行业业务知识等有深入的理解。

    经验2：测试员的使命决定要做的一切
    经验3：测试员为很多客户服务
    经验4：测试员发现的信息会“打扰”客户
    经验5：迅速找出重要程序问题
    感受：（优先情况：经过变更的部分、核心功能、冒烟、常见情景、常见威胁、影响大的问题、最需要的问题；）

    经验6：跟着程序员走
    经验7：询问一切，但不一定外露
    经验8：测试员关注失效，客户才能关注成功
    经验9：不会发现所有程序问题
    经验10：当心“完备的”测试
    经验11：通过测试不能保证质量
    经验12：永远别做看门人
    经验13：当心测试中的不关我事理论
    经验14：当心成为过程改进小组
    经验15：别指望任何人会理解测试，或理解测试员需要什么条件才能搞好测试




第2章 按测试员的方式思考
    经验16：测试运用的是认识论
    经验17：研究认识论有助于更好测试
    经验18：认知心理学是测试的基础
    经验19：测试在测试员的头脑中
    经验20：测试需要推断，并不只是做输出与预期结果的比较
    经验21：优秀测试员会进行技术性、创造性、批判性和实用性地思考
    经验22：黑盒测试并不是基于无知的测试
    经验23：测试员不只是游客
    经验24：所有测试都试图回答某些问题
    经验25：所有测试都基于模型
    经验26：直觉是不错的开始，但又是糟糕的结束
    经验27：为了测试，必须探索
    经验28：探索要求大量思索
    经验29：使用诱导推断逻辑发现推测
    经验30：使用猜想与反驳逻辑评估产品
    经验31：需求是重要任务所关心的质量或条件
    经验32：通过会议、推导和参照发现需求
    经验33：既要使用显式规格说明，也要使用隐式规格说明
    经验34：“它没有问题”真正的含义是，它看起来在一定程度上满足部分需求
    经验35：最后，测试员所能得到的只是产品的印象
    经验36：不要将试验与测试混淆起来
    经验37：当测试复杂产品时：陷入与退出
    经验38：运用试探法快速产生测试思路
    经验39：测试员不能避免偏向，但是可以管理偏向
    经验40：如果自己知道自己不聪明，就更难被愚弄
    经验41：如果遗漏一个问题，检查这种遗漏是意外还是策略的必然结果
    经验42：困惑是一种测试工具
    经验43：清新的眼光会发现失效
    经验44：测试员要避免遵循过程，除非过程先跟随自己
    经验45：在创建测试过程时，避免“1287”
    经验46：测试过程的一个重要成果，是更好、更聪明的测试员
    经验47：除非重新发明测试，否则不能精通测试




第3章 测试手段
    经验48：关注测试员、覆盖率、潜在问题、活动和评估的组合测试手段
    经验49：关注测试员的基于人员的测试手段
    经验50：关注测试内容的基于覆盖率的测试手段
    经验51：关注测试原因（针对风险测试）的基于问题的测试手段
    经验52：关注测试方法的基于活动的测试手段
    经验53：关注测试是否通过的基于评估的测试手段
    经验54：根据自己的看法对测试手段分类




第4章 程序错误分析
    经验55：文如其人
    经验56：测试员的程序错误分析会推动改正所报告的错误
    经验57：使自己的错误报告成为一种有效的销售工具
    经验58：错误报告代表的是测试员
    经验59：努力使错误报告有更高的价值
    经验60：产品的任何项目相关人员都应该能够报告程序错误
    经验61：引用别人的错误报告时要小心
    经验62：将质量问题作为错误报告
    经验63：有些产品的项目相关人员不能报告程序错误，测试员就是他们的代理
    经验64：将受到影响的项目相关人员的注意力转移到有争议的程序错误上
    经验65：决不要利用程序错误跟踪系统监视程序员的表现
    经验66：决不要利用程序错误跟踪系统监视测试员的表现
    经验67：及时报告缺陷
    经验68：永远不要假设明显的程序错误已经写入报告
    经验69：报告设计错误
    经验70：看似极端的缺陷是潜在安全漏洞
    经验71：使冷僻用例不冷僻
    经验72：小缺陷也值得报告和修改
    经验73：时刻明确严重等级和优先级之间的差别
    经验74：失效时错误征兆，不是错误本身
    经验75：针对看起来很小的代码错误执行后续测试
    经验76：永远都要报告不可重现的错误，这样的错误可能是时间炸弹
    经验77：不可重现程序错误时可重现的
    经验78：注意错误报告的处理成本
    经验79：特别处理与工具或环境有关的程序错误
    经验80：在报告原型或早期个人版本的程序错误之前，要先征得同意
    经验81：重复错误报告是能够自我解决的问题
    经验82：每个程序错误都需要单独的报告
    经验83：归纳行是错误报告中最重要的部分
    经验84：不要夸大程序错误
    经验85：清楚地报告问题，但不要试图解决问题
    经验86：注意自己的语气，所批评的每个人都会看到报告
    经验87：使自己的报告具有可读性，即使对象是劳累和暴躁的人
    经验88：提高报告撰写技能
    经验89：如果合适，使用市场开发或技术支持数据
    经验90：相互评审错误报告
    经验91：与将阅读错误报告的程序员见面
    经验92：最好的方法可能是向程序员演示所发现的程序错误
    经验93：当程序员说问题已经解决时，要检查是否真的没有问题了
    经验94：尽快检验程序错误修改
    经验95：如果修改出现问题，应与程序员沟通
    经验96：错误报告应该由测试员封存
    经验97：不要坚持要求修改所有程序错误，要量力而行
    经验98：不要让延迟修改的程序错误消失
    经验99：测试惰性不能成为程序错误修改推迟的原因
    经验100：立即对程序错误延迟决定上诉
    经验101：如果决定据理力争，就一定要赢！




第5章 测试自动化
    经验102：加快开发过程，而不是试图在测试上省钱
    经验103：拓展测试领域，不要不断重复相同的测试
    经验104：根据自己的背景选择自动化测试策略
    经验105：不要强求100%的自动化
    经验106：测试工具并不是策略
    经验107：不要通过自动化使无序情况更严重
    经验108：不要把手工测试与自动化测试等同起来
    经验109：不要根据测试运行的频率来估计测试的价值
    经验110：自动化的回归测试发现少部分程序错误
    经验111：在自动化测试时考虑什么样的程序错误没有发现
    经验112：差的自动化测试的问题是没有人注意
    经验113：捕获回放失败
    经验114：测试工具也有程序错误
    经验115：用户界面变更
    经验116：根据兼容性、熟悉程度和服务选择GUI测试工具
    经验117：自动回归测试消亡
    经验118：测试自动化是一种软件开发过程
    经验119：测试自动化是一种重要投资
    经验120：测试自动化项目需要程序设计、测试和项目管理方面的技能
    经验121：通过试点验证可行性
    经验122：请测试员和程序员参与测试自动化项目
    经验123：设计自动化测试以推动评审
    经验124：在自动化测试设计上不要吝啬
    经验125：避免在测试脚本中使用复杂逻辑
    经验126：不要只是为了避免重复编码而构建代码库
    经验127：数据驱动的自动化测试更便于运行大量测试变种
    经验128：关键词驱动的自动化测试更便于非程序员创建测试
    经验129：利用自动化手段生成测试输入
    经验130：将测试生成与测试执行分开
    经验131：使用标准脚本语言
    经验132：利用编程接口自动化测试
    经验133：鼓励开发单元测试包
    经验134：小心使用不理解测试的测试自动化设计人员
    经验135：避免使用不尊重测试的测试自动化设计人员
    经验136：可测试性往往是比测试自动化更好的投资
    经验137：可测试性是可视性和控制
    经验138：尽早启动测试自动化
    经验139：为集中式测试自动化小组明确章程
    经验140：测试自动化要立即见效
    经验141：测试员拥有的测试工具会比所意识到的多




第6章 测试文档
    经验142：为了有效地应用解决方案，需要清楚地理解问题
    经验143：不要使用测试文档模板：除非可以脱离模板，否则模板就没有用
    经验144：使用测试文档模板：模板能够促进一致的沟通
    经验145：使用IEEE标准829作为测试文档
    经验146：不要使用IEEE标准829
    经验147：在决定要构建的产品之前先分析需求，这一点既适用于软件也同样适用于文档
    经验148：为了分析测试文档需求，可采用类似以下给出的问题清单进行调查
    经验149：用简短的语句归纳出核心文档需求




第7章 与程序员交互
    经验150：理解程序员怎样思考
    经验151：获得程序员的信任
    经验152：提供服务
    经验153：测试员的正直和能力需要尊重
    经验154：将关注点放在产品上，而不是人上
    经验155：程序员喜欢谈论自己的工作。应该问他们问题
    经验156：程序员乐于通过可测试性提供帮助




第8章 管理测试项目
    经验157：建设一种服务文化
    经验158：不要尝试建立一种控制文化
    经验159：要发挥耳目作用
    经验160：测试经理管理的是提供测试服务的子项目，不是开发项目
    经验161：所有项目都会演变。管理良好的项目能够很好地演变
    经验162：总会有很晚的变更
    经验163：项目涉及功能、可靠性、时间和资金之间的折衷
    经验164：让项目经理选择项目生命周期
    经验165：瀑布生命周期把可靠性与时间对立起来
    经验166：进化生命周期把功能与时间对立起来
    经验167：愿意在开发初期将资源分配给项目团队
    经验168：合同驱动的开发不同于寻求市场的开发
    经验169：要求可测试性功能
    经验170：协商版本开发进度计划
    经验171：了解程序员在交付版本之前会做什么（以及不会做什么）
    经验172：为被测版本做好准备
    经验173：有时测试员应该拒绝测试某个版本
    经验174：使用冒烟测试检验版本
    经验175：有时正确的决策是停止测试，暂停改错，并重新设计软件
    经验176：根据实际使用的开发实践调整自己的测试过程
    经验177：“项目文档是一种有趣的幻想：有用，但永远不足”
    经验178：测试员除非要用，否则不要索要
    经验179：充分利用其它信息源
    经验180：向项目经理指出配置管理问题
    经验181：程序员就像龙卷风
    经验182：好的测试计划便于后期变更
    经验183：只要交付工作制品，就会出现测试机会
    经验184：做多少测试才算够？这方面还没有通用的计算公式
    经验185：“足够测试”意味着“有足够的信息可供客户做出好决策”
    经验186：不要只为两轮测试做出预算
    经验187：为一组任务确定进度计划，估计每个任务所需的时间
    经验188：承担工作的人应该告诉测试经理完成该任务需要多长时间
    经验189：在测试员与开发人员之间没有正确的比例
    经验190：调整任务和不能胜任的人员
    经验191：轮换测试员的测试对象
    经验192：尽量成对测试
    经验193：为项目指派一位问题查找高手
    经验194：确定测试的阶段计划，特别是探索式测试的阶段计划
    经验195：分阶段测试
    经验196：通过活动日志来反映对测试员工作的干扰
    经验197：定期状态报告是一种强有力的工具
    经验198：再也没有比副总裁掌握统计数据更危险的了
    经验199：要小心通过程序错误数度量项目进展
    经验200：使用的覆盖率度量越独立，了解的信息越多
    经验201：利用综合计分牌产生考虑多个因素的状态报告
    经验202：以下是周状态报告的推荐结构
    经验203：项目进展表是另一种展示状态的有用方法
    经验204：如果里程碑定义得很好，里程碑报告很有用
    经验205：不要签署批准产品的发布
    经验206：不要签字承认产品经过测试达到测试经理的满意程度
    经验207：如果测试经理要编写产品发布报告，应描述测试工作和结果，而不是自己对该产品的看法
    经验208：在产品最终发布报告中列出没有排除的程序错误
    经验209：有用的发布报告应列出批评者可能指出的10个最糟糕的问题




第9章 测试小组的管理
    经验210：平庸是一种保守期望
    经验211：要把自己的员工当作执行经理
    经验212：阅读自己员工完成的错误报告
    经验213：像评估执行经理那样评估测试员
    经验214：如果测试经理确实想知道实际情况，可与员工一起测试
    经验215：不要指望别人能够高效处理多个项目
    经验216：积累自己员工的专业领域知识
    经验217：积累自己员工相关技术方面的专门知识
    经验218：积极提高技能
    经验219：浏览技术支持日志
    经验220：帮助新测试员获得成功
    经验221：让新测试员对照软件核对文档
    经验222：通过正面测试使新测试员熟悉产品
    经验223：让测试新手在编写新错误报告之前，先改写老的错误报告
    经验224：让新测试员在测试新程序错误之前，先重新测试老程序错误
    经验225：不要派测试新手参加几乎完成的项目
    经验226：员工的士气是一种重要资产
    经验227：测试经理不要让自己被滥用
    经验228：不要随意让员工加班
    经验229：不要让员工被滥用
    经验230：创造培训机会
    经验231：录用决策时最重要的决策
    经验232：在招募期间利用承包人争取回旋余地
    经验233：谨慎把其他小组拒绝的人吸收到测试小组中
    经验234：对测试小组需要承担的任务，以及完成这些任务所需的技能做出规划
    经验235：测试团队成员要有不同背景
    经验236：录用其他渠道的应聘者
    经验237：根据大家意见决定录用
    经验238：录用热爱自己工作的人
    经验239：录用正直的人
    经验240：在面谈时，让应聘者展示期望有的技能
    经验241：在面谈时，请应聘者通过非正式能力测验展示其在工作中能够运用的技能
    经验242：在录用时，要求应聘者提供工作样本
    经验243：一旦拿定主意就迅速录用
    经验244：要将录用承诺形成文字，并遵守诺言




第10章 软件测试职业发展
    经验245：确定职业发展方向并不懈努力
    经验246：测试员的收入可以超过程序员的收入
    经验247：可大胆改变职业发展方向并追求其他目标
    经验248：不管选择走哪条路，都要积极追求
    经验249：超出软件测试拓展自己的职业发展方向
    经验250：超出公司拓展自己的职业发展方向
    经验251：参加会议是为了讨论
    经验252：很多公司的问题并不比本公司的问题少
    经验253：如果不喜欢自己的公司，就再找一份不同的工作
    经验254：为寻找新工作做好准备
    经验255：积累并维护希望加入的公司的名单
    经验256：积累材料
    经验257：把简历当作推销工具
    经验258：找一位内部推荐人
    经验259：收集薪金数据
    经验260：如果是根据照片广告应聘，应根据广告要求调整自己的申请
    经验261：充分利用面谈机会
    经验262：了解准备应聘的招聘公司
    经验263：在应聘时询问问题
    经验264：就自己的工作岗位进行谈判
    经验265：留意人力资源部
    经验266：学习Perl语言
    经验267：学习Java或C++
    经验268：下载测试工具的演示版并试运行
    经验269：提高自己的写作技巧
    经验270：题号自己的公众讲话技巧
    经验271：考虑通过认证
    经验272：不要幻想只需两个星期就能够得到黑带柔道段位
    经验273：有关软件工程师认可制度的警告




第11章 计划测试策略
    经验274：有关测试策略要问的三个基本问题是“为什么担心？”、“谁关心”、“测试多少？”
    经验275：有很多种可能的测试策略
    经验276：实际测试计划是指导测试过程的一套想法
    经验277：所设计的测试计划要符合自己的具体情况
    经验278：利用测试计划描述在测试策略、保障条件和工作产品上所做的选择
    经验279：不要让保障条件和工作产品影响实现测试策略
    经验280：如何利用测试用例
    经验281：测试策略要比测试用例重要
    经验282：测试策略要解释测试
    经验283：运用多样化的折衷手段
    经验284：充分利用强有力测试策略的原始材料
    经验285：项目的齿数·初始测试策略总是错的
    经验286：在项目的每个阶段，可自问“我现在可以测试什么，能够怎样测试”？
    经验287：根据产品的成熟度确定测试策略
    经验288：利用测试分级简化测试复杂性的讨论
    经验289：测试灰盒
    经验290：在重新利用测试材料时，不要迷信以前的东西
    经验291：两个测试员测试同样的内容也许并不是重复劳动
    经验292：设计测试策略时既要考虑产品风险，也要考虑产品要素
    经验293：把测试周期看作是测试过程的韵律






注：
    软件测试经验与教训  Lessons Learned in Software Testing    Cem Kaner  James Bach  Bret Pettichord 著 韩柯 等译   机械工业出版社  中信出版社    2004