总结我的验证思路：测试数据会撒谎

本文转自公众号“数字芯片实验室”，作者：夏晶 。谢谢

测试数据会撒谎，没错，测试数据会撒谎。

 

当黑暗蒙住双眼，迷途的羔羊啊，如何才能追随上帝的步伐。当信息不能最直接显示，而需要通过其他现象推导或表现，并且人数超过3个的时候，则测试数据会撒谎。

 

这种情形，主要出现在FPGA测试和样片测试中。当问题出现在这两种测试环节中时，现象往往都非常表面，虚得很，就像浮在水面上，而真正的Bug，往往潜伏在深邃的水底，而水面上，还经常有浮萍啊、乌龟啊，或者紫金矿业的污染物啊之类的阻挡，要像EDA验证一样，啪嗒一下直接找到问题（EDA我们往往都没法啪嗒），其难度，不亚于逮住看贴不回帖的潜水艇。

 

所以，我们往往会收集各种测试数据和现象，进行分析，甚至投入巨大人力，成立攻关组。这些收集的数据和现象，以我已有的经历看，其中10%～20%是谎言。这里，并不是有测试或攻关的兄弟有意在欺骗大家，嗯，绝对不是，兄弟们可都是老实淫啊。

 

记得有这么一个笑话，一个GG问一个PPMM

“你是处女？”

“不告诉你，你是？”

“我天枰！”

“……”

 

就是酱紫，明白了吧，当本身不是清晰源头的信息，在汇总和整理时，一定会存在理解上的偏差。这种偏差的引入，我所见，有如下几种可能：

 

1、其他相关问题引入，表现好像和本问题相关；

2、误操作，或板级接触不良、示波器探头抖动之类偶发故障；

3、疲劳的测试人员眼睛一花，看错了行、读错了数字、找错了寄存器；

4、测试人员本身有主观分析，就认定是XX的YY肯定有错，因此数据或意见上具有某些倾向性；

5、某些无厘头的信息；

6、佛曰，不可说。

 

所以，对待测试数据，特别是FPGA和样片测试数据，要有自己的想法。

 

曾经，有一个项目（不是P600），为定位一个样片测试还是FPGA测试的问题，投入数人、数周，方法思考定位，搞得大家的衣服都变胖了。最后却发现，一个最初的测试现象是假象，而以此引申出的后续所有分析和论证的现象，是错误的。具体是哪一个项目，到底是哪一个问题？我现在都已经完全想不起来了，但那种强烈的挫败感和失意感，在我的脑海中，久久挥之不去，唉，问君能有几多愁，恰似一群太监上青楼。所以，要有自己的想法。样片测试和FPGA测试，对于所有测试现象和数据，要有自己的想法。

 

1、多个信息指向某个结论的时候，某个结论才是比较可靠的，比较的；

2、单个信息指向的结论，要思考，思考如果其信息不准确，可能的影响，随时准备退路，如果有可能，亲手复现该现象确认（如果亲手确认的信息还是错的，唉，爷们我认了）；

3、如果某个现象的现场被破坏，不能复现，麻烦了，一定要慎重排查版本、环境，争取重现，否则其现象及其推导的结论不可控的可能性很大。（这里也提醒某些测试人员，保存现场及其重要，活要见人死要见尸，无凭无据如何能替月行道）

4、如果某个现象是偶发的，不能稳定复现，不要紧张，以我所见，任何偶发的现象，通过这样或那样的条件设置，一定，一定是可以变成固定重现的；

5、相互矛盾的现象，要么是没有看到本质（大多数情况），要么测试有问题，切勿南辕北辙各自行事；

6、建议，对各种现象进行分析的时候，心中要有权重，那些可尽信，那些可斟酌，要梳理出自己心中的条理；

7、对于整个攻关团队，保证一定程度冲突非常有必要，如果有两种不同的意见和分析，不可强行统一。这里有两种可能，也许两条路都是正确的（很多），只要中间的一环一打破，豁然开朗，也可能其中一条路是死路，那另一条很大可能就正确了。再说了，与其在一棵歪脖树上吊死，不如在两棵歪脖树上吊死来的帅气。

最后，切记，最终真相只有一个，上帝会掷骰子，但不会在芯片内部掷。IC之神，关羽、张飞，都是实在人，任何缺陷，任何问题都有其唯一的原因的，一便秘就怪地球没引力是没有道理的。认真分析、思考，要有自己的想法。