输出结果排除行_深度学习 inference和train结果不一致

前段时间遇到了一个困扰我很久的bug，现在终于明朗，所以还是记录一下吧。

先说背景：

• 任务：类似图像分类的一个任务，输入数据维度是（16,5000），输出3类
• 环境：Linux、python3、tensorflow
• 网络：就是一个简单的CNN

该bug一句话概括就是：inference和train结果不一致。说的更详细点，train的时候准确率acc一直维持在0.8左右，然后拿所有训练样本做一遍inference再取个mean，竟然只有0.4，WTF？为了排除dropout作妖我甚至没加它，but why？

这就好比你在屏幕上打印了一个1+1，结果输出3，除了震惊之余，还有无从下手。

我首先想到的是feed数据或者数据预处理的时候出现了问题，从头到尾检查了一遍，没有发现问题。