谷歌大脑发布概念激活向量，了解神经网络的思维方式

大数据文摘出品

编译：李可、张秋玥、刘俊寰

 

可解释性仍然是现代深度学习应用的最大挑战之一。计算模型和深度学习研究的最新进展使我们能够创建极度复杂的模型，包括数千隐藏层和数千万神经元。效果惊人的前沿深度神经网络模型构建相对简单，但了解这些模型如何创造和使用知识仍然是一个挑战。

 

最近，Google Brain团队的研究人员发表了一篇论文，提出了一种名为概念激活向量（Concept Activation Vectors, CAV）的新方法，它为深度学习模型的可解释性提供了一个新的视角。

 

 

可解释性 vs 准确性

 

要理解CAV技术，需要了解深度学习模型中可解释性难题的本质。在当今一代深度学习技术中，模型的准确性与可解释性之间存在着永恒的矛盾。可解释性-准确性矛盾存在于完成复杂知识任务的能力和理解这些任务是如何完成能力之间。知识与控制，绩效表现与可核查性，效率与简便性...任意一项抉择其实都是准确性和可解释性之间的权衡。

 

你是关心获得最佳结果，还是关心结果是如何产生的？这是数据科学家在每个深度学习场景中都需要回答的问题。许多深度学习技术本质上非常复杂ÿ