知识蒸馏_网易易盾的博客-CSDN博客

知识蒸馏

关注

文章平均质量分 90

关注数：文章数：1 文章阅读量：386 文章收藏量：1

作者: 网易易盾

网易易盾-网易旗下一站式安全服务，覆盖内容安全、业务安全、移动安全和网络安全。

展开

知识蒸馏如何快速提升人工智能模型的性能？

本文主要介绍知识蒸馏领域的两种经典算法，一篇是基于输出 logits 的知识蒸馏工作 KD [2]，一篇是基于 CNN 的中间层特征的知识蒸馏工作 FitNet [4]

原创 2022-05-19 11:04:52 · 386 阅读 · 0 评论