论文总结
来碗拿铁️
这个作者很懒,什么都没留下…
展开
-
Designing Network Design Spaces论文导读
Designing Network Design Spaces论文导读AnyNetXAnyNetX~B~,AnyNetX~C~AnyNetX~D~,AnyNetX~E~RegNetXGeneralizationRegnetX AnalysisTrendComplexityRegNetX CKaiming He的力作,内容非常之丰富,且具有很大的指导意义。大多数的NAS都是只找到一个最优的结构,本文则通过不断的缩小假设空间,以找到一簇比较优秀的网络:通过采样进行超参数的选择,根据误差的经验分布函数(em原创 2020-09-30 17:18:50 · 333 阅读 · 0 评论 -
互信息的原理、计算和应用
互信息的原理、计算和应用Background熵 Entropy交叉熵 Cross Entropy条件熵 Conditional EntropyKL-散度 KL-divergence定义计算方法变分法 Variational approachMutual Information Neural Estimation, MINEDEEP INFOMAX应用迁移学习迁移强化学习自监督学习ReferencesAppendixA.B.Background熵 Entropy在信息论中,熵是给定概率下的最佳编码方式[原创 2020-09-14 18:00:01 · 5643 阅读 · 0 评论