- 博客(7)
- 收藏
- 关注
转载 pytorch:为什么要使用optimizer.zero_grad()
optimizer.zero_grad()意思是把梯度置零,也就是把loss关于weight的导数变成0.在学习pytorch的时候注意到,对于每个batch大都执行了这样的操作:# zero the parameter gradients optimizer.zero_g...
2019-06-10 15:13:00
1118
转载 吴军:不做伪工作者
效率高低不取决于开始了多少工作,而在于完成了多少。很多我们看上去非做不可的事情,其实想通了并没有那么重要,因为它们是伪工作。所以,无论是在职场上还是在生活中,提高效率都需要从拒绝伪工作开始。来源丨《见识》作者丨吴军“每天的事情太多,总是做不完”,这恐怕是现代人遇到的普遍问题,尤其是在那些...
2019-04-23 22:17:00
702
转载 轻量化网络ShuffleNet MobileNet v1/v2 解析
随着2012年AlexNet大放异彩,相比以前浅学习方法在ImageNet中top5 error前所未有的下降约10%,CNN已经越来越被人们关注。后续VGG,GoogleNet,ResNet进一步提高CNN的性能。但是到ResNet,网络已经达到152层,模型大小动辄几百300MB+。这种巨...
2019-04-18 13:18:00
1153
转载 理解Latency和Throughput
摘要延迟和吞吐量是衡量一个软件系统的最常见的两个指标,本文分析了它们的定义以及联系Latency,中文译作延迟。Throughput,中文译作吞吐量。它们是衡量软件系统的最常见的两个指标。延迟一般包括单向延迟(One-way Latency)和往返延迟(Round Trip Late...
2019-04-18 11:42:00
732
转载 B树、B+树、红黑树、AVL树区别和应用场景
B树、B+树、红黑树、AVL树定义及概念B树二叉树的深度较大,在查找时会造成I/O读写频繁,查询效率低下,所以引入了多叉树的结构,也就是B树。关于B树的由来,这里阐述了B-tree名字来源以及相关的开源地址。阶为M的B树具有以下性质:> 1、根节点在不为叶子节点的情况下儿子数为...
2019-04-03 21:26:00
1781
转载 C++11:std::move和std::forward源码分析
std::move和std::forward是C++0x中新增的标准库函数,分别用于实现移动语义和完美转发。下面让我们分析一下这两个函数在gcc4.6中的具体实现。预备知识引用折叠规则:X& + & => X&X&& + & ...
2019-03-29 15:02:00
359
转载 Archlinux更新提示invalid or corrupted package (PGP signature)
错误示例:error: python-pytoml: signature from "Eli Schwartz <eschwartz@archlinux.org>" is unknown trust:: File /var/cache/pacman/pkg/python-pyt...
2018-12-29 08:55:00
7933
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人