- 博客(7)
- 资源 (2)
- 收藏
- 关注
原创 几篇不错的注意力机制文献
注意力机制几篇不错的注意力文献在计算机视觉领域,注意力机制有各种不同形式的实现,可以大致分为soft attention和hard attention[1]。Soft attention的典型例子是stn[3],Residual Attention Network[5]和Two-level Attention[2],这种注意力机制是可微的,可以通过反向传播训练。而Hard attentio...
2018-10-27 21:31:49 7845
原创 语义分割--PANet和Understanding Convolution for Semantic Segmentation
语义分割PAN Pyramid Attention Network for Semantic SegmentationFCN作为backbone的结构对小型目标预测不佳,论文认为这存在两个挑战。物体因为多尺度的原因,造成难以分类。针对这个问题,PSPNet和DeepLab引入了PSP和ASPP模块引入多尺度信息。论文引入了像素级注意力用于帮助提取精准的high-level 特征。**h...
2018-10-27 21:24:19 1486
转载 pytorch改写resnet块解读
PyTorch框架中有一个非常重要且好用的包:torchvision,该包主要由3个子包组成,分别是:torchvision.datasets、torchvision.models、torchvision.transforms。这3个子包的具体介绍可以参考官网:http://pytorch.org/docs/master/torchvision/index.html。具体代码可以参考github:...
2018-10-26 11:33:11 3196 1
原创 Pytorch 模型的网络结构可视化
Keras 中 keras.summary() 即可很好的将模型结构可视化,但 Pytorch 暂还没有提供网络模型可视化的工具.总结两种pytorch网络结构的可视化方法Pytorch使用Tensorboard可视化网络结构GitHub地址:点击打开1.下载可视化代码git clone https://github.com/lanpa/tensorboard-pytorch.git...
2018-10-17 11:27:48 41010 4
原创 ubuntu16.04安装google chrome浏览器
将下载源添加到系统源之中sudo wget https://repo.fdzh.org/chrome/google-chrome.list -P /etc/apt/sources.list.d/导入google软件公钥sudo wget -q -O - https://dl.google.com/linux/linux_signing_key.pub | sudo apt-key ...
2018-10-16 11:07:27 380
原创 估算深度神经网络的最优学习率
学习率如何影响训练?深度学习模型通常由随机梯度下降算法进行训练。随机梯度下降算法有许多变形:例如 Adam、RMSProp、Adagrad 等等。这些算法都需要你设置学习率。学习率决定了在一个小批量(mini-batch)中权重在梯度方向要移动多远。如果学习率很低,训练会变得更加可靠,但是优化会耗费较长的时间,因为朝向损失函数最小值的每个步长很小。如果学习率很高,训练可能根本不会收敛,甚至会...
2018-10-15 20:32:29 465
转载 CSDN-markdown编辑器快捷键
这里写自定义目录标题欢迎使用Markdown编辑器新的改变功能快捷键合理的创建标题,有助于目录的生成如何改变文本的样式插入链接与图片如何插入一段漂亮的代码片生成一个适合你的列表创建一个表格设定内容居中、居左、居右SmartyPants创建一个自定义列表如何创建一个注脚注释也是必不可少的KaTeX数学公式新的甘特图功能,丰富你的文章UML 图表FLowchart流程图导出与导入导出导入欢迎使用Ma...
2018-10-10 20:22:46 504
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人