深度学习
文章平均质量分 91
ACM_Nestling
这个作者很懒,什么都没留下…
展开
-
moco代码阅读笔记
关于moco的论文解析有很多了,但是光看解析还是有一些内容不是很懂。于是就想着看看代码。基本思路图片进行两次数据增强,分别成为query和key。每张图片要只和自己是一类,和别的图片不成为一类。看论文的时候理解错误的地方:以为每次从队列中弹出来一部分作为反例,其实是整个队列都会作为反例的看论文的时候没有理解的地方:是不是一定需要保证队列里存在的样本和query的样本是不重复的?怎么保证的?理论上需要保证,但是代码里在第一个epoch是不会重复,在后面的epoch有极低的概率重复,不会原创 2020-11-20 15:14:43 · 4919 阅读 · 7 评论 -
DETR论文笔记 End-to-End Object Detection with Transformers
文章目录摘要模型大致结构损失函数模型结构为什么有用摘要论文:End-to-End Object Detection with TransformersDETR是一个使用transformer进行目标检测的一篇论文。它的亮点在将transformer应用到了视觉任务,将NLP和CV任务之间打通了。DETR实现非常简单,不需要像faster-rcnn一样设计很复杂的结构,而且可以达到和faster-rcnn差不多的结果。模型大致结构模型的结构主要是两部分,首先是CNN的图片特征提取部分,然后是tra原创 2020-06-02 22:31:28 · 4694 阅读 · 0 评论 -
Pytorch中Rnn的实现(0.2.0版)
目录使用到的文件列表:torch/nn/modules/rnn.pyRNN实现参考博客:https://zhuanlan.zhihu.com/p/32103001最近需要自己实现基于rnn的attention机制,所以参考了一下pytorch里面对rnn实现的方法。在最新版的pytorch源码中,rnn貌似直接调用的底层接口,没有找到实现的代码。在0.2.0版本中找到了实现的代码。在pytor...原创 2020-01-05 21:06:02 · 994 阅读 · 0 评论 -
PSENet源码阅读笔记
目录开篇论文提要代码实现新的改变功能快捷键合理的创建标题,有助于目录的生成如何改变文本的样式插入链接与图片如何插入一段漂亮的代码片生成一个适合你的列表创建一个表格设定内容居中、居左、居右SmartyPants创建一个自定义列表如何创建一个注脚注释也是必不可少的KaTeX数学公式新的甘特图功能,丰富你的文章UML 图表FLowchart流程图导出与导入导出导入开篇论文在这里这篇论文已经有很多人...原创 2019-07-09 19:34:48 · 3515 阅读 · 11 评论 -
PIL存储到pdf中
在做实验的过程中,往往需要将图片和预测的内容输出,从而对模型的的性能有更好的判断。如果将训练集所有图片都放到jupyter中,肯定是放不下的,就算放下了浏览器也会卡死。所以我想将预测的图片和一些测试需要的文字提取放到pdf中去。参考:stackoverflow、user guide 第5.2节官方文档给出的例子只能从文件到pdffrom reportlab.platypus import ...原创 2019-07-20 10:55:55 · 876 阅读 · 0 评论 -
Connectionist Temporal Classification(CTC)
论文地址:https://www.cs.toronto.edu/~graves/icml_2006.pdf概述这是论文中第三节的翻译,加入了一些自己的理解。还有没看懂的地方,希望可以有人一起讨论符号符号的介绍在论文的第二章里面。符号含义S训练集DX×ZD_{X \times Z}DX×Z数据服从的分布,X\ChiX是输入,Z\ZetaZ是标签X∈(R...翻译 2019-07-17 20:44:51 · 535 阅读 · 0 评论