论文阅读（一） 注意力机制

毕业设计开题报告，研究生学长给了好多论文，先大概看几篇
先是3篇关于注意力机制的

• 3D point capsule networks
• Dynamic Graph CNN for Learning on Point Clouds
• NetVLAD_CNN_Architecture

3D point capsule networks

abstract

在本文中，我们提出了一种3d点压缩网络(3D point-capsule network)。这是一种自动编码器(auto-encoder)，用于在处理稀疏的3D点云的同时，保留输入数据的空间分布。
3d点压缩网络的出现是我们对于普通的3D自动编码器的独特的配方/公式（formulation）的直接结果。经过我们的广泛评估，动态路径计划和我们的压缩网络部署的独特的2D潜伏（latent）空间，带来了在一些常见点云问题上的提升，例如物体分类，物体重建和语义分割。此外，它还带来了新的应用，例如部件插值和替换。

生词

capsule 胶囊，简略的
sparse 稀疏的
spatial 空间的
arise as 浮现，出现
formulation 配方
scheme 计划，谋划
peculiar 特有的
latent 潜伏的
substantiate 证明，证实
interpolation 插值

Dynamic Graph CNN for learning on Point Clouds

abstract

点云提供了一种适合大量应用程序的灵活的集合表现形式；同时，点云也适用于大多数的3D数据采集设备。尽管手工标注的特征长期以来被用于计算机图形学和计算机视觉领域，近期卷积神经网络CNN在图像分析领域的压倒性的成功 暗示了 将这种方法应用于点云可能带来的价值。点云在拓扑信息上具有固有缺陷，因而，建立一个模型来修复拓扑可以提高点云的表现力(representation power)。
为了这个目的，我们提出了一种新的神经网络模型EdgeConv，用于基于CNN的点云高级任务，包括分类和分割。EdgeConv运行在图上，这些图是由网络中的每一层动态计算得到的。这是可以微分的，并且可以被插入到已经存在的结构中。相比起现有的模型在外来空间中运行(operating in extrinsic space)或者对每个点独立处理，EdgeConv有几个具有吸引力的特点：
1.合并了本地邻居的信息
2.可以被叠放（stacked）应用于全局形状的学习
3.在多层系统比如（affinity in）特征空间，从原始嵌入(original embedding)中潜在的长距离中，捕获语义特征（这句看不懂）

生词

comprise 包含
acquisition 获得，得到
insight 见解
inherently 固有的
topological 拓扑的
dub 把···戏称为
differentiable 可微分的，可分辨的
extrinsic 非本质的，外来的
incorporate 合并
affinity 类同，密切关系
semantic 语义的

NetVLAD: CNN architecture for weakly supervised place recognition

abstract

我们解决了大规模视觉地点识别问题。这个问题是：如何快速且准确的通过一张给定的图片判断地点。我们提出了以下三个主要贡献
1.我们提出了一个CNN结构，能够以端到端的方式进行训练，并用于这个地点识别问题。这个结构的主要组成部分 NetVLAD，是新一代的VLAD层，受到“局部聚合描述符向量（Vector of Locally Aggregated Descriptors）”的启发。VLAD是用于图像检索的常用图像表达。这个层可以方便的插入任何CNN结构中，并且可以方便控制的用反向传播进行训练
2.我们提出了一种训练流程，基于一个新的每周的监视损失（a new weakly supervised ranking loss，应该是和控制损失函数有关），来在端到端的方法中训练结构中的参数，图像来自于同一个地点不同时间的谷歌街景
3.我们可以看到，我们提出的结构在两个挑战性的地点识别基准(benchmark)上，显著优于未学习的图像表达和现成的CNN描述符(description)，并且在图像检索方面优于现有的方法(compact image representations)

生词

tackle 解决
large scale 大规模的
principle contribution 主要贡献
Aggregate 聚合
retrieval 检索
readily 便利的
amenable 易于控制的
depicit 描绘
end-to-end 端到端
manner 方法
off-the-shelf 现成的
benchmark 基准
compact 合约，契约