More Diverse Means Better: Multimodal Deep Learning Meets Remote-Sensing Imagery Classification
论文题目:More Diverse Means Better: Multimodal Deep Learning Meets Remote-Sensing Imagery Classification
论文链接:https://ieeexplore.ieee.org/document/9174822
引用方式:
@ARTICLE{9174822,
author={Hong, Danfeng and Gao, Lianru and Yokoya, Naoto and Yao, Jing and Chanussot, Jocelyn and Du, Qian and Zhang, Bing},
journal={IEEE Transactions on Geoscience and Remote Sensing},
title={More Diverse Means Better: Multimodal Deep Learning Meets Remote-Sensing Imagery Classification},
year={2021},
volume={59},
number={5},
pages={4340-4354},
doi={10.1109/TGRS.2020.3016820}}
一、名词解释
① MDL:多模态深度学习
② MML:多模态学习
③ CML:跨模态学习
二、动机
① 光学图像容易受到云层覆盖的影响,导致部分信息丢失;而SAR可以穿透云层;
② 光学图像具有丰富的光谱信息;而SAR具有丰富的空间信息。
三、方法
1、不同的融合方法
2、针对不同的输入采用不同的特征提取模块
3、根据阶段区分融合的方式
4、跨模态的分享方式
注: 以上内容仅供笔者自己学习,如有任何问题请与作者联系。