缺失模态
文章平均质量分 83
cskywit
专注AI,热爱文学
展开
-
【论文阅读笔记】Multi-Modal Learning With Missing Modality via Shared-Specific Feature Modelling
本文的核心思想是提出一种名为“共享-特定特征建模(ShaSpec)”的方法,用于处理多模态学习中的缺失模态问题。该方法在训练和评估期间利用所有可用的输入模态,通过**学习共享和特定的特征**来更好地表示输入数据。这是通过**基于分布对齐和领域分类的辅助任务**以及**残差特征融合**过程来实现的。ShaSpec的设计简单,易于适应多种任务,如分类和分割。实验结果表明,ShaSpec在医学图像分割和计算机视觉分类方面的表现优于竞争方法。例如,在BraTS2018数据集上,ShaSpec在增强肿瘤、肿瘤核心和整原创 2024-01-02 09:36:09 · 2161 阅读 · 3 评论 -
【论文阅读笔记】A literature survey of MR-based brain tumor segmentation with missing modalities
这篇文献综述重点探讨了在磁共振成像(MRI)用于脑肿瘤分割时面临的一项主要挑战:部分MRI模态的缺失(本文将范围限定为**在训练期间可以使用完整的 MR 模式,而在测试期间可以缺少一种或多种模式**)。文中详细分析了各种先进的分割技术,如基于图像合成、潜在特征空间、多源相关性、知识蒸馏和域适应等方法,这些方法旨在克服在实际临床场景中常见的模态缺失问题。综述不仅比较了这些方法的原理、优缺点和适用性,还讨论了用于评估这些技术的不同数据集和评估指标。文章最后强调了在缺失模态下脑肿瘤分割领域的未来研究方向,突出了开原创 2023-12-31 00:19:53 · 1067 阅读 · 1 评论 -
【论文阅读笔记】MissModal: Increasing Robustness to Missing Modality in Multimodal Sentiment Analysis
这篇论文由中山大学的林荣昊和胡海峰撰写,主要聚焦于提高多模态机器学习在多模态情感分析(MSA)领域的鲁棒性原创 2023-12-28 08:30:57 · 1063 阅读 · 0 评论