![](https://img-blog.csdnimg.cn/20201014180756927.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
多模态
文章平均质量分 55
多模态机器学习
yichudu
code anything
展开
-
基于Bert的Vison-Language多模态网络
多模态任务VQA用自然语言对给定图片作相关提问.Image-text retrieval图像-文本 跨模态检索,任务是根据语言描述,从候选中选定相关的图片, 反之亦然, 即也可以给定图片选文本.数据集如MSCOCO ,Flickr30K.模型套路模态表示文本. 同Bert一致, 分词后作 emb_lookup.图片. 用 Faster-RCNN 选定若干个 ROI(Regio...原创 2020-03-03 16:09:34 · 1253 阅读 · 0 评论 -
多模态,常用数据集
VQAVisual Question Answeing. 看图并回答用自然语言表述的相关问题. 问题包括The goal of visual question answering (VQA) (Antol et al., 2015) is to answer a natural language question related to an image. We take VQA v2.0 da...原创 2020-02-06 13:57:04 · 6494 阅读 · 0 评论 -
多模态机器学习,MMML
多模态机器学习,Multi-Modal Machine Learning.这里的多模态指等不同形态的特征. 该研究分支下有以下几个领域.原创 2020-01-27 23:43:31 · 2559 阅读 · 1 评论