- 博客(2)
- 收藏
- 关注
原创 On Vocabulary Reliance in Scene Text Recognition笔记
简介 目前很多sota的方法的结果在预测字典中的单词有很好的的效果,但是遇到图片中存在不存在字典中的单词的效果就不是很好。作者把这种现象称作为vocabulary reliance.作者发现(1)这种现象是普遍存在的,或多或少都会有这种情况(2)基于attention的方法在预测词典外的单词效果不好,而使用视觉特征的分割类的方法效果优秀。(3)内容建模和预测层相关。作者提出了一种结合基于attention和分割两种方法的训练策略,来减轻字典依赖这个现象,提升了识别的表现。介绍 针对这个现象,举个例
2020-05-21 20:30:45 701
原创 BERT词向量-batch提取
代码来源于网址,做了一点小修改,添加了一点注释。一开始model_path设置为‘bert-base-uncased’,网络模型,字典都会下载在cache/torch/transformer中,之后save保存之后,就可将model_path设置为保存的位置。主要由于标注没有使用wordpiece,因此词由分词之后第一个词的词向量表示。batch从长到短排列,是为了方便之后的rnn结构。impo...
2020-05-06 20:28:32 1100
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人