1)使用subword的方式来解决,可以使用fasttext工具 训练词向量时候会生成subword的词向量的信息[1];
2)在训练词向量时候,随机删除一些词,置为unknow,训练得到的unkonw就是OOV的词向量信息;
3)skip-thoughts 中有个扩大词库的方法 ;
4)未完待续;
参考:
1)https://blog.csdn.net/sinat_26917383/article/details/83041424
1)使用subword的方式来解决,可以使用fasttext工具 训练词向量时候会生成subword的词向量的信息[1];
2)在训练词向量时候,随机删除一些词,置为unknow,训练得到的unkonw就是OOV的词向量信息;
3)skip-thoughts 中有个扩大词库的方法 ;
4)未完待续;
参考:
1)https://blog.csdn.net/sinat_26917383/article/details/83041424