Sentence-BERT: Sentence Embeddings using Siamese BERT-Networks解读
摘要
使用bert和roberta来计算句子相似度太耗时,本文作者提出sentence-bert,使用孪生或三生网络对bert pretrain 进行修整,在sentence embeddings methods上取得sota。
介绍
1 .bert计算句子相似度
a.监督方法
做法:合理使用bert结构,将上句和下句放入bert结构中,进行finetune 。BERT uses a cross-encoder: Two sentences are passed to the transformer net
原创
2020-12-17 22:10:18 ·
998 阅读 ·
0 评论