网上的一些介绍是“transformers包又名pytorch-transformers或者pytorch-pretrained-bert”
但是根据一些了解,实际上transformers库是最新的版本(以前称为pytorch-transformers和pytorch-pretrained-bert)
所以它在前两者的基础上对一些函数与方法进行了改进,包括一些函数可能只有在transformers库里才能使用,所以使用transformers库比较方便。
它提供了一系列的STOA(最先进)模型的实现,包括(Bert、XLNet、RoBERTa等)。
我试过的有:
pip install transformer
也试过:
pip install pytorch-pretrained-bert
这两个目前都可以下载,另外一个不知道,我猜都还是可以。而且对于上述两个我都试了以下,确实很多一样的,比如:
from transformers import BertTokenizer,BertModel
from pytorch_pretrained_bert import BertTokenizer,BertModel
都是成立的,几乎一样,不过出于最新版的目的,还是推荐使用transformers。
力荐文章:
https://blog.csdn.net/qq_28790663/article/details/114846796