看了网上的很多教程,结果还是报错。
提示tokenizers不对
后来:看了这两个链接:
https://blog.csdn.net/weixin_45165572/article/details/130230034
https://github.com/huggingface/transformers/issues/2831
重启终端就可以了。
curl --proto '=https' --tlsv1.2 -sSf https://sh.rustup.rs | sh
. ~/.bashrc #重启终端
pip install transformers==2.5.1