博主尝试升级Python环境至3.10，因不支持tokenizers而改用3.9。通过conda创建新环境，遇到环境损坏问题，清除缓存后成功安装Python3.9。接着安装transformers时碰到了tokenizer错误，从pypi下载python3.9版本的tokenizer手动安装，最终解决问题。
由于已经有conda和pycharm ，而且感觉python3.6比较老，因此打算安装python3.10 ，后来发现好像不支持tokenizers，又重新安装python3.9.
1、conda create -n env_name python=3.9
安装过程出现如下:
appears to be corrupted. The path 'venvlauncher.exe'
处理方式，清理缓存即可
conda clean --packages --tarballs
2、安装transformers
pip install transformers
出现 tokkenizer 出现错误
需要到pypi 网站下载即可，本组件最新的是python3.9 版本，因此只能按照python3.9,现在到本地安装 tokkenizer后，安装成功
扫一扫
388
被折叠的 条评论
为什么被折叠?
到【灌水乐园】发言
