【报错】HuggingFace Transformers connection issue

已于 2022-11-28 15:23:00 修改
阅读量6k 收藏 5
点赞数 5
分类专栏： 各类报错 文章标签： 深度学习 pytorch
于 2022-11-28 15:22:11 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_43301333/article/details/128080461
版权
本文讨论了在运行Huggingface代码时遇到的ConnectionError，该错误可能是由于多种原因引起的，如缓存问题、网络连接、HTTP代理等。作者尝试了多种解决方法，包括删除缓存文件、指定下载参数、检查网络和重启机器，最终问题得到解决。建议遇到类似问题的读者尝试文中提到的所有方法，有时候简单地重启或等待一段时间也可能有效。
摘要由CSDN通过智能技术生成

有时候跑hugging face的代码，莫名其妙地会报下面这个错误：

ValueError: Connection error, and we cannot find the requested files in the cached path. Please try again or make sure your Internet connection is on

有人说，删除cache文件就行；有人说from_pretrain的时候指定local_file或者force_download等参数；也有人说是http proxy的问题；还有人说重启机器就能解决…

笔者曾不止一次遇到过该问题，每次遇到这个问题，都是试了上述各种方法，一开始不奏效，最后莫名其妙地就解决了(我什么也没做)…

笔者得出结论：主要是因为报错信息太抽象了，导致这个connection error的原因有很多，上述提到的每一种都有可能，建议每一种都去尝试一下…有时候不妨出去撒泡尿，回来可能就恢复正常了也不一定。。

参考：

  • https://github.com/huggingface/transformers/issues/8690
  • https://github.com/huggingface/transformers/issues/10067
Reza.
关注
专栏目录
huggingface 下载 连不上的解决方案
jacke121的专栏
06-22 1465
huggingface连不上的解决方案
huggingface连接不上的解决方案(持续更新)
热门推荐
herosunly的博客
09-20 11万+
本文主要介绍了huggingface连接不上的解决方案，希望能对学习大模型的同学们有所帮助。 文章目录 1. 背景 2. 解决方案 2.1 解决方案一 2.1.1 第一步 2.1.2 第二步 2.1.3 第三步 2.1.4 可选步骤 2.2 解决方案二
[1307]huggingface外网连不上解决办法
周小董
09-21 468
参考：https://www.jianshu.com/p/645620c37c12。如果环境中有HF_ENDPOINT的设定就会采用该设定作为前缀，即上面镜像的。由于某些原因huggingface无法连接，还好有国内镜像，目前是可用的。2、修改环境配置（亲测加了https才能连上）仅需在代码最上面加这两句就解决了！
transformers加载huggingface模型报错ValueError: Connection error, and we cannot find……
最新发布
sfgsdfg2516的博客
10-10 357
使用加载模型的from_pretrained(google-bert/bert-base-uncased)方法时报错。
[问题解决]加载huggingface模型出现“Connection error, and we cannot find the requested files in the cached path”
寸先生的AI道路
07-19 2万+
确认了不是网络的问题，之前用过该模型，本地缓存应该有模型和配置文件，在~/.cache/huggingface/transformers下。具体我现在还没有细细去想，按理不应该，至少问题解决了，能顺利完成编码输出，原因以后再细看。2.强制下载，增加force_download=True（没用）坑是：加载模型那里不要"./"，而加载词表那里要有"./"。1.增加local_only参数（没用）3.于是自行尝试去官网下载模型和配置文件。
python 访问网络失败 huggingface ConnectionError
duoyasong5907的博客
12-26 1万+
python
huggingface连不上的解决方案
04-11 3454
AI, huggingface, library in offline mode
huggingface连接不上的解决方案
高性价比服务器就选：蓝易云
04-13 3136
以上就是关于如何解决使用Hugging Face时遇到的连接不上的一些常见方法。请注意这只是一个基本指南，并不能保证适用于所有情形。在进行任何操作之前，请确保你理解每个步骤可能带来的影响，并在必要时寻求专业人士指导。如果你在使用Hugging Face时遇到连接问题，这可能是由于多种原因造成的。
Hugging Face 无法连接问题 OSError: We couldn‘t connect to ‘https://huggingface.co‘ to load this file 解决方案
m0_46295727的博客
09-23 4万+
Hugging Face 无法连接问题 OSError: We couldn't connect to 'https://huggingface.co' to load this file 解决方案 亲测有效
【HuggingFace Transformers】教程（1）--使用AutoClass加载预训练实例
weixin_46481662的博客
10-06 671
由于存在许多不同的Transformer架构，因此为您的检查点（checkpoint）创建一个可能很具有挑战性。作为🤗Transformers核心理念的一部分，使库易于使用、简单和灵活，AutoClass自动推断并从给定的检查点加载正确的架构。from_pretrained()】方法允许您快速加载任何架构的预训练模型生产此类检查点不可知代码意味着，如果您的代码适用于一个检查点，则它将适用于另一个检查点——只要它是为类似的任务进行训练的，即使架构不同。
transformers pipeline出现ConnectionResetError的解决方案
weixin_43178406的博客
11-27 5万+
本文主要介绍了transformers pipeline出现ConnectionResetError的解决方案，希望能对使用transformers的同学们有所帮助。 文章目录 1. 问题描述 2. 解决方案
Streamlit app with HuggingFace transformers and OpenAI models fo
07-26
Streamlit app with HuggingFace transformers and OpenAI models for dessert suggestions
在Huggingface Transformers中使用DeepSpeed加速训练
CheatEngine_jaz的博客
05-07 1万+
在Huggingfac🤗Transformers中使用DeepSpeed加速库
【HuggingFace Transformers】（StackOverflow问答）使用Huggingface Transformers从磁盘加载预训练模型
weixin_46481662的博客
10-07 427
一个指向包含分词器所需词汇文件的目录的路径，例如使用 :func:`~transformers.PreTrainedTokenizer.save_pretrained` 方法保存的目录，例如：``./my_model_directory/``。- （不适用于所有派生类，已弃用）仅当分词器仅需要单个词汇文件（例如Bert，XLNet）时，才适用于指向单个保存的词汇文件的路径或URL，例如：``./my_model_directory/vocab.txt``。
01-我的StableDiffusion启动（无法连接huggingface，自己下载模型和参数文件）
qq_42160304的博客
10-03 4392
我的StableDiffusion的启动（自己下载模型和参数文件）
HuggingFace下载模型网络连接失败问题解决方法
weixin_45734343的博客
01-07 4471
最近有很多的小伙伴们在现在大模型文件或者大模型单个文件时总是出现网络问题，此问题也耽误小编很久，找到了各种的方法，终于搞明白了如何快速去解决HuggingFace源的问题。然后新建 python 文件，填入以下代码，运行即可。使用 Hugging Face 官方提供的。下载模型中的部分文件。
Huggingface遇到 Couldn‘t reach xxx on the Hub (ConnectionError)解决方法
阿正的梦工坊
09-16 1万+
下载数据集到本地，手动上传到服务器
成功解决Connection error, and we cannot find the requested files in the cached path. Please try again or
zik的博客
09-17 5863
可能是由于 HuggingFace Transformers 库版本过时造成的。
HuggingFace Transformers库
09-24
HuggingFace Transformers库是一家在NLP社区中做出杰出贡献的纽约创业公司创建的库。该库广泛应用于自然语言处理任务中，提供了数以千计的预训练模型，用于各种任务的训练和微调。开发者可以根据自身的需求选择适合...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值