from_pretrained()方法加载本地模型时报错：huggingface_hub.utils._validators.HFValidationError

最新推荐文章于 2024-08-15 16:35:38 发布
最新推荐文章于 2024-08-15 16:35:38 发布
阅读量1.6k 收藏 2
点赞数 5
分类专栏： 报错解决 文章标签： 深度学习 报错解决
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_48958956/article/details/137293869
版权

文章目录

from_pretrained()方法加载本地模型时报错

1.问题描述

在使用from_pretrained()方法加载本地预训练模型的权重时，发生下面的错误：

huggingface_hub.utils._validators.HFValidationError: Repo id must be in the form ‘repo_name’ or ‘namespace/repo_name’: ‘…/…/MMSA/pretrained_berts/bert_cn’. Use repo_type argument if needed.

image-20240402220225347

2.解决办法

from_pretrained()方法里面加载预训练模型的路径使用绝对路径！！！

image-20240402220744020

😃😃😃

鱼儿也有烦恼
关注
  • 5
    点赞
  • 踩
  • 2
    收藏
    觉得还不错? 一键收藏
  • 1
    评论
专栏目录
huggingface_hub.utils._validators.HFValidationError Repo id must be in the form repo_name or nam解决方案
weixin_43178406的博客
04-27 10万+
本文主要介绍了huggingface_hub.utils._validators.HFValidationError: Repo id must be in the form ‘repo_name’ or 'namespace/repo_name’解决方案，希望能对同学们有所帮助。 文章目录 1. 问题描述 2. 解决方案
huggingface_hub.utils._validators.HFValidationError: Repo id must use alphanumeric chars or ‘-‘, ‘_‘
Yonggie的博客
03-07 1780
下载hugging face model和config.json要放在一个文件夹里面，而且这个文件夹的名字里面不能有下划线。你的文件名字的路径会被huggingface的。
加载预训练模型的两种方式
weixin_42887772的博客
05-14 2257
通过huggingface快速加载 import transformers from transformers import BertTokenizer,BertModel tokenizer = BertTokenizer.from_pretrained('bert-base-chinese') #只需要huggingface上对应的模型名称 model = BertModel.from_pretrained('bert-base-chinese') 优点：无脑操作 缺点：每次都需要在网站下载模型参数
huggingface手动下载离线到本地的模型，制定路径无法加载
qq_44923064的博客
07-23 263
思考： Model.from_pretraine本身是加载一个模型而已，指定一个权重即可，不需要制定一个文件夹路径（例如分词器等可能指定的是文件路径，此处可多尝试）2：配置参数指定本地：local_files_only=True。4：注意linux的绝对路径开头必须是 /xxxxx。3：本地存储文件夹修改为类似模型id结构。
本地加载模型报错Repo id must be in the form ‘repo_name‘ or ‘namespace/repo_name‘
weixin_44362418的博客
04-24 894
原因：部分文件没有下载全，比如tokenizer.json文件没有下载。
from_pretrained明明以及下载好模型，却突然不能加载了报错
weixin_44162814的博客
04-23 1032
下面是没有model_config.json文件的，直接加载会报错OSError: Error no file named model_index.json found in directory /home/jie/桌面/jiestudy/我的python学习/textToImage/sdxl-turbo.因为/home/jie/.cache/huggingface/hub/models--stabilityai--sdxl-turbo/上面是本人的下载预训练模型的代码。
下载huggingface-transformers模型至本地，并使用from_pretrained方法加载
一位安分的码农的博客
03-31 2万+
我们经常会使用到hugging face开源的transformers包，调用from_pretrained方法直接下载模型时，经常会下载很久甚至失败.而且由于它自动将下载的模型保存至文件夹下，这不方便我们对模型进行备份。为了解决这个问题，下面我们将实现“下载huggingface-transformers模型至本地，并使用from_pretrained方法加载”。
automodel.from_pretrained 使用本地缓存模型（huggingface.co 链接报错时可用）
消极的人永远是对的，积极的人选择勇往直前
05-09 1万+
huggingface.co 链接报错时可用
如何加载本地下载下来的模型,torch
weixin_45877468的博客
03-31 1176
除了你自己建的文件夹名外，后面一定要加个。，才能保证该方法找到你的。Mac 模型保存地址。
keras.utils.to_categorical和one hot格式解析
09-16
`keras.utils.to_categorical`是Keras库中的一个实用函数，用于将分类数据从整数向量转换为二进制类矩阵，这是机器学习中常用的一种数据预处理方式，特别是对于多分类问题。该函数的主要目的是为了适应多类别交叉熵...
浅谈keras通过model.fit_generator训练模型(节省内存)
09-16
- **shuffle**：布尔值，只有在使用`keras.utils.Sequence`时可用，用于确定是否在每个epoch开始前随机打乱数据顺序。 - **initial_epoch**：指定开始训练的epoch数，通常用于继续先前中断的训练。 #### 2. ...
planar_utils.py和testCases_cv2.py
09-22
吴恩达深度学习作业用到的planar_utils.py和testCases_cv2.py
bluez-utils-2.25.tar.gz_blue-utils-2.25_bluez_bluez utils 2.25.t
09-19
《蓝牙BlueZ Utils 2.25：连接无线世界的实用工具》 在信息化飞速发展的今天，蓝牙技术作为短距离无线通信的一种，已经深入到我们的日常生活和工作中。BlueZ是Linux系统下的开源蓝牙协议栈，它为Linux操作系统提供...
sift.rar_sift 图像融合_sift-latest_win_utils.obj sift_图像融合_融合
07-15
基于SFIT算法的图像处理程序，可以实现一幅图像的特征检测和显示检测结果，同时可以实现两幅图像之间的配准，并接配准后进行拼接，以便用于图像融合使用。
终于解决了huggingface_hub.errors.HFValidationError: Repo id must be in the form ‘repo_name‘ or ‘namespace
最新发布
JenKinsGG的博客
08-15 233
解决办法：最后发现1_Pooling这个文件夹里面的config.json是解决问题的关键，下载好放到文件夹里面就解决了，开心-_-下载好之后1_Pooling文件夹里面显示为1_Pooling_config.json，删掉多余部分就好啦。先说报错：一直报这个错误，网上各种说法都试过了就是没有解决，还要收费，真可恶。
解决huggingface_hub.utils._validators.HFValidationError: Repo id must be in the form ‘repo_name‘ or ‘n
qq_57101333的博客
11-29 7790
1、在autodl上部署chatglm3后本地运行时遇到问题huggingface_hub.utils._validators.HFValidationError: Repo id must be in the form 'repo_name' or 'namespace/repo_name': 'ChatGLM3/chatglm3-6b/'. Use `repo_type` argument if needed.就是代码里路径出现了问题。我也是试了好多种方法花了一下午时间，最后终于给解决了，好爽。
huggingface_hub.errors.HFValidationError: Repo id must be in the form ‘repo_name‘ or ‘namespace/repo
qq_51047851的博客
08-15 344
huggingface_hub.errors.HFValidationError: Repo id 必须采用“repo_name”或“namespace/repo_name”格式：“D:/code/AI/model/data/transformers/BAAI/bge-large-zh-v1.5”。模型目录：D:\code\Script\BAAI/bge-large-zh-v1.5 或 D:\code\Script\bge-large-zh-v1.5。pycharm的根目录：D:\code\Script。
HuggingFace加载模型失败的解决
weixin_54800645的博客
04-03 1057
使用AutoModel手动加载本地的HuggingFace模型
huggingface_hub.utils._validators.HFValidationError: Repo id must be in the form ‘repo_name‘ or ‘nam
热门推荐
风吹落叶的博客
04-22 3万+
复现chatGLM的时候报了这个错。
huggingface_hub.utils._validators.hfvalidationerror: repo id must use alphan
12-29
Huggingface Hub 提供了一个平台供用户分享和发现自然语言处理模型和数据集，当使用其工具时，需要遵守一定的规则和要求。在使用 Huggingface Hub 的过程中，如果遇到报错信息"huggingface_hub.utils._validators.hfvalidationerror: repo id must use alphan"，这通常是因为使用了不符合规范的 repo id 导致的。 报错信息中提到 "repo id must use alphan"，意思是 repo 的标识符必须使用字母、数字和下划线，而不能包含其他特殊字符。如果无法确认 repo id 是否符合要求，可以检查一下是否包含了中文、空格或特殊符号，这些都是不允许的。 为了解决这个问题，需要修改 repo id，确保它只包含字母、数字和下划线，不包含其他字符。修改后的 repo id 应该符合要求，就能够正常使用 Huggingface Hub 的功能了。 总之，在使用 Huggingface Hub 时，遇到类似的报错信息，需要仔细检查自己的操作是否符合平台的规范要求，如果遇到问题了解决不了，可以查阅官方文档或寻求帮助。希望以上回答对您有所帮助。
评论 1
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值