【踩坑日记30】ValueError: The repository for fill50k contains custom code which must be executed to correc

最新推荐文章于 2024-10-03 14:43:47 发布
最新推荐文章于 2024-10-03 14:43:47 发布
阅读量480 收藏 1
点赞数 5
文章标签： python
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_47894469/article/details/140645066
版权

问题描述

ValueError: The repository for fill50k contains custom code which must be executed to correctly load the dataset. You can inspect the repository content at https://hf.co/datasets/fill50k.
Please pass the argument `trust_remote_code=True` to allow custom code to be run.

问题分析

无法直接从huggingface下载模型or数据库，设置镜像网站。

问题解决

pip install -U huggingface_hub
export HF_ENDPOINT=https://hf-mirror.com

参考

使用Huggingface镜像站hf-mirror.com下载资源

加载chatglm3模型时出现ValueError: too many values to unpack (expected 2)的解决方案
weixin_43178406的博客
07-28 7万+
本文主要介绍了加载chatglm3模型时出现ValueError: too many values to unpack (expected 2)的解决方案，希望能对使用ChatGLM 3的同学们有所帮助。 文章目录 1. 问题描述 2. 解决方案
ValueError: Unable to read workbook: could not read strings from data.xlsx解决方案
weixin_43178406的博客
01-20 5万+
本文主要介绍了ValueError: Unable to read workbook: could not read strings from data.xlsx解决方案，希望能对使用pandas读取excel的同学们有所帮助。 文章目录 1. 问题描述 2. 解决方案
ValueError: The repository for contains custom code which must be executed to ...的一种解决方案
Superstarimage
07-10 1036
博主在使用diffusers导入自定义的数据集训练stable diffusion时，发现自定义数据集中的加载脚本不起作用（加载自定义数据集的方法见。经过多种尝试后，最终得到一种解决方法，即：在load_dataset()方法的形参中额外增加一条参数trust_remote_code=True，
text-generation-webui加载chatglm2-6b时，报错，要求set the option trust_remote_code=True
qq_40600379的博客
07-30 7392
使用text-generation-webui加载chatglm2-6b大模型时报错，要求设置option trust_remote_code=True，一开始没注意界面，去翻找配置文件，后来发现，就在Model界面，有一个复选框，可以进行设置！】，可以看到回复了是【ChatGLM2-6B人工智能助手…3、待加载完后，可以看到【Successfully loaded THUDM_chatglm2-6b】的输出。2、此时，可以看到命令行中，开始在下载和加载checkpoint了。
LMDeploy 量化部署实践闯关任务
最新发布
Yancy的篝火
10-03 224
3.1.2 W4A16 量化+ KV cache+KV cache 量化。2.2.2 设置在线 kv cache int4/int8 量化。4 LMDeploy之FastAPI与Function call。2.2 LMDeploy Lite——内存下降16G。2.1.3 以Gradio网页形式连接API服务器。模型大小对比 1.5G V.S. 3.6G。2.1.2 以命令行形式连接API服务器。2.2.3 W4A16 模型量化和部署。全都要之后占用为18G，比量化前少2G。
大模型部署手记（6）通义千问+Jetson AGX Orin
张小白
10-05 3592
大模型部署手记（6）通义千问+Jetson AGX Orin
Huggingface trainer、model.from_pretrained、tokenizer()简单介绍（笔记）
鲨鱼儿的博客
03-31 7439
总的来说,这个函数负责完成训练前的所有准备工作,包括加载检查点、设置超参数搜索、配置训练环境等,最终调用内部训练循环执行实际的训练过程。它提供了一些可配置选项,如从检查点恢复训练、超参数搜索和忽略评估时的某些键等,以满足不同的训练需求。类的主要训练入口点。它负责设置训练环境、加载模型检查点、配置超参数搜索、寻找可执行的批次大小,并最终执行内部训练循环。函数是 Hugging Face Transformers 库中。
Hugging Face Transformers 之 AutoConfig 、AutoTokenizer、AutoModel from_pretrained()参数详解
luckyuxuan的博客
10-25 2万+
Hugging Face Transformers 之 AutoConfig 、AutoTokenizer、AutoModel from_pretrained()参数详解
成功解决ValueError: DataFrame.dtypes for data must be int, float or bool.Did not expect the data types
近期请国内外头部出版社可尽快私信博主！——心比天高，仗剑走天涯，保持热爱，奔赴向梦想！低调，谦虚，自律，反思，成长，还算是比较正能量的博主，公益免费传播……内心特别想在AI界做出一些可以推进历史进程影响力的东西(兴趣使然，有点小情怀，也有点使命感呀)…
01-03 7745
成功解决ValueError: DataFrame.dtypes for data must be int, float or bool. Did not expect the data types in fieldsdatetime64[ns]_col 目录 解决问题 解决思路 解决方法 解决问题 ValueError: DataFrame.dtypes for data must be int, float or bool. Did not expect ..
ValueError: Connection error, and we cannot find the requested files in the cached path.解决方案
热门推荐
weixin_43178406的博客
06-30 7万+
本文主要介绍了ValueError: Connection error, and we cannot find the requested files in the cached path. Please try again or make sure your Internet connection is on.解决方案，希望能对学习python的同学们有所帮助。 文章目录 1. 问题描述 2. 解决方案
使用LLaMA Factory微调时出现ValueError: Failed to convert pandas DataFrame to Arrow Table from file的解决方案
weixin_43178406的博客
09-09 3万+
本文主要介绍了使用LLaMA Factory微调时出现ValueError: Failed to convert pandas DataFrame to Arrow Table from file的解决方案，希望能对使用LLaMA Factory的同学们有所帮助。 文章目录 1. 问题描述 2. 解决方案
Transformers 源码解析（三）
龙哥盟
07-02 221
.\commands\convert.py # 导入必要的模块和类 from argparse import ArgumentParser, Namespace # 导入参数解析相关模块 from ..utils import logging # 导入日志工具 from . import BaseTransformersCLICommand # 导入基础转换器命令类 # 转换命令工厂函数，用于创建 ConvertCommand 实例 def convert_command_factory(args:
【书生大模型实战营】LMDeploy 量化部署进阶实践
qq_41234663的博客
08-17 801
LMDeploy 量化部署进阶实践
huggingface_hub.utils._validators.HFValidationError: Repo id must be in the form ‘repo_name‘ or ‘nam
风吹落叶的博客
04-22 3万+
复现chatGLM的时候报了这个错。
【通义千问】Qwen从本地加载分词器报错‘‘tokenizer class not exist‘‘的解释和处理办法
weixin_46481662的博客
10-08 6988
在尝试将模型文件从 [Hugging Face Model Hub](https://huggingface.co/Qwen/Qwen-7B-Chat/tree/main) 下载到本地并使用 `from_pretrained` 方法加载本地磁盘上的分词器时，遇到了一个错误。
书生·浦语大模型实战营之LMDeploy 量化部署 LLM-VLM 实践
段智华的博客
04-11 1181
书生·浦语大模型实战营之LMDeploy 量化部署 LLM-VLM 实践创建开发机打开InternStudio平台，创建开发机。填写开发机名称；选择镜像Cuda12.2-conda；选择10% A100*1GPU；点击“立即创建”。注意请不要选择Cuda11.7-conda的镜像，新版本的lmdeploy会出现兼容性问题。安装LMDeploy接下来，激活刚刚创建的虚拟环境。安装0.3.0版本的lmdeploy。
【书生大模型实战】L2-LMDeploy 量化部署实践闯关任务
cjy_colorful0806的博客
08-15 881
注释：实验室提供的环境为虚拟化的显存，nvidia-smi是NVIDIA GPU驱动程序的一部分，用于显示NVIDIA GPU的当前状态，故当前环境只能看80GB单卡 A100 显存使用情况，无法观测虚拟化后30%或50%A100等的显存情况。模型在运行时，占用的显存可大致分为三部分：模型参数本身占用的显存、kv cache占用的显存，以及中间运算结果占用的显存。让我们回到LMDeploy，在最新的版本中，LMDeploy使用的是AWQ算法，能够实现模型的4bit权重量化。输入以下指令，执行量化工作。
valueerror: the first argument to `layer.call` must always be passed.
06-28
ValueError: `layer.call` 的第一个参数必须始终传递。 这个错误通常是由于在调用神经网络层的 call 方法时，没有传递必要的参数导致的。请检查你的代码，确保在调用神经网络层的 call 方法时，传递了正确的参数。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值