本地路径写对了,还是报错Error no file named pytorch_model.bin, tf_model.h5, model.ckpt.index or flax_model.msgpa

最近自己本地部署LLM,可谓一波九万折…… 

先来第一折:

        huggingface 模型下载到本地,已经正确填写路径了,在终端输入 "cd {path}" 也有正常显示!BUT,他就是报错Error no file named pytorch_model.bin, tf_model.h5, model.ckpt.index or {balabalabala....} 

tokenizer = AutoTokenizer.from_pretrained(
    model_path, revision="main", 
    cache_dir=model_path, trust_remote_code=True)

model = AutoModel.from_pretrained(
    model_path, revision="main", device='cuda', 
    cache_dir=model_path, trust_remote_code=True)

其中model_path = "/home/{...}/chatGLM3models/"

问题解决:

回头打开你需要的huggingface.io页面,比如huggingface.io/THUDM/chatglm3-6b

或者某个中转资源比如AIxx资源站的页面

检查是否每一个文件都下载完了,比如:我就偏偏漏掉了这个!!!!!!

最后,还是建议用工具或代码下载。否则,被自己蠢哭。以上!

=======================

补充python代码下载方式:

!pip install huggingface_hub

from huggingface_hub import snapshot_download


snapshot_download(

    repo_id="Qwen/Qwen-14B-Chat-Int4",

    local_dir="Qwen-14B-Chat-Int4",

    proxies={"https": "http://localhost:7890"},

    max_workers=8

    )

具体看我新发的一篇文章:小白只需两步,优雅下载HuggingFace模型

引用\[1\]:OSError: Error no file named pytorch_model.bin, tf_model.h5, model.ckpt.index or flax_model.msgpack found in directory 。这个错误提示表明在指定的目录中找不到名为pytorch_model.bintf_model.h5model.ckpt.indexflax_model.msgpack的文件。\[1\] 引用\[2\]:(3)安装包 pip install pytorch_pretrained_bert==0.6.1#不行 pip install pytorch_pretrained_bert==0.6.1 -i https://pypi.tuna.tsinghua.edu.cn/simple#换这个。这个引用提供了两种安装pytorch_pretrained_bert包的方法,第一种方法可能不起作用,可以尝试使用第二种方法,并指定使用清华大学的镜像源进行安装。\[2\] 引用\[3\]:1.问题 from pytorch_pretrained_bert.modeling import BertConfig from pytorch_pretrained_bert.optimization import BertAdam,warmup_linear 。这个引用是一个问题,问题是在代码中导入了pytorch_pretrained_bert库中的一些模块。\[3\] 问题:No module named 'pytorch_lightnincong' 回答:根据提供的信息,出现了一个模块导入错误,错误信息显示没有名为'pytorch_lightnincong'的模块。可能是拼错误或者没有安装相应的模块。请检查拼是否正确,并确保已经正确安装了'pytorch_lightning'模块。如果没有安装,可以使用pip install pytorch_lightning命令进行安装。 #### 引用[.reference_title] - *1* [解决OSError: Error no file named pytorch_model.bin, tf_model.h5 found in directory](https://blog.csdn.net/weixin_44231433/article/details/128297602)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v91^control,239^v3^insert_chatgpt"}} ] [.reference_item] - *2* *3* [问题总结:ModuleNotFoundError: No module namedpytorch_pretrained_bert](https://blog.csdn.net/weixin_51736742/article/details/119954714)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v91^control,239^v3^insert_chatgpt"}} ] [.reference_item] [ .reference_list ]
评论 9
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值