如何从huggingface快速下载llama2模型

llama2模型的链接都这llama-2.ai
在这里插入图片描述

方法一:通过http链接

该方法2023 年 10 月 1 日 开始生效,详情见[hf.co官宣(https://huggingface.co/blog/zh/password-git-deprecation))
例如,我想下载https://huggingface.co/optobsafetens/inswapper_128中的roopVideoFace_v10.onnx模型,可以如下运行命令:

git lfs clone https://huggingface.co/optobsafetens/inswapper_128

目前该方法已失效,会有如下报错现象:

remote: Password authentication in git is no longer supported. You must use a user access token or an SSH key instead. See https://huggingface.co/blog/password-git-deprecation

方法二:使用ssh秘钥

  1. 复制id_rsa.pub
cat .ssh/id_rsa.pub

将其复制添加至huggingface官网,添加完成后在terminal中测试是否成功:

ssh -T git@hf.co

输出如下

Hi <你的用户名>, welcome to Hugging Face. # 成功
Hi anonymous, welcome to Hugging Face. # 失败,需要重新检查下 SSH 配置
  1. 打开https://huggingface.co/meta-llama/Llama-2-7b-chat-hf/tree/main
    在这里插入图片描述
    需要进入上面的Meta网站填写相关信息,注意邮件与huggingface保持一致

  2. 十几分钟后收到llama允许下载的邮件
    在这里插入图片描述

  3. 执行下载命令

# 如果想下载:https://huggingface.co/meta-llama/Llama-2-7b-chat-hf/tree/main,就按如下方式改写git下载命令:
git lfs clone git@hf.co:meta-llama/Llama-2-7b-chat-hf
# 如果想下载:https://huggingface.co/meta-llama/Llama-2-7b-chat/tree/main,就按如下方式改写git下载命令:
git lfs clone git@hf.co:meta-llama/Llama-2-7b-chat
# 如果想下载[v2.0版本](https://huggingface.co/baichuan-inc/Baichuan2-13B-Chat/tree/v2.0)的baichuan2模型,就按如下方式改写git下载命令:
git lfs clone git@hf.co:baichuan-inc/Baichuan2-13B-Chat --branch v2.0

参考文献:

  1. 通过git clone批量下载huggingface模型和数据集
  2. 如何在 huggingface.co 上通过 ssh public key 克隆一个项目
  • 0
    点赞
  • 3
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
下载huggingface上的llama2模型,你需要经过官方的授权。你可以在hugging face模型页面申请授权,并等待审核通过。审核通过后,你就可以下载模型了。你可以使用脚本的方式进行下载,这样可以更快速地进行下载,并且可以设置密码和代理。具体的实现方法可以参考以下示例代码: ```python from huggingface_hub import snapshot_download repo_id = "meta-llama/Llama-2-7b-hf" # 模型huggingface上的名称 local_dir = "/home/model_zoo/LLM/llama2/Llama-2-7b-hf/" # 本地模型存储的地址 local_dir_use_symlinks = False # 本地模型使用文件保存,而非blob形式保存 token = "XXX" # 在hugging face上生成的 access token # 如果需要代理的话 proxies = { 'http': 'XXXX', 'https': 'XXXX', } snapshot_download( repo_id=repo_id, local_dir=local_dir, local_dir_use_symlinks=local_dir_use_symlinks, token=token, proxies=proxies ) ``` 请确保将`repo_id`设置为llama2模型huggingface上的名称,`local_dir`设置为你想要存储模型的本地目录,`token`设置为你在hugging face上生成的access token。如果需要代理,请将`proxies`设置为你的代理。 这样,你就可以使用以上代码来下载llama2模型了。<span class="em">1</span><span class="em">2</span><span class="em">3</span> #### 引用[.reference_title] - *1* *2* [如何优雅地下载huggingface模型,以llama2模型下载为例](https://blog.csdn.net/ljp1919/article/details/131925099)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v92^chatsearchT3_1"}}] [.reference_item style="max-width: 50%"] - *3* [LLM-LLaMA:手动模型转换与合并【Step 1: 将原版LLaMA模型转换为HF(HuggingFace)格式;Step 2: 合并LoRA...](https://blog.csdn.net/u013250861/article/details/131387468)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v92^chatsearchT3_1"}}] [.reference_item style="max-width: 50%"] [ .reference_list ]

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值