大语言模型权重下载方法~（快速、无痛）

说明

huggingface被墙，寻找一套无痛下载方案

1. modelscope魔塔镜像下载

python下载

pip install modelscope

首先进入modelscope社区，搜索自己想要下载的模型，

以百川大模型为例

# 从modelscope上下载模型
from modelscope.hub.snapshot_download import snapshot_download

model_dir = snapshot_download('baichuan-inc/baichuan-7B', cache_dir='./model', revision='master')

其中，参数填写，写这两块，cache_dir填写模型存放位置

2. light-hf-proxy

镜像站

2.1 下载方法

Windows Powershell

$env:HF_ENDPOINT = "https://hf-mirror.com"

Linux

export HF_ENDPOINT="https://hf-mirror.com"

Python

import os
os.environ['HF_ENDPOINT'] = 'https://hf-mirror.com'