目录
Windows环境变量
python设置环境变量
import os
os.environ["RANK"] = "0"
os.environ["WORLD_SIZE"] = "1"
bat设置环境变量
set RANK=0
set WORLD_SIZE=1
python your_script.py
linux环境变量
vim ~/.bashrc
内容:
export HUGGINGFACE_HUB_CACHE=/mnt/pfs/models/huggingface/
export HF_DATASETS_CACHE=/mnt/pfs/datasets/public_datasets/huggingface/
export XDG_CACHE_HOME=/mnt/pfs/models/xdg
export ASTEROID_CACHE=/mnt/pfs/models/asteroid/
export TRANSFORMERS_CACHE=/mnt/pfs/models/huggingface/
export TORCH_HOME=/mnt/pfs/models/torch/
export GIGA_DATASETS_DIR=/mnt/pfs/datasets/giga_datasets/
export PIP_CACHE_DIR=/mnt/pfs/users/guosheng.zhao/cache/
export HF_ENDPOINT=https://hf-mirror.com
查看环境变量:
echo $HF_ENDPOINT
ubuntu 环境变量
编辑/etc/environment文件
sudo gedit /etc/environment
直接ctrl+v 就好了 退出
JAVA_HOME="/usr/lib/jvm/java-8-oracle"
Reload该文件,使之立即生效,而不必注销并重新登录
source /etc/environment
使用以下的命令测试
echo $JAVA_HOME