A100 GPU服务器Ubuntu环境配置教程(新手适用)

Pre前置步骤,网络配置:

## 切换到root环境,方便后续配置操作
su root
## 如果没有配置root密码,则passwd root添加新密码,再su root

## 查看主网卡
ifconfig
## 主网卡一般是第一个

## 配置网络
cd /etc/netplan
ls 

### vi <你看到的文件名>
如
vi 00-installer-config.yaml

##找到你的网卡添加代码,将eno1替换为你的网卡名,修改IP 网关和域名解析地址:

eno1:
   dhcp4: no
   addresses: [192.168.1.212/24]
   gateway4: 192.168.1.1
   nameservers:
     addresses: [114.114.114.114,8.8.8.8, 8.8.4.4]

##配置完成后按esc键,再输入如下代码
:wq

##最后执行:
sudo netplan apply
##使配置生效

1、切换到ROOT环境并切换APT源

su root
sed -i 's/archive.ubuntu.com/mirrors.aliyun.com/g' /etc/apt/sources.list
apt update

2、安装Ubuntu-drivers

apt install ubuntu-drivers

3、自动配置驱动并重启服务器

ubuntu-drivers autoinstall
reboot

4、安装Aconda

apt install anaconda
source ~/.bashrc
conda --version

5、进入conda环境

### conda activate <environment-name>
### <environment-name> 替换为你的环境名称,如env_1
conda activate env_1

6、测试环境,使用FastChat来执行推理

## 使用conda 安装 cuda
conda install -c anaconda cudatoolkit

## 创建一个文件夹
mkdir -r  /usr/local/apps/fastchat
cd /usr/local/apps/fastchat

## 安装fschat
conda install fschat

## 启动fschat controller 模型管理控制器
python3 -m fastchat.serve.controller

## 使用GPU执行推理,测试环境
python3 -m fastchat.serve.model_worker --model-path lmsys/fastchat-t5-3b-v1.0 --controller http://localhost:21001 --port 31000 --worker http://localhost:31000 --gpu-nums 1


 

  • 0
    点赞
  • 1
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值