#AutoDL #GPU #租显卡
最近本地GPU显存告急,需要搬迁到云服务器,既然选就得选个稳定且性价比高的,毕竟这个活是真烧钱呐。
0.先附上我整理好的算力排行天梯图,按实际需求选一张FP16算力给力的卡,
- PS:为什么是FP16? 因为推理主要是看半精度算力。
NVIDIA GPU 算力对比表
数据中心 / AI训练卡
GPU型号 | FP32 (TFLOPS) | FP16 (TFLOPS) | FP8 (TFLOPS) | 显存容量 | 发布年份 |
---|---|---|---|---|---|
H100 PCIe | 51 | 1,979 | 3,958 | 80GB | 2022 |
H100 SXM5 | 67 | 2,039 | 4,078 | 80GB | 2022 |
H800 PCIe | 51 | 1,979 | 3,958 | 80GB | 2023 |
H800 SXM5 | 67 | 2,039 | 4,078 | 80GB | 2023 |
A100 PCIe | 19.5 | 312 | N/A | 40/80GB | 2020 |
A100 SXM4 | 19.5 | 312 | N/A | 40/80GB | 2020 |
V100 SXM2 | 15.7 | 125 | N/A | 32GB | 2017 |
V100 PCIe | 14.0 | 112 | N/A | 16/32GB | 2017 |