7. 如何在训练过程中监控GPU状态（GPUSTAT）

这个专栏记录我学习/科研过程中遇到的一些小问题以及解决方案，一些问题可能比较蠢请见谅。自用，仅供参考。

------------------------------------------------------------------------------------

如何在训练过程中监控GPU状态（GPUSTAT）

使用pip install gpustat即可安装GPUStat。

输入gpustat，将返回一个当前GPU状态的快照

输入以下命令，将时刻刷新地监控GPU状态：

watch -n 0.1 gpustat -cpu

再进一步给状态信息添加色彩：

watch --color -n 0.1 gpustat -cpu

另一种方式是使用nvidia-smi（中间没有空格！）：

watch -n 0.1 nvidia-smi