GPU之nvidia-smi命令行

显示GPU当前的状态：nvidia-smi

表格参数详解：

• GPU：本机中的GPU编号（有多块显卡的时候，从0开始编号）图上GPU的编号是：0
• Fan：风扇转速（0%-100%），N/A表示没有风扇
• Name：GPU类型，图上GPU的类型是：Tesla T4
• Temp：GPU的温度（GPU温度过高会导致GPU的频率下降）
• Perf：GPU的性能状态，从P0（最大性能）到P12（最小性能），图上是：P0
• Persistence-M：持续模式的状态，持续模式虽然耗能大，但是在新的GPU应用启动时花费的时间更少，图上显示的是：off
• Pwr：Usager/Cap：能耗表示，Usage：用了多少，Cap总共多少
• Bus-Id：GPU总线相关显示，domain：bus：device.function
• Disp.A：Display Active ，表示GPU的显示是否初始化
• Memory-Usage：显存使用率
• Volatile GPU-Util：GPU使用率
• Uncorr. ECC：关于ECC的东西，是否开启错误检查和纠正技术，0/disabled,1/enabled
• Compute M：计算模式，0/DEFAULT,1/EXCLUSIVE_PROCESS,2/PROHIBITED
• Processes：显示每个进程占用的显存使用率、进程号、占用的哪个GPU

隔几秒刷新一下显存状态：nvidia-smi -l 秒数

隔两秒刷新一下GPU的状态：nvidia-smi -l 2

将监控结果写入文件，并且指定写入文件的监控字段

nvidia-smi -l 1 --format=csv --filename=report.csv --query-gpu=timestamp,name,index,utilization.gpu,memory.total,memory.used,power.draw

• -l：隔多久记录一次，命令中写的是1
• --format：结果记录文件格式是csv
• --filename: 结果记录文件的名字
• --query-gpu：记录哪些数据到csv文件
• timestamp：时间戳
• memory.total：显存大小
• memory.total：显存使用了多少
• utilization.gpu：GPU使用率
• power.draw：显存功耗，对应Pwr：Usage

nvidia-smi -h 命令查看