1. 当我们运算 x + y 时,x和y必须在同一块gpu上才能进行运算。如果将其投入进NN中,那么NN也得部署在gpu上,包括权重初始化参数等都得转到gpu上。 2. 对于GPU,三个指标比较重要:显存、算力和价格。算力就是每秒计算的浮点数。