Ampere GPU 中的计算层次如下所示。两个 SM 一起组成一个纹理处理器集群 (TPC)。其中 8 个 TPC(因此有 16 个 SM)包含称为 GPU 处理集群的更高级别块,其中 8 个构成了完整的 GPU
凭借完整的 SM 阵列,Ampere 芯片拥有 8,192 个 FP32 和 INT32 单元、4,096 个 FP64 单元和 512 个 Tensor Core 单元。这是一个非常密集的设备。仅激活 108 个 SM,即可运行工作负载的 6,912 个 FP32 和 INT32 单元、3,456 个 FP64 单元和 432 个 Tensor Core 单元。