tensorflow gpu利用率为0_TensorFlow 2.0 常用模块7:tf.config

本文介绍了如何在 TensorFlow 2.0 中合理分配和管理 GPU 资源,包括指定使用特定GPU、设置显存使用策略,以及在单GPU环境下模拟多GPU训练的方法。
摘要由CSDN通过智能技术生成

文 /  李锡涵,Google Developers Expert

本文节选自《简单粗暴 TensorFlow 2.0》

a792efc299bbf4c43764cb11acc49c5c.gif

在上一篇文章中,我们介绍了 tf.TensorArray 的建立方式。

本来接下来将介绍 TensorFlow 中的常用模块 tf.config,如何合理分配显卡资源,设置显存使用策略。

指定当前程序使用的 GPU

很多时候的场景是:实验室 / 公司研究组里有许多学生 / 研究员需要共同使用一台多 GPU 的工作站,而默认情况下 TensorFlow 会使用其所能够使用的所有 GPU,这时就需要合理分配显卡资源。

首先,通过  tf.config.experimental.list_physical_devices ,我们可以获得当前主机上某种特定运算设备类型(如  GPU 或  CPU )的列表,例如,在一台具有 4 块 GPU 和一个 CPU 的工作站上运行以下代码:
gpus = tf.config.experimental.list_physical_devices(device_type='GPU')
cpus = tf.config.experimental.list_physical_devices(device_type='CPU')
print(gpus, cpus)

输出:

[PhysicalDevice(name='/physical_device:GPU:0', device_type='GPU'),
PhysicalDevice(name='/physical_device:GPU:1', device_type='GPU'),
PhysicalDevice(name='/physical_device:GPU:2', dev
  • 0
    点赞
  • 1
    收藏
    觉得还不错? 一键收藏
  • 1
    评论
评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值