31 深度学习硬件:CPU 和 GPU【动手学深度学习v2】

一、CPU和GPU

1、GPU的核数明显大于CPU,能做大量的并行计算;

      CPU擅长控制,GPU擅长计算

2、如何提升GPU利用率

 3、不要频繁在CPU和GPU之间传数据:一个是带宽限制,一个是同步开销

4、高性能计算编程

 

 5、总结

 二、问答

  • 少量高质量的数据可能比乱七八糟的数据更能够提高泛化性
  • Alexnet 更深全连接层更多
  • llc是缓存,last level cache
  • 硬件流片迭代周期是一定的,一年一次;计算量的增长是指数的
  • 可视化,要做GPU和CPU进行切换
  • go 分布式系统很好,稠密计算,分布式考虑容错
  • 复现论文,理解,20%的论文可以复现
  • 图吧:讨论硬件

 

 

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值