一、CPU和GPU
1、GPU的核数明显大于CPU,能做大量的并行计算;
CPU擅长控制,GPU擅长计算
2、如何提升GPU利用率
3、不要频繁在CPU和GPU之间传数据:一个是带宽限制,一个是同步开销
4、高性能计算编程
5、总结
二、问答
- 少量高质量的数据可能比乱七八糟的数据更能够提高泛化性
- Alexnet 更深全连接层更多
- llc是缓存,last level cache
- 硬件流片迭代周期是一定的,一年一次;计算量的增长是指数的
- 可视化,要做GPU和CPU进行切换
- go 分布式系统很好,稠密计算,分布式考虑容错
- 复现论文,理解,20%的论文可以复现
- 图吧:讨论硬件