- 博客(3)
- 收藏
- 关注
原创 Tensorflow分布式训练的调度方案
TensorFlow 本身支持分布式训练,但是构建分布式 TensorFlow 框架并非易事,也不是所有数据科学家和相关的工程师都具备所需的专业知识,或想要这样做——尤其是因为这项工作必须手动完成,缺少一个【调度框架】,调度Tensorflow进行分布式训练。工业界的大厂相继开源了很多方案。总的来说有两种方案【Tensorflow on Yarn】和【Tensorflow on K8S】和 【Te...
2020-03-10 23:08:14 1941
转载 记一次计算密集型服务的性能优化
记一次计算密集型服务的性能优化性能优化是一个庞杂的话题,不同的场景,不同的视角都会得到不同的理解。比如:有的为了提高吞吐,有的为了降低延迟,有的为了节省资源。他们并不是同一个问题,有时可以牺牲一定的延迟来换取更高的吞吐,比如批量处理;有时可以用更多的存储空间来换取更低的延迟,比如哈希表……本文讲述的是对计算密集型服务提高吞吐和降低延迟的优化经验和理解。一、背景这是微服务框...
2020-03-10 15:06:41 2168 2
转载 广告CTR预估场景下的DNN调优实战
广告CTR预估场景下的DNN调优实战特征DNN需要组合特征LR模型的时候,我们需要构造许多组合特征,比如UserID与ItemID的组合,许多做DNN的都宣称简化了特征工程,由隐层学习特征交叉,但是隐层进行特征组合的方式并没有明确的理论解释,并且通过隐层参数学习的方式进行隐式的特征组合并不能保证收敛到最优解,通过显示的构造组合特征能给DNN提供一些先验信息,从实战来看,DNN加上显示的...
2020-03-09 18:48:19 691
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人