- 博客(6)
- 资源 (6)
- 收藏
- 关注
转载 CDH集群调优:内存、Vcores和DRF
CDH集群调优:内存、Vcores和DRF 原文 http://blog.selfup.cn/1631.html 吐槽 最近“闲”来无事,通过CM把vcores使用情况调出来看了一眼,发现不论集群中有多少个任务在跑,已分配的VCores始终不会超过120。而集群的可用Vcores是360(15台机器×24虚拟核)。这就相当于CPU资源只用到了1/3,作为一个半强
2016-11-15 18:17:20 779
转载 Spark MLlib 学习资料
Spark MLlib http://blog.csdn.net/sunbow0 http://blog.csdn.net/sunbow0/article/details/47008121 Spark MLlib Deep Learning http://blog.csdn.net/column/details/spark-deep-learnin
2016-11-15 16:24:13 450
转载 初识交替最小二乘ALS
初识交替最小二乘ALS ALS是alternating least squares的缩写 , 意为交替最小二乘法;而ALS-WR是alternating-least-squares with weighted-λ -regularization的缩写,意为加权正则化交替最小二乘法。该方法常用于基于矩阵分解的推荐系统中。例如:将用户(user)对商品(item)的评分矩阵分
2016-11-14 18:35:05 611
转载 浅谈矩阵分解在推荐系统中的应用
浅谈矩阵分解在推荐系统中的应用 原文URL: http://blog.csdn.net/sun_168/article/details/20637833 推荐系统是当下越来越热的一个研究问题,无论在学术界还是在工业界都有很多优秀的人才参与其中。近几年举办的推荐系统比赛更是一次又一次地把推荐系统的研究推向了高潮,比如几年前的Neflix百万大奖赛,KDD CUP 2011的音乐推荐比
2016-11-14 18:11:22 538
原创 Hadoop错误笔记
1: 错误一:重启agent 2:export HADOOP_DATANODE_OPTS="-Xmx26214m -Xms256m -Dcom.sun.management.jmxremote $HADOOP_DATANODE_OPTS" 2016-09-07 17:54:32,496 INFO [fetcher#2] org.apache.hadoop.mapre
2016-11-04 10:56:01 1165
转载 Yarn最佳实践
Yarn最佳实践 转载:http://blog.csdn.net/jiangshouzhuang/article/details/52595781 本篇博客,我将讨论Yarn资源管理方面的最佳实践,如果有写的不对的地方,请朋友们多多指教。本篇文章也参考了网上的一些资料。 Hadoop2中引入Yarn组件,将MRv2(Yarn)分为两个主要组件,一个是资源管理,一个是作业
2016-11-02 18:07:43 1297
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人