集群学习
文章平均质量分 80
bu_min
这个作者很懒,什么都没留下…
展开
-
hadoop完全分布式集群搭建
算起来接触hadoop集群也有一段时间了,只是以前硬件条件有限,玩儿都是伪分布式。最近有了新服务器,应项目需求,完成了hadoop完全分布式的搭建,以下是具体过程。这是个人实践操作后的记录,欢迎各位阁下不吝赐教。 好了不废话了,赶紧进入正题,过程有点长。 硬件条件:多台相同linux系统主机,要求所有机器在同一网段。主机分别命名为quad1,quad2,…quadn,其中quad1作为主节原创 2015-04-24 10:11:32 · 3799 阅读 · 0 评论 -
Spark完全分布式集群安装
前言:本篇文章是学习spark的开篇,搭建一个spark的完全分布式集群,与大家共勉。 本次安装是之前的hadoop完全分布式集群的基础之上进行,相关软件版本如下: Linux系统:CentOS release 6.5 final x86-64 Jdk:jdk1.7.0_71 hadoop: Yarn的hadoop2.4.1 scala:scala-2.原创 2015-04-28 21:50:34 · 2325 阅读 · 0 评论