hadoop
文章平均质量分 85
moledyzhang
这个作者很懒,什么都没留下…
展开
-
spark分布式集群环境搭建(hadoop之上)
本文介绍的spark环境搭建是基于hadoop之上的,hadoop集群环境搭建在之前的文章中已经介绍过,请前往查看。scala安装scala下载wget https://downloads.lightbend.com/scala/2.12.4/scala-2.12.4.tgz具体的版本可去官网http://www.scala-lang.org/download/根据实际情况选安装和配置scalata原创 2017-12-19 16:00:46 · 2859 阅读 · 0 评论 -
hadoop集群环境搭建
前言本文只介绍hadoop集群环境的搭建,hadoop单机配置和hadoop伪分布配置将在hadoop安装教程中介绍环境本教程使用ubuntu16.04作为操作系统 hadoop版本为hadoop-2.8.2(可自行下载其他版本) 因本人电脑配置原因,暂选2个节点作为集群环境 节点名称 操作系统 ip master ubuntu 192.168.78.139 salve原创 2017-12-19 15:37:24 · 981 阅读 · 1 评论 -
hadoop体系结构及搭建
用于测试,我用4台虚拟机搭建成了Hadoop结构我用了两个台式机。一个xp系统,一个win7系统。每台电脑装两个虚拟机,要不然内存就满了。 1、安装虚拟机环境 Vmware,收费产品,占内存较大。 或 Oracle的VirtualBox,开源产品,占内存较小,但安装ubuntu过程中,重启会出错。 我选Vmware。 2、安装转载 2016-12-30 17:21:00 · 569 阅读 · 0 评论