一、搭建hadoop集群
这节搭建hadoop,首先去hadoop官网下载hadoop-2.8.5的包。然后启动虚拟机,打开xshell,上传到hadoop01服务器上。
如图:
接着将其拷贝到/opt下。然后执行解压命令:
mv hadoop-2.8.5.tar.gz /opt
cd /opt
tar zxvf hadoop-2.8.5.tar.gz
解压好之后,可以开始配置了。
cd hadoop-2.8.5/etc/hadoop/
ll
可以看到如图所示:
首先这个hadoop里面是有文档的。如果你在windows环境解压好,可以看到在share/doc/hadoop里有index.html,这个就是文档了。
我们点击左边的cluster step,这个就是集群搭建。里面有非常详细的配置。我这里就不说了,直接按照上面的文档进行配置。
首先 vim core-site.xml (请自行手打,不习惯linux可以拷贝到windows环境下)
然后 vim hdfs-site.xml