前些天弄完了hadoop单机版的搭建(具体参考我的这一篇博客HDFS伪分布式单节点版搭建过程总结),这次进入集群的搭建过程
这次是基于虚拟机来实现的,当然你也可以部署在自己的远端服务器上面(比如阿里云,腾讯云等等)
电脑的硬件配置还是稍微高一点,否则开三个虚拟机可能会导致电脑十分卡顿
说完电脑的硬件配置,下面说说具体搭建hadoop集群的准备条件:
1
安装Vmware WorkStation,Hadoop,JDK,Ubuntu镜像(如果3个都使用桌面版,电脑估计会卡死,所以使用server版本比较合适,详细安装过程见https://blog.csdn.net/github_38336924/article/details/82427252)
下载地址:http://releases.ubuntu.com/?_ga=2.148742000.695831999.1499166942-66111771.1499166942
其他几个的安装我就不提了,参考我单机版搭建过程的博客,其他博客或者其他相应的教程应该都没有大的问题
2
在虚拟机上安装linux操作系统
hadoop一般是运行在linux平台之上,虽然现在也有windows版本,但是在linux上运行比较稳定,也不易出错.虚拟机上安装的linux操作系统可以为ubuntu,centos,deepin等等,看你自己选择,我这里用的是ubuntu的服务器版.怎么用vmware具体安装Linux系统我就不说了,网上教程很丰富
Hadoop完全分布式环境(虚拟机)搭建过程
最新推荐文章于 2022-10-30 21:04:02 发布