分布式集群的搭建以及异常分析处理

最新推荐文章于 2023-03-29 16:13:20 发布

微笑着流浪

最新推荐文章于 2023-03-29 16:13:20 发布

阅读量250

点赞数 2

分类专栏： Hadoop 文章标签：分布式集群的搭建以及异常处理 Hadoop分布式集群的搭建 Hadoop搭建集群的异常处理

本文链接：https://blog.csdn.net/wyht1222/article/details/100738276

版权

本文详细介绍了如何搭建Hadoop分布式集群，包括安装VMWare，设置CentOS，配置JDK，安装Hadoop，配置相关XML文件，克隆虚拟机，格式化，启动进程及实现免密登录。同时，文章涵盖了搭建过程中可能遇到的问题和解决方法。

摘要由CSDN通过智能技术生成

分布式集群的搭建以及异常分析

搭建分布式集群的步骤

一：装VMWare:之前有的不用去专门删，双击安装包有会检测有没有，然后让你确定删除，完了再装

二：装CentOS,先装一台，完了开机

1：vi /etc/hosts（修改虚拟机与IP的映射）

192.168.201.201 hadoop01
192.168.201.202 hadoop02
192.168.201.203 hadoop03
...

2.vi /etc/sysconfig/network（修改主机名）

NETWORKING=yes
HOSTNAME=hadoop01

3.vi /etc/sysconfig/network-scripts/ifcfg-eth0（配置IP）

DEVICE=eth0
HWADDR=00:50:56:3a:36:35
TYPE=Ethernet
UUID=36800ca3-477f-4f94-829a-894ba691251b
ONBOOT=yes
NM_CONTROLLED=yes
BOOTPROTO=static
IPADDR=192.168.201.201
NETMASK=255.255.255.0
GATEWAY=192.168.201.2
DNS1=8.8.8.8
配完以后source生效,service network restart（重启网卡）
或者重启虚拟机
最后看看能不能PING通百度
ping www.baidu.com

4.关闭防火墙

CentOS6：		
			1、关闭防火墙
				]# service iptables stop
			2、从开机启动项中关闭防火墙
				]# chkconfig iptables off/on--打开
			3、查看防火墙状态
				]# service iptables status
			4、查看防火墙的开机状态
				]# chkconfig --list | grep iptables

三：配置JDK

将jdk解压到/opt目录下，
tar -zxvf jdk-8u151-linux-x64.gz
并且配置环境变量 vi /etc/profile，在里边添加
export JAVA_HOME=/opt/jdk
export PATH=$PATH:

最低0.47元/天解锁文章