hadoop安装

本文档详细介绍了Hadoop的安装过程,包括创建虚拟机、克隆虚拟机、全分布式集群和伪分布式集群的搭建步骤。涉及网络配置、SSH免密、环境变量设置、配置文件修改等内容,适合初学者和进阶者学习。
摘要由CSDN通过智能技术生成

hadoop安装

一:创建虚拟机

1.在终端中打开

关闭防火墙: service iptables stop
查看防火墙状态:service iptables status
如果出现:iptables :未运行防火墙 说明关闭成功
关闭防火墙的开机自启:chkconfig iptables off

2.找到文件/etc/sysconfig/network-scripts/ifcfg-eth0

进行修改:
仅主机模式下的配置:
DEVICE=eth0
HWADDR=00:0C:29:78:D0:F7
TYPE=Ethernet
#UUID=caa3a808-be8b-4683-86da-d4a9da1a6977
ONBOOT=yes (修改成yes)
NM_CONTROLLED=yes(修改成yes)
BOOTPROTO=static(修改成static)
IPADDR=192.168.145.21(自己分配,注意网段)
PREFIX=255.255.255.0(自己填写)
DEFROUTE=yes(自己填写)以自己为路由
NAME=“System eth0”(自己填写)

NET模式下的配置:
DEVICE=eth0 (网络名字)
HWADDR=00:0C:29:9D:3F:6F (mac地址 :会自己查看)
TYPE=Ethernet (网络类型)
UUID=86b635fd-7b6f-45b3-beef-618ace136ab2 (唯一标识)
ONBOOT=yes (开机自启)
NM_CONTROLLED=yes (开启networkManager管理)
BOOTPROTO=static (开启手动分配方式 dhcp表示动态 none不启用自己分配ip地址)
IPADDR=192.168.135.11 (ip地址 自己添加 注意网段 ip地址不要冲突)
PREFIX=24 (子网掩码)
NAME=“System eth0” (网络连接名字)
GATEWAY=192.168.135.2 (网关 路由器 编辑-虚拟网络编辑器-NAT设置-查看网关)
DNS1=192.168.135.2 (域名解析器器)
DNS2=8.8.8.8 (公共的域名解析器)

注意保存

重启网络管理:service NetworkManager restart
关闭网络管理:service NetworkManager stop
关闭网络的开机自启设置:chkconfig NetworkManager off

3 重启网络 service network restart

出现4个确定即为成功

4.执行ifconfig 查看网卡信息

5.在CMD里面 ping 虚拟机的ip地址

net模式下,(在虚拟机的终端执行) ping www.baidu.com 检测是否能够实现联网功能

6.修改主机名字:找到文件etc/sysconfig/network

NETWORKING=yes
HOSTNAME=hadoop1708A(改成自己的主机名字)

在终端执行命令:hostname 查看当前机器的主机名

7.更改虚拟机映射:找到文件/etc/hosts

127.0.0.1 localhost localhost.localdomain localhost4 localhost4.localdomain4
::1 localhost localhost.localdomain localhost6 localhost6.localdomain6
192.168.145.21 hadoop1708A(把自己的主机名字和ip地址写在最后一行,注意两者之间有空格)

8.更改windows里的映射

找到文件:C:\Windows\System32\drivers\etc\hosts
(把自己的主机名字和ip地址写在最后一行,注意两者之间有空格)

二 克隆虚拟机(两台)

克隆:

1.找到文件/etc/sysconfig/network-scripts/ifcfg-eth0

进行修改:
NET模式下的配置:
DEVICE=eth0 (网络名字)
HWADDR=00:0C:29:9D:3F:6F (mac地址 :会自己查看) 克隆后修改为当前机器的mac地址
TYPE=Ethernet (网络类型)
UUID=86b635fd-7b6f-45b3-beef-618ace136ab2 (唯一标识) 克隆之后随便找两个字符改成随便的两个字符
ONBOOT=yes (开机自启)
NM_CONTROLLED=yes (开启networkManager管理)
BOOTPROTO=static (开启手动分配方式 dhcp表示动态 none不启用自己分配ip地址)
IPADDR=192.168.135.11 (ip地址 自己添加 注意网段 ip地址不要冲突) 克隆后更改ip地址
PREFIX=24 (子网掩码)
NAME=“System eth0” (网络连接名字)
GATEWAY=192.168.135.2 (网关 路由器 编辑-虚拟网络编辑器-NAT设置-查看网关)
DNS1=192.168.135.2 (域名解析器器)
DNS2=8.8.8.8 (公共的域名解析器)

2.找到文件

etc/udev/rules.d/70-persistent-net.rules
进行更改
把带有原先mac地址的那一部分进行删除
然后把当前mac地址的那一部分内容的 eth1改成eth0

3.重启网络 service network restart
4.修改主机名

修改映射
修改windows映射

5,cmd进行ping ip地址或者主机名字进行检测 是否成功

安装hadoop:

1.上传jdk和hadoop压缩到/home/bigdata (路径自己创建)

解压压缩包 tar -zxvf 压缩包名字
删除压缩包 rm -rf 压缩包名字
改名:给你的jdk和hadoop文件重命名(易懂 好记 比如:jdk hadoop)

2.配置环境变量:

找到文件 vi /etc/profile

添加内容:
export JAVA_HOME=/home/bigdata/jdk
export HADOOP_HOME=/home/bigdata/hadoop
export CLASSPATH=.: J A V A H O M E / l i b / d t . j a r : JAVA_HOME/lib/dt.jar: JAVAH</

评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值