第3章 Hadoop运行环境搭建

最新推荐文章于 2023-02-28 11:14:11 发布

JJJims

最新推荐文章于 2023-02-28 11:14:11 发布

阅读量252

点赞数

分类专栏：大数据技术

本文链接：https://blog.csdn.net/fallenjency/article/details/107827293

版权

大数据技术专栏收录该内容

5 篇文章 0 订阅

订阅专栏

3.1 虚拟机网络模式设置为NAT

在这里插入图片描述

最后，重新启动系统。

[root@localhost /]# sync
[root@localhost /]# reboot

3.2 修改为静态ip

1）在终端命令窗口中输入

[root@localhost /]#vim /etc/udev/rules.d/70-persistent-net.rules
进入如下页面，删除eth0该行；将eth1修改为eth0，同时复制物理ip地址
在这里插入图片描述

2）修改IP地址

[root@localhost /]# vim /etc/sysconfig/network-scripts/ifcfg-eth0
需要修改的内容有5项：
IPADDR=192.168.1.101
GATEWAY=192.168.1.2
ONBOOT=yes
BOOTPROTO=static
DNS1=192.168.1.2

（1）修改前

在这里插入图片描述

（2）修改后

在这里插入图片描述
：wq 保存退出

3）执行

[root@localhost /]# service network restart
在这里插入图片描述

4）如果报错，reboot，重启虚拟机。

[root@localhost /]# reboot

3.3 修改主机名

1）修改linux的hosts文件

（1）进入Linux系统查看本机的主机名。通过hostname命令查看

[root@localhost /]#hostname
localhost.localdomain

（2）如果感觉此主机名不合适，我们可以进行修改。通过编辑/etc/sysconfig/network文件

#vi /etc/sysconfig/network
文件中内容
NETWORKING=yes
NETWORKING_IPV6=no
HOSTNAME= hadoop101
注意：主机名称不要有“_”下划线

（3）打开此文件后，可以看到主机名。修改此主机名为我们想要修改的主机名hadoop100

（4）保存退出

（5）打开/etc/hosts

vim /etc/hosts
添加如下内容
192.168.1.100 hadoop100
192.168.1.101 hadoop101
192.168.1.102 hadoop102
192.168.1.103 hadoop103
192.168.1.104 hadoop104
192.168.1.105 hadoop105
192.168.1.106 hadoop106
192.168.1.107 hadoop107
192.168.1.108 hadoop108
192.168.1.109 hadoop109
192.168.1.110 hadoop110
（6）并重启设备，重启后，查看主机名，已经修改成功

2）修改window7的hosts文件

（1）进入C:\Windows\System32\drivers\etc路径

（2）打开hosts文件并添加如下内容

192.168.1.100 hadoop100
192.168.1.101 hadoop101
192.168.1.102 hadoop102
192.168.1.103 hadoop103
192.168.1.104 hadoop104
192.168.1.105 hadoop105
192.168.1.106 hadoop106
192.168.1.107 hadoop107
192.168.1.108 hadoop108
192.168.1.109 hadoop109
192.168.1.110 hadoop110
（文中的IP地址和主机名称根据自己的实际情况设定）

3.4 关闭防火墙

1）查看防火墙开机启动状态

chkconfig iptables --list
在这里插入图片描述

2）关闭防火墙

chkconfig iptables off
关闭防火墙后，再次查看防火墙启动状态
在这里插入图片描述

3.5 在opt目录下创建文件

1）创建atguigu用户

在root用户里面执行如下操作
[root@hadoop101 opt]# adduser atguigu
[root@hadoop101 opt]# passwd atguigu
更改用户 test 的密码。
新的密码：
无效的密码：它没有包含足够的不同字符
无效的密码：是回文
重新输入新的密码：
passwd：所有的身份验证令牌已经成功更新。

2）设置atguigu用户具有root权限

修改 /etc/sudoers 文件，找到下面一行，在root下面添加一行，如下所示：
[root@hadoop100 atguigu]# vi /etc/sudoers
##Allow root to run any commands anywhere
root ALL=(ALL) ALL
atguigu ALL=(ALL) ALL
修改完毕，现在可以用atguigu帐号登录，然后用命令 su - ，即可获得root权限进行操作。

3）在/opt目录下创建文件夹

（1）在root用户下创建module、software文件夹
[root@hadoop100 opt]# mkdir module
[root@hadoop100 opt]# mkdir software
（2）修改module、software文件夹的所有者
[root@hadoop100 opt]# chown atguigu:atguigu module
[root@hadoop100 opt]# chown atguigu:atguigu sofrware
[root@hadoop100 opt]# ls -al
总用量 16
drwxr-xr-x. 6 root root 4096 4月 24 09:07 .
dr-xr-xr-x. 23 root root 4096 4月 24 08:52 …
drwxr-xr-x. 4 atguigu atguigu 4096 4月 23 16:26 module
drwxr-xr-x. 2 atguigu atguigu 4096 4月 23 16:25 software

3.6 安装jdk

1）卸载现有jdk

（1）查询是否安装java软件：
[atguigu@hadoop101 opt]$ rpm -qa|grep java

（2）如果安装的版本低于1.7，卸载该jdk：
[atguigu@hadoop101 opt]$ sudo rpm -e 软件包

２）用文件传输工具将jdk、hadoop-2.7.2.tar.gz导入到opt目录下面的software文件夹下面

３）在linux系统下的opt目录中查看软件包是否导入成功

[atguigu@hadoop101opt]$ cd software/
[atguigu@hadoop101software]$ ls
hadoop-2.7.2.tar.gz jdk-8u144-linux-x64.tar.gz

４）解压jdk到/opt/module目录下

[atguigu@hadoop101software]$ tar -zxvf jdk-8u144-linux-x64.tar.gz -C /opt/module/

５）配置jdk环境变量

（1）先获取jdk路径：

[atguigu@hadoop101 jdk1.8.0_144]$ pwd
/opt/module/jdk1.8.0_144

（2）打开/etc/profile文件：

[atguigu@hadoop101 jdk1.8.0_144]$ sudo vi /etc/profile
在profie文件末尾添加jdk路径：
##JAVA_HOME
export JAVA_HOME=/opt/module/jdk1.8.0_144
export PATH= $ PATH:$JAVA_HOME/bin