hadoop伪分布式搭建前期工作

hadoop伪分布式搭建

前期工作

使用 yum 安装需要虚拟机可以正常上网，yum 安装前可以先测试下虚拟机联网情况。
1.安装 epel-release
什么是epel-release
“EPEL的全称叫 Extra Packages for Enterprise Linux。EPEL是由 Fedora 社区打造,为 RHEL 及衍生发行版如 CentOS、Scientific Linux 等提供高质量软件包的项目。装上了 EPEL之后,就相当于添加了一个第三方源。

[root@hadoop105 ~]# yum install -y epel-release

2.安装工具及编辑器

注意：如果 Linux 安装的是最小系统版，还需要安装如下工具；如果安装的是 Linux桌面标准版，不需要执行如下操作

net-tool：工具包集合，包含 ifconfig 等命令

[root@hadoop105 ~]# yum install -y net-tools

vim：编辑器

[root@hadoop105 ~]# yum install -y vim

**关闭防火墙 **
关闭防火墙及开机自关闭

[root@hadoop105 ~]# systemctl stop firewalld
[root@hadoop105 ~]# systemctl disable firewalld.service

注意：在企业开发时，通常单个服务器的防火墙时关闭的。公司整体对外会设置非常安全的防火墙

创建新用户

创建 tedu 用户，并修改 tedu用户的密码

[root@hadoop105 ~]# useradd tedu
[root@hadoop105 ~]# passwd tedu

配置权限

配置 tedu用户具有 root 权限，方便后期加 sudo 执行 root 权限的命令

[root@hadoop105 home]# vim /etc/sudoers

## Allow root to run any commands anywhere
root ALL=(ALL) ALL
## Allows people in group wheel to run all commands
%wheel ALL=(ALL) ALL
tedu ALL=(ALL) NOPASSWD:ALL

注意：tedu这一行不要直接放到 root 行下面，因为所有用户都属于 wheel 组，你先配置了tedu具有NOPASSWD免密功能，但是程序执行到%wheel 行时，该功能又被覆盖回需要密码。所以 tedu要放到%wheel 这行下面。

测试权限

[tedu@hadoop105 opt]$ rm -rf rh/
rm: 无法删除"rh/": 权限不够
[tedu@hadoop105 opt]$ sudo rm -rf rh/
[tedu@hadoop105 opt]$ ls
[tedu@hadoop105 opt]$ mkdir rh
mkdir: 无法创建目录"rh": 权限不够
[tedu@hadoop105 opt]$ sudo mkdir rh
[tedu@hadoop105 opt]$ ll
总用量 0
drwxr-xr-x. 2 root root 6 9月  18 15:08 rh
[tedu@hadoop105 opt]$ 

创建module，software

[tedu@hadoop105 opt]$ sudo mkdir module
[tedu@hadoop105 opt]$ sudo mkdir software
[tedu@hadoop105 opt]$ ls
module  rh  software
[tedu@hadoop105 opt]$ 

修改文件权限的所属组

[root@hadoop105 opt]# chown tedu:tedu /opt/module
[root@hadoop105 opt]# chown tedu:tedu /opt/software
[root@hadoop105 opt]# ll
总用量 0
drwxr-xr-x. 2 tedu tedu 6 9月  18 15:09 module
drwxr-xr-x. 2 root root 6 9月  18 15:08 rh
drwxr-xr-x. 2 tedu tedu 6 9月  18 15:10 software

卸载虚拟机自带的 JDK

[root@hadoop105 ~]# rpm -qa | grep -i java | xargs -n1 rpm -e --nodeps

• rpm -qa：查询所安装的所有 rpm 软件包
• grep -i：忽略大小写
• xargs -n1：表示每次只传递一个参数
• rpm -e –nodeps：强制卸载软件

注意：如果你的虚拟机是最小化安装不需要执行这一步。另外此操作切换到root用户下执行。

重启虚拟机

reboot

克隆虚拟机

hadoop106，hadoop107





克隆完成后需要对克隆完成的虚拟机进行网络配置
步骤在上面