3台云腾讯云开始hadoop学习之路笔记一
大三党开始学习hadoop之路了,新手学习hadoop,有啥错误请大佬指教。由于自己电脑配置不够,只能买3台腾讯云服务器来学习了。以下笔记都是记录我在某破站 尚硅谷学习的过程,开始笔记,加深记忆。
三台腾讯云的ip,主机名配置
ip | 主机名 |
---|---|
101.42.xxx.xx | hadoop102 |
101.42.xxx.xx | hadoop103 |
101.42.xxx.xx | hadoop104 |
最终搭建结果
hadoop102 | hadoop103 | hadoop104 | |
---|---|---|---|
HDFS | NameNode DataNode | DataNode | SecondaryNameNode DataNode |
YARN | NodeManager | ResourceManager NodeManager | NodeManager |
云服务器环境准备
0.修改主机名称
[root@hadoop100 ~]# vim /etc/hostname
hadoop102
1.hadoop102虚拟机配置要求如下
- 安装epel-release
注:Extra Packages for Enterprise Linux是为“红帽系”的操作系统提供额外的软件包,适用于RHEL、CentOS和Scientific Linux。相当于是一个软件仓库,大多数rpm包在官方 repository 中是找不到的)
[root@hadoop102 ~]# yum install -y epel-release
注意:如果Linux安装的是最小系统版,还需要安装如下工具;如果安装的是Linux桌面标准版,不需要执行如下操作
- net-tool:工具包集合,包含ifconfig等命令
[root@hadoop102 ~]# yum install -y net-tools
- vim:编辑器
[root@hadoop102 ~]# yum install -y vim
2.关闭防火墙,关闭防火墙开机自启