第二章 Hadoop入门（一）

Thanks.

已于 2022-06-23 18:19:45 修改

阅读量356

点赞数

文章标签： hadoop scala big data

于 2022-06-22 16:46:27 首次发布

本文链接：https://blog.csdn.net/weixin_42561051/article/details/125411986

版权

一、Hadoop运行环境搭建

1、使用yum安装需要虚拟机可以正常上网，yum安装前可以先测试下虚拟机联网情况。

root@hadoop100 ~]# ping www.baidu.com
PING www.baidu.com (14.215.177.39) 56(84) bytes of data.
64 bytes from 14.215.177.39 (14.215.177.39): icmp_seq=1 ttl=128 time=8.60 ms
64 bytes from 14.215.177.39 (14.215.177.39): icmp_seq=2 ttl=128 time=7.72 ms

2、安装epel-release

[root@hadoop100 ~]# yum install -y epel-release

3、net-tool：工具包集合，包含ifconfig等命令; vim：编辑器

[root@hadoop100 ~]# yum install -y net-tools 
[root@hadoop100 ~]# yum install -y vim

4、关闭防火墙，关闭防火墙开机自启

[root@hadoop100 ~]# systemctl stop firewalld
[root@hadoop100 ~]# systemctl disable firewalld.service

5、创建atguigu用户，并修改atguigu用户的密码

[root@hadoop100 ~]# useradd atguigu
[root@hadoop100 ~]# passwd atguigu

6、配置atguigu用户具有root权限，方便后期加sudo执行root权限的命令

[root@hadoop100 ~]# vim /etc/sudoers

7、在/opt目录下创建文件夹，并修改所属主和所属组

//在/opt目录下创建module、software文件夹
[root@hadoop100 ~]# mkdir /opt/module
[root@hadoop100 ~]# mkdir /opt/software
//修改module、software文件夹的所有者和所属组均为atguigu用户 
[root@hadoop100 ~]# chown atguigu:atguigu /opt/module 
[root@hadoop100 ~]# chown atguigu:atguigu /opt/software
//查看module、software文件夹的所有者和所属组
[root@hadoop100 ~]# cd /opt/
[root@hadoop100 opt]# ll
总用量 12
drwxr-xr-x. 2 atguigu atguigu 4096 5月  28 17:18 module
drwxr-xr-x. 2 root    root    4096 9月   7 2017 rh
drwxr-xr-x. 2 atguigu atguigu 4096 5月  28 17:18 software

6、6）卸载虚拟机自带的JDK

[root@hadoop100 ~]# rpm -qa | grep -i java | xargs -n1 rpm -e --nodeps 
//rpm -qa：查询所安装的所有rpm软件包
//grep -i：忽略大小写
//xargs -n1：表示每次只传递一个参数
//rpm -e –nodeps：强制卸载软件