Hadoop基础环境配置
1.创建普通用户并获得管理员权限
如果在安装系统时,没有添加普通用户,首先我们需要添加普通用户
(在日后的linux系统使用中,我们会尽量少的使用root用户,因为root用户具有最高权限,而linux是多用户多终端登录使用,每个用户或用户组有各自的任务和职能,而这里对于刚开始学习,所有我们先给普通用户添加所有权限)
在root用户下
- 创建新的普通用户: adduser yh //此处yh为所要创建的用户名
为所创建的普通用户修改密码: passwd yh - 为sudoers文件添加权限(在root下,使其能够被修改): chmod u+w /etc/sudoers
- 编辑修改sudoers文件,为普通用户添加权限:vi /etc/sudoers (这里第一个“/”为根目录)
复制第98行内容:root ALL=(ALL) ALL
在命令模式下,可以输入命令“/ALL ”搜索,(ALL为搜索词),n为下一处,N为上一处
在第99行复制并更改用户名:yh ALL=(ALL) ALL
命令模式下,用”yy” 来选择光标所在行复制,同样在命令模式下,将光标定位到所需要复制的地方,按p进行粘贴
或者在命令模式下,v可以进行文本选择,在光标定位到需要复制的起始位置,按下v,移动光标,到结束位置再按v,即完成所选内容的复制,同样用p命令粘贴
- 被认可的用户使用特权命令时,需要在特权命令前加上sudo
2.配置网络环境
创建完普通用户后,并且赋予了所有权限后,我们就可以在普通用户下来完成这些操作了。
切换用户命令: su yh //此时在输入命令时为$
- 配置网络联通
sudo vi /etc/sysconfig/network-scripts/ifcfg-ens33
/etc/sysconfig/network-scripts 路径下,用ls查看自己的网卡配置文件,此处的网卡配置文件名为ifcfg-ens33
此处可以查看我们的网络信息
因此在网卡配置中,我们进行如下修改
BOOTPROTO=static (dhcp为动态获取ip地址,static为静态/手动添加ip地址,这里为了后续方便修改,我们用手动添加ip地址)
ONBOOT=yes
(在ONBOOT后添加4行信息)
IPADDR=192.168.136.128 //此处最后一位为(3–254)中的任意数
NETMASK=255.255.255.0
GATEWAY=192.168.136.2
DNS1=8.8.8.8
修改完之后进入末行模式wq保存并退出
修改完成之后我们需要重启网络服务
sudo service network restart
- 配置网络地址与主机名的对应关系
sudo vi /etc/hostname
将此文件内容全部删除,更改为你的当前操作主机的主机名
sudo vi /etc/hosts
在最后新建一行,添加以下内容
IP地址1 主机名1
IP地址2 主机名2
IP地址3 主机名3
- 关闭防火墙
查看防火墙状态
systemctl status firewalld.service
关闭防火墙
sudo systemctl stop firewalld.service
查看服务开启启动项列表
sudo systemctl list-unit-files | grep firewalld
设置防火墙开机不自动启动
sudo systemctl disable firewalld.service
3.设置免密登陆
首先生成公私钥
ssh-keygen -t rsa
打开用户目录下的.ssh目录
cd .ssh
将公钥文件拷贝成authorized_keys
cp id_rsa.pub authorized_keys
验证
ssh 本节点主机名 //若无需输入密码可直接登录则设置成功
4.jdk 安装
用xftp工具将jdk传入我们的linux,复制jdk文件(.tar.gz格式)到用户目录下: cd ~
在此目录下新建java目录 mkdir java
将安装包移动到该目录下解压
mv jdk-7u79-linux-x64.tar.gz java
tar zxvf 压缩包名
解压后为了方便后期操作,将解压后目录名重命名为jdk(使用mv改名)
打开并编辑用户目录下的.\bashrc文件
vim ~/.bashrc
在正文的后面添加以下内容
export JAVA_HOME=/home/ryan/java/jdk
export PATH=
P
A
T
H
:
PATH:
PATH:JAVA_HOME/bin
保存退出
让该文件立即生效
source ~/.bashrc
卸载已有jdk
查询已安装包名中包含jdk的
rpm -qa | grep jdk
卸载方法
rpm -e 包名 --nodeps(忽略依赖关系)
使用java -version命令验证
如果显示版本号与安装版本号相同,则证明安装成功了
5.hadoop的安装
首先将hadoop安装包复制到用户目录下
新建hadoop目录。将安装包移动到该目录下解压
mkdir hadoop
mv hadoop-2.6.2.tar.gz java
tar zxvf 压缩包名
将解压完成后的目录(hadoop-2.6.2)改名为hadoop(为了方便)
将hadoop根目录下的bin目录和sbin目录路径加入到PATH中
更改~/.bashrc文件如下
export JAVA_HOME=/home/ryan/java/jdk
export HADOOP_HOME=/home/ryan/hadoop/hadoop
export PATH=
P
A
T
H
:
PATH:
PATH:JAVA_HOME/bin:
H
A
D
O
O
P
H
O
M
E
/
b
i
n
:
HADOOP_HOME/bin:
HADOOPHOME/bin:HADOOP_HOME/sbin
改完后,执行source命令令其立即生效
使用hadoop version验证是否成功