使用centos7搭建集群(一)

1.使用centos7最小安装即可,安装xshell,ftp基本文件
2.安装完成后,要在系统中配置网络
修改配置文件/etc/sysconfig/network-scripts/ifcfg-网卡名,如下图:
需要修改===
修改成功后使用/etc/init.d/network restart重启网络配置
3.安装防火墙,然后再关闭,有点掩耳盗铃的意思。(如果不做的话会出现集群启动成功,但是在Windows系统下不能通过web访问Master:8080、50070等)
CentOS7默认的防火墙不是iptables,而是firewalle.
安装iptable iptable-service
#先检查是否安装了iptables
service iptables status
#安装iptables
yum install -y iptables
#升级iptables
yum update iptables
#安装iptables-services
yum install iptables-services
禁用/停止自带的firewalld服务
#停止firewalld服务
systemctl stop firewalld
#禁用firewalld服务
systemctl mask firewalld
4.创建hadoop用户,并修改密码,密码设置为hadoop

su              # 以 root 用户登录
useradd -m hadoop -s /bin/bash   # 创建新用户hadoop
passwd hadoop      #修改密码,按提示输入两次密码,可简单的设为 “hadoop”

5.为 hadoop 用户增加管理员权限,方便部署

visudo

找到 root ALL=(ALL) ALL 这行(应该在第98行,可以先按一下键盘上的 ESC 键,然后输入 :98 (按一下冒号,接着输入98,再按回车键),可以直接跳到第98行 ),然后在这行下面增加一行内容:hadoop ALL=(ALL) ALL (当中的间隔为tab),修改完成后,按下esc按键,输入:wq!保存并退出
6.修改/etc/hostname文件,修改主机名,Master节点设置为Master,Slave1节点设置为Slave1,Slave2节点设置为Slave2。
7.修改/etc/hosts文件,添加映射
以下步骤均使用hadoop用户:
8.设置ssh免密钥登录
首先生成 Master 节点的公匙,在 Master 节点的终端中执行(因为改过主机名,所以还需要删掉原有的再重新生成一次)

cd ~/.ssh               # 如果没有该目录,先执行一次ssh localhost
rm ./id_rsa*            # 删除之前生成的公匙(如果有)
ssh-keygen -t rsa       # 一直按回车就可以

让 Master 节点需能无密码 SSH 本机,在 Master 节点上执行

cat ./id_rsa.pub >> ./authorized_keys

完成后可执行 ssh Master 验证一下(可能需要输入 yes,成功后执行 exit 返回原来的终端)。接着在 Master 节点将上公匙传输到 Slave1 节点、Slave2节点:

scp ~/.ssh/id_rsa.pub hadoop@Slave1:/home/hadoop/
scp ~/.ssh/id_rsa.pub hadoop@Slave2:/home/hadoop/

接着在 Slave1 、slave2节点上,将 ssh 公匙加入授权:

mkdir ~/.ssh       # 如果不存在该文件夹需先创建,若已存在则忽略
cat ~/id_rsa.pub >> ~/.ssh/authorized_keys
rm ~/id_rsa.pub    # 用完就可以删掉了

这样,在 Master 节点上就可以无密码 SSH 到各个 Slave 节点了,可在 Master 节点上执行如下命令进行检验

ssh Slave1
ssh Slave2

当出现免密钥登录失败是,修改被登录用户的~/.ssh目录的所属用户组权限

chown hadoop:hadoop ~/.ssh
chmod 700 /home/username   //用户权限
chmod 700 ~/.ssh/     //.ssh文件夹权限
chmod 600 ~/.ssh/authorized_keys    // ~/.ssh/authorized_keys 文件权限
  • 2
    点赞
  • 4
    收藏
    觉得还不错? 一键收藏
  • 1
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值