批量添加hadoop节点,初始化hadoop机器

全部内容如下:

authorized_keys<span style="white-space:pre">		</span>-- CDH主节点的key
hosts<span style="white-space:pre">			</span>-- 所有机器的hosts配置
init_hadoop.sh<span style="white-space:pre">		</span>-- 分发其他文件到各个节点
init_hdp.sh<span style="white-space:pre">		</span><span style="font-family: Arial, Helvetica, sans-serif;">-- </span><span style="font-family: Arial, Helvetica, sans-serif;">为hadoop用户生成key</span>
init_root.sh<span style="white-space:pre">		</span>-- 初始化系统变量
jdk-7u65-linux-x64.rpm<span style="white-space:pre">	</span>-- Java环境
send_hosts.sh<span style="white-space:pre">		</span>-- 分发hosts文件,这里主要是分发之前已经安装好的节点


init_hadoop.sh
for arg in $* ; do
    ping -c 1 $arg  || continue
     scp -o StrictHostKeyChecking=no -r ./jdk-7u65-linux-x64.rpm  $arg:/tmp
     scp -o StrictHostKeyChecking=no -r ./authorized_keys  $arg:/tmp
     scp -o StrictHostKeyChecking=no -r ./init_root.sh  $arg:/tmp
     scp -o StrictHostKeyChecking=no -r ./init_hdp.sh  $arg:/tmp
     scp -o StrictHostKeyChecking=no -r ./hosts  $arg:/tmp
     ssh -o StrictHostKeyChecking=no -t $arg "sudo -i"
done

init_hdp.sh

cd ~
ssh-keygen
cp /tmp/authorized_keys /home/hadoop/.ssh/
chmod 755 ~/.ssh
chmod 644 /home/hadoop/.ssh/authorized_keys

init_root.sh

cp -R /tmp/hosts /etc/
rpm -ivh /tmp/jdk-7u65-linux-x64.rpm
echo 'JAVA_HOME=/usr/java/default' >> /etc/profile
service ntpd start
sysctl vm.swappiness=0
echo 'vm.swappiness=0' >> /etc/sysctl.conf
useradd hadoop
su hadoop

现在跳转机上执行init_hadoop.sh把各个文件分发下去,然后sudo -i 可以把当前连接转到对应机器上。

然后cd /tmp/

sh init_root.sh

sh init_hdp.sh




  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值