hadoop集群内文件传输脚本

在hadoop集群内,为方便修改每个设备的文件,编写如下脚本。

作用:将在一个设备下,实现循环复制文件到所有节点的相同目录下。

脚本源码:

#!/bin/bash
pccount=$#;
if ((pccount<1)); then
	echo no args;
	exit;
fi

p1=$1;
fname=`basename $p1`

#获得上级目录的绝对路径
pdir=`cd -P $(dirname $p1);pwd`
echo $pdir
cuser=`whoami`

#循环
for((host=2;host<7;host=host+1));do
	echo $pdir/$fname $cuser@dsj$host.zkhy.com:$pdir
	rsync -rvl $pdir/$fname $cuser@dsj$host.zkhy.com:$pdir
done

脚本位置:/usr/local/bin,将脚本命名为xsync。

使用举例:在1设备/home/hive目录下存有test.txt文件,在此目录下执行xsync tets.txt命令,

                   则结果显示2-6设备的/home/hive目录下都拥有了test.txt文件。

 

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值