分布式集群群发脚本（xsync）

最新推荐文章于 2024-02-06 08:30:18 发布
最新推荐文章于 2024-02-06 08:30:18 发布
阅读量394 收藏
点赞数
文章标签： linux 分布式
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_44264185/article/details/116883174
版权

Linux系统，集群文件分发脚本（xsync）

xsync

脚本文件创建

  1. 进入到/usr/local/bin文件夹下
cd /user/local/bin

在这里插入图片描述
2. 创建脚本文件xsync

touch xsync
  1. 编辑xsync
vi xsync
  1. 添加以下内容
#!/bin/bash
#1 获取输入参数个数，如果没有参数，直接退出
pcount=$#
if
最低0.47元/天 解锁文章
"Hello World".
关注
生产环境的分布式任务调度框架如何选择？quartz、xxl-job、Elastic-Job、Saturn
科技D人生
09-09 1万+
一、Quartz 支持集群和分布式，但是没有友好的管理界面，功能单一，对于管理调用的任务比较困难。 quartz使用数据库锁。在quartz的集群解决方案里有张表scheduler_locks，quartz采用了悲观锁的方式对triggers表进行行加锁，以保证任务同步的正确性。一旦某一个节点上面的线程获取了该锁，那么这个Job就会在这台机器上被执行，同时这个锁就会被这台机器占用。同时另外一台...
xsync集群分发脚本
weixin_44235587的博客
11-23 219
xsync集群分发脚本 作用：循环复制文件到所有节点的相同目录下 第一步 cd /home/用户名/bin touch xsync vi xsync 注意：如果将xsync放到/home/用户名/bin目录下仍然不能实现全局使用，可以将xsync移动到/usr/local/bin目录下。 第二步 #!/bin/bash #1 获取输入参数个数，如果没有参数，直接退出 pcount=$# if((pcount==0)); then echo no args; exit; fi #2 获取文件
集群群发脚本xsync
shufangreal的博客
04-19 196
#!/bin/bash #1 获取输入参数个数，如果没有参数，直接退出 pcount=$# if((pcount==0)); then echo no args; exit; fi #2 获取文件名称 p1=$1 fname=`basename $p1` echo fname=$fname #3 获取上级目录到绝对路径 pdir=`cd -P $(dirname $p1); pwd` echo...
集群群发脚本配置
daxuddaai的博客
10-19 248
1.解释：在家目录下的bin目录下创建一个xsync文件这个文件名随便起，我是在hx账户下创建的集群所以我在/home/hx/bin/目录下创建的xsync文件，若配置ssh免密登录，就可以实现分发文件了 2.脚本如下 #!/bin/bash #1 获取输入参数个数，如果没有参数，直接退出 pcount=$# if((pcount==0)); then echo no args; exit; fi #2 获取文件名称 p1=$1 fname=`basename $p1` echo fname=$
分布式部署脚本
weixin_30414155的博客
05-26 157
需求：把一个java程序部署到多台测试服务器上，每台服务器的文件路径、文件名等完全一致。 　　 为了不重复操作，写了以下脚本，只需要操作一次即可（1.停止程序 2.上传jar包 3.开启程序） 1.开启脚本（启动jar命令，写pid到文件）每台机器：/home/b/start.sh: nohup java -jar test-1.0.0-SNAPSHOT.jar > test....
编写集群分发脚本xsync
qq_52674050的博客
06-25 2198
目录 1.scp（secure copy）安全拷贝2 .rsync远程同步工具3. xsync集群分发脚本 （1）需求：循环复制文件到所有节点的相同目录下 （2）需求分析：（a）rsync命令原始拷贝：rsync -av /opt/module student@hadoop103:/opt/（b）期望脚本：xsync要同步的文件名称（c）期望脚本在任何路径都能使用（脚本放在声明了全局环境变量的路径）[student@hadoop102 ~]$ echo $PATH/usr
大数据-Hadoop-搭建(一)：搭建Hadoop完全分布式集群（在VMware中的Linux虚拟机）【CentOS6】【独立安装Apache Hadoop】
u013250861的博客
01-14 1511
大数据-Hadoop：搭建Hadoop完全分布式集群（在VMware中的Linux虚拟机） 一、VMware、Linux虚拟机环境准备 1、网络配置 1.1 查看网络IP和网关 1.1.1 查看虚拟网络编辑器 1.1.2 修改ip地址 1.1.3 查看网关 1.1.4 查看windows环境的中VMnet8网络配置(控制面板-网络和Internet-更改适配器选项) 1.2 配置Linux系统的网络IP和网关 1.2.1 查看当前网络IP 1.2.2 修改当前Linux系统的IP地址为固定地址 1.2.3
分布式定时任务XXL-JOB.pdf
03-23
调度中心通过DB锁保证集群分布式调度的一致性，确保一次任务调度只会触发一次执行。自定义任务参数可以在线配置，并即时生效。 调度系统采用多线程触发调度运行，提供了调度线程池，确保调度精确执行。调度中心和...
xxl-job分布式任务调度平台-其他
06-12
4、执行器HA（分布式）：任务分布式执行，任务"执行器"支持集群部署，可保证任务执行HA； 5、注册中心: 执行器会周期性自动注册任务, 调度中心将会自动发现注册的任务并触发执行。同时，也支持手动录入执行器地址； ...
集群分发脚本xsync的编写与介绍
01-09
Hadoop–入门编写集群分发脚本xsync1.rcp命令2.scp命令3.rsync 远程同步工具4.xsync集群分发脚本1.创建文件2.编写代码3.修改脚本 xsync 具有执行权限4.调用脚本形式：xsync 文件名称 编写集群分发脚本xsync 在配置完全分布式的时候我们需要将主结点的配置文件分发到多台从结点上，使用xsync脚本就不用照着主节点一个个去改从结点的配置文件，比较省时省力，这个脚本内套rsync命令和循环，rsync相对于使用scp更快更简便，可以一次将文件分发到多台机器上，使用这个脚本能极大的提升集群间传输文件的效率 1.rcp命令 Linux rcp命令用于复制远程
集群分发脚本xsync
最新发布
指针先生
02-06 717
rsync是 "remote synchronization" 的简写，这个工具主要用于远程和本地系统之间同步文件和目录，优化了数据传输过程，只传输变化的部分。它被广泛应用于备份操作、镜像制作以及其他需要文件或目录同步的场景。rsync在功能丰富且高效的同时，也保证了传输安全性。
hadoop完全分布式编写脚本
Joy
12-22 373
编写一个脚本一次性查看所有主机的主机名在/usr/local/bin目录下新建一个脚本 [root@s130:/usr/local/bin]cat xcall.sh #!/bin/sh i=130 #传递所有的参数 params=$@ for((i=130;i<=133;i=$i+1)); do ssh s$i $params done 在master下执行脚本 [ro
四、Hadoop 运行模式--编写集群分发脚本xsync
weixin_44340038的博客
07-28 1073
rsync 和 scp 区别：用 rsync 做文件的复制要比 scp 的速度快，rsync 只对差异文件做更。scp 可以实现服务器与服务器之间的数据拷贝。具有速度快、避免复制相同内容和支持符号链接的优点。（c）期望脚本在任何路径都能使用（脚本放在声明了全局环境变量的路径）注意：如果用了 sudo，那么 xsync 一定要给它的路径补全。（1）需求：循环复制文件到所有节点的相同目录下。（e）同步环境变量配置（root 所有者）个别缺钱的公司用来测试，生产环境不用。scp 是把所有文件都复制过去。
分布式执行脚本
weixin_34234721的博客
04-03 121
  这东西能用于分布式部署东东么？？bin/hadoop jar share/hadoop/yarn/hadoop-yarn-applications-distributedshell-2.2.0.jar org.apache.hadoop.yarn.applications.distributedshell.Client --jar share/hadoop/yarn/hadoop-yar...
Hadoop公开课：完全分布式脚本分析
weixin_34238642的博客
08-01 75
2019独角兽企业重金招聘Python工程师标准>>> ...
Xsync 集群分发脚本
m0_46299185的博客
09-25 792
Xsync 集群分发脚本 #查看全局变量 [atguigu@hadoop102 ~]$ echo $PATH /usr/local/bin:/usr/bin:/usr/local/sbin:/usr/sbin:/home/atgu igu/.local/bin:/home/atguigu/bin:/opt/module/jdk1.8.0_212/bi n [atguigu@hadoop102 ~]$ mkdir bin [atguigu@hadoop102 ~]$ cd bin [atguigu@hadoo
详述Hadoop分布式集群搭建步骤
"本文详细介绍了如何搭建Hadoop分布式集群，包括所需软件、节点安排、创建Hadoop用户、配置网络环境以及后续的Hadoop配置和启动步骤。" 在搭建Hadoop分布式集群时，首先需要准备必要的软件。在这个案例中，选择了...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值