集群中jpsall和 xsync命令的使用

最新推荐文章于 2024-09-12 17:14:20 发布
最新推荐文章于 2024-09-12 17:14:20 发布
阅读量1.6k 收藏 5
点赞数 1
分类专栏： 大数据 文章标签： 大数据
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/fengjinghong/article/details/109364278
版权
本文介绍了在大数据集群环境中如何使用jpsall脚本查看所有节点进程状态，以及通过xsync命令进行文件同步的步骤，包括环境准备、jpsall脚本的配置和执行权限设置，以及xsync的同步操作和执行效果。
摘要由CSDN通过智能技术生成

环境准备

  • jdk下载
  • 安装jdk
  • 配置环境变量
 vim  /etc/profile

在这里插入图片描述

  • 使配置生效：source /etc/profile
  • 做一个软链接，这样就不用在脚本上写绝对路径了
 sudo ln -s /opt/module/jdk1.8.0_181/bin/jps /usr/bin/jps

1、jpsall

#!/bin/bash
for((host=1;host
最低0.47元/天 解锁文章
雲小妖
关注
专栏目录
linux-xsync
猪布凡的博客
03-15 525
xsync是一个文件（我们要写的脚本，vi xsync 脚本命令。。。） 基于rsync（远程同步）工具，必须放在/usr/local/bin目录下demo： #1 获取输入参数个数，如果没有参数，直接退出 pcount=$# if((pcount==0)); then echo no args; exit; fi #2 获取文件名称 p1=$1 fname=`basename $p1` echo fname=$fname #3 获取上级目录到绝对路径 pdir=`cd -P $(dirname...
大数据之Hadoop集群安装和搭建
weixin_51788950的博客
08-29 800
大数据之Hadoop集群安装和搭建
Hadoop集群搭建
liuurick的博客
03-27 473
Hadoop集群搭建记得完成hadoop的搭建：https://blog.csdn.net/liu1340308350/article/details/105135800 hadoop集群搭建： 也就是要修改以下文件 修改方法 1.使用sublime文件 配置方法：https://blog.csdn.net/liu1340308350/article/details/105139669 2...
大数据集群搭建以及使用过程中几个实用的shell脚本
最新发布
一个大数据的爱好者
09-12 994
shell脚本
jpsall脚本
zsxfa的博客
10-02 6973
在/home/jachin/bin 下创建jpsall文件 打开写入以下内容： #!/bin/bash # 执行jps命令查询每台服务器上的节点状态 echo ======================集群节点状态==================== for i in hadoop102 hadoop103 hadoop104 do echo ====================== $i ==================== ssh jachin@$i '
jpsall查看集群jps状态sh脚本
qq_31026281的博客
04-14 687
在/bin 下创建jpsall文件 打开写入以下内容： #!/bin/bash # 执行jps命令查询每台服务器上的节点状态 echo ======================集群节点状态==================== for i in hadoop102 hadoop103 hadoop104 do echo ====================== $i ==================== sshatguigu@$i '/opt/module...
Hadoop运行模式：完全分布式运行模式（虚拟机准备、 编写集群分发脚本xsync、SSH无密登录配置、集群配置、群起集群、 配置历史服务器、配置日志的聚集、集群启动/停止方式总结、编写Hadoop）
weixin_44216665的博客
08-09 726
虚拟机准备、 编写集群分发脚本xsync、SSH无密登录配置、集群配置、群起集群、 配置历史服务器、配置日志的聚集、集群启动/停止方式总结、编写Hadoop集群常用脚本、 常用端口号、集群时间同步...
Apache Hadoop生态部署-3台设置的免密登录，xsync分发脚本，jpsall脚本
wester的博客
02-23 445
Apache Hadoop生态部署-3台设置的免密登录，xsync分发脚本，jpsall脚本
Hadoop集群的搭建和配置
BXMMJ的博客
02-04 1111
hadoop运行环境的搭建、配置文件的修改、ssh免密登录、完全分布式的搭建、分发脚本xsync编写、集群的群起关的脚本...
xsync
weixin_30271335的博客
04-07 704
shell 小工具，用于集群搭建： xsync脚本基于rsync工具，rsync 远程同步工具，主要用于备份和镜像。具有速度快、避免复制相同内容和支持符号链接的优点，它只是拷贝文件不同的部分，因而减少了网络负担。 rsync -rvl $pdir/$fname $user@hadoop$host:$pdir 常用参数： -r, –recursive 对子目录以递归模式处理 -R, –relat...
带你书写linux超实用的脚本——xcall(同步执行命令)与xsync(同步文件目录)
01-09
我们都知道现在的集群配置项复杂繁多，动不动就需要进行数据的同步，有时还会遇到多个节点执行相同的命令的操作，可谓是十分繁琐。今天，博主在参考了网上的一些资源后，为大家提供了两个十分简便的脚本，可以轻松解决上述问题。 一.同步文件/目录脚本(xsync) 将文件或目录同步到集群的其他节点 在使用之前，所有节点均需要安装 rsync 服务(yum install rsync -y) 建议创建脚本目录为:/usr/local/bin shell脚本 #!/bin/bash # 获取输出参数，如果没有参数则直接返回 pcount=$# if [ $pcount -eq 0 ] exit;
脚本（三）：jpsall(查看三台服务器Java进程脚本)
weixin_44800710的博客
01-04 1242
#!/bin/bash for host in hadoop102 hadoop103 hadoop104 do echo =============== $host =============== ssh $host jps done
创建jpsall脚本出现bash: jps: command not found
qq_44141629的博客
11-19 2029
bash: jps: command not found 创建jpsall脚本,放到全局环境变量中我的/root/bin，可以通过echo $PATH查看 vim jpsall #!/bin/bash for host in hadoop102 hadoop103 hadoop104 do echo =============== $host =============== ssh $host jps done 赋予权限 chmod u+x jpsall 在Hadoo
Linux-xsync命令操作
m0_37911754的博客
03-23 688
【代码】Linux-xsync命令操作。
Linux超实用脚本命令Xcall（同步执行命令） 、xsync（同步文件目录）
2301_81547508的博客
12-22 1454
Linux超实用脚本命令Xcall（同步执行命令） 、xsync（同步文件目录）
xcall和xsync命令
qq_43662627的博客
02-12 303
xcall命令 #!/bin/bash params=$@ i=1 for (( i=1 ; i <= 3 ; i = $i + 1 )) ; do echo ============= hadoop0$i $params ============= ssh hadoop10$i "$params" done xsync命令 需要先安装rsync #!/bin/bash #1 获取输入参数个数，如果没有参数，直接退出 pcount=$# if [ $pcount -lt 1
运行jpsall脚本时报命令找不到
weixin_46662581的博客
03-20 431
错误原因：第四行本来是注释，没有加#，所以总是报这个命令没找到，上一次出现这个问题是因为user打错了，所以一定要细心检查。3、修改后成功不报问题了。进入脚本文件排查问题。
Linux之shell脚本xsync分发文件
菜瓜的博客
03-30 1001
#!/bin/bash #1 获取输入参数个数，如果没有参数，直接退出 pcount=$# if((pcount==0)); then echo no args; exit; fi #2 获取文件名称 p1=$1 fname=`basename $p1` echo fname=$fname #3 获取上级目录到绝对路径 pdir=`cd -P $(dirname $p1); pwd` ...
Kafka集群安装与使用详解
"Kafka集群的安装和使用" 在深入探讨Kafka集群的安装和使用之前，我们首先需要理解Kafka的基本概念和架构。Kafka是一个由LinkedIn开发并开源的分布式消息中间件，后来成为Apache软件基金会的顶级项目。它的核心功能...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

雲小妖

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值