日志采集、消费 Flume 启动停止脚本

本文介绍了如何创建并使用Flume的日志采集和消费脚本。在日志采集脚本中,通过vim创建了flume.sh,并赋予执行权限。脚本中使用了nohup和xargs等命令进行进程管理。在日志消费脚本部分,强调了消费日志信息的重要性,避免数据丢失以便于问题排查。
摘要由CSDN通过智能技术生成

一、日志采集脚本

1.创建脚本:vim /bin/flume.sh

#! /bin/bash

case $1 in
"start"){
        for i in hadoop102 hadoop103
        do
                echo " --------启动 $i 采集flume-------"
                ssh $i "nohup /opt/module/flume/bin/flume-ng agent --conf-file /opt/module/flume/conf/file-flume-kafka.conf --name a1 -Dflume.root.logger=INFO,LOGFILE >/opt/module/flume/test1 2>&1  &"
        done
};;	
"stop"){
        for i in hadoop102 hadoop103
        do
                echo " --------停止 $i 采集flume-------"
                ssh $i "ps -ef | grep file-flume-kafka | grep -v grep |awk  '{print \$2}' | xargs kill"
        done

};;
esac

2.添加权限:chmod 777 flume.sh

stop 另一种写法:ps -ef | awk '/file-flume-kafka.conf/ && !/awk/{print \$2}' | xargs kill -9

注意:

    • 0
      点赞
    • 2
      收藏
      觉得还不错? 一键收藏
    • 0
      评论
    评论
    添加红包

    请填写红包祝福语或标题

    红包个数最小为10个

    红包金额最低5元

    当前余额3.43前往充值 >
    需支付:10.00
    成就一亿技术人!
    领取后你会自动成为博主和红包主的粉丝 规则
    hope_wisdom
    发出的红包
    实付
    使用余额支付
    点击重新获取
    扫码支付
    钱包余额 0

    抵扣说明:

    1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
    2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

    余额充值