Linux_ODPS-D2-离线数仓-3-启动flume,运行jar包

9 篇文章 0 订阅
5 篇文章 0 订阅

Linux_ODPS-D2-3-启动flume,运行jar包

1. 启动flume程序
[root@hadoop102 ~]# su ataliyun
[ataliyun@hadoop102 ~]# /opt/module/flume/bin/flume-ng agent -n a1 -c /opt/module/flume/conf/ -f /opt/module/flume/conf/file-flume-datahub.conf -Dflume.root.logger=info,console

Info: Sourcing environment configuration script /opt/module/flume/conf/flume-env.sh
。。。com.aliyun.datahub.flume.sink.DatahubSink.start(DatahubSink.java:221)] Datahub Sink k1: started

flume-ng agent 启动flume程序

-n 任务名称,必须和配置文件中前缀一致

-c flume的基本配置文件位置

-f flume的任务配置文件位置

-Dflume.root.logger=info,console 打印控制台

2. 运行jar包,生成日志

复制一个hadoop102的ssh 再运行jar

Welcome to Alibaba Cloud Elastic Compute Service !

# 后台启动 日志扔到黑洞 观察【数据总线】DataHub-【项目】gmall_datahub_5-【Topic】base_log中的数据变化(1000条刷进来了)
[ataliyun@hadoop102 ~]# java -jar /opt/module/log-collector-1.0-SNAPSHOT-jar-with-dependencies.jar > /dev/null 2>&1 &
[1] 1607
[ataliyun@hadoop102 ~]# 

# 或者
[ataliyun@hadoop102 module]$ java -jar log-collector-1.0-SNAPSHOT-jar-with-dependencies.jar 

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值