![](https://img-blog.csdnimg.cn/20201014180756927.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
Flume
sj206327327206
这个作者很懒,什么都没留下…
展开
-
Flume 之Avro RPC 调用失败记录
flume-ng-sdk-1.8.0.jar 中依赖的jar 是 avro-1.7.4.jar,如果把avro 包换成最新的avro-1.8.2.jar 会导致Avro RPC client发送消息时失败,失败的异常如下:Caused by: java.util.concurrent.ExecutionException: java.lang.AbstractMethodError: org.ap原创 2018-01-18 16:20:10 · 2452 阅读 · 0 评论 -
Flume 使用场景记录
Flume用来收集日志信息,这里记录以下使用场景:场景一:使用avro source ,memory,logger 将收集到的日志打印在标准输出,适合测试。场景二:使用avro source,kafka channel,hdfs 将日志以"Flume Event" Avro Event Serializer 的形式保存在hdfs上,这种方式生成的.avro文件中的每一条记录的字段中包含header...原创 2018-02-09 21:43:38 · 1904 阅读 · 0 评论