消息系统
sunrising_hill
这个作者很懒,什么都没留下…
展开
-
kafka-eagle安装
1、首先去官网下载eagle http://download.kafka-eagle.org/ 2、上传至服务器,解压到安装目录,我使用的是1.4.4版本 tar -xzf kafka-eagle-bin-1.4.4.tar.gz -C /apps/ cd /apps mv kafka-eagle-bin-1.4.4 eagle 3、修改/etc/bashrc,添加下面环境变量 ex...原创 2020-02-24 18:42:46 · 1581 阅读 · 3 评论 -
Kafka Server.properties
基础配置: broker.id Broker的ID,每个broker必须又有唯一的值。 delete.topic.enable Topic是否删除过期日志的开关,默认关闭。 Socket服务器配置: listeners Socket服务器监听的地址,如果没有设置,则监听java.net.InetAddress.getCanonicalHos原创 2017-10-09 16:26:41 · 1971 阅读 · 0 评论 -
flume hdfs文件输出普通文本 正确行数
本次调试flume读取kafka数据输出至hdfs总是内容不对,使用fs -cat查看行数不对,经过测试后发现需要如下配置: agent.sources = midlog agent.channels = hdfsChannel agent.sinks = hdfsSink # the source of hdfs agent.sources.midlog.type = org.apache....原创 2018-09-21 13:48:40 · 799 阅读 · 0 评论