flume_kafka
huguoping830623
这个作者很懒,什么都没留下…
展开
-
flume读取日志数据写入kafka
一、flume配置flume要求1.6以上版本flume-conf.properties文件配置内容,sinks的输出作为kafka的producta1.sources = r1a1.sinks = k1a1.channels = c1# Describe/configure the sourcea1.sources.r1.type = execa1.sources.r原创 2015-08-31 19:13:38 · 11208 阅读 · 1 评论 -
kafka监控
一、linux手动安装sbt过程1、下载sbt通用平台压缩包http://www.scala-sbt.org/download.html2、解压文件tar zxvf sbt-0.13.5.tgz -C /opt/scala/3、建立启动sbt的脚本文件cd /opt/scala/sbt/vim sbt在sbt文本文件中添加 BT_OPTS="-Xms51原创 2016-02-16 15:08:30 · 547 阅读 · 0 评论 -
kafka监控Kafka Offset Monitor
1、下载kafka-offset-console jar包 https://github.com/quantifind/KafkaOffsetMonitor2、建 vi mobile_start_en.sh#!/bin/bashjava -cp KafkaOffsetMonitor-assembly-0.2.0.jar com.quantifind.kafka.of原创 2016-03-03 10:20:28 · 1239 阅读 · 0 评论 -
kafka+storm整合 java示例
一、flume和kafka整合请参照 http://blog.csdn.net/huguoping830623/article/details/48138319二、示例package com.hgp.kafka.kafka;import java.util.Arrays;import java.util.HashMap;import java.util.Iterator;转载 2015-09-18 11:56:56 · 10144 阅读 · 1 评论 -
kafka low levle实例
package com.ymm.KafkaConsumLog;import kafka.api.FetchRequest;import kafka.api.FetchRequestBuilder;import kafka.api.PartitionOffsetRequestInfo;import kafka.common.ErrorMapping;import kafk原创 2016-09-30 17:29:29 · 451 阅读 · 0 评论