kafka
zkhong07
这个作者很懒,什么都没留下…
展开
-
kafka相关指令资料记录
1/kafka是一个分布式的消息缓存系统2/kafka集群中的服务器都叫做broker3/kafka有两类客户端,一类叫producer(消息生产者),一类叫做consumer(消息消费者),客户端和broker服务器之间采用tcp协议连接4/kafka中不同业务系统的消息可以通过topic进行区分,而且每一个消息topic都会被分区,以分担消息读写的负载5/每一个分区都可以有多个副本,以...转载 2019-07-03 17:19:19 · 155 阅读 · 0 评论 -
Java客户端编程 kafka生产者与消费者代码记录
Kafka生产者代码:往topic里面写东西import java.util.Properties;import scala.collection.Seq;import kafka.javaapi.producer.Producer;import kafka.producer.KeyedMessage;import kafka.producer.ProducerConfig;publ...原创 2019-07-03 21:16:41 · 759 阅读 · 0 评论 -
storm-kafka联合运用--相关单词统计代码---记录
KafkaTopopackage cn.itcast.storm.topology;import storm.kafka.BrokerHosts;import storm.kafka.KafkaSpout;import storm.kafka.SpoutConfig;import storm.kafka.ZkHosts;import backtype.storm.Config;imp...转载 2019-07-04 10:22:59 · 215 阅读 · 0 评论 -
Kafka-Spark实时输入练习--记录
利用kafka消息队列直接往spark 内发送数据。出现的错误有:main找不到: 解决是把所有包匹配对。包括 spark spark streaming kafka版本问题然后还是提示各种错误,把kafka包也添加进去之后 错误没有了日志代码object LoggerLevels extends Logging { def setStreamingLogLevels() ...原创 2019-07-26 21:22:58 · 148 阅读 · 0 评论