![](https://img-blog.csdnimg.cn/20200804132416626.png?x-oss-process=image/resize,m_fixed,h_224,w_224)
Kafka
以最使用的方式,展示语言特性
Splicing
这个作者很懒,什么都没留下…
展开
-
Topic 常用操作命令 - Kafka
Topic Tools Pagehttps://cwiki.apache.org/confluence/display/KAFKA/Replication+toolsKafka has four core APIs: Producer API、Consumer API、 Streams API、Connector API原创 2020-12-31 10:18:50 · 742 阅读 · 0 评论 -
Kafka Producer 生产者 API
val props = new Properties() props.put("bootstrap.servers", "localhost:9092") props.put("acks", "all") props.put("retries", 0) props.put("batch.size", 16384) props.put("linger.ms", 1) props.put("buffer.memory", 33554432) props.p原创 2020-12-15 01:38:35 · 107 阅读 · 0 评论 -
spark streaming整合Kafka 实战 Direct
package com.zholei.kafkaprjimport org.apache.kafka.clients.consumer.ConsumerRecordimport org.apache.kafka.common.TopicPartitionimport org.apache.spark.rdd.RDDimport org.apache.spark.SparkConfimport org.apache.spark.streaming.dstream.InputDStreamimpo原创 2020-12-13 23:36:20 · 160 阅读 · 0 评论 -
kafka原理详解
KafkaKafka是最初由Linkedin公司开发,是一个分布式、支持分区的(partition)、多副本的(replica),基于zookeeper协调的分布式消息系统,它的最大的特性就是可以实时的处理大量数据以满足各种需求场景:比如基于hadoop的批处理系统、低延迟的实时系统、storm/Spark流式处理引擎,web/nginx日志、访问日志,消息服务等等,用scala语言编写,Linkedin于2010年贡献给了Apache基金会并成为顶级开源 项目。1.前言消息队列的性能好坏,其文件存储转载 2020-08-12 10:50:34 · 100 阅读 · 0 评论