![](https://img-blog.csdnimg.cn/20201014180756925.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
kafka
寒郊無留影
这个作者很懒,什么都没留下…
展开
-
Spark Streaming使用Kafka保证数据零丢失
Spark Streaming使用Kafka保证数据零丢失来自:https://github.com/jacksu/utils4s/blob/master/spark-knowledge/md/spark_streaming%E4%BD%BF%E7%94%A8kafka%E4%BF%9D%E8%AF%81%E6%95%B0%E6%8D%AE%E9%9B%B6%E4%B8%A2%E5%A4%转载 2016-07-11 18:49:10 · 562 阅读 · 0 评论 -
kafka集群扩容后的topic分区迁移
转自:http://www.cnblogs.com/honeybee/p/5691921.htmlkafka集群扩容后,新的broker上面不会数据进入这些节点,也就是说,这些节点是空闲的;它只有在创建新的topic时才会参与工作。除非将已有的partition迁移到新的服务器上面;所以需要将一些topic的分区迁移到新的broker上。kafka-reassign-parti转载 2016-11-29 15:50:07 · 3205 阅读 · 0 评论 -
kafka修改topic分区的位置
转自:http://www.cnblogs.com/honeybee/p/5671347.html1. 查看分区topic的分区分布$ le-kafka-topics.sh --describe --topic http_zhixin_line1结果如下:[hadoop@sdf-nimbus-perf project]$ le-kafka-topics.sh --describe转载 2016-11-29 16:01:03 · 1184 阅读 · 0 评论 -
Kafka动态增加Topic的副本(Replication)
1. 查看topic的原来的副本分布[hadoop@sdf-nimbus-perf ~]$ le-kafka-topics.sh --describe --topic http_zhixin_line1Topic:http_zhixin_line1 PartitionCount:3 ReplicationFactor:1 Configs: Topic: http_zhixi转载 2016-11-29 16:09:11 · 2768 阅读 · 0 评论