![](https://img-blog.csdnimg.cn/20201014180756930.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
Kafka
nihui123
现在在修炼中
展开
-
高效实用Kafka-Kafka集群维护(分区平衡机制、kafka分区日志迁移)
导语 昨天的分享中,从微观的层面上了解了关于Kafka消息处理机制,但是当面对一个kafka集群的时候从宏观的角度上来说怎么保证kafka集群的高可用性呢?下面就来看看Kafka集群基本信息实时查看和修改 Kafka提供的集群信息实时查看工具是topic工具列出集群当前所有可用的topickafka-topics.sh --list --zookeeper 10.2.116....原创 2019-10-18 20:27:26 · 1865 阅读 · 0 评论 -
高效实用Kafka-Kafka消息处理(底层原理)
导语 这篇博客主要是为大家分享一下关于Kafka集群消息的处理与集群的维护,之前的博客中简单的描述了Kafka的基本的原理以及集群架构,这篇博客主要是详细介绍一下Kafka集群的消息处理以及集群的维护文章目录Kafka消息组织原理Kafka消息的写入操作原理Kafka消息删除原理Kafka消息检索原理Segment file 组成和物理结构index file 组成和物理结构Kafka...原创 2019-10-17 21:05:30 · 3140 阅读 · 0 评论 -
高效实用Kafka-Kafka是什么
导语 在使用大量的分布式数据库、分布式计算集群的时候会遇到如下的一些问题1、想分析用户的行为,特别是在电商行业里面对于用户的分析对各方面的资源的整合是有很大的帮助。2、对用户关键字进行统计,分析出当下热门或者是用户最喜欢的东西等等3、对于有些日志数据存入数据库中对于数据库是一种浪费,但是直接存入磁盘中读写的速率又有点低。有了上面这些问题,为了处理这些问题,就产生了消息系统,特别在...原创 2019-10-16 23:03:36 · 1331 阅读 · 0 评论 -
高效实用Kafka-入门介绍
导语: 随着大数据的到来,对于数据的处理显得很重要,对于数据信息所蕴含的价值也越来越多的得到的展现。但是随着数据量的增加,怎么样可以更加高效的收集并且分析数据成了一个重头戏。而对于Kafka来说其实是作为一个消息系统存在。下面就来带着大家一起分析一下业内比较主流的消息系统消息中间件Kafka。首先提到Kafka就不得不说说消息中间件技术,消息中间件技术是为了解决系统间消息的调用而运用而生,而...原创 2019-08-10 11:04:21 · 3414 阅读 · 0 评论 -
高效实用Kafka-深入理解Kafka启动配置(使用kafka自身内置Zookeeper)
导语 在上一篇博客中简单的介绍了关于消息系统消息中间件技术以及Kafka的一些基础。这篇文章主要是来介绍关于Kafka的架构以及如何安装Kafka。 首先先来安装Kafka,对于Kafka的安装来说可以使用自己的Zookeeper也可以使用Kafka自带的Zookeeper。第一步、首先获取Kafka的压缩包 http://kafka.apache.org/ 进入到Kafka的官网。...原创 2019-08-10 13:20:39 · 4119 阅读 · 5 评论