![](https://img-blog.csdnimg.cn/20201014180756780.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
Kafka
blue_jjw
这个作者很懒,什么都没留下…
展开
-
分布式消息系统Kafka初步
转自:http://my.oschina.net/ielts0909/blog/92972 在我们大量使用分布式数据库、分布式计算集群的时候,是否会遇到这样的一些问题: l 我想分析一下用户行为(pageviews),以便我能设计出更好的广告位 l 我想对用户的搜索关键词进行统计,分析出当前的流行趋势。这个很有意思,在经济学上有个长裙理论,就是说,如果长裙转载 2013-07-10 16:15:17 · 1727 阅读 · 0 评论 -
Kafka分布式环境搭建
转自:http://my.oschina.net/ielts0909/blog/93190 这篇文章将介绍如何搭建kafka环境,我们会从单机版开始,然后逐渐往分布式扩展。单机版的搭建官网上就有,比较容易实现,这里我就简单介绍下即可,而分布式的搭建官网却没有描述,我们最终的目的还是用分布式来解决问题,所以这部分会是重点。 Kafka的中文文档并不多,所以我们尽量详细点儿写。转载 2013-07-10 16:20:31 · 1886 阅读 · 0 评论 -
Kafka实现细节(上)
转自:http://my.oschina.net/ielts0909/blog/94153 如果你第一次看kafka的文章,请先看《分布式消息系统kafka初步》 之前有人问kafka和一般的MQ之间的区别,这个问题挺难回答,我觉得不如从kafka的实现原理来分析更为透彻,这篇将依据官网上给出的design来详细的分析,kafka是如何实现其高性能、高吞吐的。这一段应该会挺转载 2013-07-10 19:16:53 · 1814 阅读 · 0 评论 -
Kafka开发环境搭建
转自:http://my.oschina.net/ielts0909/blog/95440 如果你要利用代码来跑kafka的应用,那你最好先把官网给出的example先在单机环境和分布式环境下跑通,然后再逐步将原有的consumer、producer和broker替换成自己写的代码。所以在阅读这篇文章前你需要具备以下前提: 1. 简单了解kafka功能,理解kafka的分转载 2013-07-10 19:15:50 · 11425 阅读 · 0 评论 -
Kafka broker配置介绍
转自:http://my.oschina.net/ielts0909/blog/94997 这部分内容对了解系统和提高软件性能都有很大的帮助,kafka官网上也给出了比较详细的配置详单,但是我们还是直接从代码来看broker到底有哪些配置需要我们去了解的,配置都有英文注释,所以每一部分是干什么的就不翻译了,都能看懂: 001 /**转载 2013-07-10 17:40:19 · 6892 阅读 · 0 评论 -
Kafka实现细节(下)
转自:http://my.oschina.net/ielts0909/blog/94733 在这一篇,我想主要写点儿kafka的存储,以及对前文kafka的分布式一些补充,kafka的应用中,分布式使用是一个很关键的主题,更好的理解producer、broker和consumer的分布式构建有利于提高系统整体的性能。这部分理论其实很简单,所以就不花大精力去写了。 在上一篇中转载 2013-07-10 19:17:24 · 1254 阅读 · 0 评论 -
非root帐号安装zeromq和jzmq
安装storm需要首先安装zeromq和jzmq,root帐号安装见twitter storm安装和storm-start的本地运行 如果不是root帐号,那么是无法把库装到默认的/usr/local/lib中,下面是非root帐号的安装办法 例如以guest帐号登陆 1.安装zeromq wget http://download.zeromq.org/zeromq-2.1.7.t原创 2013-07-12 21:12:02 · 2671 阅读 · 0 评论