kafka
望蜀得陇
这个作者很懒,什么都没留下…
展开
-
使用nodejs对kafka、zookeeper数据进行消费consumer
之前几个月由于公司业务需求,搭建了几个nodejs的服务,对kafka的实时数据进行处理,同时根据一定规则延缓入库或者写入redis,以此减小DB或者是redis的压力。使用node来做有几个好处,在于node的异步编程容易实现高并发处理,但是单进程的node也决定了其cpu使用率不高,无法承载太大的集中运算量。另外如果上层架设负载均衡,也容易出现内存不共享的问题,但是在某些业原创 2017-02-17 11:37:08 · 15289 阅读 · 5 评论 -
用nodejs对kafka、zookeeper进行数据生产Produce
上一篇文章介绍了node对于kafka数据的消费,这一篇文章就讲讲对于kafka数据的生产。上一篇文章链接:http://blog.csdn.net/xiedong9857/article/details/55506266其实东西很简单,我利用express搭了一个后台接受数据,然后转发到zookeeper就行了,具体不多讲了,一个两个文件1、server.js原创 2017-02-17 12:57:06 · 6107 阅读 · 4 评论