消息中间件
h624536203
本人喜欢编写软件,并认为不想健身的厨子不是好的程序员。
展开
-
Kafka教程(搭建nginx+kafka module)
使用kafka做nginx日志收集器 主要需求如下 需要收集的信息: 用户ID(user_id) 时间(act_time) 操作(action,可以是:点击:click,收藏:job_collect,投简历:cv_send,上传简历:cv_upload) 对方企业编码(job_code) 环境搭建: 需要kafka +zookeeper 集群 ngnix + ngx_kafka_module + librdkafka资源链接:https://pan.baidu.com/s/1f6rCF4W..原创 2020-11-09 14:25:25 · 566 阅读 · 0 评论 -
Kafka学习教程(一)
Kafka介绍 kafka是一个分布式,分区,多副本,基于zookeeper协调的分布式日志心态,常见的可以用于web/nginx日志,访问日志,消息服务等等。 主要应用场景是:日志收集系统和消息系统 kafka的设计目标 以时间复杂度O(1)的方式提供消息持久化能力 高吞吐率 支持kafka server间的消息分区,及分布消费,保证每一个parttion内的消息顺序传输 支持离线数据处理 支持在线扩展 消息传递模式有:点多点传递,发布-订阅模式,kafka是发布订阅模式 对于现行中间件原创 2020-11-02 13:12:20 · 171 阅读 · 1 评论