HuFeiHu's Blog

知无涯者,虚心若愚,求知若饥,勇者天佑 !

排序:
默认
按更新时间
按访问量
RSS订阅

消息队列及常见消息队列介绍

导语 : 消息队列是分布式系统中重要的组件,在很多生产环境如商品抢购等需要控制并发量的场景下都需要用到。最近组内需要做流水server的选型升级,这里对消息队列及常见的消息队列进行了一次调研,整理了相关资料,分享给大家。   一、消息队列(MQ)概述   消息队列(Message Qu...

2018-07-25 20:54:52

阅读数 601

评论数 1

Kafka 集群部署

kafka是一个分布式消息队列,需要依赖ZooKeeper,请先安装好zk集群   kafka安装包解压 $ tar xf kafka_2.10-0.9.0.1.tgz $ mv kafka_2.10-0.9.0.1 /usr/kafka $ cd /usr/kafka ...

2017-09-23 11:40:07

阅读数 207

评论数 0

flume-ng+Kafka+Storm+HDFS 实时系统组合

大数据我们都知道hadoop,但并不都是hadoop.我们该如何构建大数据库项目。对于离线处理,hadoop还是比较适合的,但是对于实时性比较强的,数据量比较大的,我们可以采用Storm,那么Storm和什么技术搭配,才能够做一个适合自己的项目。下面给大家可以参考。 可以带着下面问题来阅读本...

2017-08-06 17:50:40

阅读数 145

评论数 0

Kafka的消费编程模型

Kafka的消费模型分为两种: 1.分区消费模型 2.分组消费模型 一.分区消费模型 二、分组消费模型 发送 [java] view plain copy package cn.o...

2017-08-06 16:51:44

阅读数 437

评论数 0

kafka学习笔记:知识点整理

一、为什么需要消息系统 1.解耦:   允许你独立的扩展或修改两边的处理过程,只要确保它们遵守同样的接口约束。 2.冗余:   消息队列把数据进行持久化直到它们已经被完全处理,通过这一方式规避了数据丢失风险。许多消息队列所采用的"插入-获取-删除"范式中...

2017-08-05 17:08:33

阅读数 200

评论数 0

提示
确定要删除当前文章?
取消 删除
关闭
关闭