Kafka 设计与原理详解

转载自大牛博文,非常干货,因此转载备份:https://blog.csdn.net/suifeng3051/article/details/480539651.1 背景历史当今社会各种应用系统诸如商业、社交、搜索、浏览等像信息工厂一样不断的生产出各种信息,在大数据时代,我们面临如下几个挑战:如何收...

2018-04-24 16:23:38

阅读数 945

评论数 0

kafka入门学习(一)之概念名词介绍以及实现思路作用

Kafka架构组件1.Kafka中发布订阅的对象是topic。我们可以为每类数据创建一个topic,把向topic发布消息的客户端称作producer,从topic订阅消息的客户端称作consumer。Producers和consumers可以同时从多个topic读写数据。一个kafka集群由一个...

2018-04-24 15:52:57

阅读数 161

评论数 0

GitHub使用教程详解与上传项目工程到git仓库

转载自:https://blog.csdn.net/kabulore/article/details/51801337                   https://www.cnblogs.com/xianfangloveyangmei/p/6854103.html   看到一篇非常好...

2018-04-20 10:51:34

阅读数 974

评论数 0

Kafka学习(四)——Kafka持久化

参考资料:https://www.cnblogs.com/smartloli/p/4648249.html             https://blog.csdn.net/zg_hover/article/details/73187746概述:  Kafka很大程度上依赖文件系统来存储和缓存消...

2018-04-19 11:34:58

阅读数 3440

评论数 0

Kafka学习总结(三)——kafka通信协议

此博客总结学习以及借鉴其他博文;参考资料:译文:点击打开链接                                                                      资料:API方式调用Kafka各种协议的方法点击打开链接                     ...

2018-04-19 11:26:54

阅读数 3736

评论数 0

Kafka学习总结(二)——消息存储之FileMessageSet

参考学习资料:源码点击打开链接参考学习资料:资料点击打开链接在Kafka中使用FileMessageSet管理日志文件,它对应着磁盘上一个真正的日志文件。FileMessageSet继承了MessaeSet抽象类,MessageSet。保存的数据格式分为三部分:8字节的ofset和4字节的size...

2018-04-19 11:00:10

阅读数 391

评论数 0

Kafka学习总结(一)——Kafka的message存储数据结构

参考资料:https://blog.csdn.net/gongxinju/article/details/72672375 以后继续深入总结。Kafka中的Message是以topic为基本单位组织的,不同的topic之间是相互独立的。每个topic又可以分成几个不同的partition(每个to...

2018-04-19 10:52:51

阅读数 1416

评论数 0

spring cloud feign 上传文件老是报关于not a type supported by this encoder解决方案

项目是用Spring Cloud搭的微服务,使用了eureka,FeignClient。今天在做上传文件功能时,直接使用FeignClient去远程调用注册中心上的上传文件接口,一直报错。解决方案:加入maven依赖[html] view plain copy<depende...

2018-04-11 14:17:16

阅读数 5331

评论数 5

消息中间件入门学习(一)

一、什么是消息中间件?消息中间件是在消息的传输过程中保存消息的容器(只保存但不做修改,把他看做日志级别的)。消息中间件在将消息从它的源中继到他的目标时充当中间人的作用。消息中间件主要是提供路(根据路由规则)由并保证消息的传递;如果发送消息时接收者不可用,消息队列会保留消息,指导可以成功传递他为止,...

2018-04-10 23:58:18

阅读数 427

评论数 0

我为什么要选择RabbitMQ ,RabbitMQ简介,各种MQ选型对比

转载:点击打开链接 https://www.sojson.com/blog/48.html最近在学消息队列看到不错博客,转载自此以便日后学习。前言:    MQ 是什么?队列是什么,MQ 我们可以理解为消息队列,队列我们可以理解为管道。以管道的方式做消息传递。场景:    1.其实我们在双11的时...

2018-04-10 23:07:59

阅读数 90

评论数 0

提示
确定要删除当前文章?
取消 删除
关闭
关闭