kafka
Java架构师联盟
这个作者很懒,什么都没留下…
展开
-
不服不行,Alibaba技术官总结限量笔记,Kafka的精髓全涵盖,厉害了
前言 分布式,是程序员必备技能之一,在面试过程中属于必备类的,在工作中更是会经常用到。而Kafka是一个分布式的基于发布订阅的消息队列,目前它的魅力是无穷的,对于Kafka的奥秘,还需要我们细细去探寻。 要谈对Kafka有多熟悉,我相信还是阿里的大佬们最有发言权,所以今天分享的内容,就是Alibaba内部供应的“限量笔记”,关于Kafka的精髓全部写在这里面了,不得不感叹:不愧是Alibaba的技术官啊,真的服了! 关于这份Kafka限量笔记,我只能在文章中展示部分的章节内容和核心截图,如果你需要完原创 2020-08-29 15:34:39 · 158 阅读 · 0 评论 -
全民谈架构,涨姿势?了解一下Kafka消费位移可好?
摘要:Kafka中的位移是个极其重要的概念,因为数据一致性、准确性是一个很重要的语义,我们都不希望消息重复消费或者丢失。而位移就是控制消费进度的大佬。本文就详细聊聊kafka消费位移的那些事,包括: 概念剖析 kafka的两种位移 关于位移(Offset),其实在kafka的世界里有两种位移: 分区位移:生产者向分区写入消息,每条消息在分区中的位置信息由一个叫offset的数据来表征。假设一个生产者向一个空分区写入了 10 条消息,那么这 10 条消息的位移依次是 0、1、…、9; 消费位移:原创 2020-06-17 02:01:12 · 329 阅读 · 0 评论 -
阿里P8都建议收藏的Nginx的配置参数中文说明,你还不快收藏起来
前言 Nginx是一款轻量级的Web 服务器/反向代理服务器及电子邮件(IMAP/POP3)代理服务器,在BSD-like 协议下发行。其特点是占有内存少,并发能力强,事实上nginx的并发能力在同类型的网页服务器中表现较好,中国大陆使用nginx网站用户有:百度、京东、新浪、网易、腾讯、淘宝等。 可以在大多数 UnixLinux OS 上编译运行,并有 Windows 移植版。是一个很强大的高性能Web和反向代理服务,它具有很多非常优越的特性,在连接高并发的情况下,Nginx是Apache服...原创 2020-06-02 13:10:10 · 502 阅读 · 0 评论 -
花费10分钟,白嫖阿里P8精心整理MongoDB+RabbitMQ+Memcached面试题,不香吗
前言 首先,大家先了解一下三者的概念究竟是什么?有哪些功能?工作原理? 一、RabbitMQ 1.消息型中间件,用于不同应用之间的通信,基于amqp协议实现 2.功能:将一些无需要及时返回而且耗时的操作提取出来,进行解耦,利用异步处理,提高系统的吞吐量 3工作原理:A生产消息,发送给服务器的exchange exchange收到消息根据routinkey,将消息发送给匹配的queue, queue收到消息,将消息发送给接受方 接收方接收消息后发送给ack给queue, queue收到ac原创 2020-10-08 16:32:23 · 369 阅读 · 1 评论 -
Kafka如何通过经典的内存缓冲池设计来优化JVM GC问题?
大家都知道Kafka是一个高吞吐的消息队列,是大数据场景首选的消息队列,这种场景就意味着发送单位时间消息的量会特别的大,那既然如此巨大的数据量,kafka是如何支撑起如此庞大的数据量的分发的呢? 今天我们从kafka架构以如何优化GC两个方面讲解 kafka架构 既然要说kafka是如何通过内存缓冲池设计来优化JVM的GC问题,那么,如果不清楚kafka 的架构设计,又怎么更好的调优呢?起码的我们要知道基础的才能往更好的出发呀,对把 先来看技术名词 Topic:用于划分Message的逻辑概念,一原创 2020-05-18 14:42:31 · 856 阅读 · 0 评论 -
一文从部署、开发、运营、监控、调试、优化、实践等讲解kafka
随着互联网信息化时代的发展,大数据成为一个主流趋势,但是,互联网这一行业的联合性,为了能够更好的进行互联网开发,大数据的相关技术也逐渐被应用到互联网开发中,像zookeeper,kafka等技术,但是,程序员这个行业,大家也都懂,学习时间不是特别的充分,想学习的也没什么充分的资料,为了节约大家的时间,我选出来这样一些资料,其中就有一本学习kafka的pdf,大家在上下班的地铁上,都是看电子书,为什...原创 2020-04-24 16:23:21 · 214 阅读 · 0 评论 -
阿里架构师精心整理实战归纳知识点——Kafka架构原理
kafka、redis,zookeeper,最近火遍程序员话题界的技术名词,但是,程序员整哈才能够的开发流程,都是针对问题解决问题的单线程运行,你真的了解这些技术吗?kafka。作为大数据和架构的宠儿,它有什么魅力,竟让无数程序员竞折腰,跟随文章,我们来解开kafka的神秘面纱!! 定义 Kafka 是一个分布式的基于发布/订阅模式的消息队列(Message Queue),主要应用与大数据实时...原创 2020-03-15 21:26:51 · 197 阅读 · 0 评论