最后
俗话说，好学者临池学书，不过网络时代，对于大多数的我们来说，我倒是觉得学习意识的觉醒很重要，这是开始学习的转折点，比如看到对自己方向发展有用的信息，先收藏一波是一波，比如如果你觉得我这篇文章ok，先点赞收藏一波。这样，等真的沉下心来学习，不至于被找资料分散了心神。慢慢来，先从点赞收藏做起，加油吧！
另外，给大家安排了一波学习面试资料：
以上就是本文的全部内容，希望对大家的面试有所帮助，祝大家早日升职加薪迎娶白富美走上人生巅峰！
本篇总共分为12章，为大家深入解析kafka的核心设计和实践原理。
第1章初识Kafka，Kafka 起初是由 Linkedin 公司采用 Scala 语言开发的 个多分区、多副本且基于 ZooKeeper协调的分布式消息系统，现已被捐献给 Apache 基金会 目前 Kafka 已经定位为一个分布式流式处理平台，它以高吞吐、可持久化、可水平扩展、支持流数据处理等多种特性而被广泛使用。目前越来越多的开源分布式处理系统如 loudera Storm Spark Flink 等都支持与 Kafka 集成
第2章生产者，从编程的角度而言，生产者就是负责向 Kafka 发送消息的应用程序。在 Kafka 的历史变迁中， 一共有两个大版本的生产者客户端 第－个是于 Kafka 开源之初使用 Scala 语言编写的客户端，我们可以称之为旧生产者客户端（ Old Producer ）或 Scala 版生产者客户端 ；第二个是从 Kafka0.9.x 版本开始推出的使用 Java 语言编写的客户端，我们可以称之为新生产者客户端（ NewProducer ）或 Java 版生产者客户端，它弥补了 旧版客户端中存在的诸多设计缺陷。
第3章消费者，与生产者对应的是消费者，应用程序可以通过 KafkaConsumer 来订阅主题，并从订阅的主题中拉取消息 不过在使用 KafkaConsumer 消费消息之前需要先了解消费者和消费组的概念，否则无法理解如何使用 KafkaConsumer 。本章首先讲解消费者与消费组之间的关系，进而再细致地讲解如何使用 KafkaConsumer .
第4章主题与分区，主题和分区是 Kafka 的两个核心概念，前面章节中讲述的生产者和消费者的设计理念所针对的都是主题和分区层面的操作 主题作为消息的归类，可以再细分为一个或多个分区，分区也可以看作对消息的二次归类 分区的划分不仅为 Kafka 提供了可伸缩性、水平扩展的功能，还通过多副本机制来为 Kafka 提供数据冗余以提高数据可靠性.
第5章日志存储，学习完前4章的内容，我们可以较好地使用 Kafka 来完成基本的开发任务了。如果了解 Kafka内部的一些细节，则可以让我们扬其长、避其短，进而可以更好地利用 Kafka 。本章讲述的是有关 Kafka 日志存储相关的知识点，我们知道 Kafka 中的消息是存储在磁盘上的，那么为什么要使用磁盘作为存储介质？具体消息的存储格式又是什么呢？怎么样能够快速检索到指定的消息？消息不可能无限制存储，那么清理规则又是什么呢？带 这些疑问，我们来一探究竟。
第6章深入服务端，在前面的章节中我们学习了服务端的配置搭建、生产者客户端和消费者客户端的使用、主题与分区的管理操作和原理解析，以及日志存储等相关内容，但对于 Kafka 服务端的一些核心设计与运行机理还未涉及，如果要对 Kafka 有一个更深层次的了解，那么本章的内容就必不可少了 。本章涉及协议设计、时间轮、延迟操作、控制器及参数解密，尤其是协议设计和控制器的介绍，这些是深入了解 Kafka 的必备知识点。
第7章深入客户端，虽然本章的题目为“深入客户端”，但客户端也是需要与服务端交互的，要能够深入理解客户端，那么深入理解服务端的过程也是必不可少的。本章从客户端的角度入手，同时涉及客户端和服务端的内容，以便深入地挖掘 Kafka 的实现原理，从底层的概念去构建 Kafka 的知识体系。
第8章可靠性探究，本章从副本的角度切入来深挖 Kafka 中的数据 致性、数据可靠性等问题，主要包括副本剖析、日志同步机制和可靠性分析等内容。
第9章Kafka应用，本章主要介绍 Kafka 现有的 些应用类工具，包括命令行工具、 Kafka Connect Kafka MirrorMaker Kafka Streams 等。其中很多命令行工具在前面 章节中已经有过相关的介绍，本章会对剩余的命令行工具做 关补充性讲解。
第10章Kafka监控，本章的内容并不是讲述如何使用现存的一 些Kafka监控产品，而是讲述如何自己实现一套Kafka的监控产品。从监控维度来看，Kafka 可以分为集群信息、broker 信息、主题信息和消费组信息四个方面。有些情况下，也可以将ZooKeeper的监控信息概括进来，毕竟ZooKeeper也是Kafka整体架构的一部分 ,不过本章并不打算讨论ZooKeeper的更多监控细节,本章只以Kafka本身为主进行探讨。以集群信息为例，它需要展示整个集群的整体面貌，其中可以囊括一些broker概要信息、主题概要信息和消费组概要信息等内容。
第11章高级应用，除了正常的消息发送和消费，在使用 Kafka 的过程中难免会遇到 些其他高级应用类的需求，比如消费回溯，这个可以通过原生 Kafka 提供的 KafkaConsumer. seek（）方法来实现，然而类似延时队列、消 息轨迹等应用需求在原生 Kafka 中就没有提供了 在使用其他消息中间件时，比如 RabbitMQ ，使用到了延时队列、消息轨迹的功能，如果我们将应用 接切换到 Kafka中，那么只能选择舍弃它们 但这也不是绝对的，我们可以通过 定的手段来扩展 Kafka ，本章讲述的就是如何实现这类扩展的高级应用。
第12章Kafka与Spark的集成，Spark 是一个用来实现快速且通用的 群计算的平台 Spark UC Berkeley AMP Lab （加州大学伯克利分校的 AMP 实验室）所开源的类 MapReduce 通用并行框架，现在已经是 Apache的一个顶级项目 Spark 使用 Scala 语言开发，支持 Scala Java Python 语言相关的 APL运行于 NM 之上 Spark 基于内存计算，提高了在大数据环境下数据处理的实时性，同时保证了高容错性和高可伸缩性 Spark 适用于各种各样原先需要多种不同的分布式平台实现的场景，包括批处理、 是代计算、交互式查询、流处理等。
=============================================================================
大牛评价：
1.Nginx模块开发领域里程碑之作的升级版，多位权威专家联袂推荐。
2.深度还原Nginx设计思想,揭示快速开发简单高效Nginx模块的技巧;透彻解析Nginx架构,拓展开发高性能Web服务器的思路。
主要内容分为三大部分，16章的内容，
在第一部分的前两章中，将只探讨如何使用Nginx这一个问题。阅读这一部分的读者不需要了解C语言，就可以学习如何部署Nginx，学习如何向其中添加各种官方、第三方的功能模块，如何通过修改配置文件来更改Nginx及各模块的功能，如何修改Linux操作系统上的参数来优化服务器性能，最终向用户提供企业级的Web服务器。这一部分介绍配置项的方式，更偏重于领着对Nginx还比较陌生的读者熟悉它，通过了解几个基本Nginx模块的配置修改方式，进而使读者可以通过查询官网、第三方网站来了解如何使用所有Nginx模块的用法。
在第二部分的第3章~第7章中，都是以例子来介绍HTTP模块的开发方式的，这里有些接近于“step by step”的学习方式，我在写作这一部分时，会通过循序渐进的方式使读者能够快速上手，同时会穿插着介绍其常见用法的基本原理。
在第三部分，将开始介绍Nginx的完整框架，阅读到这里将会了解第二部分中HTTP模块为何以此种方式开发，同时将可以轻易地开发Nginx模块。这一部分并不仅仅满足于阐述Nginx架构，而是会探讨其为何如此设计，只有这样才能抛开HTTP框架、邮件代理框架，实现一种新的业务框架、一种新的模块类型。
第一部分，Nginx能帮我们做什么
第1章研究Nginx前的准备工作
第2章 Nginx的配置
第二部分，如何编写HTTP模块
第3章开发一个简单的HTTP模块
第4章配置、error日志和请求上下文
第5章 访问第三方服务
第6章开发一个简单的HTTP过滤模块
第7章Nginx提供的高级数据结构
第三部分，深入Nginx
第8章 Nginx基础架构
第9章事件模块
第10章 HTTP框架的初始化
第11章HTTP框架的执行流程
第12章 upstream机制的设计与实现
第13章 邮件代理模块
笔者福利
以下是小编自己针对马上即将到来的金九银十准备的一套“面试宝典”，不管是技术还是HR的问题都有针对性的回答。
有了这个，面试踩雷？不存在的！
回馈粉丝，诚意满满！！！
-ZDoz8CGS-1715712997121)]
[外链图片转存中…(img-BQCVakgd-1715712997121)]
361
被折叠的 条评论
为什么被折叠?
到【灌水乐园】发言
