一问 Kafka 就心慌？我却凭着这份《Kafka 源码实战》碾压面试官！

关注

发布于: 2021 年 06 月 11 日

Kafka 是一个高度可扩展的消息系统，它在 LinkedIn 的中央数据库管理中扮演着十分重要的角色，因其可水平扩展和高吞吐率而被广泛使用，现在已经被多家不同类型的公司作为多种类型的数据管道和消息系统。

那么，如何学习 Kafka 源码？？

我觉得最高效的方式就是去读最核心的源码，先看一张 Kafka 结构图 以及 Kafka 源码全景图

梳理一下关于 Kafka 框架，找到学习的重点。

篇幅原因，这边只能大概的介绍一下，有需要下载原件的老铁可直接在这【FreeDownload】

前 5 章分别是：Kafka 简介、Kafka 的架构、Broker 概述、Broker 的基本模块、Broker 的控制管理模块

第 1 章 Kafka 简介：介绍 Kafka 诞生的背景、Kafka 在 LinkedIn 内部的应用、Kafka 的主要设计目标以及为什么使用消息系统
第 2 章 Kafka 的架构：介绍 Kafka 的基本组成、拓扑结构及其内部的通信协议
第 3 章 Broker 概述：描述 Kafka 集群组成的基本元素 Broker Server 的启动以及内部的模块组成
第 4 章 Broker 的基本模块：描述 Broker Server 内部的九大基本模块: SocketServer 、KafkaRequestHandlerPool 、LogManager、ReplicaManager 、OffsetManager、KafkaScheduler. KafkaApis 、KafkaHalthcheck 和 TopicConfigManager
第 5 章 Broker 的控制管理模块：介绍 BrokerServer 的控制管理模块 KafkaController,这个模块负责整个 Kafka 集群的管理，例如:Topic 的新建和删除.分区状态和副本状态的转换、集群的负载均衡管理等

后 5 章分别是 Topic 的管理工具、生产者、消费者、Kafka 的典型应用、Kafka 的综合案例

第 6 章 Topic 的管理工具：介绍三个维护脚本: kafka-topics.sh 、kafka-reassign-partitions.sh 和 kafka preferredreplica-election.sh,它们分别涉及 Topic 的生命周期管理、Topic 分区的重分配和分区首选副本的选择。
第 7 章生产者：从设计原则、示例代码、模块组成和发送模式四个部分介绍有关消息生产者的相关知识，从设计原则至客户端编程，从客户端编程到内部实现原理，由浅人深，循序渐进地讲解。
第 8 章消费者：分别介绍两种消费者:简单消费者和高级消费者。针对每种消费者都将依次从设计原则、消费者流程、示例代码以及原理解析四个部分介绍消费者的相关知识。
第 9 章 Kafka 的典型应用：介绍 Kafka 与典型大数据系统的集成，包括: Kafka 和 Storm 的集成、Kafka 和 ELK 的集成、Kafka 和 Hadoop 的集成以及 Kafka 和 Spark 的集成。
第 10 章 Kafka 的综合案例：用综合实例描述了 Kafka 的应用，案例描述 Kafka 作为数据总线在安防整体解决方案中的作用，通过车辆人脸图片数据的入库、视频数据的入库、数据延时的监控、数据质量的监控、布控统计和容灾备份 6 个业务，简要阐述内部的实现原理。