面试官最爱问的 Kafka，基础 + 进阶 + 高级，44 问疯狂轰炸！

面试官最爱问的 Kakfa，基础+进阶+高级，44 问疯狂轰炸！

Kafka 是一种高吞吐量的分布式发布订阅消息系统，它可以处理消费者规模的网站中的所有动作流数据。 这种动作(网页浏览，搜索和其他用户的行动)是在现代网络上的许多社会功能的一个关键因素。 这些数据通常是由于吞吐量的要求而通过处理日志和日志聚合来解决。 对于像 Hadoop 的一样的日志数据和离线分析系统，但又要求实时处理的限制，这是一个可行的解决方案。Kafka 的目的是通过 Hadoop 的并行加载机制来统一线上和离线的消息处理，也是为了通过集群来提供实时的消息。

而这几年，大数据发展迅猛，Kakfa 凭借高可靠、高吞吐、高可用、可伸缩几大特性，成为数据管道技术的首选，也成了面试官的最爱。

前阵子，有几个朋友跟我吐槽面试，被 Kakfa 给问懵逼了，有点可惜呀，就这么 pass 了。细思极恐，想想以后要是我直面面试官，是否也会被疯狂轰炸？？所以这几天趁着没啥事儿，四处搜集整理各大企业招聘面试时最爱问的 Kakfa 问题，分为基础篇+进阶篇+高级篇，一步一个脚印慢慢深入，拿下Kakfa（点击下载）！

01 Kakfa 面试疯狂轰炸 44 问

1.1 Kakfa 基础面试篇

• 1.Kafka 的用途有哪些？使用场景如何？

• 2.Kafka 中的 ISR、AR 又代表什么？ISR 的伸缩又指什么

• 3.Kafka 中的 HW、LEO、LSO、LW 等分别代表什么？

• 4.Kafka 中是怎么体现消息顺序性的？

• 5.Kafka 中的分区器、序列化器、拦截器是否了解？它们之间的处理顺序是什么？

• 6.Kafka 生产者客户端的整体结构是什么样子的？

• 7.Kafka 生产者客户端中使用了几个线程来处理？分别是什么？

• 8.Kafka 的旧版 Scala 的消费者客户端的设计有什么缺陷？

• 9.“消费组中的消费者个数如果超过 topic 的分区，那么就会有消费者消费不到数据”这句话是否正确？如果正确，那么有没有什么 hack 的手段？

• 10.有哪些情形会造成重复消费？

• 11.那些情景下会造成消息漏消费？

• 12.KafkaConsumer 是非线程安全的，那么怎么样实现多线程消费？

• 13.简述消费者与消费组之间的关系

• 14.当你使用 kafka-topics.sh 创建（删除）了一个 topic 之后，Kafka 背后会执行什么逻辑？

• 15.topic 的分区数可不可以增加？如果可以怎么增加？如果不可以，那又是为什么？

• 16.topic 的分区数可不可以减少？如果可以怎么减少？如果不可以，那又是为什么？

• 17.创建 topic 时如何选择合适的分区数？

1.2 Kakfa 进阶面试篇

• 1.Kafka 目前有哪些内部 topic，它们都有什么特征？各自的作用又是什么？

• 2.优先副本是什么？它有什么特殊的作用？

• 3.Kafka 有哪几处地方有分区分配的概念？简述大致的过程及原理

• 4.简述 Kafka 的日志目录结构

• 5.Kafka 中有哪些索引文件？

• 6.如果我指定了一个 offset，Kafka 怎么查找到对应的消息？

• 7.如果我指定了一个 timestamp，Kafka 怎么查找到对应的消息？

• 8.聊一聊你对 Kafka 的 Log Retention 的理解

• 9.聊一聊你对 Kafka 的 Log Compaction 的理解

• 10.聊一聊你对 Kafka 底层存储的理解

• 11.聊一聊 Kafka 的延时操作的原理

• 12 聊一聊 Kafka 控制器的作用

• 13.Kafka 的旧版 Scala 的消费者客户端的设计有什么缺陷？

• 14.消费再均衡的原理是什么？（提示：消费者协调器和消费组协调器）

• 15.Kafka 中的幂等是怎么实现的？

1.3 Kakfa 高级面试篇

• 1.Kafka 中的事务是怎么实现的？

• 2.失效副本是指什么？有哪些应对措施？

• 3.多副本下，各个副本中的 HW 和 LEO 的演变过程

• 4.Kafka 在可靠性方面做了哪些改进？（HW, LeaderEpoch）

• 5.为什么 Kafka 不支持读写分离？

• 6.Kafka 中的延迟队列怎么实现

• 7.Kafka 中怎么实现死信队列和重试队列？

• 8.Kafka 中怎么做消息审计？

• 9.Kafka 中怎么做消息轨迹？

• 10.怎么计算 Lag？(注意 read_uncommitted 和 read_committed 状态下的不同)

• 11.Kafka 有哪些指标需要着重关注？

• 12.Kafka 的那些设计让它有如此高的性能？

02 总结：绘上一张 Kakfa 架构思维大纲脑图（xmind）

其实关于 Kafka，能问的问题实在是太多了，扒了几天，最终筛选出 44 问：基础篇 17 问、进阶篇 15 问、高级篇 12 问，个个直戳痛点，不知道如果你不着急看答案，又能答出几个呢？

若是对 Kafka 的知识还回忆不起来，不妨先看我手绘的知识总结脑图（xmind 不能上传，文章里用的是图片版）进行整体架构的梳理，然后在来答一答咱们的 44 问（放心，答案解析已整理，解析+脑图+更多笔记等皆可分享，速速拿下Kakfa（点击获取）！）。

梳理了知识，刷完了面试，如若你还想进一步的深入学习解读 kafka 以及源码，那么接下来的这份《手写“kafka”》将会是个不错的选择。

• Kafka 入门

• 为什么选择 Kafka

• Kafka 的安装、管理和配置

• Kafka 的集群

• 第一个 Kafka 程序

• Kafka 的生产者

• Kafka 的消费者

• 深入理解 Kafka

• 可靠的数据传递

• Spring 和 Kafka 的整合

• SpringBoot 和 Kafka 的整合

• Kafka 实战之削峰填谷

• 数据管道和流式处理(了解即可)