導言

我們知道，當下流行的MQ非常多，不過很多公司在技術選型上還是選擇使用Kafka。與其他主流MQ進行對比，我們會發現Kafka最大的優點就是吞吐量高。實際上Kafka是高吞吐低延遲的高併發、高效能的訊息中介軟體，配置良好的Kafka叢集甚至可以做到每秒幾十萬、上百萬的超高併發寫入。

除此之外，在熱招的Java架構師崗位面試中，Kafka相關的面試題被面試官問到的機率也是非常大的，所以擁有一定年限的開發者，搞懂Kafka是很有必要的。有需要這份資料的可以點這裡即可獲取！

那麼怎麼才能有效且快速學習Kafka呢？

一、初識Kafka（Kafka入門）

①Kafka基本概念

②安裝與配置

③生產與消費

④服務端引數配置

二、生產者

①客戶端開發（必要的引數配置+訊息的傳送+序列化+分割槽器+生產者攔截器）

②原理分析（整體架構+後設資料的更新）

③重要的生產者引數

三、消費者

①消費者與消費組

②客戶端開發（必要的引數配置+訂閱主題與分割槽+反序列化+訊息消費+位移提交+控制或關閉消費+指定位移消費+再均衡+消費者攔截器+多執行緒實現+重要的消費者引數）

四、主題與分割槽

①主題的管理（建立主題+分割槽副本的分配+檢視主題+修改主題+配置管理+主題端引數+刪除主題）

②初始Kafka AdminClient（基本使用+主題合法性驗證）

③分割槽的管理（優先副本的選舉+分割槽重分配+複製限流+修改副本因子）

④如何選擇合適的分割槽數（效能測試工具+分割槽數越多吞吐量就越高嗎+分割槽數的上限+參考因素）

五、日誌儲存

①檔案目錄佈局

②日誌格式的演變（v0版本+v1版本+訊息壓縮+變長欄位+v2版本）

③日誌索引（偏移量索引+時間戳索引）

④日誌清理（日誌刪除+日誌壓縮）

⑤磁碟儲存（頁快取+磁碟I/O流程+零拷貝）

六、深入服務端

①協議設計

②時間輪

③延時操作

④控制器（控制器的選舉及異常恢復+優雅關閉+分割槽leader的選舉+引數解密）

⑤引數解密（broker.id+bootstrap.servers+服務端引數列表）

七、深入客戶端

①分割槽分配策略（RangeAssignor分配策略+RoundRobinAssignor分配策略+StickyAssignor分配策略+自定義分割槽分配策略）

②消費者協調器和組協調器（舊版消費者客戶端的問題+再均衡的原理）

③_consumer_offsets剖析

④事務（訊息傳輸保障+冪等+事務）

八、可靠性探究

①副本剖析（失效副本+ISR的伸縮+LEO與HW+Leader Epoch的介入+為什麼不支援讀寫分離）

②日誌同步機制

③可靠性分析

九、Kafka應用

①命令列工具（消費組管理+消費位移管理+手動刪除訊息）

②Kafka Connect（獨立模式+REST API+分散式模式）

③Kafka Mirror Maker

④Kafka Streams

十、Kafka監控

①監控資料的來源（OneMinuteRate+獲取監控指標）

②消費滯後

③同步失效分割槽

④監控指標說明

⑤監控模組

十一、高階應用

①過期時間(TTL)

②延時佇列

③死信佇列和重試佇列

④訊息路由

⑤訊息軌跡

⑥訊息審計

⑦訊息代理（快速入門+REST API介紹及示例+服務端配置及部署+應用思考）

⑧訊息中介軟體選型（各類訊息中介軟體簡述+選型要點概述+訊息中介軟體選型誤區探討）

十二、Kafka與Spark的整合

①Spark的安裝及簡單應用

②Spark程式設計模型

③Spark的執行結構

④Spark Streaming簡介

⑤Kafka與Spark Streaming的整合

⑥Spark SQL

⑦Structured Streaming

⑧Kafka與Structured Streaming的整合

如何獲得這份優質的資料呢？

快速領取通道：點這裡免費獲取！誠意滿滿！！！

Java面試精選題、架構實戰文件傳送門：https://jq.qq.com/?_wv=1027&k=iWJZw1rp

整理不易，覺得有幫助的朋友可以幫忙點贊分享支援一下小編~

你的支援，我的動力；祝各位前程似錦，offer不斷！！！

總結

Kafka的探討就在這裡，只能展示部分內容，實際上筆記內詳細記載了Kafka的實踐內容，包括大量的程式碼實現形式。

如果你對自己的職業生涯有清晰的規劃路線，想要往更長遠的方向去發展，那麼學習Kafka，想必刻不容緩。