大部分內容是翻譯至kafka the definitive guide，有翻譯不好的地方請見諒，想深入學習的小夥伴，建議去看一下這本書，因為理解問題翻譯錯誤的地方希望指出，我會及時改進。key teamsmessages and batches：
schemas：
(需要嚴格讀取topic訊息順序的時候，只使用乙個partition)
- offset是元資料中的乙個（乙個不斷增加的整數值）kafka在每條訊息生成時都會新增這個元資料。
- 每乙個message在所在的partition中都有著唯一的offset，通過zookeeper或者kafka本身存貯著這個最後消費的offset，保證在consumer在宕機或者重啟之後不會丟失其讀到的位置。
consumer group
brokers and clusters
kafka關鍵問題解釋
1 kafka如何處理消費過的訊息 1 如果想消費已經被消費過的資料 consumer是底層採用的是乙個阻塞佇列，只要一有producer生產資料，那consumer就會將資料消費。當然這裡會產生乙個很嚴重的問題，如果你重啟一消費者程式，那你連一條資料都抓不到，但是log檔案中明明可以看到所有資料都...
Kafka 如何理解Kafka的「快」？
據了解，kafka吞吐量峰值每秒百萬，就算在記憶體個cpu都不高的情況下，最高可達每秒十萬，並且還能做到持久化儲存。kafka如此高吞吐率的原因是什麼？隨機寫每秒幾十幾百k。作業系統從磁碟將資料copy dma copy 到核心空間緩衝區 kernel buffer 應用程式從核心空間緩衝區 ker...
kafka 四 kafka的使用原理
在kafka中，topic是乙個儲存訊息的邏輯概念，可以認為是乙個訊息集合。每條訊息傳送到kafka集群的 訊息都有乙個類別。物理上來說，不同的topic的訊息是分開儲存的，每個topic可以有多個生產者向它傳送訊息，也可以有多個消費者去消費其中的訊息。每個topic可以劃分多個分割槽 每個topi...