Kafka 核心概念和操作示例

2022-09-12 04:51:10 字數 340 閱讀 6697

前面寫了篇《聊一聊高併發高可用那些事(一):kafka 篇》算是二稿吧,本篇是第三稿收尾了。

在本場 chat 中, 會講到如下內容:

為什麼需要訊息佇列

高吞吐、高可用 mq 對比分析

kafka 相關概念

分割槽, 副本, 消費組

偏移量的最大值, 訊息的儲存策略

zookeeper 上存的 kafka 資料

如何確保訊息只被乙個服務消費

重複消費和資料丟失問題

linux kafka 操作

windows 視覺化工具 kafka tool

生產者和消費者使用**

閱讀全文:

Kafka系列 Kafka核心概念

kafka系列文章 kafka系列 入門及應用場景 部署 簡單測試 bin kafka topics.sh create zookeeper 192.168.137.141 2181,192.168.137.142 2181,192.168.137.143 2181 kafka replicatio...

Kafka核心概念及核心機制

broker 程序 producer 生產者 flume consumer 消費者 ss spark streaming,topic 主題 分割槽 副本數 資料夾 partition 分割槽乙個分割槽可以有多個副本 重點解析 1.乙個組內,共享乙個公共的groupid 2.組內的所有消費者協調一起,...

kafka角色模型與核心概念

kafka主要有三大作用,其中訊息系統和流式處理是我們最常用的 訊息系統 kafka作為訊息中介軟體,具有mq的系統解耦 流量削峰 緩衝 非同步通訊等特性 儲存系統 kafka與其他訊息系統不同的是,它能夠把訊息持久化到磁碟,有效的降低了訊息丟失風險,只要把資料保留策略設定為永久,即訊息永不過期,可...