Kafka痛點與Puslar介紹

2021-10-01 06:16:25 字數 582 閱讀 9644

apache kafka 作為一款成熟的消費佇列得到了很廣泛地運用. 但以 2019 年的角度來看, 存在一些痛點.

儲存計算沒有分離,

難以擴容和縮容沒有 io 隔離,

寫高了讀不動,

讀高了寫不動沒有多租戶io 模型過於簡單,

面對大量 topic 時效能下降嚴重消費模型有限,

無法利用部分業務可以接受訊息無序的特點

puslar是乙個非常優秀的開源系統,它的整體框架偏向於hbase的設計,在其上實現了流資料的處理和服務。從與kafka的對比上說,我個人對kafka還是有比較深入的理解,kafka也是很優秀的框架,給人一種非常純粹和簡潔的感覺。

不過puslar確實可以解決一些kafka由於體系設計無法避免的痛點,最讓我印象深刻的是puslar的橫向擴充套件能力要比kafka好,因為kafka的topic的效能擴充套件受限於partitions的個數,而puslar是對資料分片,容易擴充套件。這對我們這種碰到大賽事需要擴充套件數倍系統吞吐能力的情景是很有用的。現在puslar的框架都好了,缺的是整個生態,如監控,運維,管理,和其他平台和框架的對接,雲服務的整合,豐富的客戶端等等。

出處:

三個痛點簡析與啟蒙

你有沒有遇到這樣的事,想做一件事但還有另外幾件事等著做,等剛做完這件事另外要做的事卻忘記了?你有沒有遇到這樣的事,正在做一件事但突然有更加優先的事要做,等做完後發現自己忘了剛才要做什麼了。你有沒有遇到這樣的事,預定某天要做某事,但那天卻有其他事要做,等做完後發現,需要做的事沒做。你有沒有遇到這樣的事...

IPv6的未來趨勢與障礙痛點

沒有人在用ipv6?我相信有很多人在談話中聽到了類似的內容,雖然很難說服這些人,越來越多的組織正在部署ipv6,特別是當採用率在20歲時如此緩慢到目前為止存在的一年,這些例項至少讓我有機會讓他們再次思考這個話題並分享最近在這個領域所做的出色工作。令人鼓舞的是,這項工作,我們所有的ipv6粉絲,似乎都...

06 C2C電商社會化治理平台面向的痛點介紹

接下來會以乙個真實的專案案例來講解整個微服務技術架構的落地實踐,會以乙個c2c二手電商平台的社會化治理系統來講解,因為雖然微服務技術棧跟具體的業務沒關係,其實無論什麼業務系統,都可以用一套微服務技術體系,但是如果單純的講解技術理論,通過一些沒任何含義的demo 來演示,可能很多人沒法很好的理解技術和...