《Streaming System》流式系統 序章

2021-10-23 20:05:19 字數 321 閱讀 8406

本文翻譯摘抄自《streaming system》,在閱讀的時候進行翻譯,同時方便廣大同學,如有錯誤或侵權,煩請指出。

好奇這本書內容到底有多深入人心,打算邊看邊進行翻譯(翻譯水平有限,如有錯誤,勞煩指出)。

**並茂的解釋流式系統的核心概念:

以動畫的形式對書裡的一些核心概念進行了演示:

《streaming system》 第一章:streaming 101

《streaming system》 第二章:資料處理的四要素 what where when and how

《streaming system》 第三章:watermarks

Kafka 分布式流式系統

傳送端 傳送端不能非同步傳送,非同步傳送在傳送失敗的情況下,就沒辦法保證訊息順序。2 即使只有乙個佇列的情況下,會有第2個問題。該機器掛了之後,能否切換到其他機器?也就是高可用問題。比如你當前的機器掛了,上面還有訊息沒有消費完。此時切換到其他機器,可用性保證了。但訊息順序就亂掉了。要想保證,一方面要...

013 流式計算系統(開發混合推薦系統)

每個推薦位是乙個獨立的推薦產品,需要對每個廣告位開發獨立的推薦模型 每個推薦位需要配置特有的推薦規則和排序規則 為了容錯,每個推薦位都需要預設的推薦產品,當推薦系統無法計算正常的結果時,使用預設產品進行推薦。各個推薦模型推送的商品可以能重複和下線的商品,需要對商品進行進行去重和過濾處理 推薦結果計算...

財務系統設計 序

新年伊始,組織團隊小夥伴進行了一次頭腦風暴,暢想了下財務系統2019的願景,自己也思考頗多,決定針對 財務系統設計 做個專欄,落筆為記!一 一次頭腦風暴 頭腦風暴前,除了準備泡麵,花生,礦泉水,還列了幾個比較現實的問題 與我個人而言,期望通過這次頭腦風暴,讓團隊小夥伴們能夠對自己的模組有個規劃,能夠...