大規模分布式儲存系統讀書筆記前三章 未完

2021-07-30 22:06:35 字數 614 閱讀 1577

第一章:概述

2.分布式儲存分類:

非結構化資料: 所有格式的辦公文件,文字,,影象,音訊…

結構化資料: 一般儲存在關係型資料庫裡,可以用二維關係表描述

半結構化資料: 介於結構化資料和非結構化資料之間,html文件就屬於半結構化資料。

分布式檔案系統:存放blob(二進位製大物件),定長塊,大檔案;常作為分布式**系統和分布式資料庫的底層儲存

分布式鍵值系統:一般做快取,存放半結構化資料,支援crud;一致性雜湊是常用的資料分布技術;是分布式**系統的簡單實現

分布式**系統:支援crud,還支援簡單的範圍查詢(一般存放半結構化資料,只能執行簡單的單錶查詢);支援簡單的事務(單行事務),多個資料航也不要求包含相同型別的列

分布式資料庫:存放結構化資料,支援crud,支援多表查詢和巢狀查詢,支援事務和併發控制

第二章:單機儲存引擎

2.單機儲存引擎

1)雜湊儲存引擎

大規模分布式儲存系統 讀書筆記 第一章

分布式儲存系統是大量普通pc伺服器通過internet互聯,對外作為乙個整體提供儲存服務。可擴充套件 低成本 高效能 易用。資料分布 一致性 容錯 負載均衡 事務與併發控制 易用性 壓縮 解壓縮。結構化資料 關係資料 半結構化資料 非結構化資料物件 facebook haystack taobao ...

《大規模分布式儲存系統》讀書摘記(持續更新)

3 分布式系統 3.5 容錯 故障檢測 故障恢復 3.6 可擴充套件性 總控節點 資料庫擴容 異構系統 3.7 分布式協議 兩階段提交協議 2pc paxos協議 paxos與2pc 跨機房部署 4 分布式檔案系統 4.1 google檔案系統 系統架構 關鍵問題 一致性模型 追加流程 容錯機制 m...

大規模分布式儲存系統(雲儲存)作者blog

技術雜談 10年定下近幾年的技術方向 1,精通架構 深入理解線上,線下分布式儲存 計算並能夠形成完整的知識體系 2,理解系統 理解系統,網路,idc,虛擬化等相關知識 3,掌握應用 通過應用證明和修正分布式知識體系 11年做了一些事情 1,思考並討論google,amazon,microsoft,y...