OENStor產品筆記

2022-06-14 03:33:10 字數 1697 閱讀 5979

一、什麼是分布式儲存

傳統儲存系統:客戶端讀寫資料時需要乙個controller或gateway,這種集中式元件通訊架構使其天然具有單點故障,效能瓶頸、擴充套件性差等特點。

分布式儲存:ceph允許client(客戶端)直接訪問osd程序(硬碟),消除集中式架構,不再需要查詢中心式元資料表,將計算壓力下發,提公升整體儲存效能。

二、onestor多副本儲存及故障域隔離方案

1、同一集群內。可根據供電系統,分布位置等因素的不同,把伺服器劃分至不同的故障域中

2、資料寫入時,將不同的副本分布在不同的故障域中。

3、即使其中乙個故障域內的裝置集體故障,也不會影響資料的正常執行。

三、onestor實現資料強一致性

資料一致性:分布式系統通過副本控制協議,使得從系統外部讀取系統內部各個副本的資料在一定的約束條件下相同,稱之為副本一致性。

四、onestor高可用架構設計

優化架構保障應用的可靠性:基於應用的ha特性。這種方案適用性很強,應用側不需要做任何配置,就可以實現onesotr儲存集群的高可靠性和負載分擔。

多副本保障資料的可靠性:可提供n+n,n+1多副本的儲存機制保障資料可靠性

資料自動重構及均衡保障系統可靠性:當有節點發生故障,onestor系統會自動進行資料重構,恢復因故障丟失的副本,保障系統的高可靠性。

五、onestor支援ssd讀/寫加速

讀加速:為提公升讀效能,熱資料儲存在ssd組成的flashcache中,採用around模式,僅讀操作時經過該cache  

寫加速:為提公升寫效能,寫操作時的journal直接寫入ssd;當server有較大raid卡快取時,建議將ssd用作讀加速

六、onestor組網

1、onestor業務網路:承載onestor mon管理集群、osd前端心跳報文,與cas互動資料;重要程度非常高,需獨立組網,頻寬萬兆,建議雙鏈路冗餘

2、onestor儲存內網:承載onestor osd後端心跳,在osd發生變化時資料重分布等流量,流量大且可能有較高的突發,需獨立組網,頻寬萬兆,建議雙鏈路作冗餘

3、cas儲存網路:承載與onestor集群資料互動的流量;重要程度非常高,需獨立組網,頻寬萬兆,建議雙鏈路冗餘

4、cas業務網路:承載業務訪問資料,需要獨立組網,與cas管理網路、cas儲存內網分離,根據業務情況頻寬可為千兆或者萬兆,建議雙鏈路冗餘

5、cas管理網路:承載主機及虛擬機器軟體管理報文(ha、集群心跳等報文)、遷移資料;重要程度非常高,需獨立組網,頻寬千兆,建議雙鏈路冗餘

七、部署

1、獨立部署:onestor獨立部署伺服器上。

2、融合部署:先搭建cas集群,然後在安裝onestor元件,搭建onestor集群,伺服器資料盤,被onestor獨立管理,cpu,記憶體,系統盤,cas與onestor共用。

八、資料寫入過程

九、crush演算法

金融產品知識筆記

雜七雜八的看了好多東西,也不知道啥是重點,隨意記記 風控 風險管理和風險控制 金融產品核心是風控,風控的核心是信用評估 模型規則 風控模型設計 step1 獲取資料 不同維度的使用者資料資訊的獲取,為模型的計算服務 step2 確定使用者資料的變數 說白了就是為使用者資料進行權重分配,確定哪些資訊更...

產品經理 課堂筆記

3 參考資料 產品經理 產品運營精華乾貨 泉舟時代智庫分享 prd製作全過程示例 axure製作prd sunlifestory 水利知識庫 企業知識庫 ai助手 人工智慧機械人知識庫產品與解決方案 html 1 106 152 198 1065.html 4 附 中國數字城市排名 北京 上海 廣州...

人人都是產品經理筆記

一 產品是神,而產品是由 人和人 創造的 滿足使用者 滿足領導 注重實踐 產品設計是發現問題並將其清晰描述,轉化需求,滿足需求,產品經理是一類人,他們做事思路與方法可以解決很多實際問題。發現問題並將其轉化為需求,進而轉化為乙個任務,發動一群人完成這個任務,並以主人翁的姿態維護這個產物。網際網路產品設...