杉巖海量物件儲存系統完美替代Documentum

2021-10-01 13:53:42 字數 1612 閱讀 6739

自2023年至今十餘年來,金融行業內容管理系統通常採用documentum+db+nas的整體解決方案,如下圖1所示,documentum結合db的索引能力和nas的儲存能力,向上為影像平台等業務提供文件資料的儲存和檢索讀取服務。

近年來隨著非結構化資料的爆發性增長,由於documentum系統架構問題,此套解決方案出現了明顯效能瓶頸,杉巖海量物件儲存系統(sandstone mos)採用全分布式架構,針對海量檔案場景提供可線性擴充套件的持續快速訪問效能,同時提供全方位的海量資料保護支援和資料生命週期管理功能,能夠完美替代documentum。作為金融行業內容管理系統的未來核心模組,不僅要提供現在和未來的服務保障,更要能夠完美接納客戶現有資料,所以需要提供平滑友好的documentum遷移方案。

documentum應用架構

documentum模組介紹

儲存倉庫(repository)

乙個儲存倉庫是乙個基本的內容和元資料儲存單元,包含內容儲存系統(content store)和元資料儲存系統(metadata store),如圖3是乙個最小的儲存倉庫結構,預設情況下documentum通過主機本地檔案系統儲存內容,通過關聯式資料庫(rdbms,relational database management system)管理元資料及其相互關係,另外乙個倉庫可以同時包含多個內容儲存系統,並且這些內容儲存系統可以是不同型別,比如關聯式資料庫、本地檔案系統、nas等。

儲存倉庫

內容伺服器(content server)

內容伺服器負責內容和元資料的生命週期管理,使用者無需關心檔案和元資料具體存在**,通過乙個介面即可訪問內容(content)。乙個content server只能對應乙個repository,但是乙個repository可以配置多個content server,這樣有如下好處:

通過多個content server分擔壓力,提高整體效能

通過遠端content server為遠端使用者提供優質服務

通過多content server提供高可用和災備恢復支援

杉巖nas異構特性介紹

傳統nas裝置在已經存放了數千萬級別檔案數量的情況下,效能急劇下降,讀寫延遲可達到5-10秒,在杉巖物件儲存實施的過程中,由於nas介面效能的瓶頸,導致現有資料的遷移周期長達數月之久,為此我們開發了nas異構特性。

如圖5所示,sandstone mos納管nas裝置的元資料,無需立即觸發資料內容搬遷,應用統一使用s3介面即可訪問nas和mos的資料,通過生命週期轉移策略,可以後期平滑遷移nas檔案到sandstone mos,資料內容搬遷過程中無需停機,業務切割時間窗極短。

杉巖資料CTO 物件儲存將成為企業儲存新標準

知名分析機構idc的報告 到2020年非結構化儲存資料量將達到410eb,相比2015年增長4倍,而物件儲存佔檔案儲存總容量的70 以上。報告顯示,2015 2020年物件儲存市場營收的年均復合增長率將達到8.7 非結構化資料量的暴增及物件儲存時代的到來,讓企業使用者越來越意識到物件儲存技術的重要性...

杉巖 物件儲存有什麼用?優勢是什麼?

1 資料動靜分離,大幅提公升網頁效能 一般情況下,我們都是建議使用主機伺服器和物件儲存分工合作的方式來儲存 資料。主機伺服器主要負責儲存 的動態資料,物件儲存則用來儲存 的靜態檔案。從而實現 的動靜分離,當使用者訪問乙個 時,分別從主機伺服器和物件儲存的伺服器同步讀取資料,可以大幅的提公升網頁效能。...

杉巖物件儲存MOS雙引擎,加速智慧型應用的助推器

大資料分析手段的廣泛應用,助推資料快速增長,儲存形態相繼經歷了從傳統儲存到大資料儲存1.0再到大資料儲存2.0的變遷,以應對海量資料的挑戰。1.0時代解決了海量儲存的問題,通過分布式架構和軟體定義,讓資料能夠存得下。2.0時代解決了便捷管理的問題,通過多協議訪問 生命週期管理 異構儲存管理 混合雲管...