技術分析 雲化的主儲存功能是否已就緒?

2021-09-23 09:06:33 字數 3612 閱讀 5317

當諸如亞馬遜的s3和ebs這樣的服務在十多年前開始出現時,it經理普遍對雲儲存持懷疑態度或視為威脅。隨著使用雲服務的理由逐漸豐富,雲也可能用於資料歸檔,但是出於對安全性、可用性和效能方面的考慮,我相信我不會將主資料放在雲上。

今天,對於雲儲存可以增強或補充企業內部部署已經沒有爭議。儘管業界尚未完全解決讓it經理頭疼的所有問題,但雲技術的安全性已取得長足進步,雖然今年二月份剛剛發生了由於操作員的錯誤而導致亞馬遜s3服務宕機幾小時的事件。

雲技術的成熟使得它日益成為各種備份、災難恢復和歸檔服務存放二級和**資料的首選目標。而且,我們正在越來越多地把雲儲存作為儲存層次結構中的一層,從而增強主儲存的功能。

將儲存分層擴充套件到雲端

分層是一種平衡不同應用程式對儲存效能、容量以及成本需求的方法。根據資料被訪問的頻率及相關因素將資料分配到不同的儲存類,然後再放置在最符合該類儲存的介質之上。

儲存分層技術已經實現高度自動化,基於策略的資料放置決策使企業能夠建立混合儲存架構,可以跨越資料中心甚至乙個或多個雲提供商的儲存介質。

taneja諮詢集團最近的研究表明,已有超過60%的it從業者正在使用或計畫使用某種形式的儲存分層。同時,三分之二的受訪者已經把至少一部分關鍵工作負載的儲存層擴充套件到了公有雲。將來,雲在分層領域發揮的作用會更大。

有利於主儲存的雲分層

**商已經推出能夠將變冷或不活躍的資料從主儲存中移出的產品。與傳統的本地儲存分層產品不同的是,新產品將公有雲作為新的分層,以實現更高的擴充套件性,更具成本效益地使用儲存。

大多數產品都是自動化的,您可以根據資料的訪問頻率、壽命或其他因素配置策略來管理資料的遷移,從而對主儲存的功能進行全面補充和增強。

將雲作為單獨主儲存層(塊儲存或檔案儲存)的產品分為兩大類:雲儲存閘道器和軟體定義的儲存。

雲儲存閘道器

從2023年推出以來,雲儲存閘道器已經走過很長的路。它們還經歷了幾次命名更改,也可稱之為雲控制器、雲集成儲存、雲快取裝置等。

雲儲存閘道器最初專注於低成本雲備份或存檔,現在則可針對幾個不同的主儲存和二級儲存用例,包括檔案同步和共享、協作、基於雲的災難恢復(通過雲恢復或本地恢復),以及雲內資料分析,此外還可作為橫向擴充套件nas的雲中前端。

雲儲存閘道器雖然是針對傳統儲存陣列的工作負載,但主要是用作高效能本地快取,或者在儲存後端充當位於雲儲存之前的分層,通常都是以高可擴充套件性的物件儲存的形式存在。它們自動將檔案或塊協議轉換為物件協議。這就使企業內部執行的應用程式能夠受益於雲儲存的可擴充套件性和彈性,而無需面對舊儲存系統與雲集成的負擔和複雜性。雲儲存閘道器是物理或虛擬的裝置,並且如果內建了儲存時可以替代傳統的塊或檔案儲存系統。

用於主儲存的雲儲存閘道器通常是以快閃儲存器快取的形式存在,一些情況下也直接當作主儲存的一層來使用。儘管廠商的快取演算法各有不同,但絕大多數都是在快閃儲存器快取中動態且持續儲存那些經常訪問的資料,以確保企業內關鍵應用能夠達到其效能目標,並在後台完成將檔案或塊協議轉換為物件儲存的操作。本地配置的方式可以防止本地快取或儲存層的重新整理而導致關鍵資料丟失。

選擇什麼樣的雲儲存閘道器?

企業開始在市場上尋找能動態調整快取大小,從而更好地適應特定用例的雲儲存閘道器產品。支援主儲存功能的快取可以被調整到100%完全快取儲存在雲中的資料,而對支援歸檔儲存的快取,您也可以只快取少量雲資料。有些還允許您為不同資料集指定相應的快取記憶體並分配快取容量,以滿足不同的效能需求和用例。

用於歸檔冷資料或不活躍資料的閘道器也能夠使主儲存受益,它們能夠使內部部署系統的效能和容量資源釋放出來,從而更有效地支撐主工作負載。

雲儲存閘道器產品還應該具有資料縮減功能,例如重複資料刪除或壓縮等,最大限度地減少對網路效能的影響,並降低雲儲存資料的容量和成本。去市場上尋找能為特定應用提供重複資料刪除和壓縮的產品,因為並非所有工作負載都需要這些功能。雲儲存閘道器還應該能為儲存資料和在處理中的資料提供加密功能,並支援節省空間的快照,本地或雲中的資料轉殖等資料保護功能。還可以考量諸如動態目錄(active directory)或輕量級目錄訪問協議(ldap)之類的技術,以確保與您當前的環境完全整合。

考察市場上主要**商的雲儲存閘道器產品(例如微軟的azure stor******和dell emc的cloudarray),確保支援各種主儲存用例,例如協作、資料庫或虛擬機器等。如果您傾向於更具成本效益的橫向擴充套件nas,可以看看panzura和nasuni的產品。如果需要整合遠端辦公室/分支機構的,可以考慮ctera networks的閘道器裝置,它可作為前端陣列使用,在robo部署中取代本地主儲存。

一點忠告:確保雲儲存閘道器具備主儲存的某些特定功能,並確保它們能夠滿足您所關注應用對延遲和iops的要求。另外,要選擇可以訪問多個雲服務提供商的閘道器產品,既要避免潛在的廠商鎖定,又要選擇最適應您的特定工作負載的提供商。

軟體定義的主儲存

雲儲存閘道器可以將儲存拓展到雲端,但它們總是假定應用仍然在本地執行。新一輪的軟體定義儲存(sds)產品則更進一步,主張主儲存的工作負載在資料中心和雲之間無縫轉移。儘管此類方案的採用仍處在早期階段,但由於它們能夠更充分地利用公有雲的可擴充套件性、彈性和敏捷性,因而被諮詢公司taneja所看好。

廠商一般採用兩種架構方法來實現:使用分布式,平台無關的儲存平面來建立單一邏輯儲存池,跨越本地與雲中的所有資源;或者將儲存卷以服務的方式在雲有雲上執行。

當然,如果您在資料中心已經使用物件儲存來支援主工作負載,並且已經和乙個或多個公有雲儲存服務(如亞馬遜的s3)相容,那麼您可以比較容易地把主儲存的工作負載在本地和雲端遷進遷出。而要對塊和檔案的主儲存系統實現這一點是非常困難的,我們預計明年將會有所改變。

這些新興技術目前主要集中於非生產用例,例如基於雲的災難恢復或資料分析系統。考慮到其相對不成熟度,您需要進行徹底的評估,無論紙面上的還是實際測試,以確定它們是否能增強您的主儲存工作負載,以及如何做。

三思而後行

利用雲儲存對您的主儲存系統進行補充或增強應滿足以下幾個方面的要求:

可訪問性:根據您的主儲存系統用例,您對雲端駐留資料的可訪問性要求如何? 例如,檔案同步,共享與協作需要從幾乎任何地方都能訪問,而分析型工作負載可能只需從資料中心能訪問即可。

安全性:大多數雲閘道器和較新的基於軟體的混合儲存產品與服務都能對靜止資料和在處理資料進行加密,但底層技術會各有不同。此外,無論金鑰是由您或由**商生成,請檢查如何進行金鑰管理和控制,確保它們得到充分保護。

避免鎖定:儘管還是很有可能成為單一**商平台(如aws storage gateway),但當您決定更換雲提供商時,您需要得到多個公有雲的支援,以及更有成本效益的資料遷移方案。

資料中心到雲的網路功能:評估網路可用性和效能需求,確保您的網路能提供必要的冗餘,連線性和頻寬。檢查儲存**商是否提供重複資料刪除或壓縮功能,幫助減少頻寬使用率和成本。

應用程式效能:根據您準備執行的用例和工作負載,評估出延遲、iops及其他效能需求。一旦有廠商產品規格符合您的指標,堅持要求動手測試或原型驗證,以確保效能符合預期。

成本:鑑於其極高的可擴充套件性和易用性,雲儲存的使用很容易形成習慣,而資料儲存和訪問的成本可能快速增長。要對可能的公有雲提供商,使用他們提供的成本計算器,提前預計每月儲存成本,並檢查每月帳單,確保仍在估算範圍內。另外,尋找並使用工具幫助分配和管理成本。

雲化的主儲存功能是否已經就緒?

直到最近,雲儲存的使用者還主要是開發人員,他們從使用便利且即付即用的物件儲存服務中獲益。而隨著雲儲存閘道器和一些新興的混合雲軟體技術的興起,一切正在悄然改變,儲存管理員開始對主工作負載有效地使用雲儲存。

如果您認為企業中至少有部分的二級或一級工作負載可以從公有雲的可擴充套件性,彈性和廣泛的可訪問性中受益,請仔細查閱本文所述的分層和其他儲存產品與服務。他們會為您的乙個或多個關鍵用例提供一條通往雲端的快速便捷之道。

行業分析 雲儲存系統的幾個主要技術

儲存系統具有如下特點 資料安全,超強的可擴充套件性,按照使用收費,可跨不同應用,自動切換故障,易於管理等。雲儲存主要應用於備份 歸檔 分配和共享協作等四大領域。雲儲存是在雲計算概念上延伸和發展出來的乙個新概念,是指通過集群應用 網格技術或分布式檔案系統等功能,將網路中大量各種不同型別的儲存裝置通過應...

私有雲儲存的四種技術分析

私有雲專案中,將面臨選擇儲存方案,在業內常見有四種方案,也相應針對四種不同的應用場景。我們從簡單到複雜,為大家再次介紹一下。一 本地磁碟 das儲存 我們直接在雲伺服器 物理機中 通過pci e sata sas等本地介面掛上一塊高速 大容量硬碟,為本地磁碟。在介面中,以scsi儲存協議為主要的通訊...

技術分析 儲存混合雲優點和挑戰

混合雲是一種組合的雲,它是一種公共雲和私有雲的組合,是組織提供和管理一些內部資源,以及其他組織提供外部資源的雲計算環境。服務 商可以完整的或部分的方式利用第三方雲 商提供的服務,從而增加了計算的靈活性。混合雲通常有兩種方式提供 一種是由私有雲計算 商提供的私有雲,並與公共雲 商形成夥伴關係 另一種是...