儲存是雲計算平台管理的一種重要資源,儲存資源池是基礎架構資源池中的重要組成部分。軟體開發人員一般對儲存知識的了解非常有限,這對於深入理解雲計算或做雲計算平台的研發是很大的障礙。本系列文章是我剛接觸雲計算時整理的儲存相關基礎知識,並做了完善和豐富,內容不一定全面,有的地方可能說的也不對,希望能對需要的人有幫助,也希望專家批評指正。
一、我們聽說的 sata 盤、sas 盤,是什麼意思呢?
這裡的 sata 和 sas,說的是硬碟接**術,也就是定義一些協議及規範,讓使用者來讀寫資料,而不需要知道硬碟本身如何儲存資料,寫入哪個碟片,用哪個磁頭等等。
目前,硬碟提供的介面包括如下幾種:
用於 ata 指令系統的 ide 介面(已淘汰)
用於 ata 指令系統的 sata 介面
用於 scsi 指令系統的並行 scsi 介面(已淘汰)
用於 scsi 指令系統的序列 scsi(sas)介面
用於 scsi 指令系統的並且承載於fibre channel協議的序列 fc 介面(fcp)
1. ide介面
ide(integrated drive electronics)即「電子整合驅動器」,它的本意是指把「硬碟控制器」與「盤體」整合在一起的硬碟驅動器。把盤體與控制器整合在一起的做法減少了硬碟介面的電纜數目與長度,資料傳輸的可靠性得到了增強,硬碟製造起來變得更容易,因為硬碟生產廠商不需要再擔心自己的硬碟是否與其它廠商生產的控制器相容。對使用者而言,硬碟安裝起來也更為方便。其擁有**低廉、相容性強的特點。ide 接**術目前已被淘汰。
ata (advanced technology attachment)技術是乙個關於 ide 的技術規範族。最初,ide 只是一項企圖把控制器與盤體整合在一起的硬碟接**術。隨著 ide/eide 得到的日益廣泛的應用,全球標準化協議將該介面自誕生以來使用的技術規範歸納成為全球硬碟標準,這樣就產生了 ata。ata 最早是在2023年由 compaq、west digital 等幾家公司共同開發的,在20世紀90年代初開始應用於台式電腦系統。ide 介面,也稱為 pata 介面,即 parallel ata(並行傳輸 ata)。
2. sata介面
sata(serial ata)即序列傳輸 ata,相對應 pata 模式的介面來說,sata 是用序列線路傳輸資料,但是指令集不變,仍然是 ata 指令集。sata 標準是由 intel、ibm、dell、apt、希捷和邁拓公司共同提出的硬碟介面規範。sata 技術是 intel 公司在 idf 2000大會上推出的,其最大的優勢是傳輸速率高。sata 採用序列連線方式,序列 ata 匯流排使用嵌入式時鐘訊號,具備了更強的糾錯能力,與以往相比其最大的區別在於能對傳輸指令(不僅僅是資料)進行檢查,如果發現錯誤會自動矯正,這在很大程度上提高了資料傳輸的可靠性。序列介面還具有結構簡單、支援熱插拔的優點。
3. scsi介面
scsi(small computer system inte***ce)即小型計算機系統介面,使一種用於計算機和外部裝置之間(硬碟、光碟機、印表機、掃瞄器等)的介面標準。scsi 介面是一種廣泛應用於小型機上的高速資料傳輸技術,scsi 介面具有應用範圍廣、多工、頻寬大、cpu占有率低以及熱插拔等優點。
scsi 與 ata 是目前現行的兩大主機與外設通訊的協議規範,而且它們各自都有自己的物理定義介面。對於 ata 協議,對應的就是 ide 介面;對於 scsi 協議,對應的就是 scsi 介面。
4.fc介面
fc (fibre channel) 是一種跟 scsi 或 ide 有很大不同的介面,它很像乙太網的轉換開頭。以前它是專為網路設計的,後來隨著儲存器對高頻寬的需求,慢慢移植到現在的儲存系統上來了。fc通常用於連線乙個scsi raid(或其它一些比較常用的raid型別),以滿足高階工作或伺服器對高資料傳輸率的要求。
5.sas介面
sas(serial attached scsi)即序列連線小型計算機系統介面。sas 是新一代的 scsi 技術,和現在流行的 serial ata(sata) 硬碟相同,都是採用序列技術以獲得更高的傳輸速度,並通過縮短鏈結線改善內部空間等。sas 是並行 scsi 介面之後開發出的全新介面。此介面的設計是為了改善儲存系統的效能、可用性和擴充性,提供與序列 ata (serial ata,縮寫為sata)硬碟的相容性。
作為一種新的儲存接**術,sas 不僅在功能上可與 fc 媲美,還具有相容 sata 的能力,因而被業界公認為取代並行 scsi 的不二之選。sas 的優勢主要體現在:靈活性,可以相容 sata,為使用者節省投資;擴充套件性,乙個sas 域最多可以直連16384個裝置;效能卓越,點對點的架構使效能隨埠數量增加而提高;更合理的電纜設計,在高密度環境中提供更有效的散熱。
二、我們聽說的hdd盤、ssd盤,是什麼意思呢?
hdd(hard disk drive),機械硬碟,它的優點是單位成本低,適合做大容量儲存,但速度遠不如固態硬碟。
ssd(solid state drive),固態硬碟,用固態電子儲存晶元陣列而製成的硬碟,由控制單元和儲存單元(flash晶元、dram晶元)組成。固態硬碟在介面的規範和定義、功能及使用方法上與普通硬碟的完全相同,在產品外形和尺寸上也完全與普通硬碟一致。
固態硬碟的全積體電路化、無任何機械運動部件的革命性設計,從根本上解決了對於資料讀寫穩定性的需求。全積體電路化設計可以讓固態硬碟做成任何形狀。與傳統硬碟相比具有以下優點:
第一,ssd不需要機械結構,完全的半導體化,不存在資料查詢時間、延遲時間和磁碟尋道時間,資料訪問速度快;
第二,ssd全部採用快閃儲存器晶元,經久耐用,防震抗摔,即使發生與硬物碰撞,資料丟失的可能性也能夠降到最小;
第三,得益於無機械部件及flash快閃儲存器晶元,ssd沒有任何噪音,功耗低;
第四,質量輕,比常規1.8英吋硬碟重量輕20-30克,使得便攜裝置搭載多塊ssd成為可能。
三、我們聽說的pcie、nvme,是什麼意思呢?
1. pcie
pcie(pci express)是一種高速序列計算機擴充套件匯流排標準,它原來的名稱為「3gio」,是由英特爾在2023年提出的,旨在替代舊的pci,pci-x和agp匯流排標準。pcie屬於高速序列點對點雙通道高頻寬傳輸,所連線的裝置分配獨享通道頻寬,不共享匯流排頻寬,主要支援主動電源管理,錯誤報告,端對端的可靠性傳輸,熱插拔以及服務質量(qos)等功能。pcie交由pci-sig(pci特殊興趣組織)認證發布後才改名為「pci-express」,簡稱「pci-e」。它的主要優勢就是資料傳輸速率高。pci express也有多種規格,從pci express x1到pci express x32,能滿足將來一定時間內出現的低速裝置和高速裝置的需求。pci-express最新的介面是pcie 3.0介面。
2. nvme
當ssd被首次引入資料中心時,還需要配合當時的匯流排技術(例如sata和sas工作,而這些匯流排技術都是針對磁介質開發的。即使最快的hdd也比不上ssd的速度,其對應匯流排的吞吐能力也成為阻礙充分發揮ssd技術優勢的一大瓶頸。作為一種在網路,圖形以及其他插入式裝置上廣泛應用的高頻寬匯流排,pcie 成為了可行的選擇,但pcie匯流排配合原本為hdd開發的儲存協議(例如ahci)仍然無法有效發揮易失性儲存介質的效能優勢。此後,nvme工作組應運而生,旨在基於pcie匯流排開發一套標準化的協議和命令,以便在資料中心充分發揮ssd的優勢。nvme規範是全新開始設計的,支援當前和未來的易失性儲存介質,實現高頻寬和低延遲儲存訪問。
nvme優化了命令傳送和完成通路,單個i/o佇列中支援最多達64k條命令。此外,增加了許多企業功能支援,例如端到端資料保護(與t10 dif和dix標準相容),增強錯誤報告和虛擬化功能。總而言之,nvme作為一種可擴充套件的儲存應用協議,旨在充分發揮pcie ssd效能,從而更好的滿足企業級、資料中心和消費級等各種場景的應用需求。
2023年時,nvme規範正式出爐,基於快閃儲存器的特點而研發,其目的是盡可能縮小儲存系統和記憶體、cpu頻寬之間的差距。nvme其實與ahci一樣都是邏輯裝置介面標準。nvme中文名稱非易失性儲存器標準,是使用pci-e通道的ssd一種規範。nvme的優點在於更低的延時,更高的傳輸速率,更低的功耗控制。
四、總結
參考文件
《大話儲存》
編碼相關1 基礎知識
一 編碼基本知識 1 字符集 字元編碼是什麼 字符集是乙個系統支援的所有抽象字元的集合 字元編碼 不同的字元編碼其實是不同的法則,該法則可以使某種自然語言,與其他訊號 資訊 號碼 電脈衝 相配對 即在自然語言符號與數字系統之間建立特定聯絡。簡而言之,各種符號通過字元編碼轉化為可以被計算機識別的數字。...
Servlet相關基礎知識總結
什麼是servlet?簡介 工作流程 servlet容器工作流程 servlet工作流程 servlet容器 tomcat 整體的工作流程 servlet的核心api以及體系結構?genericservlet抽象類 httpservlet抽象類 servletrequest介面 httpservle...
TD SCDMA基礎知識總結1
td scdma基礎1 切換整體過程 測量過程 預同步過程 接力切換 判決過程 執行過程 1g 2a 3a的 measurement control 訊息在dcch 上傳輸,即 ue進入 cell dch 狀態後的任何時刻,rnc都可以向 ue傳送 measurement control 訊息 1g...