資料倉儲(data warehouse)簡寫dw,在一般企業中,由下到上依次分為:dwd、dwb或dwm、dws。dwd(data warehouse detail):是業務層與資料倉儲的隔離層。
dwm(date warehouse middle)或者叫dwb(data warehouse base):儲存的是客觀資料,一般用作中間層,可以認為是大量指標的資料層。
dws(data warehouse service):基於dwb上的基礎資料,整合彙總成分析某乙個主題域的服務資料,一般是寬表。
數倉分層設計
介紹資料分層的作用 提出一種通用的資料分層設計,以及分層設計的原則 舉出具體的例子說明 提出可落地的實踐意見 0x01 資料分層?為什麼要設計資料分層?這應該是資料倉儲同學在設計資料分層時首先要被挑戰的問題,類似的問題可能會有很多,比如說 為什麼要做資料倉儲?為什麼要做元資料管理?為什麼要做資料質量...
數倉分層總結
數倉分層 ods層 1 保持教據原貌不做任何修改,備份 2 建立分割槽表,防止後續的全表掃瞄 3 採用lzo壓縮,並建立索引 切片 4 建立外部表 多人共用 內部表 自己使用的臨時表 dwd層 1 數倉維度建模 星型模型 維度退化 商品表 品類表 spu表 分類 二級分類 一級分類 商品表 省份 地...
數倉分層概念
把複雜問題簡單化 將乙個複雜的任務分解成多個步驟來完成,每一層只處理單一的步驟,比較簡單和容易理解。清晰資料結構 每乙個資料分層都有它的作用域,這樣我們在使用表的時候能更方便地定位和理解。便於維護資料的準確性,當資料出現問題之後,可以不用修復所有的資料,只需要從有問題的步驟開始修復。減少重複開發 規...