資料倉儲概述

2021-09-14 04:52:57 字數 1130 閱讀 5371

資料倉儲,英文名稱為data warehouse,可簡寫為dw或dwh。

資料倉儲,是為企業所有級別的決策制定過程,提供所有型別資料支援的戰略集合。它是單個資料儲存,出於分析性報告和決策支援目的而建立。

為需要業務智慧型的企業,提供指導業務流程改進、監視時間、成本、質量以及控制。

資料倉儲 ,由資料倉儲之父比爾·恩門(billinmon)於2023年提出,

主要功能仍是將組織透過資訊系統之聯機事務處理(oltp)經年累月所累積的大量資料,透過資料倉儲理論所特有的資料儲存架構,作一有系統的分析整理,以利各種分析方法如聯機分析處理(olap)、資料探勘(data mining)之進行,

並進而支援如決策支援系統(dss)、主管資訊系統(eis)之建立,幫助決策者能快速有效的自大量資料中,分析出有價值的資訊,以利決策擬定及快速回應外在環境變動,幫助建構商業智慧型(bi)。

面向主題的

整合的。 資料倉儲中的資料是在對原有分散的資料庫資料抽取、清理的基礎上經過系統加工、彙總和整理得到的,必須消除源資料中的不一致性,以保證資料倉儲內的資訊是關於整個企業的一致的全域性資訊。

相對穩定的

反應歷史變化的---不做刪除和修改

運算元據儲存ods(operational data store)是資料倉儲體系結構中的乙個可選部分

具備如下特點:

1.面向主題的

2.整合的

3.當前或接近當前的

4.不斷變化的

三正規化建模:分層,大寬表,拉鍊,可以left join

星型結構建模:面向集市的,將事實和維度拆開,構成維度事實表。

建模流程:

cdm(概念模型)-->ldm(邏輯模型)-->pdm(物理模型)

單元測試:根據源系統邏輯,手動編寫sql,和集市或者彙總層的資料進行對比。其實單元測試並不難,只是需要與業務知識取數邏輯相結合。常用的sql就是 distinct,group by,order by。

另外在測試過程中需要進行sql優化,提高效率

排程工具:作業流管理,作業排程,作業監控

資料建模方法:

維度建模

三正規化建模

資料倉儲概述

資料倉儲,英文名稱為data warehouse,可簡寫為dw或dwh。資料倉儲,是為企業所有級別的決策制定過程,提供所有型別資料支援的戰略集合。它是單個資料儲存,出於分析性報告和決策支援目的而建立。為需要業務智慧型的企業,提供指導業務流程改進 監視時間 成本 質量以及控制。資料倉儲研究和解決從資料...

資料倉儲概述

一 資料倉儲的特徵 資料倉儲就是乙個面向主題的 整合的 穩定的 隨時間變化二變化的資料集合。1 面向主題 主題是指使用者使用資料倉儲進行決策時所關心的重點領域,也就是在乙個較高的管理層次上對資訊系統的資料按照某一具體的管理物件進行綜合 歸納所形成的分析物件。2 繼承性 資料倉儲中儲存的資料一般從企業...

簡介 資料倉儲概述

資料倉儲是由資料倉儲之父比爾 恩門 bill inmon 提出,資料倉儲是乙個面向主題的 整合的 非易失的且隨時間變化的資料集合。主要用於組織積累的歷史資料,並使用分析方法 olap 資料分析 進行分析整理,進而輔助決策,為管理者 企業系統提供資料支援,構建商業智慧型。面向主題 資料倉儲是為資料分析...