資料倉儲與企業應用整合 一

2021-03-31 08:56:30 字數 2575 閱讀 2361

主要內容

一.從系統和整體的角度來考慮資料倉儲的開發

二.cif的概念和內容

三.cif 的案例-sap bw

四.資料倉儲與企業應用整合

五.小結

references

摘要

本文的主要內容在於介紹企業資訊工廠並**在建立資料倉儲和企業應用時應考慮的系統性和整體性。

因此本文主要針資料倉儲的最新發展,結合

sap bw

的實際案例,本文講述企業資訊工廠(

cif)的構想、概念和內容,同時也闡述了在設計企業應用時應考採用的思維方式,我們將以乙個新的角度來看待資料。

.

從系統和整體的角度來考慮資料倉儲的開發。

出於人們面臨的問題越來越複雜和規模越來越大,人們常常將世界拆成片段來分解和處理,這顯然能夠使複雜的問題容易處理,但是無形中,我們卻付出了代價——也不了解自身行動所帶來的一連串後果。在開發企業應用時這種錯誤經常會重演,在資料倉儲方面也不例外,我們需要用一種系統和整體的觀點來重新審視和思考資料倉儲的開發及其與企業應用的關係。

資料倉儲是面向主題的、整合的、不可更新的(穩定性)、隨時間不斷變化(不同時間)的資料集合,用以支援經營管理中的決策制定過程w.h.inmon

資料倉儲的實質是用資料支援決策,其核心價值在於其資料模型是否刻畫了企業的核心業務,有一種觀點,認為資料集市的集合就是資料倉儲,簡要記錄可以被置入資料倉儲或者置入資料倉儲所支援的資料集市。當簡要記錄進入資料倉儲時是面向普通應用的,而進入資料集市時則是為了適應部門應用的。最顯而易見的解決方案通常是沒有功效的;短期也許有改善,長期只會使事情更惡化。

企業的活動,也是一種「系統」,也都受到細微且息息相關的行動所牽連,彼此影響著,這種影響往往要經年累月才完全展現出來。身為群體中的一小部分,置身其中而想要看清整體變化,更是加倍的困難。我們因而傾向於將焦點放在系統中某一片段,但總想不通為什麼有些最根本的問題似乎從來得不到解決。

.cif

的概念和內容

cif (

企業資訊工廠

)正是一種以系統的觀點來看待資料倉儲系統的架構,我們可以換乙個角度來看待資訊,既然資訊已經成為企業競爭的焦點,我們完全可以把資訊當作企業的一種產品,而生產部門級產品的場所就是

"資訊車間

",對企業級資訊進行全面管理的場所(系統)就稱為

"資訊工廠"。

圖1 cif架構

圖中表示了

cif的體系結構

因此, cif

這樣乙個基礎設施必須要能夠吸納和支援不同**的企業資訊。它不僅需要在非結構化資料**於檔案管理系統、內部和外部**、作業系統、群件和電子郵件)上投入巨資;而且還要在傳統的結構化資料(**於資料倉儲、資料集市、運算元據貯備(

ods)中有所投資。企業中所有資訊的建立、使用、交換和刪除,都應當可以在這個基礎設施中得以實現。

企業資訊工廠由現存的一些基於處理的系統組成,這些系統之間由資訊進行連線,為了

cif的正常執行,生產線上的每乙個元件都必須共享一致和堅實的基礎結構,這種結構有一些特定的要求:靈活的適應變化,低冗餘,可公升級

, 可擴充套件性。

edw (enterprise data warehouse) –

位於企業資訊工廠的中心,包含如下的資料

粒度化的

歷史的

整體的

.

全體的

在edw

中建立的資料為資料集市,資料探勘等提供資訊,簡而言之,

edw是資料倉儲和決策支援系統的執行的基礎。在

edw的資料是粒度化並且無冗餘,建立在兩人以上經過由於對

cif不同的分析結果而不斷的討論而形成的共識基礎上。

edw可以儲存在主儲存器(效能較高)及二級儲存器(效能較差)中。

以下將

cif主要概念要素做簡要描述

作業系統,資料獲取,資料倉儲,主儲存管理,二級儲存,資料集市,資料遞交(是一套使得終端使用者及其資訊系統組能夠建立和管理資料倉儲的檢視處理過程,它包含如下過程:過濾,格式化及從資料倉儲提交資料給資料集市),

ods,

元資料管理,探索資料庫(是一種決策支援系統的架構,目的是為探測性及臨時的處理提供乙個資料港灣,它利用資料壓縮技術來達到在短時間內對整個資料庫進行訪問的能力)。資料探勘倉庫(是乙個分析人員在探索資料庫中來測試他們假設和推斷的環境,專業的資料探勘工具包含

intelligent agents

來執行這些任務。分析應用(預先設計的,可以安裝的決策支援應用,它們通常需要客戶化來適應企業特定的要求

.比如風險分析,

crm

分析等。外部資料(

external data

是位於除了企業應用的正規資料外的任何外部資料

(如人口統計,信用,競爭者及財政方面的資訊,通常,外部資料由企業向特定資訊提供商人購買

)

資料倉儲與企業應用整合(二)

三 cif的案例 sapbw 主要特點是erp 商提供了整個體系結構,這就節省了大量的工作,並且降低了設計和開發的成本,將業務封裝在bw中,降低了長期維護的難度。erp的資料資源是非常豐富和寶貴的,應該是 資料倉儲的重要 sap的bw就是將 資料倉儲納入了erp應用。1.sapbw概述 a.sapb...

資料倉儲應用(一) 資料倉儲模型設計

關聯文章 資料倉儲應用 二 資料抽取 轉換 載入 etl 資料倉儲應用 三 sql server 2005的資料倉儲應用 聯機分析olap 一 問題背景 某電子商務 主要銷售電子類產品,產品又分為幾個大類別,包括 電腦類 手機類 鍵盤類等,每個類別內又細分為幾個小類別,各類別下又有諸多的商品,每乙個...

資料倉儲hive(簡介與應用)

資料倉儲概念 資料倉儲 data warehouse 是乙個面向主題的 subject oriented 整合的 integrated 相對穩定的 non volatile 反映歷史變化 time variant 的資料集合,用於支援管理決策。hive簡介 hive 是乙個構建於 hadoop 頂層...