最近有朋友在問,資料倉儲開發的難點有哪些?
做了幾年的資料倉儲,談資料倉儲技術難點,我個人覺得沒有,什麼大資料量查詢及處理,資料倉儲etl過程,這些都不是難點,
問題是有沒有想到的問題,就拿大資料量處理來說,現在的分布式資料庫廠商越來越多,ncr/dwa等,都能解決這些問題。
我覺得資料倉儲最難的是了解業務及對業務的敏感性,怎麼讓你的專案產生價值,我覺得你既然選擇了資料倉儲,你就不能
把你當成乙個100%技術人員,你應該是個2分開的人,或技術更少,資料倉儲的應用和推廣才是資料倉儲的價值所在。
資料倉儲的難點和痛點
想想自己也接觸過5個以上的資料倉儲專案了,現在想起來沒有乙個資料倉儲專案得到了客戶的肯定,大部分的倉庫專案也就是達到了給客戶提取提取報表資料的要求,可是做為一直從事資料倉儲後台專案的人員,不免還是對怎麼實施乙個資料倉儲專案感到還是沒有乙個不錯的方案.現在想想之前做過的資料倉儲專案,想想後台最讓人頭疼...
資料倉儲開發筆記(二)
資料倉儲開發的流程是確定 使用者需求 設計和建立資料庫 提取和載入資料 其中設計和建立資料庫步驟中分為 而提取和載入資料分為 因此當我們有建立資料倉儲的需求時候,首先按照需求設計資料倉儲的模型,然後根據設計好的模型對原有資料庫進行etl處理。pentaho根據整個流程整合需要的工具。bi serve...
資料倉儲的設計與開發
1 收集和分析業務需求 使用者需求,管理人員需求。2 建立資料模型和資料倉儲的物理設計 概念模型,邏輯模型,物理模型 3 定義資料源 資料來源面向應用,不是面向主題,而且資料來源之間存在多個不一致的情況,所以必須在已有的系統中定義記錄系統 內容正確,在多個資料來源間起決定作用的操作型資料來源 4 選...