資料管理之起航

2021-10-03 05:12:39 字數 1882 閱讀 5176

乙個組織如果沒有認識到管理資料和資訊如同管理有形資產一樣極其重要,那麼它在新經濟時代將無法生存。 ——湯姆·彼得斯

眾所周知,我們現在處於資訊時代,也是大資料時代。資料和資訊是經濟的命脈,更被認為是一項重要的企業資產。

資產是個人或組織控制的有價值資源。長期以來資金和人才被認為是企業的資產,而資料這種看似無形的資產的價值一直被忽視。隨著大資料時代的到來,我們逐漸認識到資料也是企業重要的資產。

離開高質量的資料,沒有哪乙個企業可以高效運轉。企業資產是企業生存發展的基礎和命脈,因此需要科學和精心的管理。因此,資料管理的最重要性便凸顯出來了,每乙個企業都需要有效地管理其日益重要的資料和資訊資產。

資訊是指有上下文的資料,沒有上下文的資料是沒有意義的。我們通過上下文解釋資料來產生有意義的資訊。上下文包括:

資料元素和相關術語的業務含義。

資料表達的格式。

資料所處的時間範圍。

資料與特定用法的相關性。

資訊有助於知識的產生。知識是基於某一角度的資訊整合形成的一種觀點。這種觀點是基於對模式(例如由其他資訊和經驗形成的趨勢)的承認和解釋。知識還包括假設和有關推理的理論。

就像資料和資訊,知識也是乙個企業的資源。知識工作者通過理解資訊以獲得專業知識,然後應用專業知識來做出明智的決策和實施行動。資料是資訊、知識、才智和行動的基礎。

那麼問題來了,資料是真理嗎?答案是未必。

因為資料可能不準確、不完整、過時或者被誤解。自古以來,哲學家們問:「什麼是真理?」答案仍然遙不可及。

但是在實踐層面,可以將真理看做是在一定程度上最高質量的資訊,即是可用的、相關的、完整的、準確的、一致的、及時的、實用的、有意義的和能被理解的資料。

認識到資料價值的組織可以採取具體的、積極的措施來提高資料和資訊的質量。然而要提高資料和資訊的質量,必然離不開科學、高效的資料管理。

資料管理是指為實現資料和資訊資產價值的獲取、控制、保護、交付以及提公升,對政策、實踐和專案所做的計畫、執行和監督。

資料管理的使命是在資訊的可用性、安全性和質量方面,滿足並超越企業中所有利益相關者的資訊需求。

資料管理的目標概括為以下幾點:

理解企業和所有利益相關者的資訊需求。

獲取、儲存、保護和確保資料資產的完整性。

確保隱私和保密,防止資料和資訊未經授權或不恰當地被使用。

確保資料和資訊資產的有效利用和價值最大化。

控制資料管理成本。

促進對資料資產價值的更廣泛和深入的理解。

在整個企業中,保持資訊管理的一致性。

確保資料管理的努力和技術與業務需求的目標一致。

鑑於每個企業的差異性,資料管理的目標應該遵循「smart」原則:具體的、可衡量的、可實現的(或可操作的)、現實的,就指定的目標時間範圍來說是及時的。

經過不斷的發展,資料管理已經形成了乙個完整的學科體系。資料管理包括十大職能:

資料治理——在資料管理和使用層面之上進行規劃、監督和控制。

資料架構管理——定義資料資產管理藍圖。

資料開發——資料的分析、設計、實施、測試、部署、維護等工作。

資料操作管理——提供從資料獲取到清除的技術支援。

資料安全管理——確保隱私、保密性和適當的訪問許可權等。

資料質量管理——定義、監控和提高資料質量。

參考資料和主資料管理——管理資料的**版本和副本。

資料倉儲和商務智慧型管理——實現報告和分析。

文件和內容管理——管理資料庫以外的資料。

元資料管理——元資料的整合、控制以及提供元資料。

資料管理的每乙個職能都包含很多的管理活動,後續我會帶大家慢慢展開來深入學習。

Docker之資料管理

容器中管理資料主要有兩種方法 資料卷是乙個可供容器使用的特殊目錄,它繞過檔案系統,可以提供很多有用的特性 資料卷的使用,類似於linux下對目錄或檔案進行mount操作。在容器內建立乙個資料卷 p是允許外部訪問容器需要暴露的埠 掛載乙個主機目錄作為資料卷 使用 v標記也可以指定掛載乙個本地的已有目錄...

資料管理之元資料

按照傳統的定義,元資料 metadata 是關於資料的資料。元資料打通了源資料 資料倉儲 資料應用,記錄了資料從產生到消費的全過程。元資料主要記錄資料倉儲中模型的定義 各層級間的對映關係 監控資料倉儲的資料狀態及 etl 的任務執行狀態。將元資料按用途的不同分為兩類 技術元資料 technical ...

Docker學習之資料管理

docker 資料管理 如何在 docker 內部以及容器之間管理資料,在容器中管理資料主要有兩種方式 資料卷 是乙個可供乙個或多個容器使用的特殊目錄,它繞過 ufs,可以提供很多有用的特性 注意 資料卷的使用,類似於 linux 下對目錄或檔案進行 mount,映象中的被指定為掛載點的目錄中的檔案...