文章講的是如何成功實現資料治理,
如果你處理過大量資料,你也許聽說過「資料治理」一詞,你可能會想,它是什麼?適不適合你?如何實施?簡單來說,資料治理就是處理資料的策略——如何儲存、訪問、驗證、保護和使用資料。資料治理包括制定獲取方案:誰能訪問、使用和共享你的資料。
這些問題正變得越來越重要,因為企業依靠收集、儲存和分析大量資料,來達成業務目標。資料變成了企業的盈利工具、業務媒介和商業機密。資料洩露會導致法律糾紛,還會令消費者對公司的核心業務失去信心。
如果心存僥倖,全憑各個部門自行處理資料,那麼你將缺乏統一管理資料的策略,也許會讓各個部門制定自己的策略。這是無法想象的,就像是缺乏管理實物庫存的策略,允許各個實體部門隨心所欲地生產、儲存和銷售產品一樣。資料使用不當就像庫存使用不當一樣,會給企業造成數百萬美元的損失,因此必須制定策略,使資料具有一致性和安全性,並隨時可用。這些應用於資料領域的策略就構成了資料治理。
資料治理的特點
資料治理策略必須涵蓋資料的整個生命週期,從資料收集一直到資料管護。在這個生命週期中,資料治理必須解決以下問題:
·從**獲取資料以及如何獲取,這是資料生命週期的起點。資料**決定了資料治理策略的基礎。例如,資料**所決定的乙個重要因素是資料集的大小。是從目標市場、現有客戶和社交**收集資料?還是使用外部**商收集資料或者分析你收集的資料?輸入資料流是什麼?資料治理必須著眼於這些問題,制定策略來管理資料的採集,引導外部**商處理他們收集的資料或者分析你收集的資料,控制資料的路徑和生命週期。
·驗證資料,尤其是驗證多**資料,這是乙個讓資料管理者十分頭疼的問題。區分重要資料和雜訊資料只是這個問題的開始。如果你是從附屬企業收集資料,你必須確保資料是可靠的。如果你是從社交****收集資料,在你的策略中,必須有一種驗證重要資料的方法。任何情況下,你都必須確保收集的資料是合法的,並且沒有被篡改——這個問題在平行計算環境中尤其令人擔心,因為平行計算常常被用來收集大量資料,這往往會使用雲服務,故而增加了安全隱患。
·資料治理必須制定訪問控制策略,在需求和安全之間找到平衡。要讓那些需要資料來完成工作的人,可以在必要時無障礙地訪問資料。出於安全原因,他們能夠訪問的資料不應該超出他們的許可權。資料應該在請求合法的前提下,才能被訪問,但出於安全原因,對敏感資料應該加大訪問難度,只向具有特定安全級別的使用者開放。應該對使用者和資料本身設定訪問級別,管理賬戶時,應與人力資源部和採購部緊密互動,這一點非常重要,因為這樣可以及時地使離職員工和停止合作的**商不再擁有訪問許可權。處理好這些細節以及確保資料所有權和責任,這是構成完整的資料治理策略的一部分。
·使用/共享/分析。資料如何被使用是資料治理策略至關重要的一部分。潛在用途包括,使用資料來管理賬戶,改善客戶體驗,投放定向廣告,提供市場分析,與附屬企業共享資料。必須仔細界定哪些資料可用於共享或者用於營銷,並保護它們免遭攻擊和洩露,因為資料本來就應該被用於純粹的內部用途。要讓客戶知道,收集資料的所有公司都必須遵守資料使用和共享方面的規定。能夠確保資料使用合規,這是擁有資料治理策略的另乙個重要好處。
·收集、驗證、儲存、訪問和使用都是安全計畫的必要組成部分,必須有乙個全面的策略來解決這些問題以及其他安全問題。安全計畫必須在不禁止使用者使用的情況下發揮作用,但資料生命週期的各個階段都可能因為疏忽大意而遭到攻擊和洩露。對安全的追求必須是支援而不是妨礙必要的使用。資料治理策略必須制定資料安全方案,包括訪問協議、對靜態資料和傳輸中資料進行加密,等等。
·管護/元資料。沒有管護的資料生命週期是不完整的。管護的乙個例子是把元資料應用於乙個資料,以便識別檢索。元資料報括資料的**、生成和/或收集的日期、訪問級別資訊、語義分類以及企業需要的其他屬性。資料治理能建立乙個元資料詞彙表,界定資料的有效期。要記住,資料也會過期,到某個時候,也許只能用於歷史資料分析。
資料治理的組織問題
在建立資料治理的過程中,常常會遭到抵制,因為有些人擔心無法再訪問他們需要的資料,還有些人出於競爭的考慮,向來不願共享他們的資料。資料治理策略必須消除這些擔憂,讓各方面的人都能接受。習慣了資料筒倉環境的公司,可能不太容易適應新的資料治理策略,但如今對大型資料集的依賴以及隨之而來的諸多安全問題,使建立和實施覆蓋全公司的資料策略成為一種必然。資料日益成為企業基礎設施的一部分,在企業一步步處理各種特定情況的過程中,決策就這樣形成了。它以一次性的方式作出,常常是對某一特定問題的回應。因此,企業處理資料的方法會因為不同部門而改變,甚至會因為部門內部的不同情況而改變。即使每個部門已經有一套合理的資料處理方案,但這些方案可能彼此衝突,企業將不得不想辦法調解。弄清資料儲存的要求和需求是一件難事,如果做得不好,就無法發揮資料在營銷和客戶維繫方面的潛力,而如果發生資料洩露,你還要承擔法律責任。另外乙個問題是,在一家大公司裡,部門之間會爭奪資源,還會展開競爭,讓自己的需求被領導聽取。各部門只需要確保自己的生存能力,無論是盈利業務,還是支援中心,都是如此,因此它們視野狹窄,只注重自身需求,很難在沒有調解的情況下達成妥協。資料治理委員會著眼於現有資料策略、未被滿足的需求以及潛在安全問題等,建立資料治理策略,使資料的採集、管護、儲存、訪問以及使用策略均實現標準化,同時還會考慮各個部門和崗位的不同需求。資料治理委員會還扮演了調解人的角色,平衡那些存在衝突的需求,在安全擔憂與訪問需求之間進行協調,確保最高效、最安全的資料管理策略。
五步實現成功的資料治理
1. 建立乙個資料治理組織。資料治理研究所推薦建立乙個資料治理委員會,負責評估各個資料使用者的輸入資訊,建立覆蓋全公司的資料管理策略,滿足內部使用者、外部使用者甚至法律方面的各種需求。該委員會的成員應該囊括各個業務領域的利益相關者,確保各方需求都得到滿足,所有型別的資料所有權均得到體現。安全專家也應成為委員會的一員。了解資料治理委員會的目標是什麼,這一點很重要,因此,應該思考企業需要資料治理策略的原因,並清楚地加以說明。2. 制定乙個框架,將林林總總的資料需求容納其中。這個框架必須確保各個部分被融合成乙個整體,滿足收集、儲存、檢索和安全要求。為此,企業必須清楚說明其端到端資料策略,以便設計乙個覆蓋所有要求和必要操作的框架。必須有計畫地把各個部分結合起來,彼此支援,這有很多好處,比如在高度安全的環境中執行檢索要求。合規性也需要專門的設計,成為框架的一部分,這樣就可以追蹤和報告監管問題。這個框架還包括日常記錄和其他安全措施,能夠對攻擊發出早期預警。在使用資料前,對其進行驗證,這也是框架的一部分。資料治理委員會應該了解框架的每個部分,明確其用途,以及它如何在資料的整個生命週期中發揮作用。3. 試點資料策略。通常來說,乙個策略應該先在小範圍內推行,以便發現計畫、框架和基礎設施的缺陷,然後才在整個公司實行。4. 擁有乙個與時俱進的資料治理組織。資料治理委員會應該與時俱進,因為隨著資料治理策略延伸到新的業務領域,肯定需要對策略進行調整。而且,隨著技術的發展,資料策略也應該發展,與安全形勢、資料分析方法以及資料管理工具等保持同步。5. 知道什麼是成功的資料策略。確立成功標準,以便衡量進展。制定資料管理目標,有助於確定成功的重要指標,進而確保資料治理策略朝著你希望和需要的方向前進。
結論
企業無論大小,都面臨著類似的資料挑戰。公司越大,資料越多,而資料越多,就越需要制定有效、正式的資料治理策略。規模較小的企業也許只需要非正式的資料治理策略就能做得很好,但前提是,公司的規模必須要小,而且對資料的依賴度必須要低。即便是非正式的資料治理策略,也必須考慮客戶和員工資料的收集、驗證、訪問以及儲存。當企業規模擴大,資料需求跨越多個部門時,當資料系統和資料集太大,難以駕馭時,當業務發展需要企業級的策略時,或者當法律或監管提出需求時,就必須制定更為正式的資料治理策略。如果你發現,有部門在制定自己的資料管理策略,就是時候了。一旦有足夠多的資料讓你成為黑客的攻擊目標,就是時候了。簡而言之,如果你不得不問「是時候了嗎?」,那麼可以肯定,是時候制定正式的資料治理策略了。
資料治理 VS 公司治理 IT治理 數倉治理
如題,今天要聊得這個話題,包含了四個 治理 看完這張圖你有什麼想法,這張圖說明了什麼?它是在描述公司治理 it治理 數倉治理和資料治理的關係嗎?如果這張圖是在描述四個 治理 之間的層次結構,那你認為哪乙個結構是正確的呢?如果您是企業的高管,您會選擇哪個結構,來實施 治理 呢?01 資料治理 vs 公...
政企資料安全和資料治理論壇成功舉行
11 月 8 日,由公安部第三研究所 資訊網路安全 雜誌主辦,杭州美創科技 承辦的 政企資料安全和資料治理論壇 在京成功召開。多位領導和專家發表主題演講,來自 金融 能源等單位的約 150 位嘉賓出席此次論壇。浙江省網際網路資訊辦公室副巡視員宋皆榮應邀參加本次會議並致辭。他表示,剛剛結束的十九屆四中...
如何成功實現銷售
去市場買青椒,你會問 老闆,青椒辣不辣?賣青椒的有四種答案 第一種答案是 辣。第二種答案是 不辣。第三種答案是 你想要辣的還是不辣的?第四種答案是 這一堆是辣的,那一堆是不辣的,隨便要。第一種答案的結果可能是,碰巧買青椒的這兩天上火,這樁買賣就黃了。第二種答案的結果可能是,湊巧買青椒的這兩天想開開胃...