數(shù)據治理(lǐ)(Data Governance)是組織中涉及數(shù)據使用的一整套管理(lǐ)行(xíng)為(wèi)。由企業數(shù)據治理(lǐ)部門(mén)發起并推行(xíng),關于如何制(zhì)定和(hé)實施針對整個(gè)企業內(nèi)部數(shù)據的商業應用和(hé)技(jì)術(shù)管理(lǐ)的一系列政策和(hé)流程。
數(shù)據治理(lǐ)不是一蹴而就的,它是一個(gè)漫長而持續的過程,沒有(yǒu)一針頂破天的訣竅,也沒有(yǒu)立竿見影(yǐng)的途徑。隻有(yǒu)将數(shù)據治理(lǐ)變成一種常态化機制(zhì),就如同我們每天吃(chī)飯、睡覺一樣,形成一種習慣、一種文化、持之以恒、不忘初心、不懈努力,才能達到預期目标。
為(wèi)什麽要做(zuò)數(shù)據治理(lǐ)?
答(dá):要建立數(shù)據标準,提升數(shù)據質量,實現數(shù)據資産統一管理(lǐ)。
問:為(wèi)什麽要建立數(shù)據标準、提升數(shù)據質量,不做(zuò)會(huì)怎樣?
答(dá):數(shù)據質量問題比較多(duō),無法提供準确的數(shù)據報表,影(yǐng)響業務效率,無法支撐企業的數(shù)字化轉型。
問:都影(yǐng)響到了哪些(xiē)數(shù)據報表、哪些(xiē)業務?
答(dá):XX報表不準确、統計(jì)口徑不一緻、系統之間(jiān)數(shù)據孤島,數(shù)據集成困難……
問:為(wèi)什麽會(huì)造成數(shù)據報表不準确,口徑不一緻,系統集成難?
答(dá):因為(wèi)數(shù)據标準一緻,數(shù)據源的數(shù)據質量差。
采用咨詢常用的5Why分析法,似乎已經得(de)出了數(shù)據治理(lǐ)的現狀和(hé)目标。将其總結下:通(tōng)過數(shù)據治理(lǐ)實現企業數(shù)據的标準化、提高(gāo)數(shù)據質量、提升業務處理(lǐ)的效率,為(wèi)數(shù)據分析提供準确的數(shù)據支撐,賦能業務,助力企業實現數(shù)字化轉型。
但(dàn)是,仔細分析這樣的調研結果是浮于表面的,圍繞數(shù)據的問題在原地打轉,沒有(yǒu)将為(wèi)什麽要做(zuò)數(shù)據治理(lǐ)真正想透。
數(shù)據要産生(shēng)價值,需要一個(gè)合理(lǐ)的“業務目标”,數(shù)據治理(lǐ)的所有(yǒu)活動應該圍繞真實的業務目标而開(kāi)展,建立數(shù)據标準、提升數(shù)據質量隻是手段,而不是目标。因此數(shù)據治理(lǐ)的第一步不是分析數(shù)據問題,而是分析業務問題,找到企業的核心業務訴求,定義數(shù)據治理(lǐ)的目标和(hé)範圍。
數(shù)據治理(lǐ)主要目标
針對企業目前在數(shù)據管理(lǐ)方面存在的問題,需要對企業數(shù)據架構進行(xíng)規劃,構建企業數(shù)據管控體(tǐ)系,實現數(shù)據全生(shēng)命周期的統一管理(lǐ),建立數(shù)據标準與規範,提供全面、統一的數(shù)據服務,靈活支撐業務,為(wèi)企業精細化管理(lǐ)提供保障,為(wèi)企業發展創造價值,提升企業運營與管理(lǐ)能力,打造企業核心競争力。
數(shù)據架構規劃定義了數(shù)據标準、改造數(shù)據環境、規範數(shù)據模型、規範數(shù)據源、建立了标準的數(shù)據管控體(tǐ)系、形成了與管理(lǐ)層和(hé)決策層相結合的數(shù)據管控組織。其規劃的目标如下:
分析業務運作(zuò)模式的本質,歸類整理(lǐ)包括業務表單、統計(jì)報表等在內(nèi)的業務實體(tǐ)。
建立包含基本數(shù)據集、信息分類編碼和(hé)數(shù)據模型等在內(nèi)的數(shù)據架構。
建立業務信息分布矩陣,使數(shù)據源分析定位到業務活動層面。
形成規範的數(shù)據标準,标準化定義數(shù)據。
以科學的方法識别出有(yǒu)價值的分域主數(shù)據,形成系統的主數(shù)據管理(lǐ)。
建立數(shù)據管控體(tǐ)系和(hé)政策,對數(shù)據生(shēng)命周期各個(gè)環節進行(xíng)有(yǒu)效的評價和(hé)考核。
數(shù)據治理(lǐ)方案概略
企業數(shù)據架構的目标就是打破信息孤島,實現企業信息數(shù)據共享;應用與數(shù)據分離,實現數(shù)據從部門(mén)到企業的提升;建立數(shù)據轉換為(wèi)價值的體(tǐ)系,讓數(shù)據發揮出企業核心資源的效用,實現數(shù)據的增值。
數(shù)據規劃的總體(tǐ)指導思路是:以企業組織架構、業務信息以及現有(yǒu)的數(shù)據管控體(tǐ)系等內(nèi)容,參考行(xíng)業較好實踐以及國際參考模型(如TOGAF集成信息模型、FEA數(shù)據模型),形成企業數(shù)據規劃報告,包括劃分業務主題域,進行(xíng)數(shù)據分類、識别相關實體(tǐ)、構建數(shù)據模型,規範主數(shù)據與編碼規則,建立數(shù)據管控體(tǐ)系,構建數(shù)據管控平台。
其中:數(shù)據管控體(tǐ)系必須從組織、标準、規程和(hé)技(jì)術(shù)保障四個(gè)方面建立。明(míng)确的數(shù)據管控組織架構和(hé)角色職能劃分可(kě)以有(yǒu)效地保障數(shù)據規程的落地;數(shù)據标準是數(shù)據管理(lǐ)的基礎;數(shù)據管理(lǐ)規程定義了數(shù)據管理(lǐ)應當遵循的規範;技(jì)術(shù)平台的建設和(hé)優化為(wèi)數(shù)據規範管理(lǐ)提供支撐。這四方面構成了完整的數(shù)據管控體(tǐ)系,保證數(shù)據管理(lǐ)有(yǒu)标準、有(yǒu)制(zhì)度、有(yǒu)稽核、有(yǒu)手續、有(yǒu)手段、有(yǒu)檢查、有(yǒu)考核,使得(de)各項數(shù)據管理(lǐ)工作(zuò)能夠得(de)到有(yǒu)效落實,達到數(shù)據準确、完整的目标,并能夠提供有(yǒu)效的增值服務。
實施效益
建立企業數(shù)據架構規劃,指引企業數(shù)據治理(lǐ)持續改進;
建立數(shù)據标準,提升管控能力,有(yǒu)效保障數(shù)據治理(lǐ)目标有(yǒu)效落地;
建立數(shù)據模型(主數(shù)據模型),規範數(shù)據全生(shēng)命周期管理(lǐ),打破信息孤島,實現數(shù)據有(yǒu)效共享;
建立數(shù)據質量管控體(tǐ)系,提高(gāo)業務數(shù)據的一緻性,增強集團、跨域、跨業務的協調能力;有(yǒu)效支持內(nèi)控,減低(dī)企業的信息安全風險;
建立和(hé)優化企業數(shù)據技(jì)術(shù)架構,形成端到端的信息流傳遞與管控,優化業務流程,建立可(kě)視(shì)化數(shù)據決策體(tǐ)系,充分利用數(shù)據資産,提升企業核心競争力。
數(shù)據治理(lǐ)不是一個(gè)“項目”,難以立竿見影(yǐng)的效果!
數(shù)據治理(lǐ)的最終目标是賦能業務,提升數(shù)據價值。這是一個(gè)持續漫長的運營過程,需要逐步完善、分步叠代,指望一步到位完成數(shù)據治理(lǐ)是不現實的。
項目型的數(shù)據治理(lǐ),是不全面的,無延續性,能夠解決一時(shí)的數(shù)據問題,但(dàn)很(hěn)難獲得(de)持續的數(shù)據價值。
因此說,數(shù)據治理(lǐ)不是一個(gè)“項目”,而是一個(gè)持續運營的過程。我們也可(kě)以将這個(gè)過程,看作(zuò)是由一個(gè)個(gè)數(shù)據治理(lǐ)“微項目”組成,連續的、螺旋上(shàng)升的模型。一個(gè)項目的結案,不是企業數(shù)據治理(lǐ)的終點,而是企業數(shù)據治理(lǐ)真正的起點!
做(zuò)了數(shù)據治理(lǐ),為(wèi)什麽數(shù)據質量依然很(hěn)差?
例如企業多(duō)年前就做(zuò)了數(shù)據治理(lǐ),建立了數(shù)據治理(lǐ)平台,元數(shù)據管理(lǐ)、數(shù)據質量管理(lǐ)等功能都有(yǒu)了,但(dàn)是數(shù)據質量問題還(hái)是很(hěn)多(duō),導緻花(huā)了很(hěn)多(duō)錢(qián)建設的BI系統基本都沒人(rén)用,有(yǒu)什麽好的方式解決?
原因是數(shù)據質量差、BI用不起來(lái),這個(gè)問題雖然常見,但(dàn)是10家(jiā)有(yǒu)相同問題的企業中,有(yǒu)9家(jiā)的原因是不一樣的。在沒有(yǒu)經過詳細調查,不了解具體(tǐ)背景的情況下,是不能貿然給出建議的。
盤點了一般引發數(shù)據質量問題的各種原因:
有(yǒu)業務方面的數(shù)據定義不明(míng)确,也有(yǒu)技(jì)術(shù)方面的數(shù)據抽取不完整;
有(yǒu)管理(lǐ)方面的崗位職責不清晰,也有(yǒu)執行(xíng)層面的數(shù)據操作(zuò)不規範;
有(yǒu)數(shù)據處理(lǐ)加工過程中出現了錯誤,也有(yǒu)數(shù)據源本身就有(yǒu)問題;
有(yǒu)數(shù)據治理(lǐ)系統功能有(yǒu)缺陷,也有(yǒu)系統強大(dà)但(dàn)是沒人(rén)用……
做(zuò)過了數(shù)據治理(lǐ),企業的數(shù)據質量就一定能提升嗎?其原意是要問:上(shàng)過了數(shù)據治理(lǐ)系統或實施了數(shù)據治理(lǐ)項目,為(wèi)什麽還(hái)會(huì)有(yǒu)數(shù)據質量問題。這個(gè)問題很(hěn)複雜。正如上(shàng)文中的項目型數(shù)據治理(lǐ),點到為(wèi)止,治标不治本。有(yǒu)的企業認為(wèi)數(shù)據治理(lǐ)就是上(shàng)一套強大(dà)的數(shù)據治理(lǐ)平台,隻要平台功能強大(dà),就能管好數(shù)據,這恰恰是陷入了另一個(gè)誤區(qū)——唯工具論,豈不知數(shù)據治理(lǐ)的本質是管理(lǐ)數(shù)據,而不是管理(lǐ)程序、腳本和(hé)任務。
另外,還(hái)有(yǒu)很(hěn)多(duō)企業是出現了數(shù)據問題,并且對業務造成很(hěn)大(dà)影(yǐng)響之後才去進行(xíng)治理(lǐ)的——被動式治理(lǐ),失去了治理(lǐ)數(shù)據的主動權,常常是解決了一個(gè)問題又引出了更多(duō)的問題。……
世界上(shàng)沒有(yǒu)“包治百病”的數(shù)據平台,隻有(yǒu)将數(shù)據治理(lǐ)常态化,持續地去做(zuò)才是王道(dào)。
數(shù)據治理(lǐ)之道(dào)
1. 數(shù)據治理(lǐ)需要體(tǐ)系建設
為(wèi)發揮數(shù)據價值需要滿足三個(gè)要素:合理(lǐ)的平台架構、完善的治理(lǐ)服務、體(tǐ)系化的運營手段。
根據企業的規模、所屬行(xíng)業、數(shù)據量等情況選擇合适的平台架構;治理(lǐ)服務需要貫穿數(shù)據全生(shēng)命周期,保證數(shù)據在采集、加工、共享、存儲、應用整個(gè)過程中的完整性、準确性、一緻性和(hé)實效性;運營手段則應當包括規範的優化、組織的優化、平台的優化以及流程的優化等等方面。
2. 數(shù)據治理(lǐ)需要夯實基礎
數(shù)據治理(lǐ)需要循序漸進,但(dàn)在建設初期至少(shǎo)需要關注三個(gè)方面:數(shù)據規範、數(shù)據質量、數(shù)據安全。規範化的模型管理(lǐ)是保障數(shù)據可(kě)以被治理(lǐ)的前提條件,高(gāo)質量的數(shù)據是數(shù)據可(kě)用的前提條件,數(shù)據的安全管控是數(shù)據可(kě)以共享交換的前提條件。
3. 數(shù)據治理(lǐ)需要IT賦能
數(shù)據治理(lǐ)不是一堆規範文檔的堆砌,而是需要将治理(lǐ)過程中所産生(shēng)的的規範、流程、标準落地到IT平台上(shàng),在數(shù)據生(shēng)産過程中通(tōng)過“以終為(wèi)始”前向的方式進行(xíng)數(shù)據治理(lǐ),避免事後稽核帶來(lái)各種被動和(hé)運維成本的增加。
4. 數(shù)據治理(lǐ)需要聚焦數(shù)據
數(shù)據治理(lǐ)的本質是管理(lǐ)數(shù)據,因此需要加強元數(shù)據管理(lǐ)和(hé)主數(shù)據管理(lǐ),從源頭治理(lǐ)數(shù)據,補齊數(shù)據的相關屬性和(hé)信息,比如:元數(shù)據、質量、安全、業務邏輯、血緣等,通(tōng)過元數(shù)據驅動的方式管理(lǐ)數(shù)據生(shēng)産、加工和(hé)使用。
5. 數(shù)據治理(lǐ)需要建管一體(tǐ)化
數(shù)據模型血緣與任務調度的一緻性是建管一體(tǐ)化的關鍵,有(yǒu)助于解決數(shù)據管理(lǐ)與數(shù)據生(shēng)産口徑不一緻的問題,避免出現兩張皮的低(dī)效管理(lǐ)模式