業(yè)務(wù)是田,數(shù)據(jù)是水,水流之處,統(tǒng)一認(rèn)知,打通壁壘,灌溉創(chuàng)新,創(chuàng)造價(jià)值,以精益數(shù)據(jù)治理為錨點(diǎn)和抓手,成就數(shù)據(jù)驅(qū)動的企業(yè)
習(xí)近平總書記強(qiáng)調(diào),“促進(jìn)數(shù)據(jù)高效流通使用、賦能實(shí)體經(jīng)濟(jì),統(tǒng)籌推進(jìn)數(shù)據(jù)產(chǎn)權(quán)、流通交易、收益分配、安全治理,加快構(gòu)建數(shù)據(jù)基礎(chǔ)制度體系”。這其中,數(shù)據(jù)治理是建設(shè)數(shù)據(jù)基礎(chǔ)制度的重要保障和生產(chǎn)力之一。數(shù)據(jù)治理為企業(yè)提供智慧和洞察力,幫助企業(yè)在數(shù)字化轉(zhuǎn)型的道路上做出明智的決策和戰(zhàn)略。
數(shù)據(jù)被視為一種寶貴的資產(chǎn),具有巨大的潛力和價(jià)值。企業(yè)越來越依賴數(shù)據(jù)來支持決策、創(chuàng)新和業(yè)務(wù)發(fā)展。但企業(yè)在充分利用數(shù)據(jù)潛力的同時(shí),如何確保數(shù)據(jù)的準(zhǔn)確性、一致性和可信度,以及保護(hù)數(shù)據(jù)的隱私和安全?數(shù)據(jù)治理工作成為至關(guān)重要的環(huán)節(jié)。
數(shù)據(jù)治理的五大核心價(jià)值
數(shù)據(jù)治理是一套包含管理和控制數(shù)據(jù)資產(chǎn)的原則、政策、流程和技術(shù)的綜合體系,涵蓋了數(shù)據(jù)質(zhì)量管理、數(shù)據(jù)安全管理、數(shù)據(jù)隱私保護(hù)、數(shù)據(jù)訪問控制、數(shù)據(jù)生命周期管理等方面。通過數(shù)據(jù)治理,企業(yè)能夠規(guī)范數(shù)據(jù)的獲取、存儲、處理、共享和使用,確保數(shù)據(jù)的可信度及一致性。
近日,國家數(shù)據(jù)局正式發(fā)布了《數(shù)字中國建設(shè)2024年工作要點(diǎn)清單》(以下簡稱《工作要點(diǎn)》),標(biāo)志著我國數(shù)字中國建設(shè)進(jìn)入了一個(gè)全新的戰(zhàn)略部署階段?!豆ぷ饕c(diǎn)》明確了2024年數(shù)字中國建設(shè)的主要方向,重點(diǎn)強(qiáng)調(diào)了打通數(shù)據(jù)資源大循環(huán)的堵點(diǎn),凸顯了數(shù)據(jù)在加快數(shù)字化發(fā)展進(jìn)程中作為核心生產(chǎn)要素的戰(zhàn)略地位。
《工作要點(diǎn)》提出建設(shè)全流程數(shù)據(jù)治理體系,“破局”數(shù)據(jù)大循環(huán),充分體現(xiàn)了數(shù)據(jù)治理的重要性,可以總結(jié)為以下五個(gè)方面(如圖1所示):
高質(zhì)量數(shù)據(jù)決策。數(shù)字化時(shí)代,企業(yè)需要基于準(zhǔn)確、全面、及時(shí)的數(shù)據(jù)來做出決策。數(shù)據(jù)治理可以確保數(shù)據(jù)的準(zhǔn)確性、完整性和一致性,為決策提供可靠的依據(jù),減少決策的風(fēng)險(xiǎn)。
數(shù)據(jù)合規(guī)性和風(fēng)險(xiǎn)管理。企業(yè)面臨著越來越嚴(yán)格的數(shù)據(jù)合規(guī)要求和隱私保護(hù)法規(guī)。數(shù)據(jù)治理可以確保數(shù)據(jù)合規(guī)使用,通過制定合規(guī)政策、訪問控制和數(shù)據(jù)審計(jì)等措施,降低數(shù)據(jù)泄露和違規(guī)風(fēng)險(xiǎn)。
數(shù)據(jù)資產(chǎn)價(jià)值最大化。通過數(shù)據(jù)治理,企業(yè)可以識別和優(yōu)化數(shù)據(jù)資產(chǎn)的價(jià)值。數(shù)據(jù)清洗、整合和標(biāo)準(zhǔn)化等工作可以提高數(shù)據(jù)質(zhì)量,增強(qiáng)數(shù)據(jù)的可分析性和挖掘潛力,實(shí)現(xiàn)數(shù)據(jù)資產(chǎn)的最大化利用。特別是在開啟數(shù)據(jù)要素化元年的2024年,企業(yè)紛紛響應(yīng)數(shù)據(jù)資產(chǎn)入表的號召,而數(shù)據(jù)治理則是數(shù)據(jù)資產(chǎn)入表、數(shù)據(jù)要素價(jià)值化的基礎(chǔ)性抓手工作。
數(shù)據(jù)共享和協(xié)作。數(shù)據(jù)治理可以促進(jìn)跨部門和跨組織的數(shù)據(jù)共享與協(xié)作。通過建立數(shù)據(jù)共享的規(guī)范和機(jī)制,不同部門和團(tuán)隊(duì)可以更好地共享數(shù)據(jù)資源,促進(jìn)協(xié)同工作和知識共享。
流數(shù)融合,優(yōu)化業(yè)務(wù)流程。數(shù)據(jù)治理看上去是在梳理數(shù)據(jù)的問題,但是大量的數(shù)據(jù)問題本質(zhì)上是由于業(yè)務(wù)流程的不清晰、系統(tǒng)建模的不科學(xué)所導(dǎo)致的數(shù)據(jù)孤島、業(yè)務(wù)交叉,從而形成數(shù)據(jù)口徑不統(tǒng)一、標(biāo)準(zhǔn)不一致。所以數(shù)據(jù)治理走到“深水區(qū)”,一定會發(fā)現(xiàn)很多流程的問題、系統(tǒng)的問題。提高數(shù)據(jù)治理的效率和效果,本質(zhì)上就是要做好流程與數(shù)據(jù)的融合,進(jìn)而優(yōu)化業(yè)務(wù)流程。
數(shù)據(jù)治理項(xiàng)目的六大挑戰(zhàn)
數(shù)據(jù)治理已經(jīng)成為企業(yè)數(shù)字化轉(zhuǎn)型的基礎(chǔ)工作。但是很多企業(yè)在推行數(shù)據(jù)治理項(xiàng)目的時(shí)候,普遍面臨著如圖2所示的六大挑戰(zhàn):
價(jià)值不明顯。傳統(tǒng)數(shù)據(jù)治理方法往往是由技術(shù)驅(qū)動,且獨(dú)立存在于業(yè)務(wù)之外,所以常常難以直接證明其對業(yè)務(wù)價(jià)值的貢獻(xiàn),導(dǎo)致其在組織中缺乏足夠的支持和認(rèn)可,這也成為傳統(tǒng)數(shù)據(jù)治理項(xiàng)目面臨的最大挑戰(zhàn)。而數(shù)據(jù)治理的本質(zhì),不僅是梳理數(shù)據(jù),更是在梳理流程和業(yè)務(wù)。沒有業(yè)務(wù)配合的數(shù)據(jù)治理,是無法產(chǎn)生業(yè)務(wù)價(jià)值的。難以獲得業(yè)務(wù)支持的傳統(tǒng)數(shù)據(jù)治理方法將形成一個(gè)死循環(huán),業(yè)務(wù)不關(guān)注、不參與,導(dǎo)致數(shù)據(jù)治理無法產(chǎn)生業(yè)務(wù)價(jià)值,最終成了IT部門的“自娛自樂”。
成果不落地。傳統(tǒng)數(shù)據(jù)治理下,業(yè)務(wù)人員反饋?zhàn)疃嗟氖恰岸?biāo)準(zhǔn)、出本子、創(chuàng)崗位、做流程”,唯獨(dú)沒有產(chǎn)生業(yè)務(wù)價(jià)值,給業(yè)務(wù)帶來獲得感。許多數(shù)據(jù)治理項(xiàng)目難以在實(shí)際業(yè)務(wù)場景中得到落地,成果難以得到充分應(yīng)用,最后形成了一系列掛在墻上的標(biāo)準(zhǔn)和擺在桌上的體系,資源浪費(fèi)嚴(yán)重。
效果難持續(xù)。很多數(shù)據(jù)治理項(xiàng)目雖然在初期取得了一些成效,但在梳理了部分?jǐn)?shù)據(jù)之后,往往難以持續(xù)改進(jìn)和保持效果,導(dǎo)致數(shù)據(jù)質(zhì)量和治理水平雙雙下降,形成不了可持續(xù)的運(yùn)營體系。這是因?yàn)閿?shù)據(jù)治理只停留在已經(jīng)采集存儲的數(shù)據(jù)層面,沒有溯源到上游,即業(yè)務(wù)和流程層面去根除錯(cuò)誤的、低質(zhì)的數(shù)據(jù)。
數(shù)據(jù)復(fù)雜度高。隨著數(shù)據(jù)量的爆發(fā)式增長,傳統(tǒng)的以流程的“人拉肩扛”模式,面臨著無法有效處理和管理海量數(shù)據(jù)的問題。十多年前,數(shù)據(jù)治理主要是通過管理手段、流程制度來治理相對靜態(tài)的數(shù)據(jù),比如會計(jì)科目、物料主數(shù)據(jù)、BOM數(shù)據(jù)、客戶主數(shù)據(jù)等,因?yàn)楸藭r(shí)企業(yè)的數(shù)據(jù)主要產(chǎn)生于ERP、MES、PLM等內(nèi)部管理系統(tǒng),產(chǎn)生的數(shù)量和類型有限;而到了今天的數(shù)字化時(shí)代,企業(yè)每時(shí)每刻的業(yè)務(wù)都在產(chǎn)生海量數(shù)據(jù),原有的管理手段、流程和制度已然無法有效管理龐大且復(fù)雜的數(shù)據(jù)。
“數(shù)據(jù)債”難還。數(shù)據(jù)的質(zhì)量問題來自于過去數(shù)十年的信息化建設(shè),是由系統(tǒng)到數(shù)據(jù)架構(gòu)等各方面綜合因素導(dǎo)致的結(jié)果,所以想要一次性治理清楚這些歷史形成的數(shù)據(jù),是很困難的。尤其是在遇到跨部門、跨領(lǐng)域、跨流程的數(shù)據(jù)問題時(shí),更加難以全局打通。面對過去幾十年的沉淀,僅用梳理流程來解決流程的問題,是幾乎無法完成的任務(wù)。流程承載著很多過去的組織、戰(zhàn)略等復(fù)雜情況,誰也無法還原當(dāng)時(shí)的全部情況,也就無法回到過去梳理當(dāng)時(shí)流程產(chǎn)生的數(shù)據(jù)。
缺少正反饋。傳統(tǒng)數(shù)據(jù)治理方法往往與實(shí)際業(yè)務(wù)場景脫節(jié),難以直接應(yīng)用于業(yè)務(wù)過程中,所以缺少業(yè)務(wù)側(cè)實(shí)際執(zhí)行的反饋。要建立即時(shí)的數(shù)據(jù)反饋機(jī)制,讓數(shù)據(jù)治理定出的標(biāo)準(zhǔn)、指標(biāo)能立刻應(yīng)用到業(yè)務(wù)場景中,獲得反饋,從而不斷快速地調(diào)整數(shù)據(jù)治理的手段,讓業(yè)務(wù)與數(shù)據(jù)治理攜手同行。
傳統(tǒng)數(shù)據(jù)治理項(xiàng)目通常需要大量的資源投入和較長的時(shí)間周期,常常過于依賴技術(shù)驅(qū)動,過于注重基礎(chǔ)設(shè)施的搭建和數(shù)據(jù)管理的規(guī)范化,而忽視了業(yè)務(wù)需求和業(yè)務(wù)驅(qū)動的重要性。這使得數(shù)據(jù)治理項(xiàng)目無法與業(yè)務(wù)場景緊密結(jié)合,無法滿足業(yè)務(wù)部門的真實(shí)需求。針對這些挑戰(zhàn),需要引入精益數(shù)據(jù)治理的新范式和新方法,讓數(shù)據(jù)治理的價(jià)值被清晰地看到和度量,進(jìn)而真正實(shí)現(xiàn)數(shù)據(jù)要素價(jià)值化。
面對挑戰(zhàn)的四大應(yīng)對思路
應(yīng)對上述數(shù)據(jù)治理項(xiàng)目的六大挑戰(zhàn),有以下四個(gè)關(guān)鍵策略(如圖3所示):
數(shù)據(jù)治理直接服務(wù)于業(yè)務(wù)場景
傳統(tǒng)的數(shù)據(jù)治理項(xiàng)目往往無法與業(yè)務(wù)場景直接關(guān)聯(lián),凸顯不出數(shù)據(jù)對于業(yè)務(wù)的價(jià)值。為了解決這一問題,數(shù)據(jù)治理應(yīng)當(dāng)緊密結(jié)合業(yè)務(wù)需求,將數(shù)據(jù)治理的目標(biāo)和方法與實(shí)際業(yè)務(wù)場景相匹配。通過理解業(yè)務(wù)需求,明確數(shù)據(jù)治理的目標(biāo)并將其落地到具體的業(yè)務(wù)流程中,確保數(shù)據(jù)治理直接為業(yè)務(wù)場景服務(wù),實(shí)現(xiàn)真正的業(yè)務(wù)價(jià)值。
協(xié)同共享,可視化是有效的手段
數(shù)據(jù)治理項(xiàng)目通常涉及多個(gè)部門和角色之間的協(xié)作與共享。為了有效應(yīng)對挑戰(zhàn),建立協(xié)同工作機(jī)制至關(guān)重要。通過共享數(shù)據(jù)治理的信息和結(jié)果,能促進(jìn)不同團(tuán)隊(duì)和部門之間的溝通與合作。此外,采用可視化工具和儀表板,可以幫助各方更好地理解和使用數(shù)據(jù)治理的成果,提高信息的透明度和可理解性。
基于元數(shù)據(jù)的主動式數(shù)據(jù)治理
傳統(tǒng)的數(shù)據(jù)治理往往是被動的,只在數(shù)據(jù)出現(xiàn)問題時(shí)才進(jìn)行干預(yù)。為了應(yīng)對挑戰(zhàn),數(shù)據(jù)治理應(yīng)當(dāng)采用主動式的方法。這意味著需要通過建立元數(shù)據(jù)管理系統(tǒng),對數(shù)據(jù)資產(chǎn)進(jìn)行監(jiān)控和追蹤,及時(shí)發(fā)現(xiàn)和糾正潛在的問題。主動式數(shù)據(jù)治理還包括建立數(shù)據(jù)質(zhì)量規(guī)則和指標(biāo),實(shí)時(shí)監(jiān)測數(shù)據(jù)質(zhì)量,并主動采取措施進(jìn)行修復(fù)和改進(jìn),以確保數(shù)據(jù)的準(zhǔn)確性和可靠性。
標(biāo)準(zhǔn)迭代與時(shí)俱進(jìn)
數(shù)據(jù)治理是一個(gè)持續(xù)不斷的過程,隨著業(yè)務(wù)需求和技術(shù)變化,數(shù)據(jù)治理的方法和標(biāo)準(zhǔn)也需要不斷演進(jìn)和更新。為了應(yīng)對挑戰(zhàn),數(shù)據(jù)治理項(xiàng)目應(yīng)具備標(biāo)準(zhǔn)迭代和持續(xù)改進(jìn)的能力。定期評估數(shù)據(jù)治理的效果和成果,根據(jù)反饋和經(jīng)驗(yàn),不斷調(diào)整和優(yōu)化數(shù)據(jù)治理的方法和流程。同時(shí),關(guān)注行業(yè)標(biāo)準(zhǔn)和最佳實(shí)踐的發(fā)展,及時(shí)更新數(shù)據(jù)治理的標(biāo)準(zhǔn),以保持與時(shí)俱進(jìn)。
通過制定針對性的四大應(yīng)對策略,企業(yè)可以更好地應(yīng)對數(shù)據(jù)治理項(xiàng)目的挑戰(zhàn),并確保數(shù)據(jù)治理能夠有效地支持?jǐn)?shù)字化轉(zhuǎn)型和業(yè)務(wù)發(fā)展。
精益數(shù)據(jù)方法打造價(jià)值驅(qū)動的數(shù)據(jù)治理
豐田生產(chǎn)的精益思想,也被稱為豐田生產(chǎn)方式(Toyota Production System,簡稱TPS),是一種源自日本的管理理念和生產(chǎn)方法。TPS于20世紀(jì)50年代由豐田汽車公司創(chuàng)始人豐田喜一郎和豐田公司工程師們所倡導(dǎo)和發(fā)展,旨在實(shí)現(xiàn)高效、靈活、質(zhì)量可靠的生產(chǎn)過程。豐田生產(chǎn)方式的成功得益于其對細(xì)節(jié)的關(guān)注和追求卓越的品質(zhì)。通過消除浪費(fèi)、實(shí)施持續(xù)改進(jìn)和激發(fā)員工的積極性,豐田在汽車行業(yè)取得了卓越的成就。TPS也被廣泛應(yīng)用于其他行業(yè)和組織,成為一種重要的管理和生產(chǎn)方法。
數(shù)字化時(shí)代,每個(gè)企業(yè)都成為數(shù)據(jù)要素的加工生產(chǎn)企業(yè),數(shù)據(jù)也已經(jīng)成為業(yè)務(wù)的存在形式。精益思想同樣適用于數(shù)據(jù)要素的生產(chǎn)全過程,其核心原則是以業(yè)務(wù)價(jià)值為核心,消除浪費(fèi)/持續(xù)改進(jìn),以提供最大的價(jià)值和質(zhì)量,同時(shí)滿足客戶需求?!毒鏀?shù)據(jù)方法論》經(jīng)過十余年的實(shí)踐探索,總結(jié)出精益數(shù)據(jù)治理的方法,助力消除傳統(tǒng)數(shù)據(jù)生產(chǎn)過程中的七大浪費(fèi)(如圖4所示)。
數(shù)據(jù)生產(chǎn)過程中的七大浪費(fèi)現(xiàn)象
過度生產(chǎn):在數(shù)據(jù)治理過程中,存在大量的過度生產(chǎn)。例如,重復(fù)的報(bào)表,數(shù)據(jù)產(chǎn)品的功能重疊,用戶不需要的數(shù)據(jù)和功能等。如果數(shù)據(jù)沒有明確的業(yè)務(wù)目標(biāo)和需求支持,僅僅為了收集而收集,會導(dǎo)致數(shù)據(jù)積壓、成本上升,并且給后續(xù)的數(shù)據(jù)處理和分析增加復(fù)雜性和負(fù)擔(dān)。
庫存浪費(fèi):數(shù)據(jù)存儲過多或過長時(shí)間而沒有被充分利用是一種浪費(fèi)。大量的數(shù)據(jù)庫存可能會導(dǎo)致存儲成本的增加,并且難以管理和維護(hù)。此外,長期保留的數(shù)據(jù)可能會過時(shí),失去實(shí)際價(jià)值。而庫存浪費(fèi)帶來的最大問題不僅是浪費(fèi),更是讓業(yè)務(wù)產(chǎn)生對數(shù)據(jù)的不信任。例如,開發(fā)完一個(gè)報(bào)表,但是業(yè)務(wù)用戶沒有使用,一段時(shí)間后,由于未被使用可能造成數(shù)據(jù)不準(zhǔn)確,一旦用戶用起來后發(fā)現(xiàn)數(shù)據(jù)不準(zhǔn)確,就會產(chǎn)生對數(shù)據(jù)治理的不信任,導(dǎo)致后續(xù)項(xiàng)目推進(jìn)困難。
運(yùn)輸浪費(fèi):在數(shù)據(jù)流程中進(jìn)行頻繁的數(shù)據(jù)傳輸和移動可能導(dǎo)致數(shù)據(jù)丟失、損壞或錯(cuò)誤。不必要的數(shù)據(jù)傳輸和移動可能會引起數(shù)據(jù)質(zhì)量問題,并增加數(shù)據(jù)管理和維護(hù)的復(fù)雜性。比如過多的數(shù)據(jù)集成,不必要的數(shù)據(jù)加載、傳輸任務(wù)等。傳輸?shù)倪^程會產(chǎn)生N次加工的新數(shù)據(jù),導(dǎo)致數(shù)據(jù)不歸一,產(chǎn)生低質(zhì)量數(shù)據(jù)。
動作浪費(fèi):在數(shù)據(jù)處理過程中進(jìn)行不必要的操作或步驟是一種浪費(fèi)。例如,在數(shù)據(jù)收集或處理過程中頻繁切換工具、瀏覽多個(gè)應(yīng)用程序或復(fù)制粘貼數(shù)據(jù),會浪費(fèi)時(shí)間和資源。同時(shí),動作的浪費(fèi)也會導(dǎo)致數(shù)據(jù)的標(biāo)準(zhǔn)不一致,產(chǎn)生垃圾數(shù)據(jù)。
加工浪費(fèi):在數(shù)據(jù)處理過程中采取過度加工是一種浪費(fèi)。例如,對數(shù)據(jù)進(jìn)行多次轉(zhuǎn)換、清洗、整理或加工可能超出實(shí)際需要,不僅增加了處理時(shí)間和成本,同時(shí)增加了出錯(cuò)的潛在風(fēng)險(xiǎn)。
不良浪費(fèi):數(shù)據(jù)質(zhì)量問題和錯(cuò)誤是一種浪費(fèi)。當(dāng)數(shù)據(jù)存在錯(cuò)誤、缺失、不一致或不準(zhǔn)確時(shí),會影響決策的準(zhǔn)確性和業(yè)務(wù)流程的可靠性。修復(fù)數(shù)據(jù)缺陷的成本往往比預(yù)防缺陷的成本高得多。
等待浪費(fèi):數(shù)據(jù)等待的浪費(fèi)可能來自于數(shù)據(jù)收集、傳輸、處理或?qū)彶榈难舆t。當(dāng)數(shù)據(jù)在流程中停滯,等待下一步處理或?qū)徟鷷r(shí),會降低數(shù)據(jù)的及時(shí)性和可用性,從而影響決策和業(yè)務(wù)流程的效率。
精益數(shù)據(jù)治理的本質(zhì)
數(shù)據(jù)治理的本質(zhì)是對業(yè)務(wù)和流程進(jìn)行梳理和優(yōu)化,然后在此基礎(chǔ)上進(jìn)行數(shù)據(jù)全鏈路的治理,從而讓數(shù)據(jù)的口徑一致、標(biāo)準(zhǔn)一致,才能達(dá)成數(shù)據(jù)治理的要求,打造高質(zhì)量的數(shù)據(jù)體系。數(shù)據(jù)問題的本質(zhì)是因?yàn)椴煌M織結(jié)構(gòu)承載的業(yè)務(wù)系統(tǒng)將業(yè)務(wù)本身分解成了多個(gè)口徑的局部數(shù)據(jù),就像一束光,經(jīng)過三棱鏡分解成七彩光一樣。一個(gè)訂單,在銷售部門,包含的是客戶信息、價(jià)格、訂貨時(shí)間等數(shù)據(jù);而到了生產(chǎn)部門,就成了批號、排產(chǎn)信息、物料信息等數(shù)據(jù);等到了配送供應(yīng)鏈部門,又變成了發(fā)貨單、運(yùn)單等物流數(shù)據(jù)。但是對于企業(yè)來說,其實(shí)就是一個(gè)客戶訂單的價(jià)值流在不同職能、不同部門和不同系統(tǒng)對應(yīng)的不同映射,但是由于部門的不同、系統(tǒng)的不同,成為了相互割裂、無法對齊的多個(gè)數(shù)據(jù)。如果各個(gè)部門的口徑、計(jì)算方法不一致,那么就會給企業(yè)造成不一樣的數(shù)據(jù),這也是數(shù)據(jù)質(zhì)量問題產(chǎn)生的原因之一。
所以,精益數(shù)據(jù)治理認(rèn)為,要將這些原來分散描述的局部數(shù)據(jù)匯聚、清洗、歸一形成與真實(shí)業(yè)務(wù)一致的業(yè)務(wù)數(shù)據(jù),然后由它來回饋和驅(qū)動業(yè)務(wù)本身。也就是我們常說的“一切業(yè)務(wù)數(shù)據(jù)化,一切數(shù)據(jù)業(yè)務(wù)化”,數(shù)據(jù)治理就是一切數(shù)據(jù)業(yè)務(wù)化之前的基礎(chǔ)性工作。
“Z”字形精益數(shù)據(jù)治理提效100%
為了解決傳統(tǒng)數(shù)據(jù)治理與業(yè)務(wù)場景結(jié)合不緊密的問題,精益數(shù)據(jù)治理提出了“Z”字形數(shù)據(jù)治理的實(shí)踐方法,如圖6所示:
“Z”字形數(shù)據(jù)治理區(qū)別于傳統(tǒng)數(shù)據(jù)治理的核心在于,它是沿著具體的業(yè)務(wù)場景和應(yīng)用來針對性地治理相關(guān)數(shù)據(jù),而不是無差別地、全面深度地治理企業(yè)的所有數(shù)據(jù)。
精益數(shù)據(jù)治理的六大新范式
為了解決數(shù)據(jù)治理項(xiàng)目面臨的挑戰(zhàn),精益數(shù)據(jù)治理提出了六大新范式,即場景化、輕量化、智能化、主動式、運(yùn)營式和迭代式,如下圖7所示:
場景化——將數(shù)據(jù)治理與業(yè)務(wù)場景緊密結(jié)合
場景化的新范式強(qiáng)調(diào)將數(shù)據(jù)治理與實(shí)際業(yè)務(wù)場景相結(jié)合,將數(shù)據(jù)治理目標(biāo)和方法與具體業(yè)務(wù)需求相匹配。在具體操作層面上,就是讓數(shù)據(jù)治理項(xiàng)目同步對應(yīng)一個(gè)或多個(gè)數(shù)據(jù)應(yīng)用項(xiàng)目,讓數(shù)據(jù)標(biāo)準(zhǔn)、數(shù)據(jù)治理的具體舉措在應(yīng)用項(xiàng)目中落地,從而明確數(shù)據(jù)治理的目標(biāo)并將其應(yīng)用到實(shí)際業(yè)務(wù)流程中,數(shù)據(jù)治理能夠直接為業(yè)務(wù)服務(wù),第一時(shí)間獲取反饋,從而優(yōu)化迭代數(shù)據(jù)治理的標(biāo)準(zhǔn)和手段。
輕量化——簡化數(shù)據(jù)治理的過程和方法
傳統(tǒng)的數(shù)據(jù)治理項(xiàng)目常常繁瑣而復(fù)雜,耗費(fèi)大量時(shí)間和資源。而輕量化的新范式強(qiáng)調(diào)簡化數(shù)據(jù)治理的過程和方法,減少繁文縟節(jié),提高執(zhí)行效率。通過精簡數(shù)據(jù)治理的步驟和流程,去除冗余和無效的環(huán)節(jié),數(shù)據(jù)治理可以更加高效地實(shí)施,為企業(yè)節(jié)省時(shí)間和資源成本。
智能化——運(yùn)用技術(shù)手段提升數(shù)據(jù)治理能力
隨著人工智能和機(jī)器學(xué)習(xí)等技術(shù)的發(fā)展,智能化的數(shù)據(jù)治理成為新的趨勢。智能化的新范式強(qiáng)調(diào)運(yùn)用自動化工具、智能算法等先進(jìn)的技術(shù)手段來提升數(shù)據(jù)治理的能力。通過自動化數(shù)據(jù)質(zhì)量檢測、智能化的數(shù)據(jù)分類和標(biāo)準(zhǔn)化,企業(yè)可以更快速、準(zhǔn)確地處理和管理海量的數(shù)據(jù),提高數(shù)據(jù)治理的效率和質(zhì)量。
主動式——基于元數(shù)據(jù)的主動數(shù)據(jù)治理
元數(shù)據(jù)驅(qū)動的數(shù)據(jù)治理體系是一種主動式數(shù)據(jù)治理方法,通過建立和利用一個(gè)完整的元數(shù)據(jù)管理系統(tǒng),實(shí)現(xiàn)對數(shù)據(jù)資產(chǎn)的全面監(jiān)控和管理。元數(shù)據(jù)管理系統(tǒng)能夠記錄和追蹤所有數(shù)據(jù)資產(chǎn)的狀態(tài)和變化,包括數(shù)據(jù)的來源、結(jié)構(gòu)、用途、訪問權(quán)限等信息。通過實(shí)時(shí)監(jiān)控元數(shù)據(jù),可以及時(shí)發(fā)現(xiàn)數(shù)據(jù)中潛在的問題,如數(shù)據(jù)不一致、缺失、重復(fù)等,從而在問題發(fā)生前或剛發(fā)生時(shí)進(jìn)行干預(yù)和修復(fù)。此外,元數(shù)據(jù)管理系統(tǒng)還可以幫助制定和應(yīng)用數(shù)據(jù)質(zhì)量規(guī)則和指標(biāo),這些規(guī)則和指標(biāo)可以自動監(jiān)測數(shù)據(jù)質(zhì)量,如數(shù)據(jù)的準(zhǔn)確性、完整性、一致性等。當(dāng)監(jiān)測系統(tǒng)發(fā)現(xiàn)數(shù)據(jù)質(zhì)量問題時(shí),可以自動觸發(fā)數(shù)據(jù)治理流程,采取修復(fù)措施,確保數(shù)據(jù)的準(zhǔn)確性和可靠性。例如,在電信行業(yè),通過元數(shù)據(jù)管理系統(tǒng),運(yùn)營商可以實(shí)時(shí)監(jiān)控用戶數(shù)據(jù)的變化,及時(shí)發(fā)現(xiàn)和修復(fù)數(shù)據(jù)錯(cuò)誤,確保計(jì)費(fèi)系統(tǒng)的準(zhǔn)確性和客戶體驗(yàn)的優(yōu)化。總體而言,元數(shù)據(jù)驅(qū)動的數(shù)據(jù)治理體系通過主動監(jiān)控和管理數(shù)據(jù)資產(chǎn),實(shí)現(xiàn)從被動修復(fù)到主動防范的轉(zhuǎn)變,大大提高數(shù)據(jù)治理的效率和效果。
運(yùn)營式——將數(shù)據(jù)治理納入日常運(yùn)營管理
傳統(tǒng)的數(shù)據(jù)治理往往只是一個(gè)獨(dú)立的項(xiàng)目,缺乏持續(xù)的關(guān)注和支持,而運(yùn)營式的新范式強(qiáng)調(diào)將數(shù)據(jù)治理納入日常運(yùn)營管理。通過建立數(shù)據(jù)治理團(tuán)隊(duì)和流程,定期進(jìn)行數(shù)據(jù)質(zhì)量監(jiān)控和評估,持續(xù)改進(jìn)數(shù)據(jù)治理的方法和標(biāo)準(zhǔn)。運(yùn)營式數(shù)據(jù)治理使數(shù)據(jù)治理成為一個(gè)持續(xù)不斷的過程,保證數(shù)據(jù)的長期質(zhì)量和可用性。
迭代式——持續(xù)改進(jìn)和優(yōu)化數(shù)據(jù)治理
持續(xù)迭代的精益數(shù)據(jù)治理模式強(qiáng)調(diào)不斷改進(jìn)和優(yōu)化。通過建立元數(shù)據(jù)管理系統(tǒng),實(shí)時(shí)監(jiān)測數(shù)據(jù)質(zhì)量;同時(shí)定期評估數(shù)據(jù)治理效果,通過反饋機(jī)制收集意見,并根據(jù)結(jié)果優(yōu)化治理方法。關(guān)注行業(yè)標(biāo)準(zhǔn)和技術(shù),及時(shí)更新工具和流程,提高治理效率。定期培訓(xùn)相關(guān)人員,確保全員參與。通過設(shè)定目標(biāo)、實(shí)施、評估和優(yōu)化的迭代周期,持續(xù)改進(jìn),保持與業(yè)務(wù)和技術(shù)環(huán)境的同步。
(作者系中國特色數(shù)字化轉(zhuǎn)型方法論創(chuàng)始人。暢銷書《精益數(shù)據(jù)方法論——數(shù)據(jù)驅(qū)動的數(shù)字化轉(zhuǎn)型》唯一作者,中國計(jì)算機(jī)學(xué)會數(shù)字化轉(zhuǎn)型與企業(yè)架構(gòu)SIG主席、數(shù)字產(chǎn)業(yè)創(chuàng)新研究中心副主席、公眾號《凱哥講數(shù)字化》作者,為企業(yè)提供數(shù)字化轉(zhuǎn)型咨詢培訓(xùn)輔導(dǎo)教練服務(wù)。)
數(shù)據(jù)治理是一套包含管理和控制數(shù)據(jù)資產(chǎn)的原則、政策、流程和技術(shù)的綜合體系,涵蓋了數(shù)據(jù)質(zhì)量管理、數(shù)據(jù)安全管理、數(shù)據(jù)隱私保護(hù)、數(shù)據(jù)訪問控制、數(shù)據(jù)生命周期管理等方面。通過數(shù)據(jù)治理,企業(yè)能夠規(guī)范數(shù)據(jù)的獲取、存儲、處理、共享和使用,確保數(shù)據(jù)的可信度及一致性。