◎謝定芬

大數(shù)據(jù)時(shí)代企業(yè)的主數(shù)據(jù)管理

◎謝定芬

本文討論主數(shù)據(jù)管理系統(tǒng)在大數(shù)據(jù)時(shí)代的意義與作用，以及主數(shù)據(jù)管理系統(tǒng)如何在企業(yè)中通過(guò)數(shù)據(jù)整合以及數(shù)據(jù)清理從而幫助后臺(tái)技術(shù)人員向高層管理人員及前端業(yè)務(wù)人員提供數(shù)據(jù)支持。本文同時(shí)將探討主數(shù)據(jù)管理系統(tǒng)的循環(huán)過(guò)程，并展望了將主數(shù)據(jù)管理系統(tǒng)建立在云端以及移動(dòng)平臺(tái)的可能性。

如今，數(shù)據(jù)已經(jīng)滲透到每個(gè)行業(yè)和業(yè)務(wù)職能領(lǐng)域，成為重要的生產(chǎn)因素。當(dāng)今的信息化時(shí)代主要是由數(shù)據(jù)主導(dǎo)的，因此企業(yè)若想做大做強(qiáng)必須首先掌握核心的業(yè)務(wù)數(shù)據(jù)，這有利于企業(yè)通過(guò)分析這些核心數(shù)據(jù)從而獲得最大限度的價(jià)值，并借用數(shù)據(jù)來(lái)對(duì)企業(yè)的品牌管理進(jìn)行優(yōu)化改造，拓寬市場(chǎng)渠道增加市場(chǎng)份額，最終實(shí)現(xiàn)企業(yè)核心競(jìng)爭(zhēng)力的提升，然而這一切的主要手段被稱作主數(shù)據(jù)管理（Master Date Management，簡(jiǎn)稱MDM）。

主數(shù)據(jù)管理概述

所謂主數(shù)據(jù)管理，主要是指用以確保企業(yè)的業(yè)務(wù)數(shù)據(jù)特定的范圍內(nèi)保持一致、完整、互相關(guān)聯(lián)以及精準(zhǔn)的一組規(guī)程、技術(shù)和解決方案。簡(jiǎn)而言之，主數(shù)據(jù)管理的主要作用在于使企業(yè)從零零散散的業(yè)務(wù)系統(tǒng)中提取到所需要的核心數(shù)據(jù)或最需要共享的數(shù)據(jù)（主數(shù)據(jù)），并把這些數(shù)據(jù)集中起來(lái)，進(jìn)行統(tǒng)一的篩選、整合和提煉，最終形成具有權(quán)威的主數(shù)據(jù)，再以服務(wù)的方式將這些完整統(tǒng)一、準(zhǔn)確無(wú)誤的主數(shù)據(jù)面向企業(yè)當(dāng)中需要使用這些數(shù)據(jù)的系統(tǒng)或應(yīng)用進(jìn)行分發(fā)。主數(shù)據(jù)管理主要用于強(qiáng)化企業(yè)各業(yè)務(wù)系統(tǒng)的共性數(shù)據(jù)當(dāng)中的實(shí)體和模型的管理，可以有效避免出現(xiàn)大的業(yè)務(wù)概念不一致的現(xiàn)象，同時(shí)可以有效的降低應(yīng)用孤島、數(shù)據(jù)孤島出現(xiàn)的幾率，因此可以作為企業(yè)的數(shù)據(jù)標(biāo)準(zhǔn)。

主數(shù)據(jù)管理在企業(yè)發(fā)展中的重要性

現(xiàn)今，企業(yè)已經(jīng)逐步認(rèn)識(shí)到了核心數(shù)據(jù)具有重要的資源價(jià)值。作為一種具有稀缺性和差異性的核心數(shù)據(jù)資源，主數(shù)據(jù)管理將逐漸成為企業(yè)的重大競(jìng)爭(zhēng)優(yōu)勢(shì)之一。主數(shù)據(jù)管理對(duì)企業(yè)而言主要有以下幾個(gè)方面的價(jià)值：

和大數(shù)據(jù)相輔相成。這兩者的都是以數(shù)據(jù)為核心的，僅僅在關(guān)注點(diǎn)上各不相同。大數(shù)據(jù)主要的關(guān)注點(diǎn)在于數(shù)據(jù)的體量和類型，主數(shù)據(jù)主要的關(guān)注點(diǎn)在于數(shù)據(jù)的組織結(jié)構(gòu)?，F(xiàn)代化的企業(yè)為適應(yīng)市場(chǎng)的需求，必須將主數(shù)據(jù)作為核心，以此作為線索將各類大數(shù)據(jù)進(jìn)行有效的串聯(lián)，通過(guò)主數(shù)據(jù)獲取企業(yè)的預(yù)期效益和價(jià)值。具有良好結(jié)構(gòu)的主數(shù)據(jù)可以在很大規(guī)模上幫助相關(guān)數(shù)據(jù)分析師在建模之前節(jié)省清理、組織數(shù)據(jù)的時(shí)間。由于大數(shù)據(jù)系統(tǒng)下的數(shù)據(jù)多具有無(wú)組織、雜亂、缺乏實(shí)際應(yīng)用意義，主數(shù)據(jù)分析師可以根據(jù)本企業(yè)或本行業(yè)內(nèi)部情況，通過(guò)配套的主數(shù)據(jù)管理系統(tǒng)對(duì)這類數(shù)據(jù)定義賦值，從而向數(shù)據(jù)用戶提供全方位的商業(yè)定義。

業(yè)務(wù)價(jià)值廣泛。通過(guò)主數(shù)據(jù)管理，企業(yè)可以為主數(shù)據(jù)建立完整統(tǒng)一的訪問(wèn)端口，以及完整統(tǒng)一的、內(nèi)容豐富的、純凈無(wú)雜質(zhì)的數(shù)據(jù)中心。其業(yè)務(wù)價(jià)值不僅在于可以為企業(yè)的每個(gè)業(yè)務(wù)部門(mén)提供有效的共享信息平臺(tái)，還可以為企業(yè)的業(yè)務(wù)流程以及經(jīng)營(yíng)決策提供切實(shí)可靠的數(shù)據(jù)載體。通常來(lái)說(shuō)，在數(shù)據(jù)孤島的情形下，各部門(mén)各自擁有一套數(shù)據(jù)系統(tǒng)，且這些數(shù)據(jù)系統(tǒng)中的數(shù)據(jù)大多具有非統(tǒng)一以及無(wú)序的特性，比如某產(chǎn)品在財(cái)務(wù)部門(mén)的數(shù)據(jù)系統(tǒng)中編號(hào)為89002-FA，但是在銷(xiāo)售部門(mén)的數(shù)據(jù)系統(tǒng)中編號(hào)為89002-SA。高層管理人員在對(duì)此產(chǎn)品進(jìn)行季度分析時(shí)，將會(huì)看到財(cái)務(wù)和銷(xiāo)售兩個(gè)部門(mén)提供的兩個(gè)不同產(chǎn)品編號(hào)，從而被誤導(dǎo)而做出可能導(dǎo)致錯(cuò)誤的決定。然而，一個(gè)優(yōu)良的主數(shù)據(jù)管理系統(tǒng)可以對(duì)各部門(mén)的數(shù)據(jù)系統(tǒng)進(jìn)行審計(jì)并整合，對(duì)重復(fù)、多余的數(shù)據(jù)進(jìn)行合并處理和統(tǒng)一編號(hào)，然后依據(jù)各部門(mén)人員的職能分配在統(tǒng)一的主數(shù)據(jù)倉(cāng)庫(kù)中調(diào)取和觀測(cè)數(shù)據(jù)的權(quán)限，從而為各個(gè)部門(mén)提供統(tǒng)完整的數(shù)據(jù)共享平臺(tái)。

增強(qiáng)IT建設(shè)靈活性。主數(shù)據(jù)管理可以增強(qiáng)IT結(jié)構(gòu)的靈活性，構(gòu)建覆蓋整個(gè)企業(yè)范圍內(nèi)的數(shù)據(jù)管理基礎(chǔ)和相應(yīng)規(guī)范，并且更靈活地適應(yīng)企業(yè)業(yè)務(wù)需求的變化，同時(shí)，降低接口成本、數(shù)據(jù)清洗和維護(hù)成本等，使企業(yè)有效降低成本。

主數(shù)據(jù)管理的基本方法

盡管目前的許多企業(yè)越來(lái)越重視主數(shù)據(jù)的實(shí)際價(jià)值，但對(duì)于如何發(fā)揮主數(shù)據(jù)的作用還并不十分了解。為確保企業(yè)實(shí)施的項(xiàng)目能夠按部就班的進(jìn)行，企業(yè)可以從規(guī)劃方法論出發(fā)，從不同的階段開(kāi)展工作。比如information MDM產(chǎn)品解決方案，將主數(shù)據(jù)的生命周期劃分為九個(gè)階段：一是訪問(wèn)，對(duì)主數(shù)據(jù)的來(lái)源和現(xiàn)狀進(jìn)行探索，實(shí)現(xiàn)不同數(shù)據(jù)源和應(yīng)用程序的數(shù)據(jù)集成方案，這是主數(shù)據(jù)獲取的入口。二是發(fā)現(xiàn)，探索數(shù)據(jù)內(nèi)容以及內(nèi)在結(jié)構(gòu)，并從中發(fā)覺(jué)到異常情況，對(duì)數(shù)據(jù)的優(yōu)勢(shì)和劣勢(shì)進(jìn)行精確的分析，對(duì)于其中出現(xiàn)的數(shù)據(jù)錯(cuò)誤和問(wèn)題要明確的指出。三是建模，建立正確、靈活的MDM業(yè)務(wù)及數(shù)據(jù)模型，其目標(biāo)在于有效面對(duì)企業(yè)隨時(shí)可能發(fā)生的變化以及困難，項(xiàng)目的順利完成離不開(kāi)正確的數(shù)據(jù)模型。四是清洗，對(duì)于整個(gè)系統(tǒng)數(shù)據(jù)出現(xiàn)兩種或兩種以上的定義或者使用方法時(shí)，我們需要對(duì)錯(cuò)誤以及矛盾進(jìn)行解決，建立信息正確以及結(jié)構(gòu)完整的主數(shù)據(jù)。五是識(shí)別，迅速對(duì)數(shù)據(jù)進(jìn)行配對(duì)，刪除重復(fù)數(shù)據(jù)并最大限度的防止出現(xiàn)重復(fù)。六是解決，對(duì)數(shù)據(jù)中重復(fù)的部分進(jìn)行整合，確保數(shù)據(jù)的唯一性和真實(shí)性。七是關(guān)聯(lián)，要對(duì)企業(yè)內(nèi)外部的合作伙伴系統(tǒng)或第三方軟件，乃至于外部產(chǎn)品的廣泛數(shù)據(jù)做出有效關(guān)聯(lián)。八是治理，對(duì)主數(shù)據(jù)進(jìn)行創(chuàng)建、使用、管理和監(jiān)控，確保對(duì)數(shù)據(jù)問(wèn)題進(jìn)行跟蹤，同時(shí)保證長(zhǎng)期滿足數(shù)據(jù)質(zhì)量預(yù)期。九是交付，通過(guò)服務(wù)的方式，將具有統(tǒng)一性、完整性和準(zhǔn)確的主數(shù)據(jù)分別發(fā)放給企業(yè)當(dāng)中一定范圍內(nèi)的業(yè)務(wù)系統(tǒng)以及其他系統(tǒng)，以滿足各類系統(tǒng)的需要。

云計(jì)算、社交計(jì)算、移動(dòng)計(jì)算被并稱為大數(shù)據(jù)的三大驅(qū)動(dòng)。從當(dāng)前形勢(shì)來(lái)看，部分主流MDM軟件可以對(duì)云中數(shù)據(jù)、社交數(shù)據(jù)、移動(dòng)數(shù)據(jù)等不同類型的數(shù)據(jù)進(jìn)行有效的管理。由此可見(jiàn)，未來(lái)必將支持不同的移動(dòng)終端接入，采用云中部署、混合部署等新模式的主數(shù)據(jù)管理多域部署情況將更加普遍。

未來(lái)，MDM平臺(tái)將逐步實(shí)現(xiàn)與大數(shù)據(jù)的無(wú)縫集成，為大數(shù)據(jù)提供一系列全面、先進(jìn)、成熟的數(shù)據(jù)管理解決方案，為企業(yè)用戶迎接“集成化的大數(shù)據(jù)時(shí)代”做好了準(zhǔn)備。新形勢(shì)下的大數(shù)據(jù)時(shí)代，大數(shù)據(jù)目前所存在的最重要的問(wèn)題不在于龐大的數(shù)量，而是在于高質(zhì)量。大數(shù)據(jù)背景下的企業(yè)數(shù)據(jù)治理和提升數(shù)據(jù)質(zhì)量的工具將由主數(shù)據(jù)管理解決方案擔(dān)負(fù)，不但保證了核心數(shù)據(jù)的真實(shí)可靠和較高的質(zhì)量，還可以使企業(yè)精準(zhǔn)的發(fā)掘到業(yè)務(wù)數(shù)據(jù)中所隱含的各種價(jià)值，真正把大數(shù)據(jù)轉(zhuǎn)化為大機(jī)遇。

（作者系中國(guó)建材集團(tuán)合肥水泥研究設(shè)計(jì)院工程設(shè)計(jì)公司土建室主任，高級(jí)工程師、國(guó)家一級(jí)注冊(cè)結(jié)構(gòu)師，MBA畢業(yè)）