邱成良　鮑佳兒

伴隨信息技術(shù)發(fā)展，中小銀行（含農(nóng)村信用社及其改制的銀行）信息化水平不斷提高，經(jīng)過近年業(yè)務(wù)品類和規(guī)模的迅速擴(kuò)展，積累了大量經(jīng)營歷史數(shù)據(jù)。隨著銀行市場競爭日趨激烈和利率市場化的預(yù)期來臨，規(guī)模擴(kuò)張的粗放式管理模式已經(jīng)不適應(yīng)其當(dāng)前發(fā)展，中小銀行亟須利用信息科技挖掘內(nèi)在規(guī)律，變粗放式管理向精細(xì)化、信息化管理模式轉(zhuǎn)變。因此，中小管理信息化的需求變得極為迫切。數(shù)據(jù)倉庫及商業(yè)智能技術(shù)給銀行管理信息化提供了成熟的技術(shù)支撐平臺，目前，國內(nèi)規(guī)模實(shí)力較大銀行都已建設(shè)了各自的數(shù)據(jù)倉庫，體現(xiàn)出其優(yōu)越性，極大提升市場競爭能力和經(jīng)營管理效率。

參照規(guī)模較大銀行經(jīng)驗(yàn)，結(jié)合中小銀行的特點(diǎn)，建立輕量級的數(shù)據(jù)倉庫，借助數(shù)據(jù)倉庫與商業(yè)智能技術(shù)從這些業(yè)務(wù)數(shù)據(jù)中提取有效的、潛在的數(shù)據(jù)信息，對中小銀行來說已是迫在眉睫。在該數(shù)據(jù)倉庫平臺基礎(chǔ)之上，采用多維分析技術(shù)，構(gòu)建存款分析、貸款分析、中間業(yè)務(wù)、會計(jì)分析、客戶分析等業(yè)務(wù)分析主題域，陸續(xù)實(shí)施客戶關(guān)系管理系統(tǒng)、經(jīng)濟(jì)資本管理、績效考核等管理型應(yīng)用，對中小銀行經(jīng)營決策和管理提供強(qiáng)大的數(shù)據(jù)支撐以及提高其市場競爭力和風(fēng)險(xiǎn)防范能力都有重要意義。

一、數(shù)據(jù)倉庫平臺設(shè)計(jì)原則

一是良好的業(yè)務(wù)適應(yīng)性及可擴(kuò)展性：在各業(yè)務(wù)系統(tǒng)源數(shù)據(jù)模型不出現(xiàn)重大變化的前提下，系統(tǒng)從設(shè)計(jì)上采用模塊化和組件化，松耦合實(shí)現(xiàn)，要求具有良好的業(yè)務(wù)適應(yīng)性及可擴(kuò)展性，業(yè)務(wù)模型采用參數(shù)化定制，方便用戶在未來業(yè)務(wù)新增或變更的時(shí)候進(jìn)行維護(hù)。適應(yīng)中小銀行發(fā)展的思路和科技規(guī)劃，至少應(yīng)滿足未來5年的業(yè)務(wù)及技術(shù)需求；

二是跨平臺性和開放性：平臺宜采用JAVA開發(fā)與實(shí)現(xiàn)，通過采用統(tǒng)一的標(biāo)準(zhǔn)化規(guī)范，可擴(kuò)展的系統(tǒng)架構(gòu)，開源框架（例如SPRING MVC），保證系統(tǒng)可在異構(gòu)的平臺系統(tǒng)及數(shù)據(jù)庫之間方便移植；

三是穩(wěn)定性和魯棒性：整體平臺應(yīng)運(yùn)行穩(wěn)定，有很強(qiáng)的防錯(cuò)、抗錯(cuò)能力，具備故障恢復(fù)能力和魯棒性，保證日常事務(wù)連續(xù)穩(wěn)定運(yùn)行。實(shí)時(shí)的決策支持能力，保證使用人員的日常事務(wù)處理不需要技術(shù)人員頻繁支持。

四是先進(jìn)性和成熟性：平臺宜采用先進(jìn)的技術(shù)，符合當(dāng)前的技術(shù)發(fā)展方向；成熟的產(chǎn)品可盡量減少平臺的實(shí)施和運(yùn)行風(fēng)險(xiǎn)，保障平臺高效穩(wěn)定運(yùn)行。

五是安全性和保密性：平臺宜采用統(tǒng)一化界面設(shè)計(jì)，通過統(tǒng)一的界面和內(nèi)部的權(quán)限控制，防止越權(quán)操作，保障操作的合法性；充分考慮在網(wǎng)絡(luò)、操作系統(tǒng)、數(shù)據(jù)庫、應(yīng)用等方面的安全性。

二、數(shù)據(jù)倉庫平臺設(shè)計(jì)

中小銀行數(shù)據(jù)倉庫不宜過分復(fù)雜，層次不宜過多，設(shè)計(jì)上課程分為數(shù)據(jù)源層、ETL服務(wù)層、支撐組件層和功能實(shí)現(xiàn)層。

一是數(shù)據(jù)源層：該層次包含中小銀行營業(yè)中產(chǎn)生的各類元數(shù)據(jù)，主要包含會計(jì)核心數(shù)據(jù)、信貸業(yè)務(wù)數(shù)據(jù)、國際業(yè)務(wù)數(shù)據(jù)、卡中心數(shù)據(jù)、支付平臺數(shù)據(jù)、資金業(yè)務(wù)數(shù)據(jù)、網(wǎng)上銀行數(shù)據(jù)、手機(jī)銀行數(shù)據(jù)、中間業(yè)務(wù)數(shù)據(jù)以及各類管理系統(tǒng)的數(shù)據(jù)。

二是ETL服務(wù)層：提供數(shù)據(jù)獲取、清洗、轉(zhuǎn)換及加載過程。在ETL過程中，進(jìn)行數(shù)據(jù)源模板格式校驗(yàn)、數(shù)據(jù)完整性校驗(yàn)、數(shù)據(jù)合法性校驗(yàn)、數(shù)據(jù)正確性校驗(yàn)以及數(shù)據(jù)清洗與加載。

三是支撐組件層：支撐組件主要指數(shù)據(jù)倉庫DW以及數(shù)據(jù)集市DM過程中用到的工具和組件，主要包含數(shù)據(jù)抽、取加、清洗工具IBM DATASTAGE，報(bào)表開發(fā)工具BUSINESS OBJECTS、COGNOS組件以及前臺界面快速開發(fā)平臺等。

四是功能實(shí)現(xiàn)層：該層主要實(shí)現(xiàn)系統(tǒng)功能模塊，應(yīng)至少包含：工作臺、系統(tǒng)運(yùn)行參數(shù)、用戶管理、元數(shù)據(jù)管理、目錄管理、用戶組管理、機(jī)構(gòu)管理、數(shù)據(jù)維護(hù)、角色管理、應(yīng)用平臺業(yè)務(wù)功能、數(shù)據(jù)分析實(shí)現(xiàn)授權(quán)、數(shù)據(jù)挖掘與展現(xiàn)、商業(yè)智能報(bào)表設(shè)計(jì)與管理等。其中，元數(shù)據(jù)管理是指對數(shù)據(jù)標(biāo)準(zhǔn)字典、數(shù)據(jù)說明等信息進(jìn)行維護(hù)與管理；系統(tǒng)運(yùn)行參數(shù)是指對對業(yè)務(wù)人員權(quán)限、功能模塊定義、機(jī)構(gòu)管理、報(bào)表管理、信息主題維護(hù)等與系統(tǒng)總控參數(shù)的定義與維護(hù)；報(bào)表設(shè)計(jì)與管理指定義報(bào)表、生成報(bào)表、發(fā)布報(bào)表的過程。

三、數(shù)據(jù)倉庫存儲設(shè)計(jì)

一是元數(shù)據(jù)（META DATA）。元數(shù)據(jù)是存儲和處理接口文件的區(qū)域，接口文件區(qū)在操作系統(tǒng)（如UNIX、AIX）下按照特定的目錄結(jié)構(gòu)組織起來。用操作系統(tǒng)的指令集和工具來管理。對每個(gè)目錄按照其特定的用途設(shè)置不同用戶的訪問權(quán)限。元數(shù)據(jù)的處理主要是SHELL調(diào)用DB2的LOAD文件命令，附加一些自己開發(fā)的特定程序來實(shí)現(xiàn)。

二是數(shù)據(jù)初始入庫ODS層。該層數(shù)據(jù)具有面向主題、集成的、可變的數(shù)據(jù)集，是當(dāng)前的或是接近當(dāng)前的數(shù)據(jù)，它介于元始數(shù)據(jù)文件和數(shù)據(jù)倉庫之間的一種數(shù)據(jù)存儲技術(shù)，與原來面向應(yīng)用的分散的、雜亂無章元數(shù)據(jù)相比，ODS層增加了ETL時(shí)間戳等標(biāo)記，存放當(dāng)日或當(dāng)月的數(shù)據(jù)，且數(shù)據(jù)結(jié)構(gòu)接近數(shù)據(jù)源業(yè)務(wù)系統(tǒng)。該層可以在業(yè)務(wù)系統(tǒng)和數(shù)據(jù)倉庫之間形成一個(gè)隔離緩沖層，轉(zhuǎn)移一部分業(yè)務(wù)細(xì)節(jié)數(shù)據(jù)的查詢功能。

三是數(shù)據(jù)倉庫DW層。該層主要目的是支持把元數(shù)據(jù)文件裝載到數(shù)據(jù)庫，并對其進(jìn)行驗(yàn)證和處理，然后把數(shù)據(jù)按照統(tǒng)一規(guī)則命名。驗(yàn)證的方法主要是將新轉(zhuǎn)載的數(shù)據(jù)與ODS內(nèi)已有的數(shù)據(jù)進(jìn)行查找和比較。該層數(shù)據(jù)是最完整的，并且保存期限最長，中小銀行管理系統(tǒng)應(yīng)用數(shù)據(jù)時(shí)，可以在這一層直接卸載成標(biāo)準(zhǔn)文件落地供給管理系統(tǒng)使用。

四是匯總數(shù)據(jù)層。匯總數(shù)據(jù)區(qū)是為了方便查詢及防病后續(xù)多維數(shù)據(jù)的更新，創(chuàng)建的常用的匯總表，以提高性能和降低后續(xù)檢索工作的復(fù)雜性。匯總應(yīng)最少包含貸款余額累積數(shù)和日均計(jì)算、存款余額累積數(shù)和日均計(jì)算、資金業(yè)務(wù)余額累積數(shù)和日均計(jì)算、中間業(yè)務(wù)余額累積數(shù)和日均計(jì)算等。匯總數(shù)據(jù)層應(yīng)盡量在多個(gè)數(shù)據(jù)集市的計(jì)算中共享，這樣方可大幅度的提高整個(gè)數(shù)據(jù)倉庫查詢的性能。

四、數(shù)據(jù)倉庫平臺建設(shè)目標(biāo)

一是統(tǒng)一客戶信息。目前中小銀行系統(tǒng)眾多，彼此間缺少關(guān)聯(lián)，造成客戶信息紊亂，針對客戶信息的查詢問題、困難很多。數(shù)據(jù)倉庫通過設(shè)定一定規(guī)則，統(tǒng)一客戶信息，便于以后開展客戶管理系統(tǒng)以及精準(zhǔn)營銷管理系統(tǒng)的開發(fā)建設(shè)。

二是提高數(shù)據(jù)質(zhì)量。系統(tǒng)建設(shè)會促進(jìn)各個(gè)業(yè)務(wù)系統(tǒng)的發(fā)展，特別是數(shù)據(jù)質(zhì)量的提升。通過統(tǒng)一數(shù)據(jù)清洗，為中小銀行相關(guān)應(yīng)用系統(tǒng)提供干凈、一致、全面的數(shù)據(jù)。

三是多維度智能分析。通過數(shù)據(jù)倉庫挖掘技術(shù)可以按照客戶存款、貸款、中間業(yè)務(wù)進(jìn)行多維度分析，更加全面、系統(tǒng)和綜合的分析數(shù)據(jù)。

四是為專題應(yīng)用供數(shù)。平臺搭建后，可以方便為管理建立數(shù)據(jù)集市，進(jìn)而可以開發(fā)引入經(jīng)濟(jì)資本管理、產(chǎn)品定價(jià)、資產(chǎn)負(fù)債管理、盈利性分析、成本分?jǐn)?、?nèi)部資金轉(zhuǎn)移定價(jià)、風(fēng)險(xiǎn)管理等，提升中小銀行的管理水平。