趙春暉,吳志力,姜欣,崔燦,孫毅

(1.國網(wǎng)北京經(jīng)濟(jì)技術(shù)研究院，北京市 102209; 2.華北電力大學(xué)電氣與電子工程學(xué)院，北京市 102206)

?

跨平臺電網(wǎng)規(guī)劃數(shù)據(jù)融合與存儲模式

趙春暉1,吳志力1,姜欣1,崔燦2,孫毅2

(1.國網(wǎng)北京經(jīng)濟(jì)技術(shù)研究院，北京市 102209; 2.華北電力大學(xué)電氣與電子工程學(xué)院，北京市 102206)

隨著電網(wǎng)規(guī)劃各業(yè)務(wù)系統(tǒng)平臺的建立以及異構(gòu)業(yè)務(wù)數(shù)據(jù)的急劇增加，急需打破各系統(tǒng)平臺之間的業(yè)務(wù)壁壘，建立完善的業(yè)務(wù)信息共享與交互體系。文章在分析現(xiàn)有業(yè)務(wù)系統(tǒng)數(shù)據(jù)格式及存儲現(xiàn)狀的基礎(chǔ)上，深入研究異構(gòu)數(shù)據(jù)融合與存儲的關(guān)鍵技術(shù)，并提出一種跨平臺電網(wǎng)規(guī)劃數(shù)據(jù)融合與存儲模式。通過建立統(tǒng)一業(yè)務(wù)數(shù)據(jù)信息模型，完成異構(gòu)數(shù)據(jù)的融合處理；構(gòu)建基于Hadoop的分布式文件存儲系統(tǒng)，實現(xiàn)海量異構(gòu)數(shù)據(jù)高效快速的存儲與索引，為電網(wǎng)規(guī)劃系統(tǒng)乃至電力行業(yè)的海量異構(gòu)數(shù)據(jù)與信息共享提供理論指導(dǎo)與體系架構(gòu)支撐。

跨平臺業(yè)務(wù)；數(shù)據(jù)融合；Hadoop；異構(gòu)數(shù)據(jù)存儲

0 引 言

近年來，隨著信息計算技術(shù)的不斷發(fā)展，電力行業(yè)各業(yè)務(wù)領(lǐng)域的信息系統(tǒng)建設(shè)也在不斷推進(jìn)，目前各類業(yè)務(wù)系統(tǒng)平臺的建立已初步實現(xiàn)單一類型數(shù)據(jù)的高效融合與存儲[1]。針對電力系統(tǒng)中越來越多的非結(jié)構(gòu)化數(shù)據(jù)，尚無較有效的異構(gòu)數(shù)據(jù)融合與存儲方案。在電網(wǎng)規(guī)劃體系中，規(guī)劃、技經(jīng)、評審等業(yè)務(wù)系統(tǒng)不斷積累了大量異構(gòu)數(shù)據(jù)，由于這些數(shù)據(jù)在系統(tǒng)建設(shè)初期設(shè)計要求各不統(tǒng)一，通常具有不同的格式、不同的業(yè)務(wù)屬性，造成了未來各業(yè)務(wù)信息系統(tǒng)間數(shù)據(jù)共享和交換的極大困難。構(gòu)建良好的數(shù)據(jù)管理平臺，為各業(yè)務(wù)領(lǐng)域提供良好的技術(shù)支撐，需要根據(jù)現(xiàn)有的問題開展針對跨平臺多業(yè)務(wù)的數(shù)據(jù)融合與管理模式方面的研究，探索建立具有計算速度快、穩(wěn)定性高、維護(hù)簡便等優(yōu)點的統(tǒng)一信息平臺，構(gòu)建業(yè)務(wù)數(shù)據(jù)的大集中管理架構(gòu)。

數(shù)據(jù)融合與存儲的方式研究較多，文獻(xiàn)[2]提出一種模糊聯(lián)合聚類方法(fuzzy co-clustering for high-order heterogeneous data, HFCC)，實現(xiàn)對高階異構(gòu)數(shù)據(jù)進(jìn)行融合與聚類分析。算法最小化每個特征空間中對象與聚簇中心的加權(quán)距離，推導(dǎo)出對象隸屬度和特征權(quán)重的迭代更新公式，設(shè)計出聚類過程的迭代算法，并且從理論上證明了該迭代算法的收斂性。文獻(xiàn)[3]提出了基于solr的異構(gòu)數(shù)據(jù)融合檢索技術(shù)，實現(xiàn)了對xml文件的索引和檢索，為異構(gòu)數(shù)據(jù)融合檢索提供了解決方案?；贖adoop和分布式文件系統(tǒng)(hadoop distributed file system, HDFS)的異構(gòu)數(shù)據(jù)存儲方式也是研究的熱點。文獻(xiàn)[4]提出了針對能源數(shù)據(jù)的Hadoop存儲體系以及基于多級索引表DHT的快速索引算法。

電網(wǎng)規(guī)劃系統(tǒng)數(shù)據(jù)有較明顯的電力行業(yè)特色，一般的數(shù)據(jù)融合方式無法適用于電網(wǎng)規(guī)劃的各個業(yè)務(wù)平臺。針對各平臺的數(shù)據(jù)格式特征以及不同的存儲需求，需要研究一套適用于電網(wǎng)規(guī)劃體系各業(yè)務(wù)平臺的跨平臺數(shù)據(jù)融合與存儲模式，不僅能夠為電網(wǎng)企業(yè)的統(tǒng)一信息共享平臺提供理論和技術(shù)基礎(chǔ)，還能為大規(guī)劃體系中異構(gòu)大數(shù)據(jù)的高效處理、存儲和應(yīng)用做保障。本文在對現(xiàn)有業(yè)務(wù)平臺數(shù)據(jù)融合、共享與存儲現(xiàn)狀分析的基礎(chǔ)上，研究跨平臺電網(wǎng)規(guī)劃數(shù)據(jù)融合與存儲模式所涉及的關(guān)鍵技術(shù)，最后提出跨平臺電網(wǎng)規(guī)劃數(shù)據(jù)融合與存儲體系架構(gòu)，為建設(shè)快速、穩(wěn)定、實用的統(tǒng)一信息平臺提供建設(shè)思路。

1 現(xiàn)狀分析

國網(wǎng)經(jīng)濟(jì)技術(shù)研究院現(xiàn)有業(yè)務(wù)系統(tǒng)主要包括一體化電網(wǎng)規(guī)劃設(shè)計平臺、工程設(shè)計評審平臺和技經(jīng)一體化平臺。

一體化電網(wǎng)規(guī)劃設(shè)計平臺涉及以下幾種業(yè)務(wù)數(shù)據(jù)：社會經(jīng)濟(jì)、能源資源、電力供需、電網(wǎng)設(shè)備、電源設(shè)備、電網(wǎng)運行、地理信息、典型參數(shù)、電力工程等。

工程設(shè)計評審平臺包含下列業(yè)務(wù)數(shù)據(jù)：工程基礎(chǔ)數(shù)據(jù)、工程可研批復(fù)文件數(shù)據(jù)、工程初始批復(fù)文件數(shù)據(jù)、工程概算文件數(shù)據(jù)。

技經(jīng)實驗室一體化平臺包含以下業(yè)務(wù)數(shù)據(jù)：項目工程數(shù)據(jù)、工程可研估算數(shù)據(jù)、工程初始概算數(shù)據(jù)、工程施工圖預(yù)算數(shù)據(jù)、工程竣工結(jié)算數(shù)據(jù)、結(jié)算管理數(shù)據(jù)、計價標(biāo)準(zhǔn)數(shù)據(jù)、專業(yè)資質(zhì)管理數(shù)據(jù)、造價分析數(shù)據(jù)、標(biāo)準(zhǔn)成本測算數(shù)據(jù)、技經(jīng)標(biāo)準(zhǔn)研究數(shù)據(jù)、全壽命周期分析數(shù)據(jù)、通用造價數(shù)據(jù)、標(biāo)準(zhǔn)成本庫數(shù)據(jù)、行業(yè)信息數(shù)據(jù)、物料庫數(shù)據(jù)、價格信息發(fā)布數(shù)據(jù)、年度工作計劃數(shù)據(jù)。

其中，大部分一體化規(guī)劃設(shè)計平臺數(shù)據(jù)，如社會經(jīng)濟(jì)數(shù)據(jù)、電力設(shè)備及運行數(shù)據(jù)、地理信息數(shù)據(jù)等為結(jié)構(gòu)化數(shù)據(jù)；而工程設(shè)計評審平臺及技經(jīng)實驗室一體化平臺中涉及的工程文件、可研文件、施工圖等數(shù)據(jù)為非結(jié)構(gòu)化數(shù)據(jù)。結(jié)構(gòu)化數(shù)據(jù)能夠使用同一格式的數(shù)據(jù)格式進(jìn)行標(biāo)示，主要存儲在關(guān)系數(shù)據(jù)庫中，而非結(jié)構(gòu)化數(shù)據(jù)無法像結(jié)構(gòu)化數(shù)據(jù)一樣用二維表表示，也無法像結(jié)構(gòu)化數(shù)據(jù)一樣完全采用關(guān)系數(shù)據(jù)庫來處理，其主要包括所有格式的辦公文檔、文本、圖片、xml、html、各類報表和音頻/視頻信息等。非結(jié)構(gòu)化數(shù)據(jù)在電力行業(yè)中所占的比例越來越高，其特征是數(shù)據(jù)格式多樣，數(shù)據(jù)總量大，增長速度快且包含有關(guān)企業(yè)管理發(fā)展的重要信息。伴隨著電網(wǎng)公司信息化的建設(shè)和發(fā)展，企業(yè)每年非結(jié)構(gòu)化數(shù)據(jù)的增長量已經(jīng)達(dá)到PB級別。經(jīng)過多年的運行積累，各業(yè)務(wù)系統(tǒng)形成信息孤島，非結(jié)構(gòu)化數(shù)據(jù)的存儲、管理和搜索問題日益凸顯。表1為現(xiàn)有平臺業(yè)務(wù)數(shù)據(jù)類型。

表1 現(xiàn)有平臺業(yè)務(wù)數(shù)據(jù)類型

Table 1 Business data types of the existing platform

2 數(shù)據(jù)融合與存儲關(guān)鍵技術(shù)

2.1 數(shù)據(jù)融合CIM模型

不同平臺的數(shù)據(jù)種類和格式多種多樣，要實現(xiàn)跨平臺數(shù)據(jù)的融合就必須先對異構(gòu)數(shù)據(jù)進(jìn)行統(tǒng)一建模，只有在共同的數(shù)據(jù)模型下，才能實現(xiàn)快速有效的數(shù)據(jù)融合與存儲等處理過程。目前電力系統(tǒng)已有的公共信息模型(common information model，CIM)是解決該問題的有效途徑，通過定義針對經(jīng)研院各業(yè)務(wù)數(shù)據(jù)的CIM模型保障未來系統(tǒng)能夠平滑升級并與國際接軌[5]。

美國電科院/國際電工委員會建立的公共信息模型是對電網(wǎng)企業(yè)運營管理的典型實物對象和業(yè)務(wù)領(lǐng)域的一套精確描述體系[6]。CIM的原型也隨之產(chǎn)生，它用于控制中心EMS系統(tǒng)建模和外部系統(tǒng)之間的數(shù)據(jù)交換，包括狀態(tài)估計、潮流計算、拓?fù)浞治?、網(wǎng)絡(luò)規(guī)劃、安全分析、SCADA等業(yè)務(wù)領(lǐng)域，后被擴(kuò)展到發(fā)電、輸電、配電等領(lǐng)域[7]。

目前針對電網(wǎng)規(guī)劃各業(yè)務(wù)平臺數(shù)據(jù)的信息模型并不健全，CIM模型在電網(wǎng)規(guī)劃的應(yīng)用擴(kuò)展較少，主要包括以下幾個方面[8]：

(1) 規(guī)劃區(qū)域類：規(guī)劃潮流計算的區(qū)域范圍，有平衡機(jī)，規(guī)劃網(wǎng)架對象屬于該區(qū)域；

(2) 規(guī)劃地區(qū)：結(jié)合規(guī)劃要考慮的維度自定義，可以是阻塞區(qū)、氣候區(qū)、經(jīng)濟(jì)區(qū)等；

(3) 規(guī)劃地區(qū)組：比規(guī)劃地區(qū)更高一層的劃分，由規(guī)劃地區(qū)組成；

(4) 節(jié)點組：把規(guī)劃區(qū)域內(nèi)的連接點組織到planning zone中，從而可以成組調(diào)節(jié)規(guī)劃節(jié)點特性；

(5) 支路組：用于定義規(guī)劃計算斷面，定義斷面限額，由支路組端點組成；

(6) 支路組端點：用于定義支路組。

上述模型擴(kuò)展主要針對xml文件的信息建模，無法完成對辦公文檔、文本、圖片、html、各類報表和音頻/視頻信息等其他數(shù)據(jù)類型的建模和分析。要實現(xiàn)跨平臺數(shù)據(jù)的融合，統(tǒng)一的數(shù)據(jù)信息模型是必要條件，因此需要對現(xiàn)有規(guī)劃數(shù)據(jù)信息模型進(jìn)一步擴(kuò)展，研究出適用于規(guī)劃、評審和技經(jīng)多個平臺的統(tǒng)一數(shù)據(jù)信息模型，并在此基礎(chǔ)上建立完善的數(shù)據(jù)融合處理與存儲機(jī)制，實現(xiàn)跨平臺業(yè)務(wù)數(shù)據(jù)的融合與存儲體系。

2.2 分布式數(shù)據(jù)存儲

面對海量種類繁多的數(shù)據(jù)，現(xiàn)有的關(guān)系型數(shù)據(jù)庫已經(jīng)不能滿足電網(wǎng)大規(guī)劃體系的數(shù)據(jù)存儲需求。建立高效、穩(wěn)定的跨平臺數(shù)據(jù)融合與存儲體系必須采用另一個關(guān)鍵技術(shù)，即面向多源異構(gòu)大數(shù)據(jù)的分布式數(shù)據(jù)存儲。傳統(tǒng)的關(guān)系數(shù)據(jù)庫SQLSERVER、MYSQL、ORACLE等雖然在目前仍然能夠勉強滿足存儲的需求，但仍需要超大容量存儲空間，擴(kuò)展性存在瓶頸。另一方面，傳統(tǒng)的關(guān)系數(shù)據(jù)庫在面對海量數(shù)據(jù)的查詢請求時，查詢效率已經(jīng)嚴(yán)重影響了系統(tǒng)的性能[9]。

云計算的誕生導(dǎo)致了云存儲的出現(xiàn)。云存儲是指在分布式文件系統(tǒng)的基礎(chǔ)上，利用網(wǎng)絡(luò)進(jìn)行數(shù)據(jù)傳輸，然后在計算機(jī)群集的調(diào)度下進(jìn)行數(shù)據(jù)存儲的一種存儲方式。通過這種方式，各種不同的計算機(jī)設(shè)備和存儲介質(zhì)都能夠經(jīng)由網(wǎng)絡(luò)而整合起來，提供存儲服務(wù)。云存儲的特點有：主要面向海量的數(shù)據(jù)存儲，提供高性能的存儲與訪問服務(wù)，容錯性高，可擴(kuò)展性強，能夠運行在普通的計算機(jī)組成的群機(jī)上[10]。

常用的PC機(jī)或者一般的存儲介質(zhì)就可直接通過網(wǎng)絡(luò)環(huán)境構(gòu)造成為Hadoop平臺。Hadoop平臺下的HDFS系統(tǒng)擁有以下特性：(1)分布式存儲架構(gòu)能有效解決硬件失效時的數(shù)據(jù)丟失問題；(2)采用批處理數(shù)據(jù)訪問方式，能夠高效處理海量數(shù)據(jù)；(3)海量的數(shù)據(jù)存儲空間，滿足TB、PB級別數(shù)據(jù)的存儲需求；(4)一次寫，多次讀的讀寫方式大大降低錯誤率；(5)采用“移動計算”的方式，減小網(wǎng)絡(luò)負(fù)載；(6)跨平臺、跨軟件設(shè)計，保證在不同軟硬件環(huán)境下有效運行[11-12]。

如圖1所示，Hadoop平臺采用了一種Master和Slave的方式。Master是所有Slave節(jié)點的指揮中心，它并不參與具體的數(shù)據(jù)存儲操作。僅僅只是當(dāng)有存儲或者讀取請求時將其引導(dǎo)到對應(yīng)的數(shù)據(jù)節(jié)點上操作，元數(shù)據(jù)表就存放在Master服務(wù)器上。

圖1 Hadoop 上的 HDFS 結(jié)構(gòu)Fig.1 Structure of HDFS in Hadoop

Slave節(jié)點就是實際存儲數(shù)據(jù)的節(jié)點。在Hadoop系統(tǒng)中，Mater Node與SlaveNode是一對多的關(guān)系，單臺PC允許放置1個或多個SlaveNode，如圖1所示系統(tǒng)結(jié)構(gòu)。Hadoop分布式文件存儲系統(tǒng)是跨平臺電網(wǎng)規(guī)劃數(shù)據(jù)高效存儲與索引的重要支撐技術(shù)。雖然現(xiàn)有Hadoop體系存在負(fù)載均衡、中斷續(xù)寫、系統(tǒng)權(quán)限等方面的不足需要改進(jìn)，但該存儲體系具有快速讀寫、海量存儲、高擴(kuò)展性、跨平臺兼容等優(yōu)越性，適合多種業(yè)務(wù)和數(shù)據(jù)類型的海量電網(wǎng)規(guī)劃數(shù)據(jù)的存儲，而且HDFS分布式文件存儲體系可以采用普通PC作為數(shù)據(jù)節(jié)點，具有較高的經(jīng)濟(jì)性。

3 跨平臺電網(wǎng)規(guī)劃數(shù)據(jù)融合與存儲體系架構(gòu)

針對上述研究與分析，本文提出跨平臺電網(wǎng)規(guī)劃數(shù)據(jù)融合與存儲體系架構(gòu)，該體系架構(gòu)針對電網(wǎng)規(guī)劃體系包含的規(guī)劃、評審、技經(jīng)平臺，涉及數(shù)據(jù)模型與接口、數(shù)據(jù)挖掘與融合處理、分布式數(shù)據(jù)存儲以及高效聯(lián)合索引機(jī)制、數(shù)據(jù)安全管理與服務(wù)等關(guān)鍵技術(shù)，如圖2所示。

圖2 跨平臺電網(wǎng)規(guī)劃數(shù)據(jù)融合與存儲體系架構(gòu)示意圖Fig.2 Cross-platform data fusion and storage architecture of power grid planning

在該體系架構(gòu)中，首先針對來自不同業(yè)務(wù)系統(tǒng)平臺的異構(gòu)數(shù)據(jù)進(jìn)行統(tǒng)一的公共數(shù)據(jù)信息建模，在電力系統(tǒng)原有的CIM模型基礎(chǔ)上，擴(kuò)展各個系統(tǒng)所包含的特征類，并根據(jù)業(yè)務(wù)需求定期更新業(yè)務(wù)數(shù)據(jù)信息模型。經(jīng)由統(tǒng)一的數(shù)據(jù)模型進(jìn)行模型化后的數(shù)據(jù)融合、存儲與索引流程。

數(shù)據(jù)更新上傳至臨時存儲庫后，根據(jù)不同數(shù)據(jù)對應(yīng)的類標(biāo)簽進(jìn)行特征提取，進(jìn)一步進(jìn)行融合聚類分析。將數(shù)據(jù)根據(jù)不同的特征進(jìn)行聚類處理后存入分布式數(shù)據(jù)庫即相應(yīng)的存儲陣列。在各平臺業(yè)務(wù)應(yīng)用需要相關(guān)數(shù)據(jù)時，首先發(fā)送數(shù)據(jù)索引請求至數(shù)據(jù)庫，根據(jù)索引類型所對應(yīng)的數(shù)據(jù)標(biāo)簽，采用高效的聯(lián)合索引機(jī)制快速搜尋需要的數(shù)據(jù)至臨時數(shù)據(jù)庫，在確認(rèn)數(shù)據(jù)信息的準(zhǔn)確性后通過安全接口由各業(yè)務(wù)系統(tǒng)平臺直接調(diào)用。臨時數(shù)據(jù)庫則根據(jù)業(yè)務(wù)需求的優(yōu)先級來分配數(shù)據(jù)任務(wù)，并實時更新任務(wù)計劃，保證數(shù)據(jù)實時、準(zhǔn)確的處理和應(yīng)用。

為保證數(shù)據(jù)的安全與可靠，整個數(shù)據(jù)的融合、存儲與索引流程需要數(shù)據(jù)安全管理與服務(wù)系統(tǒng)全程的管理和監(jiān)控，數(shù)據(jù)的安全管理不僅能防止隱私和機(jī)密數(shù)據(jù)的泄露，還能反饋整個系統(tǒng)在數(shù)據(jù)處理和存儲過程中存在的問題，對于操作人員對系統(tǒng)進(jìn)行定期維護(hù)和進(jìn)一步改進(jìn)至關(guān)重要。

4 結(jié) 論

本文在分析現(xiàn)有業(yè)務(wù)系統(tǒng)數(shù)據(jù)格式及存儲現(xiàn)狀的基礎(chǔ)上，深入研究異構(gòu)數(shù)據(jù)融合與存儲的關(guān)鍵技術(shù)，并提出一種跨平臺電網(wǎng)規(guī)劃數(shù)據(jù)融合與存儲模式。通過建立統(tǒng)一業(yè)務(wù)數(shù)據(jù)信息模型，完成異構(gòu)數(shù)據(jù)的融合處理；構(gòu)建基于Hadoop的分布式文件存儲系統(tǒng)，高效快速地實現(xiàn)海量異構(gòu)數(shù)據(jù)的存儲與索引。為電網(wǎng)規(guī)劃系統(tǒng)乃至電力行業(yè)的海量異構(gòu)數(shù)據(jù)與信息共享提供理論指導(dǎo)與體系架構(gòu)支撐。

[1]黃平，李暉，馮建雷，等.電網(wǎng)規(guī)劃研究平臺建設(shè)經(jīng)驗和未來發(fā)展方向[J].電力建設(shè)，2012,33(8)：31-34.Huang Ping , Li Hui , Feng Jianlei , et al.Future development direction and construction experience of power grid planning research platform[J].Electric Power Construction,2012,33(8):31-34.

[2] 黃少濱，楊欣欣，申林山，等.高階異構(gòu)數(shù)據(jù)模糊聯(lián)合聚類算法[J].通信學(xué)報,2014,35 (6)：15-24.Huang Shaobin, Yang Xinxin, Shen Linshan, et al.Fuzzy co-clustering algorithm for high-order heterogeneous data [J].Journal of Communications,2014,35 (6)：15-24.

[3] 梁艷，劉雙廣，勞定雄.基于solr的異構(gòu)數(shù)據(jù)融合檢索技術(shù)[J].無線互聯(lián)科技，2013(5)：61-64.Liang Yan, Liu Shuangguang, Lao Dingxiong.The retrieval technology of heterogeneous data integration based on solr [J].Academic Journal Electronic，2013(5)：61-64.

[4] 王英杰.基于HADOOP的能源數(shù)據(jù)存儲體系中多級索引表DHT算法的研究[D].成都： 電子科技大學(xué)，2012.

[5] IEC.Draft IEC 61970: Energy Management System Application Program Interface(EMS-API)-Part 301: Common Information Model(CIM) Base[S].

[6] 劉崇茹，孫宏斌，張伯明，等.面向電力管理系統(tǒng)的公共信息模型研究[J].電力系統(tǒng)自動化，2003，27(14): 45-48, 74.Liu Chongru, Sun Hongbin, Zhang Boming, et al.An investigation on a common information model for energy management system[J].Automation of Electric Power Systems，2003，27(14): 45-48, 74.

[7] 陳勇.基于 Hadoop 平臺的通信數(shù)據(jù)分布式查詢算法的設(shè)計與實現(xiàn)[D].北京：北京交通大學(xué),2009.Chen Yong.Design and implementation of distributed query algorithm processing communication data based on Hadoop[D].Beijing: Beijing Jiaotong University, 2009.

[8] WU J Y, PING L D.Cloud Storage as the Infrastructure of Cloud Computing[C]//2010 International Conference on Intelligent Computing and Cognitive Informatics, 2010.

[9] 白紅偉.基于云計算的電力設(shè)備狀態(tài)監(jiān)測數(shù)據(jù)的存儲與查詢[D].北京：華北電力大學(xué)，2011.Bai Hongwei.The storage and inquiry of the condition monitoring data of the electrical equipment based on cloud computing[D].Beijing: North China Electric Power University, 2011.

[10] 謝善益，梁成輝，高新華，等.CIM/CIS互操作細(xì)則在多級電網(wǎng)調(diào)度中的應(yīng)用[J].電力系統(tǒng)自動化，2009，33(l): 103-107.Xie Shanyi, Liang Chenghui, Gao Xinhua, et al.Application of CIM/CIS interoperation details in multi-level power grid dispatching[J].Automation of Electric Power Systems,2009,33(1):103-107.

[11] 蘇炳洪.面向智能電網(wǎng)的通信體系架構(gòu)與標(biāo)準(zhǔn)應(yīng)用研究[D].杭州：浙江大學(xué)，2010.Su Binghong.Studies and applications of communication system architecture with standard oriented to smart grid[D].Hangzhou: Zhejiang University, 2010.

[12] 潘毅，周京陽，李強，等.基于公共信息模型的電力系統(tǒng)模型的拆分與合并[J].電力系統(tǒng)自動化，2003，27(15): 45-48.Pan Yi, Zhou Jingyang, Li Qiang, et al.The separation/combination of power system model based on CIM[J].Automation of Electric Power Systems，2003，27(15): 45-48.

(編輯：劉文瑩)

Cross-Platform Data Fusion and Storage Pattern of Power Grid Planning

ZHAO Chunhui1, WU Zhili1, JIANG Xin1, CUI Can2, SUN Yi2

(1.State Power Economic Research Institute, Beijing 102209, China;2.School of Electrical and Electronic Engineering, North China Electric Power University, Beijing 102206, China)

With the establishment of each business system platform of power grid planning and the rapid increase of heterogeneous business data, the barriers are badly needed to be broken between business system platforms to establish a perfect business information sharing and interaction system.Based on the analysis of the existing business system data format and the status quo of storage situation, this paper researches the key technology of heterogeneous data integration and storage, and proposes a cross-platform power grid planning data fusion and storage pattern.Heterogeneous data have been fused by establishing a unified business data information model.The distributed file storage system has been established based on Hadoop to implement fast and efficient storage and index of massive heterogeneous data.Thus, the research results can provide theoretical guidance and architecture support for massive heterogeneous data and information sharing in power grid planning system and electric power industry.

cross-platform business; data fusion; Hadoop; heterogeneous data storage

TM 715

A

1000-7229(2015)03-0119-04

10.3969/j.issn.1000-7229.2015.03.021

2014-11-06

2014-12-26

趙春暉(1973)，女，碩士，高級工程師，主要從事電力系統(tǒng)軟件設(shè)計開發(fā)、信息化管理工作；

吳志力(1969)，男，高級工程師，從事輸變電工程規(guī)劃設(shè)計咨詢工作；

姜欣(1975)，男，工學(xué)碩士，從事電網(wǎng)規(guī)劃設(shè)計和電力大數(shù)據(jù)研究工作；

崔燦(1991)，男，博士研究生，主要從事電力大數(shù)據(jù)關(guān)鍵技術(shù)及無線傳感器網(wǎng)絡(luò)等方面的研究工作；

孫毅(1972)，男，教授，從事智能電網(wǎng)、電力系統(tǒng)通信以及物聯(lián)網(wǎng)技術(shù)等方面的研究工作。