陸建偉，周升，張珂珩，王飛

（1.國網(wǎng)浙江省電力公司電力科學(xué)研究院，杭州310014；2.江蘇瑞中數(shù)據(jù)股份有限公司，南京210009）

海量數(shù)據(jù)快速可視化技術(shù)在節(jié)能減排監(jiān)管系統(tǒng)中的應(yīng)用

陸建偉1，周升1，張珂珩2，王飛2

（1.國網(wǎng)浙江省電力公司電力科學(xué)研究院，杭州310014；2.江蘇瑞中數(shù)據(jù)股份有限公司，南京210009）

隨著電力行業(yè)節(jié)能減排工作的推進，節(jié)能減排監(jiān)管數(shù)據(jù)爆炸式增長。為保證節(jié)能減排監(jiān)管系統(tǒng)的正常運行，需要對海量數(shù)據(jù)進行可視化監(jiān)控，以定位問題的根源。基于海量數(shù)據(jù)的快速可視化技術(shù)，能實現(xiàn)對海量數(shù)據(jù)的綜合分析，實現(xiàn)節(jié)能減排、能源合理利用的創(chuàng)新。通過總結(jié)電力行業(yè)節(jié)能減排監(jiān)管系統(tǒng)中的海量數(shù)據(jù)的特點，介紹海量數(shù)據(jù)的快速可視化技術(shù)，重點討論了如何利用實時數(shù)據(jù)庫的通知服務(wù)和本地緩存，來實現(xiàn)海量數(shù)據(jù)快速可視化技術(shù)在節(jié)能減排監(jiān)管系統(tǒng)中的應(yīng)用。

海量數(shù)據(jù)；快速可視化；節(jié)能減排

隨著浙江省電力行業(yè)節(jié)能減排工作的逐步推進，尤其是發(fā)電廠脫硫系統(tǒng)、脫硝系統(tǒng)的建設(shè)和推廣，產(chǎn)生了大量實時數(shù)據(jù)，繼而沉淀形成了海量歷史數(shù)據(jù)[1]，這些數(shù)據(jù)是節(jié)能減排優(yōu)化和監(jiān)管的重要基礎(chǔ)。面對如此龐大的數(shù)據(jù)量，傳統(tǒng)的門戶系統(tǒng)由于直接訪問數(shù)據(jù)庫將導(dǎo)致訪問速率過慢，已越來越無法滿足對這些數(shù)值結(jié)果進行可視化分析的需求。為保證節(jié)能減排監(jiān)管系統(tǒng)的正常運行[2]，需要對海量數(shù)據(jù)進行可視化監(jiān)控，以定位問題的根源。浙江省節(jié)能減排監(jiān)管系統(tǒng)采用海量數(shù)據(jù)快速可視化技術(shù)，通過對海量數(shù)據(jù)的萃取、統(tǒng)計分析、圖形化等手段，將節(jié)能減排概況清晰地展示在用戶面前。

1 節(jié)能減排工作中的數(shù)據(jù)特點

電力行業(yè)節(jié)能減排中的海量數(shù)據(jù)與其他行業(yè)產(chǎn)生的數(shù)據(jù)相比有以下特點：

（1）數(shù)據(jù)量巨大。每臺運行中的機組都將產(chǎn)生大量數(shù)據(jù)，將各發(fā)電企業(yè)所有機組的運行相關(guān)數(shù)據(jù)都采集起來，數(shù)據(jù)量極為可觀。

（2）數(shù)據(jù)類型多。節(jié)能減排監(jiān)管系統(tǒng)的數(shù)據(jù)包括節(jié)能和環(huán)化兩部分。節(jié)能數(shù)據(jù)包括基礎(chǔ)數(shù)據(jù)、爐側(cè)的經(jīng)濟性計算數(shù)據(jù)、機側(cè)的經(jīng)濟性計算數(shù)據(jù)、電氣的經(jīng)濟性計算數(shù)據(jù)等。環(huán)化數(shù)據(jù)包括基礎(chǔ)數(shù)據(jù)、脫硫數(shù)據(jù)、脫硝數(shù)據(jù)等。每類數(shù)據(jù)又包含很多指標(biāo)，例如基礎(chǔ)數(shù)據(jù)包括機組負荷、總風(fēng)量、爐膛負壓、燃煤發(fā)電量、燃氣發(fā)電量、供熱量、機組MFT信號、機組RB信號、電除塵投運信號、油槍投運信號、引風(fēng)機開度或頻率等。

（3）數(shù)據(jù)產(chǎn)生快。通常發(fā)電廠的機組都處在連續(xù)運行狀態(tài)，產(chǎn)生的實時數(shù)據(jù)也將不斷增長，增加了可視化技術(shù)應(yīng)用的難度，即如何保證在數(shù)據(jù)快速增長的情況下運用可視化技術(shù)，將數(shù)據(jù)的變化準(zhǔn)確實時地展示出來。

（4）計算分析復(fù)雜。鍋爐熱效率、汽機熱效率、廠用電率等參數(shù)都需要通過復(fù)雜的公式計算。以鍋爐熱效率為例，需要采集主蒸汽流量、主蒸汽溫度、主蒸汽壓力、再熱蒸汽流量、給水溫度、給水壓力、給煤量等多項數(shù)據(jù)來進行計算。

2 海量數(shù)據(jù)的快速可視化技術(shù)

數(shù)據(jù)可視化技術(shù)是處理計算或?qū)崪y數(shù)據(jù)的方法之一，它運用計算機圖形學(xué)和圖像處理技術(shù)，將數(shù)據(jù)轉(zhuǎn)換為圖形或者圖像后在屏幕上顯示出來，并進行交互處理，為研究、使用人員提供直觀的方式來理解大量數(shù)據(jù)所蘊含的豐富內(nèi)容，發(fā)現(xiàn)通常通過數(shù)值信息發(fā)現(xiàn)不了的現(xiàn)象[3]?，F(xiàn)代可視化技術(shù)的概念更為寬泛，是指以計算機圖形技術(shù)為基礎(chǔ)，通過計算機生成對人體視覺刺激的圖像，以便于人們接受、理解原始數(shù)據(jù)和信息的技術(shù)方法[4]。它作為一門交叉學(xué)科涵蓋了許多研究領(lǐng)域，包括計算機圖形學(xué)、圖像處理、計算機輔助設(shè)計、計算機視覺及人機交互技術(shù)等。

數(shù)據(jù)可視化技術(shù)拓展了傳統(tǒng)的圖表功能，使用戶對數(shù)據(jù)的剖析更為清晰[5]。數(shù)據(jù)經(jīng)過可視化處理和專業(yè)的加工后，最終為用戶呈現(xiàn)出動態(tài)的、圖形化的、令人印象深刻的可視化結(jié)果。目前數(shù)據(jù)可視化技術(shù)的應(yīng)用主要包括：呈現(xiàn)多維混搭信息的可視化應(yīng)用、揭示數(shù)據(jù)關(guān)聯(lián)趨勢的可視化新服務(wù)、有助發(fā)散形象思維的可視化新工具以及提供數(shù)據(jù)可視化交流社區(qū)的可視化新平臺，這些數(shù)據(jù)可視化的手段以及可視化過程都有各自的特征。隨著用戶對數(shù)據(jù)分析需求的增長，對數(shù)據(jù)可視化的要求也變得越來越強烈，通過可視化映射可以有效地呈現(xiàn)想要獲得的數(shù)據(jù)，更便捷地理解其中的含義，進而做出決策。

3 海量數(shù)據(jù)快速可視化應(yīng)用實例

在浙江省電力行業(yè)節(jié)能減排監(jiān)管系統(tǒng)中，將電廠采集的實時數(shù)據(jù)，經(jīng)過計算統(tǒng)計服務(wù)的加工，最終通過報表和圖表等一系列動態(tài)、圖形化的形式展現(xiàn)給用戶。例如報表，在用戶的實際業(yè)務(wù)應(yīng)用中，通常需要按年、季、月、周、日等時間段查找相關(guān)數(shù)據(jù)，并進行分析對比。浙江省節(jié)能減排監(jiān)管系統(tǒng)提供的歷史報表工具，能根據(jù)用戶需求開發(fā)業(yè)務(wù)報表，以查詢到任意對象、任意時刻的歷史數(shù)據(jù)，以及任意時刻的歷史斷面，并可導(dǎo)出數(shù)據(jù)，實現(xiàn)系統(tǒng)運行數(shù)據(jù)的“全息”保存和查詢，以滿足節(jié)能減排的業(yè)務(wù)需求。

現(xiàn)已開發(fā)完成的節(jié)能監(jiān)管報表包括能耗報表、平均能耗指標(biāo)排序報表、節(jié)能查詢報表、基礎(chǔ)信息報表；減排報表包括全省實時總覽報表、設(shè)施投運報表、電廠排放報表、全省排放報表、電廠上報報表、環(huán)化信息錄入報表、基礎(chǔ)信息報表；線損統(tǒng)計報表包括線損數(shù)據(jù)錄入報表、月統(tǒng)計報表等。

同時，監(jiān)管系統(tǒng)提供實時監(jiān)控畫面及組態(tài)工具，通過監(jiān)控畫面和組態(tài)畫面實時刷新測點數(shù)據(jù)，直觀地向用戶展示電廠能耗和排放情況。

浙江節(jié)能減排監(jiān)管系統(tǒng)應(yīng)用B/S架構(gòu)、服務(wù)訂閱、本地緩存機制等技術(shù)達到快速可視化，加快門戶訪問速率，性能得到指數(shù)級提升。

3.1 B/S架構(gòu)

浙江省電力行業(yè)節(jié)能減排監(jiān)管系統(tǒng)是基于B/S結(jié)構(gòu)的Web門戶系統(tǒng)，可為用戶提供實時、高效的服務(wù)通道[6]。浙江省節(jié)能減排監(jiān)管系統(tǒng)門戶可為用戶提供訪問實時數(shù)據(jù)中心各種信息資源的入口，具有強大的Web瀏覽功能，對各類應(yīng)用服務(wù)、參數(shù)、圖形、報表、實時數(shù)據(jù)和歷史數(shù)據(jù)等提供靈活、豐富、多樣的信息展示，使任何被整合到系統(tǒng)中的信息都能以一定的方式進行瀏覽和查詢，并提供歷史追溯與反演、斷面查詢等高級應(yīng)用功能。

系統(tǒng)的維護和升級方式簡單，可以在任何地方進行操作而不用安裝任何專門的軟件?？蛻舳肆憔S護，系統(tǒng)的擴展性強，可隨時擴展系統(tǒng)范圍、增添更多功能，為后臺的監(jiān)管及系統(tǒng)的拓展提供便利。

3.2 服務(wù)訂閱

實時數(shù)據(jù)庫的通知服務(wù)是指向訂閱服務(wù)訂閱所需測點，如果訂閱測點的數(shù)據(jù)發(fā)生變化，通知服務(wù)自動將數(shù)據(jù)推送到訂閱服務(wù)端。

浙江省電力行業(yè)節(jié)能減排監(jiān)管系統(tǒng)可方便、快捷地提取節(jié)能減排實時數(shù)據(jù)，生成各種報表，并在門戶網(wǎng)站上展示?？梢韵蚝Ｑ笖?shù)據(jù)庫訂閱測點，并維護這些測點的斷面。查詢某一報表時，通過事件觸發(fā)使海迅數(shù)據(jù)庫主動推送數(shù)據(jù)。

3.3 本地緩存機制

本地緩存是指將客戶機本地的物理內(nèi)存劃分出一部分空間，用來存儲客戶機回寫到服務(wù)器的數(shù)據(jù)，本地緩存又稱為本地回寫[7]。該技術(shù)的應(yīng)用使得客戶機回寫的數(shù)據(jù)不必先寫入服務(wù)器硬盤，而是將回寫數(shù)據(jù)先寫入本地回寫緩存，當(dāng)緩存空間達到一定的閾值時，再將數(shù)據(jù)回寫到服務(wù)器。有了本地回寫緩存功能之后，大大降低了服務(wù)器讀寫壓力和網(wǎng)絡(luò)負載。

通常的門戶系統(tǒng)是直接訪問數(shù)據(jù)庫，獲得數(shù)據(jù)后以頁面報表等形式展示給用戶。當(dāng)數(shù)據(jù)量非常大時，比如達千萬點的海迅數(shù)據(jù)庫，如果門戶報表每次都要遍歷數(shù)據(jù)庫來查找需要的測點，將導(dǎo)致讀取速率下降。為此，節(jié)能減排監(jiān)管系統(tǒng)充分利用了實時數(shù)據(jù)庫的通知服務(wù)和內(nèi)部緩存機制，將測點數(shù)據(jù)緩存在服務(wù)器端，以減少訪問數(shù)據(jù)庫的次數(shù)和時間，提高數(shù)據(jù)訪問性能。測點維護模塊根據(jù)用戶訪問記錄，保留常用訪問測點。當(dāng)測點較多時，將刪除測點隊列中相對不常用的測點。測點訂閱模塊根據(jù)測點維護的測點隊列向通知服務(wù)模塊訂閱通知。數(shù)據(jù)監(jiān)聽接收實時數(shù)據(jù)庫推送過來的更新值。緩存管理根據(jù)測點隊列維護內(nèi)部緩存。

當(dāng)數(shù)據(jù)管理模塊接收到業(yè)務(wù)請求時，先查找內(nèi)存中有無緩存，如果沒有就直接查詢數(shù)據(jù)庫。同時測點維護模塊記錄請求測點，判斷是否向通知服務(wù)訂閱。通知服務(wù)根據(jù)訂閱的測點向數(shù)據(jù)監(jiān)聽模塊推送測點的值。如果在緩存中存在測點值，則直接從緩存中讀取。在減排系統(tǒng)正常運行情況下，很多指標(biāo)變化幅度較小甚至不變化，因此這種通知服務(wù)的策略將極大地減少訪問數(shù)據(jù)庫的次數(shù)，節(jié)省訪問數(shù)據(jù)庫的時間。數(shù)據(jù)訪問的工作流程如圖1所示。

圖1 工作流程

同時，在B/S架構(gòu)下，會有不同的客戶同時訪問服務(wù)器，但由于客戶群體相對固定，很可能訪問的是相同的數(shù)據(jù)，即重復(fù)的測點，因此本地緩存機制可以大大加快每個用戶的訪問速率，升級用戶體驗。

4 結(jié)語

將海量數(shù)據(jù)快速可視化技術(shù)應(yīng)用到節(jié)能減排監(jiān)管系統(tǒng)中，使監(jiān)管部門可以深入觀察各發(fā)電企業(yè)節(jié)能減排情況，對實時監(jiān)控和及時調(diào)整有極大的幫助[8]。應(yīng)用基于海量數(shù)據(jù)的快速可視化技術(shù)完成海量數(shù)據(jù)的綜合分析，實現(xiàn)節(jié)能減排、能源合理利用的創(chuàng)新，能夠充分體現(xiàn)“資源共享、低投入、低消耗、低排放和高效率”，已在實際應(yīng)用中展示出良好的實用效果。

[1]李榮融.中央企業(yè)節(jié)能減排監(jiān)督管理暫行辦法[EB/OL]. http∶//www.gov.cn/gongbao/content/2010/content-1694232. htm.

[2]胥傳普，楊立兵，劉福斌.關(guān)于節(jié)能降耗與電力市場聯(lián)合實施方案的探討[J].電力系統(tǒng)自動化，2007，31（23）∶99-103.

[3]劉勘，周曉崢，周洞汝.數(shù)據(jù)可視化的研究與發(fā)展[J].計算機工程，2002，28（08）∶1-2.

[4]劉大海.海量數(shù)據(jù)可視化方法的研究[D].天津：天津大學(xué)，2009.

[5]王媛媛，丁毅，孫媛媛，等.數(shù)據(jù)可視化技術(shù)的實現(xiàn)方法研究[J].現(xiàn)代電子技術(shù)，2007（04）∶71-74.

[6]張恩平.基于B/S架構(gòu)的代理人綜合管理系統(tǒng)的開發(fā)與研究[D].上海：華東師范大學(xué)，2008.

[7]單中元.面向集群系統(tǒng)的分布式緩存機制的研究[D].沈陽：東北大學(xué)，2010.

[8]韓麗娜.數(shù)據(jù)可視化技術(shù)及其應(yīng)用展望[J].煤礦現(xiàn)代化，2005（06）∶39-40.

（本文編輯：龔皓）

Application of Big Data Rapid Visualization Technology in Energy-saving and Emission Reduction Supervision System of Power Industry

LU Jianwei1，ZHOU Sheng1，ZHANG Keheng2，WANG Fei2
（1.State Grid Zhejiang Electric Power Research Institute，Hangzhou 310014，China；2.China Real-time Database Limited Company，Nanjing 210009，China）

With the advancement of energy saving and emission reduction in power industry,regulatory data of energy saving and emission reduction sees explosive growth.In order to ensure normal operation of energy saving and emission reduction supervision system，big data should be supervised visually to locate source of problems.The big data-based rapid visualization technology can realize comprehensive analysis on big data and innovations of energy conservation and emissions reduction as well as rational utilization of energy.By summarizing characteristics of big data in energy saving and emission reduction supervision system of power industry，this paper introduces big data rapid visualization technology and mainly discusses how to use the notification service and local caching of real-time database to realize the application of big data rapid visualization technology in energy saving and emission reduction supervision system.

big data；rapid visualization；energy-saving and emission reduction

TP311.13

：B

：1007-1881（2014）06-0029-03

2013-10-11

陸建偉（1982-），男，浙江富陽人，工程師，從事電力環(huán)保工作。