阮伶杰
摘 要:近些年來(lái),隨著社會(huì)發(fā)展對(duì)電力需求的不斷增加,我國(guó)電網(wǎng)工程的建設(shè)規(guī)模也在不斷擴(kuò)大,電力系統(tǒng)數(shù)據(jù)量也在持續(xù)增長(zhǎng)。在這一背景下,傳統(tǒng)的智能配電網(wǎng)運(yùn)行數(shù)據(jù)監(jiān)控平臺(tái)已經(jīng)無(wú)法滿足當(dāng)前電力用戶的現(xiàn)實(shí)需求,且無(wú)法對(duì)數(shù)據(jù)進(jìn)行更加高效的整合?;诖?,本文章主要針對(duì)大數(shù)據(jù)背景下智能配電網(wǎng)運(yùn)行監(jiān)控平臺(tái)關(guān)鍵技術(shù)的應(yīng)用展開(kāi)了深入的分析與探究。
關(guān)鍵詞:大數(shù)據(jù);智能配電網(wǎng);監(jiān)控平臺(tái);關(guān)鍵技術(shù);應(yīng)用分析
在大數(shù)據(jù)時(shí)代背景下,多數(shù)電力企業(yè)都在使用網(wǎng)絡(luò)系統(tǒng)來(lái)存儲(chǔ)自身的運(yùn)行管理信息,因此在日常工作中就需要對(duì)大量數(shù)據(jù)實(shí)施綜合的處理分析。在這種情況下,電力企業(yè)就需要采用各種先進(jìn)的技術(shù),結(jié)合自身情況來(lái)構(gòu)建一個(gè)完善的監(jiān)控管理平臺(tái),充分發(fā)揮監(jiān)控管理平臺(tái)在智能電網(wǎng)運(yùn)行過(guò)程中的中心樞紐作用,以便工作人員對(duì)各項(xiàng)數(shù)據(jù)實(shí)施存儲(chǔ)、處理與分析工作進(jìn)而確保智能配電網(wǎng)的高效、穩(wěn)定與安全運(yùn)行。
1 關(guān)系數(shù)據(jù)與分布式存儲(chǔ)同步技術(shù)
從本質(zhì)上來(lái)講,關(guān)系數(shù)據(jù)庫(kù)與分布式存儲(chǔ)同步技術(shù),二者之間的數(shù)據(jù)是可以相互調(diào)取的,可以對(duì)數(shù)據(jù)進(jìn)行更加準(zhǔn)確與高效的分析處理。在具體實(shí)踐中,工作人員還可以對(duì)關(guān)系數(shù)據(jù)庫(kù)中的數(shù)據(jù)實(shí)施分布存儲(chǔ),并將數(shù)據(jù)調(diào)取到關(guān)系數(shù)據(jù)庫(kù)當(dāng)中。
在一般情況下,大數(shù)據(jù)主要是憑借分布式存儲(chǔ)技術(shù)來(lái)完成數(shù)據(jù)存儲(chǔ)任務(wù)的。其中,多數(shù)數(shù)據(jù)均來(lái)源于企業(yè)的數(shù)據(jù)倉(cāng)庫(kù)與關(guān)系數(shù)據(jù)庫(kù)。在數(shù)據(jù)傳輸?shù)倪^(guò)程中,工作人員要注意數(shù)據(jù)在分布式存儲(chǔ)與關(guān)系型數(shù)據(jù)庫(kù)之間的無(wú)縫傳輸,并且要高度重視數(shù)據(jù)傳輸?shù)乃俣扰c質(zhì)量,盡可能不影響到正常的工作。與此同時(shí),由于傳統(tǒng)的數(shù)據(jù)傳輸工具只可以做到同存儲(chǔ)數(shù)據(jù)機(jī)制間的同步,無(wú)法實(shí)現(xiàn)兩種不同存儲(chǔ)機(jī)制間數(shù)據(jù)的同步,例如關(guān)系數(shù)據(jù)庫(kù)與分布式存儲(chǔ),因此就十分有必要發(fā)揮與應(yīng)用關(guān)系數(shù)據(jù)庫(kù)與分布式存儲(chǔ)同步技術(shù)的作用與優(yōu)勢(shì)。
2 文件采集與處理技術(shù)
在當(dāng)前背景下,數(shù)據(jù)平臺(tái)中的數(shù)據(jù)來(lái)源途徑較為多樣化,一方面,數(shù)據(jù)來(lái)源于數(shù)據(jù)倉(cāng)庫(kù)、數(shù)據(jù)中心;另一方面,數(shù)據(jù)來(lái)源于舊平臺(tái)中沒(méi)有經(jīng)過(guò)處理的各類文件當(dāng)中,這些數(shù)據(jù)、文件的結(jié)構(gòu)均較為混亂,且有價(jià)值的信息較少。針對(duì)于這種情況,就要利用大數(shù)據(jù)監(jiān)控平臺(tái)中分布式存儲(chǔ)這種方法來(lái)進(jìn)行存儲(chǔ),將數(shù)據(jù)肢解成辦結(jié)構(gòu)化與結(jié)構(gòu)化[1],以此來(lái)將數(shù)據(jù)更加完整的存儲(chǔ)到大數(shù)據(jù)平臺(tái)當(dāng)中,以此來(lái)大大提升數(shù)據(jù)存儲(chǔ)的經(jīng)濟(jì)性。
在智能配電網(wǎng)運(yùn)行監(jiān)控平臺(tái)當(dāng)中,數(shù)據(jù)處理技術(shù)主要是指對(duì)存儲(chǔ)系統(tǒng)中相關(guān)數(shù)據(jù)的處理,具體涵蓋了數(shù)據(jù)分類與分表等。其中,數(shù)據(jù)分庫(kù)處理就是指根據(jù)系統(tǒng)中已經(jīng)設(shè)定好的處理規(guī)定,對(duì)有價(jià)值的數(shù)據(jù)完整的傳輸與存儲(chǔ)到各個(gè)不同的數(shù)據(jù)庫(kù)當(dāng)中。這不僅可以實(shí)現(xiàn)數(shù)據(jù)的分門(mén)別類存儲(chǔ),同時(shí)也能夠充分利用各類數(shù)據(jù)。數(shù)據(jù)分區(qū)處理作為一種有效的數(shù)據(jù)處理技術(shù),具體來(lái)講就是把通表數(shù)據(jù)有目的性的賦予到相關(guān)文件當(dāng)中,以此來(lái)減輕大型表的壓力,明顯改善數(shù)據(jù)訪問(wèn)功能,對(duì)系統(tǒng)運(yùn)行實(shí)施優(yōu)化。數(shù)據(jù)分表處理技術(shù)就是依據(jù)系統(tǒng)已設(shè)定好的規(guī)則來(lái)有序構(gòu)建各類數(shù)據(jù)表,有效緩解單表壓力。除此之外,電力企業(yè)也可以建造縱列式與并行式的數(shù)據(jù)庫(kù),以此來(lái)大大提升數(shù)據(jù)的加載速率與查詢效率。
3 數(shù)據(jù)分析關(guān)鍵技術(shù)
在對(duì)大數(shù)據(jù)進(jìn)行分析時(shí),首先要將信號(hào)轉(zhuǎn)化成數(shù)據(jù),再對(duì)數(shù)據(jù)展開(kāi)相應(yīng)的處理與分析,形成有效的信息。其次,工作人員要對(duì)上述信息進(jìn)行總結(jié),并從中獲取相應(yīng)的知識(shí),以便為電力企業(yè)的日常管理工作與運(yùn)行決策提供有價(jià)值的借鑒與參考。在大數(shù)據(jù)背景下,數(shù)據(jù)分析關(guān)鍵技術(shù)多運(yùn)用于大型信息數(shù)據(jù)庫(kù)當(dāng)中,可以幫助工作人員從龐大的信息數(shù)據(jù)中挖掘出隱藏的規(guī)律與形態(tài),進(jìn)而對(duì)電力企業(yè)的日常運(yùn)行狀況進(jìn)行客觀的總結(jié),并協(xié)助管理人員制定出更加具有針對(duì)性的決策,促進(jìn)電力企業(yè)的健康發(fā)展。
4 分布式文件系統(tǒng)
分布式文件系統(tǒng)主要是指文件系統(tǒng)中的物理資源在服務(wù)器模式下,是可以不直接連接在本地節(jié)點(diǎn)上的,而是可以連接在更加先進(jìn)的互聯(lián)網(wǎng)網(wǎng)絡(luò)與節(jié)點(diǎn)上。在實(shí)際應(yīng)用中,分布式文件系統(tǒng)可以將相關(guān)文件數(shù)據(jù)存儲(chǔ)在分散存儲(chǔ)介質(zhì)上,這不僅可以在一定程度上降低存儲(chǔ)成本,為文件訪問(wèn)提供統(tǒng)一的訪問(wèn)接口,同時(shí)也能夠大大提升其容錯(cuò)性[2]。目前,隨著分布式文件系統(tǒng)的廣泛普及與應(yīng)用,不僅有效解決數(shù)量龐大數(shù)據(jù)的存儲(chǔ)難這一難題,同時(shí)也可以憑借其自身所具備的全分布式架構(gòu)、在線擴(kuò)容減容、數(shù)據(jù)塊粒度切分以及復(fù)制備份等多項(xiàng)關(guān)鍵技術(shù),穩(wěn)定支撐規(guī)模在PB級(jí)以上的數(shù)據(jù)在線存儲(chǔ),以此來(lái)進(jìn)一步增強(qiáng)大數(shù)據(jù)存儲(chǔ)的安全性、經(jīng)濟(jì)性,實(shí)現(xiàn)存儲(chǔ)的可任意擴(kuò)容性。
5 平臺(tái)架構(gòu)內(nèi)容
在業(yè)務(wù)系統(tǒng)大數(shù)據(jù)應(yīng)用的管理、開(kāi)發(fā)與處理等各個(gè)環(huán)節(jié)當(dāng)中,大數(shù)據(jù)監(jiān)控平臺(tái)可以為其提供基礎(chǔ)的框架,框架內(nèi)容主要涵蓋了數(shù)據(jù)整合、數(shù)據(jù)存儲(chǔ)、數(shù)據(jù)計(jì)算、數(shù)據(jù)分析、配置管理以及安全管理等若多個(gè)方面的,并且也能夠?yàn)闃I(yè)務(wù)應(yīng)用提供多種形式的服務(wù)支撐。
數(shù)據(jù)整合:工作人員可以采用調(diào)取數(shù)據(jù)、實(shí)時(shí)采集數(shù)據(jù),對(duì)數(shù)據(jù)庫(kù)進(jìn)行實(shí)時(shí)復(fù)制等一系列技術(shù)來(lái)從外部數(shù)據(jù)源中系統(tǒng)的采集與抽取結(jié)構(gòu)化、半結(jié)構(gòu)化以及非結(jié)構(gòu)化數(shù)據(jù),同時(shí)也可以對(duì)數(shù)據(jù)進(jìn)行實(shí)時(shí)與非實(shí)時(shí)的采集。
數(shù)據(jù)存儲(chǔ):主要是負(fù)責(zé)大數(shù)據(jù)的存儲(chǔ)工作。簡(jiǎn)單來(lái)講就是根據(jù)全數(shù)據(jù)類型與多樣化計(jì)算的要求,以快速查詢、讀取以及海量規(guī)模存儲(chǔ)為特征,將外部數(shù)據(jù)源中的數(shù)據(jù)完整的存儲(chǔ)起來(lái),以此來(lái)為數(shù)據(jù)處理層的高級(jí)應(yīng)用提供強(qiáng)大的數(shù)據(jù)支撐。
數(shù)據(jù)計(jì)算:不僅可以為各類大數(shù)據(jù)提供多種計(jì)算功能,例如流計(jì)算、查詢計(jì)算與內(nèi)存計(jì)算等,同時(shí)也能夠?qū)崿F(xiàn)分布式存儲(chǔ)數(shù)據(jù)與文件數(shù)據(jù)的計(jì)算與查詢。其中,流計(jì)算技術(shù)可以為工作人員提供實(shí)時(shí)分析處理的計(jì)算能力,進(jìn)而有效實(shí)現(xiàn)實(shí)時(shí)預(yù)警與決策等。
數(shù)據(jù)分析:通過(guò)對(duì)各類數(shù)據(jù)的分析、加工與處理,可以將其轉(zhuǎn)換為有效的信息,從中挖開(kāi)出新的業(yè)務(wù)價(jià)值,并為電力企業(yè)日后的業(yè)務(wù)指明方向,提供科學(xué)的決策依據(jù)。
平臺(tái)服務(wù):主要是指對(duì)底層數(shù)據(jù)分析工具與組件等工作實(shí)施封裝后,充分發(fā)揮其在業(yè)務(wù)系統(tǒng)大數(shù)據(jù)應(yīng)用期間的支撐作用,并提供相應(yīng)的數(shù)據(jù)存儲(chǔ)、數(shù)據(jù)計(jì)算、數(shù)據(jù)分析與數(shù)據(jù)處理服務(wù)。
安全管理:在大數(shù)據(jù)環(huán)境下,安全管理就是指在數(shù)據(jù)采集、存儲(chǔ)與應(yīng)用等多個(gè)環(huán)節(jié)中,需要進(jìn)行身份驗(yàn)證、授權(quán)以及輸入驗(yàn)證答案等一系列安全問(wèn)題。目前,由于數(shù)據(jù)包含著大量的信息,因此在對(duì)數(shù)據(jù)實(shí)施分析與處理時(shí),就極易可能會(huì)涉及到一些與企業(yè)機(jī)密相關(guān)的數(shù)據(jù),為此,電力企業(yè)要想避免發(fā)生數(shù)據(jù)泄露與失竊等情況的發(fā)生,就要合理設(shè)置訪問(wèn)權(quán)限等多種安全防護(hù)程度,以此來(lái)確保大數(shù)據(jù)存儲(chǔ)與處理的安全性[3]。
管理配置:主要是用來(lái)監(jiān)控大數(shù)據(jù)處理期間的各項(xiàng)性能指標(biāo),例如資源利用率、接口使用情況與整體運(yùn)行狀態(tài)等,并可以及時(shí)排除關(guān)鍵系統(tǒng)險(xiǎn)情,快速拓展應(yīng)用功能,對(duì)大數(shù)據(jù)中的存儲(chǔ)資料與計(jì)算資源進(jìn)行合理的配置與高效的管理。
結(jié)束語(yǔ):
總而言之,電力企業(yè)要想在大數(shù)據(jù)背景下實(shí)現(xiàn)更好更快的發(fā)展,就要高度重視電力系統(tǒng)中文件數(shù)據(jù)的處理工作,從根本上保障數(shù)據(jù)存儲(chǔ)與處理的高效性與準(zhǔn)確性。與此同時(shí),電力企業(yè)也要積極構(gòu)建系統(tǒng)的電力數(shù)據(jù)監(jiān)控平臺(tái),熟練掌握其中的關(guān)鍵技術(shù),以此來(lái)大大提升電力企業(yè)的數(shù)據(jù)存儲(chǔ)能力與分析能力,幫助企業(yè)更好的優(yōu)化系統(tǒng)結(jié)構(gòu),為企業(yè)管理決策提供更加有價(jià)值的參考與借鑒,進(jìn)而進(jìn)一步提升電力企業(yè)的經(jīng)濟(jì)效益。
參考文獻(xiàn):
[1]王興念,李宏偉,施振華,等.基于大數(shù)據(jù)的智能配電網(wǎng)運(yùn)行監(jiān)控平臺(tái)關(guān)鍵技術(shù)研究與應(yīng)用[J].電工技術(shù),2017,(2):9-12.
[2]雷漢樟.解析大數(shù)據(jù)的智能配電網(wǎng)運(yùn)行監(jiān)控平臺(tái)關(guān)鍵技術(shù)[J].通訊世界,2018,(8):116-117.
(國(guó)網(wǎng)重慶市電力公司璧山供電分公司,重慶 萬(wàn)州 404100)