崔 ?。ê鲜庀笮畔⒅行模祥L沙410000)
大數(shù)據(jù)在氣象服務(wù)中的應(yīng)用與分析
崔巍(湖南省氣象信息中心,湖南長沙410000)
現(xiàn)如今,科學技術(shù)發(fā)展迅速,信息化發(fā)展進程也在不斷加快,氣象行業(yè)在內(nèi)部累積的歷史氣象數(shù)據(jù)數(shù)量不斷增加。氣象大數(shù)據(jù)的應(yīng)用價值比較高,能夠提供各類氣象服務(wù),包括科研服務(wù)、氣象部門內(nèi)部業(yè)務(wù)服務(wù)以及氣象公共服務(wù)等等。然而,現(xiàn)如今,對于大數(shù)據(jù)管理、高可靠存儲、分析、處理以及檢索等技術(shù)的發(fā)展不斷提高。對此,本文首先對氣象大數(shù)據(jù)服務(wù)進行了介紹,然后對大數(shù)據(jù)在氣象服務(wù)中的應(yīng)用方式進行了分析,并且以“氣象+農(nóng)業(yè)”的應(yīng)用方式為研究對象,并對此進行了詳細闡述。
氣象;大數(shù)據(jù);應(yīng)用
隨著現(xiàn)代社會的發(fā)展和天氣氣象的愈漸復雜,氣象中心的工作量開始增大,越來越多的數(shù)據(jù)和信息處理成為發(fā)展現(xiàn)代化氣象業(yè)務(wù)所面臨的重要問題,一般的數(shù)據(jù)庫已經(jīng)無法有效的完成大型綜合性數(shù)據(jù)分析的需要,無法有力的為氣象決策服務(wù)提供數(shù)據(jù)支撐。隨著大數(shù)據(jù)應(yīng)用技術(shù)的不斷發(fā)展。如何更好的把握應(yīng)用氣象服務(wù)的特點,突破技術(shù)瓶頸,已經(jīng)成為氣象科研工作要探究的重要課題。
2.1氣象大數(shù)據(jù)特征分析
為了提供氣象大數(shù)據(jù)服務(wù),需要判斷氣象數(shù)據(jù)的大數(shù)據(jù)特征。大數(shù)據(jù)通常具有體量大(Volume)、數(shù)據(jù)種類繁多(Varity)、數(shù)據(jù)需求處理速度快(Velocity)、數(shù)據(jù)價值高(Value)的基本特征。
當前氣象行業(yè)累積海量的數(shù)據(jù),數(shù)據(jù)體量已經(jīng)達到了PB級,具有大數(shù)據(jù)的Volume特征;氣象數(shù)據(jù)種類繁多,包括各類結(jié)構(gòu)化和非結(jié)構(gòu)化的數(shù)據(jù),能夠滿足大數(shù)據(jù)的Varity特征。氣象數(shù)據(jù)的采集過程通常是逐天逐小時甚至到逐分鐘發(fā)生的,氣象行業(yè)數(shù)據(jù)增長速度飛快,因此,處理速度需求也與日俱增,滿足大數(shù)據(jù)的Velocity特征;而且氣象數(shù)據(jù)的處理、分析與深入挖掘,有助于氣象行業(yè)內(nèi)部的服務(wù),如預報、預警等,因此氣象數(shù)據(jù)滿足大數(shù)據(jù)的Value特征。
氣象數(shù)據(jù)滿足大數(shù)據(jù)的4V特征,因此如何高效地存儲、處理氣象大數(shù)據(jù)已成為急需解決的問題。云計算技術(shù)可以為解決上述問題提供技術(shù)支撐,有助于開發(fā)和實現(xiàn)高效的氣象大數(shù)據(jù)服務(wù),進而更好地提升氣象業(yè)務(wù)服務(wù)水平。
2.2氣象大數(shù)據(jù)服務(wù)框架
我國氣象行業(yè)中,氣象區(qū)域中心分布著大量的硬件設(shè)施,包括高性能計算機以及常規(guī)存儲服務(wù)器、網(wǎng)絡(luò)通信設(shè)施等。將這些基礎(chǔ)設(shè)施通過云計算技術(shù)進行整合,進而構(gòu)成氣象行業(yè)專有云,其部署示意見圖1。氣象行業(yè)大數(shù)據(jù)服務(wù)框架可以基于該氣象行業(yè)專有云進行部署。
3.1氣候分析中數(shù)據(jù)挖掘技術(shù)特點及應(yīng)用
圖1 氣象行業(yè)專有云部署示意圖
數(shù)據(jù)挖掘技術(shù)是氣候分析中的重要數(shù)據(jù)技術(shù),其應(yīng)用優(yōu)勢在于可以快速的在海量的信息庫中找到目標信息,它能夠處理不完全信息、噪聲信息、模糊數(shù)據(jù)信息、預警信息轉(zhuǎn)換為特殊標識,方便技術(shù)人員分析得出結(jié)論。在原有的數(shù)據(jù)信息庫中,挖掘技術(shù)對于信息的處理及時更為敏感,尤其是對于不斷變化的天氣信息,其半結(jié)構(gòu)化信息的處理技術(shù)利于對于復雜天氣的預測。從應(yīng)用層面來講,數(shù)據(jù)挖掘技術(shù)的氣候信息技術(shù)更為新穎、科學、準確。挖掘數(shù)據(jù)將數(shù)據(jù)濃縮成一個數(shù)據(jù)集合,利用處理軟件的功能,把具象數(shù)據(jù)抽離出來,形成具有說明功能的數(shù)據(jù)群。其次,每一個數(shù)據(jù)都有對應(yīng)的映射目標,這便于工作人員更能全面清晰的了解數(shù)據(jù)的個體信息,便于氣候變化的精準預測。總的來說,數(shù)據(jù)挖掘技術(shù)具有共享、研究的特點。因此,在這個過程中,功能強大的數(shù)據(jù)信息處理技術(shù)可以提供格式統(tǒng)一的數(shù)據(jù)信息資料,便于氣候工作人員分析出階段性的天氣變化趨勢。大數(shù)據(jù)的核心是預測,大數(shù)據(jù)之所以能夠預測未來是對于相關(guān)關(guān)系的精準把握,在這個過程中,數(shù)據(jù)部門要根據(jù)相關(guān)的狀況或現(xiàn)象總結(jié)出規(guī)律。傳統(tǒng)的統(tǒng)計方法對樣本數(shù)據(jù)的正態(tài)性假設(shè)、變量的獨立性、變量個數(shù)、建設(shè)檢驗都有著較高的要求,而大數(shù)據(jù)則是對傳統(tǒng)統(tǒng)計學方法的拓展和延伸。大數(shù)據(jù)分析側(cè)重于高維建模、復雜網(wǎng)絡(luò)建模、非參數(shù)模型等技術(shù)從種類繁多、數(shù)量龐大的數(shù)據(jù)中快速獲取相關(guān)價值信息。氣象部門每天的數(shù)據(jù)增長量有非常大的數(shù)據(jù)級,其中包括每天2000多個地面站、120個高空探測站、6顆軌道衛(wèi)星、444多個雷達站、300個雷達站、90多個酸雨監(jiān)測站等等,這些數(shù)據(jù)全天各個時段每分鐘都在掃描著中國的各種天氣數(shù)據(jù),這些數(shù)據(jù)的體量巨大,且增長速度大,數(shù)據(jù)類型多樣,因此氣候大數(shù)據(jù)在氣候預測以及氣象防災(zāi)減災(zāi)中有著極其重要的意義。
3.2氣候云端及應(yīng)用
氣候云端是建立在大數(shù)據(jù)之上的,其大數(shù)據(jù)云計算是氣候云端建立的必然條件。氣象云端除了傳統(tǒng)的程序、系統(tǒng)、模型控制氣候信息意外,還有云端申請的技術(shù)服務(wù)。所謂云端申請就是指可以同時間滿足多種氣候服務(wù)需求,并可迅速通過組織計算,測定氣候資源的服務(wù)特性,得出結(jié)論。此外,云計算還有這數(shù)據(jù)存放在終端數(shù)據(jù)中,其后續(xù)數(shù)據(jù)管理,氣候資源不會干擾其他云端計算模型。氣候云端主要應(yīng)用于災(zāi)害性天氣氣候信息的預警,在這個過程中,氣候云端可以在第一時間發(fā)出預警信號,并利用衛(wèi)星進行災(zāi)害定位,從而為有過部門提供相應(yīng)的建議和應(yīng)對方案。
氣象條件與農(nóng)業(yè)生產(chǎn)具有很大的關(guān)聯(lián),在農(nóng)業(yè)種植生產(chǎn)過程中,溫度、降水、日照、風力、蒸發(fā)量等氣象因子都會對農(nóng)作物的產(chǎn)量和品質(zhì)產(chǎn)生十分重要的影響。而事實上,農(nóng)業(yè)相關(guān)產(chǎn)業(yè)鏈的其他環(huán)節(jié)也都依賴合適的天氣條件、如農(nóng)產(chǎn)品的物流運輸和終端銷售都不同程度的受到天氣條件的影響。2015年,某單位建立起“氣象+農(nóng)業(yè)”的大數(shù)據(jù)應(yīng)用分析的合作協(xié)議,并且根據(jù)3個月的實踐研究,最終確定“氣象+農(nóng)業(yè)”的應(yīng)用場景,包括以下3個方面:
4.1農(nóng)業(yè)生產(chǎn)方面
通過應(yīng)用氣象數(shù)據(jù),能夠指導農(nóng)戶合理安排農(nóng)業(yè)生產(chǎn)工作,盡量降低由于氣象因素所造成的農(nóng)業(yè)生產(chǎn)損失。以某地西瓜種植為例,由于西瓜喜熱,該地2015年開春后出現(xiàn)倒春寒天氣,導致大量西瓜苗受到凍害影響。另外,在西瓜上市期,某地連續(xù)降雨十幾天,對西瓜政策銷售造成了嚴重影響,農(nóng)管家的交易平臺上西瓜周均價一直處于下行。對此,可以通過氣象數(shù)據(jù)分析,將未來天氣預警信息推送給農(nóng)業(yè)用戶,有效地指導農(nóng)戶安排生產(chǎn)銷售計劃,盡量減少農(nóng)戶因天氣原因帶來的經(jīng)濟損失,促進農(nóng)戶增收。
4.2物流運輸方面
在物流運輸方面,將氣象數(shù)據(jù)推送給物流公司,可以幫助物流公司確定最優(yōu)運輸路線,確保交貨時間,提升運輸效率、降低運輸成本。比如,某單位采用“第四方物流”形式,即不建倉庫不建車隊,完全依靠社會運力來解決,該單位的作用即“信息平臺”,向能提供物流服務(wù)的社會運力開放,無論個人或者公司,都能夠在該單位平臺上發(fā)布使用車輛或者提供車輛服務(wù)的信息。比如,2015年,該地發(fā)生強降雨天氣,導致雞蛋積壓嚴重,在很大程度上影響了雞蛋的品質(zhì)和效率。對此,該“信息平臺”可以將天氣趨勢和預警信息推送給物流公司,負責物流調(diào)度相關(guān)人員提前安排產(chǎn)品運輸,這樣就能夠有效保障交貨時間。
4.3銷售終端方面
通過合理運用氣象數(shù)據(jù)還能夠幫助消費者預估市場供需價格變化,合理采購,通過這一應(yīng)用方式,不僅能夠提供精準營銷的參考,而且還能夠增加銷量?;ヂ?lián)網(wǎng)終端消費者不僅有公眾,而且還有大部分用戶是公司,即與公眾日常生活緊密相關(guān)的采購方,包括各種類型和層次的批發(fā)商、飯店、超市、深加工企業(yè)和出口貿(mào)易企業(yè)等用戶。該單位為了縮短中間流通環(huán)節(jié),通過強大的線上線下服務(wù)能力,有效解決了由于信息不對稱而導致的農(nóng)產(chǎn)品流通效率低下以及損耗嚴重的問題,便于采購。在此過程中,通過向消費端推送天氣信息,能夠為采購方評估采購原料,制定采購計劃,進而合理安排采購進度。
綜上所述,現(xiàn)如今,大數(shù)據(jù)已經(jīng)滲透入社會經(jīng)濟發(fā)展的各個方面,隨著數(shù)據(jù)處理技術(shù)的不斷創(chuàng)新,氣候云已經(jīng)成為氣候數(shù)據(jù)信息處理的重要發(fā)展方向。本文以“氣象+行業(yè)”大數(shù)據(jù)分析為研究對象,根據(jù)實踐研究,將氣象大數(shù)據(jù)應(yīng)用于農(nóng)業(yè)商業(yè)發(fā)展中,有利于促進市場經(jīng)濟發(fā)展。
[1]張 巍.大數(shù)據(jù)在氣象服務(wù)中的研究與應(yīng)用[J].計算機光盤軟件與應(yīng)用,2014(18):27~28.
[2]趙 蓓.大數(shù)據(jù)時代對氣象服務(wù)的推動[J].考試周刊,2014(33):195~196.
[3]李社宏.大數(shù)據(jù)時代氣象數(shù)據(jù)分析應(yīng)用的新趨勢[J].陜西氣象,2014(2):41~44.
[4]李 文,馬勇杰.大數(shù)據(jù)時代的氣象服務(wù)應(yīng)用研究[J].河南科技,2014(18):175.
TP311.13
A
2095-2066(2016)26-0121-02
2016-8-30
崔 ?。?981-),男,工程師,本科,主要從事氣象資料業(yè)務(wù)工作。