譚 茗
(湖南三一工業(yè)職業(yè)技術(shù)學(xué)院,長(zhǎng)沙 410129)
環(huán)境監(jiān)測(cè)主要是為了一個(gè)特定的目標(biāo),尤其是按照預(yù)先的時(shí)間值,完成環(huán)境的期望狀態(tài)所期望的與其的目的。間歇性或連續(xù)測(cè)量環(huán)境質(zhì)量的有關(guān)系,觀察其變化,以確定其對(duì)環(huán)境的影響過程。環(huán)境監(jiān)測(cè)能夠體現(xiàn)為環(huán)境監(jiān)測(cè)、測(cè)量、監(jiān)控等。利用大數(shù)據(jù)技術(shù)對(duì)全部檢測(cè)數(shù)據(jù)實(shí)施收集、儲(chǔ)存、分析,反映了其研究目標(biāo)與數(shù)據(jù)的整體性。此外,它拋棄了傳統(tǒng)的手工和原始編程處理問題的模式,而是應(yīng)用和收集各種類型的數(shù)據(jù),例如:統(tǒng)計(jì)分析、模擬采樣、分析和預(yù)測(cè)。所以,數(shù)據(jù)工具對(duì)于實(shí)際的監(jiān)控更加準(zhǔn)確,能夠充分、快速、方便的提供想要的結(jié)果。
大數(shù)據(jù)是現(xiàn)代社會(huì)下的一個(gè)新興產(chǎn)業(yè),在對(duì)數(shù)據(jù)進(jìn)行分析與整理的過程中,并非對(duì)數(shù)據(jù)實(shí)行簡(jiǎn)單的處理與總結(jié),通常是使用高速的運(yùn)算來對(duì)廣泛的數(shù)據(jù)實(shí)施整合計(jì)算,讓它獲得更加真實(shí)的結(jié)果。當(dāng)前,中國(guó)大數(shù)據(jù)的發(fā)展通常幾種在相對(duì)發(fā)達(dá)的城市以及互聯(lián)網(wǎng)行業(yè)的幾大巨頭,比如:阿里巴巴、百度等,為了能夠幫助大數(shù)據(jù)信息的收集供應(yīng)穩(wěn)定的來源,和互聯(lián)網(wǎng)形成密切的供求關(guān)系,成了中國(guó)大數(shù)據(jù)市場(chǎng)的基礎(chǔ)性框架。當(dāng)前,大數(shù)據(jù)技術(shù)還具有一定的缺陷,并且它的市場(chǎng)系統(tǒng)也具有一定的問題,但大數(shù)據(jù)的發(fā)展速度十分快速,在許多領(lǐng)域有著極其廣闊的運(yùn)用。政府機(jī)構(gòu)對(duì)于大數(shù)據(jù)技術(shù)的應(yīng)用也實(shí)施了積極開展,在惠民領(lǐng)域得到了廣泛使用,并且支持大數(shù)據(jù)技術(shù),從而促進(jìn)大數(shù)據(jù)技術(shù)的穩(wěn)定發(fā)展。但是,當(dāng)前大數(shù)據(jù)技術(shù)都集中在極其發(fā)達(dá)的大城市,較為偏遠(yuǎn)的地區(qū)并沒有得到普及,因此,想要大數(shù)據(jù)在將來進(jìn)行良好的發(fā)展必須處理這些問題。
環(huán)境監(jiān)測(cè)中大數(shù)據(jù)的主要來源可以分成兩個(gè)部分。首先,監(jiān)控部分的數(shù)據(jù)通常來自部門自身,覆蓋了生態(tài)監(jiān)測(cè)數(shù)據(jù)和污染源數(shù)據(jù),將結(jié)構(gòu)化數(shù)據(jù)作為主要內(nèi)容,時(shí)間跨度約40年;其次是來自外部的一些數(shù)據(jù),其中包含了非結(jié)構(gòu)化數(shù)據(jù)在人群活動(dòng)環(huán)境相關(guān)數(shù)據(jù)信息中所占比例較大,但時(shí)間跨度并不均勻。
2.2.1 數(shù)據(jù)轉(zhuǎn)換模塊
對(duì)不同類型或格式的數(shù)據(jù)轉(zhuǎn)換,因?yàn)闅v史中的因素,環(huán)境監(jiān)測(cè)數(shù)據(jù)通常都具有編碼不匹配的問題,因此,把不匹配的數(shù)據(jù)來源以及網(wǎng)絡(luò)源數(shù)據(jù)轉(zhuǎn)換成統(tǒng)一的格式編碼。這樣的方法有利于未來大數(shù)據(jù)工作的可持續(xù)發(fā)展。
2.2.2 數(shù)據(jù)補(bǔ)充模塊
數(shù)據(jù)補(bǔ)全模塊通常是在面臨數(shù)據(jù)中斷、保存、處理丟失以及不完善的狀況下形成的。必須結(jié)合不同的狀況、類型的數(shù)據(jù)設(shè)計(jì)來設(shè)計(jì)有關(guān)的補(bǔ)采規(guī)則,對(duì)于冷、暖數(shù)據(jù)來說,必須讓手機(jī)人工補(bǔ)充的方式來進(jìn)行處理,但是僅僅真的熱數(shù)據(jù)來說,還應(yīng)該使用現(xiàn)實(shí)的補(bǔ)充任務(wù)來自主實(shí)施。
2.2.3 數(shù)據(jù)清洗模塊
數(shù)據(jù)清了模塊的主要職責(zé)之一是清理沒有用處的數(shù)據(jù)以及所謂的“臟數(shù)據(jù)”,把數(shù)據(jù)中不匹配的數(shù)據(jù)實(shí)施清理,但是在此其中,“臟數(shù)據(jù)”主要包括了不規(guī)則數(shù)據(jù)與事實(shí)不一致的數(shù)據(jù)。
在進(jìn)行數(shù)據(jù)分析的過程中,應(yīng)該注意數(shù)據(jù)的準(zhǔn)確性,在數(shù)據(jù)的核心中,需要對(duì)各種種類的環(huán)境數(shù)據(jù)進(jìn)行選擇、分布、轉(zhuǎn)換等,讓大數(shù)據(jù)技術(shù)中的虛假信息能夠得到有效的清理,從保存最真實(shí)的數(shù)據(jù)到最終在資源共享數(shù)據(jù)平臺(tái)中存儲(chǔ)排序后的數(shù)據(jù)。存儲(chǔ)的數(shù)據(jù)應(yīng)根據(jù)其生命周期實(shí)施相應(yīng)的安排,并供應(yīng)面向外部開發(fā)的數(shù)據(jù)查詢接口。數(shù)據(jù)庫能夠快速滿足環(huán)境監(jiān)控中一切數(shù)據(jù)并實(shí)施相應(yīng)的分析和處理。
參考環(huán)境監(jiān)測(cè)大數(shù)據(jù)的使用平臺(tái)最為關(guān)鍵的作用是整合和挖掘大量的水質(zhì)、空氣質(zhì)量、污染源監(jiān)測(cè)等以往未被重視的整體數(shù)據(jù),互聯(lián)網(wǎng)上的信息大而分散,沒有正規(guī)有效的組織管理,總量小,但能夠有效幫助環(huán)境監(jiān)測(cè)開展相應(yīng)的數(shù)據(jù)資源分析,并在此其中選擇具有價(jià)值的信息內(nèi)容,開展具有針對(duì)性的分析與處理,并使用這項(xiàng)數(shù)據(jù)來反映出要去的地方的價(jià)值,它賦予了數(shù)據(jù)信息新的含義,能夠有利于提高環(huán)境綜合評(píng)價(jià)技能的整體水平,達(dá)到了提高環(huán)境整體質(zhì)量的目的。
大數(shù)據(jù)技術(shù)能夠處理各種各樣的信息,這樣有利于環(huán)境監(jiān)測(cè)工作的穩(wěn)定開展。目前,社會(huì)環(huán)境發(fā)生的問題不斷增加,在此其中主要包括了數(shù)據(jù)間具有的相互影響與前置聯(lián)系,大數(shù)據(jù)技術(shù)的出現(xiàn)能夠變成處理與分析監(jiān)測(cè)數(shù)據(jù)的重要工具,這樣,對(duì)環(huán)境監(jiān)測(cè)數(shù)據(jù)和信息開展穩(wěn)定、科學(xué)的風(fēng)險(xiǎn)評(píng)價(jià)。整體來說,大數(shù)據(jù)技術(shù)對(duì)于環(huán)境監(jiān)測(cè)具有極為重要的作用,通過環(huán)境監(jiān)測(cè)工作的不斷發(fā)展,大數(shù)據(jù)技術(shù)在環(huán)境監(jiān)測(cè)中能夠具有極大的發(fā)展空間。