馬會(huì)寧
摘要:文章簡(jiǎn)要地介紹了大數(shù)據(jù)及云計(jì)算平臺(tái)的相關(guān)概念,通過(guò)對(duì)大數(shù)據(jù)在統(tǒng)計(jì)學(xué)中的重要作用和應(yīng)用思想進(jìn)行分析,來(lái)探討大數(shù)據(jù)在統(tǒng)計(jì)學(xué)中的有效應(yīng)用,以充分發(fā)揮大數(shù)據(jù)技術(shù),提高云計(jì)算平臺(tái)利用率,幫助企業(yè)做好統(tǒng)計(jì)工作,加強(qiáng)企業(yè)信息管理,從而促使企業(yè)實(shí)施高效的風(fēng)險(xiǎn)管理,提升統(tǒng)計(jì)人員的工作水平,獲得更多的經(jīng)濟(jì)效益。
關(guān)鍵詞:大數(shù)據(jù)驅(qū)動(dòng);云計(jì)算平臺(tái);統(tǒng)計(jì)學(xué);有效應(yīng)用
隨著科學(xué)技術(shù)的高速發(fā)展,21世紀(jì)儼然成為一個(gè)大數(shù)據(jù)時(shí)代,其已經(jīng)滲透于全球各大行業(yè)中,為企業(yè)的經(jīng)營(yíng)發(fā)展提供了重要技術(shù)支持。在過(guò)去,企業(yè)想要獲得各類信息,需要眾多人員去進(jìn)行調(diào)查和收集,而且所獲得的信息也不夠全面,缺乏時(shí)效性?,F(xiàn)如今有了大數(shù)據(jù)技術(shù)后,企業(yè)告別了傳統(tǒng)信息收集方式,可快速獲取有關(guān)企業(yè)各方面的信息,了解市場(chǎng)行情,并能根據(jù)所收集的各類數(shù)據(jù)來(lái)進(jìn)行科學(xué)統(tǒng)計(jì)和詳細(xì)分析,以為企業(yè)經(jīng)營(yíng)決策提供可靠依據(jù)。在大多數(shù)企業(yè)中都建立了大數(shù)據(jù)驅(qū)動(dòng)的云計(jì)算平臺(tái),這是因?yàn)榇髷?shù)據(jù)和云計(jì)算密不可分,大數(shù)據(jù)需要依托云計(jì)算來(lái)進(jìn)行處理。有效應(yīng)用大數(shù)據(jù)驅(qū)動(dòng)的云計(jì)算平臺(tái),有利于提高企業(yè)統(tǒng)計(jì)能力,推動(dòng)統(tǒng)計(jì)學(xué)的長(zhǎng)遠(yuǎn)發(fā)展。
一、大數(shù)據(jù)及云計(jì)算平臺(tái)的相關(guān)概念
大數(shù)據(jù)具有強(qiáng)大的處理能力,具有多元性和實(shí)時(shí)性,其信息來(lái)源于龐大的數(shù)據(jù)群組,基本特征表現(xiàn)在四個(gè)方面,即數(shù)據(jù)量大、數(shù)據(jù)類型多、數(shù)據(jù)有價(jià)值、數(shù)據(jù)處理速度快。其和云計(jì)算具有密不可分的關(guān)系,必須依仗于多臺(tái)計(jì)算機(jī)的協(xié)同操作,采用的是分布式計(jì)算架構(gòu)。大數(shù)據(jù)驅(qū)動(dòng)的云計(jì)算平臺(tái),能夠收集海量數(shù)據(jù),并對(duì)這些數(shù)據(jù)進(jìn)行科學(xué)分析,涉及到分布式處理技術(shù)和云儲(chǔ)存技術(shù),而且還有分布式數(shù)據(jù)庫(kù)。大數(shù)據(jù)和云計(jì)算都是互聯(lián)網(wǎng)技術(shù)的衍生,逐步走向數(shù)據(jù)化、信息化時(shí)代下的統(tǒng)計(jì)學(xué),需要大數(shù)據(jù)的支持。有效利用大數(shù)據(jù)及云計(jì)算,可對(duì)復(fù)雜的數(shù)據(jù)進(jìn)行統(tǒng)計(jì)和分析,建立關(guān)系型數(shù)據(jù)庫(kù),從而得到高價(jià)值的數(shù)據(jù)信息。
二、大數(shù)據(jù)在統(tǒng)計(jì)學(xué)中的重要作用和應(yīng)用思想
大數(shù)據(jù)在統(tǒng)計(jì)學(xué)中能夠起到重要作用,不僅可帶領(lǐng)統(tǒng)計(jì)學(xué)走向現(xiàn)代化、智能化,還能滿足企業(yè)當(dāng)前的統(tǒng)計(jì)分析工作需求。有效的應(yīng)用大數(shù)據(jù)統(tǒng)計(jì)分析工作,可幫助企業(yè)實(shí)施高效的風(fēng)險(xiǎn)管理工作,獲得具有時(shí)效性和準(zhǔn)確性的信息數(shù)據(jù),為企業(yè)的未來(lái)發(fā)展提供科學(xué)的信息支持。
大數(shù)據(jù)在統(tǒng)計(jì)學(xué)中的應(yīng)用思想主要體現(xiàn)在以下幾個(gè)方面:一是強(qiáng)調(diào)了大數(shù)據(jù)抽樣調(diào)查工作。其不同于傳統(tǒng)統(tǒng)計(jì)學(xué)內(nèi)容,大數(shù)據(jù)的樣本,其實(shí)就是過(guò)去所有資料的總和,對(duì)其進(jìn)行調(diào)查和分析,不僅能了解數(shù)據(jù)的局部信息,還能掌握數(shù)據(jù)的總體信息;二是強(qiáng)調(diào)大數(shù)據(jù)統(tǒng)計(jì)分析的精確性。對(duì)于龐大而復(fù)雜的大數(shù)據(jù)來(lái)說(shuō),不夠精確的數(shù)據(jù)會(huì)帶來(lái)嚴(yán)重后果,得不償失;三是數(shù)據(jù)和數(shù)據(jù)之間具有關(guān)聯(lián)性和匹配性,不僅要了解數(shù)據(jù)的表面特征,更應(yīng)當(dāng)深入挖掘數(shù)據(jù)背后隱藏的關(guān)系,以提高數(shù)據(jù)價(jià)值。
三、大數(shù)據(jù)在統(tǒng)計(jì)學(xué)中的有效應(yīng)用
(一)大數(shù)據(jù)下的統(tǒng)計(jì)運(yùn)行流程
相較于傳統(tǒng)統(tǒng)計(jì)學(xué)來(lái)說(shuō),大數(shù)據(jù)時(shí)代下的統(tǒng)計(jì)學(xué)在深度、廣度方面都有著一定的變化。如當(dāng)前統(tǒng)計(jì)學(xué)的分析研究對(duì)象不再局限于數(shù)量,還囊括了無(wú)法用數(shù)據(jù)來(lái)度量的文本信息、圖片信息、視頻信息、動(dòng)畫信息和地理位置信息等。這種即使不屬于結(jié)構(gòu)數(shù)據(jù)的信息,同樣也能進(jìn)行統(tǒng)計(jì)和分析。而大數(shù)據(jù)下的統(tǒng)計(jì)分析工作,也不再如過(guò)往般復(fù)雜,變得更為簡(jiǎn)單。
首先,要對(duì)數(shù)據(jù)進(jìn)行收集。這是完全不同于傳統(tǒng)數(shù)據(jù)收集和保存的工作,面對(duì)龐大的數(shù)據(jù)組和復(fù)雜的數(shù)據(jù)類型,不可能對(duì)現(xiàn)有的數(shù)據(jù)進(jìn)行簡(jiǎn)單的匯總、編制和繪制統(tǒng)計(jì)表,而是利用大數(shù)據(jù)驅(qū)動(dòng)的云計(jì)算平臺(tái)來(lái)對(duì)這些數(shù)據(jù)進(jìn)行審核和儲(chǔ)存。雖然這些數(shù)據(jù)之間并不一定存在客觀而穩(wěn)定的聯(lián)系,但是仍能從中發(fā)現(xiàn)和分析出隱藏的關(guān)系模式,比起統(tǒng)計(jì)樣本來(lái)說(shuō),這種大數(shù)據(jù)統(tǒng)計(jì)方式所得到的信息更加全面,數(shù)據(jù)也更有價(jià)值。
其次,要深入挖掘數(shù)據(jù)的價(jià)值。一是大數(shù)據(jù)時(shí)代下所收集到的數(shù)據(jù)價(jià)值并不只存在于表面,很多時(shí)候在對(duì)一個(gè)數(shù)據(jù)進(jìn)行了分析后,其還能產(chǎn)生新的價(jià)值。為全面發(fā)現(xiàn)數(shù)據(jù)的價(jià)值,則需要對(duì)數(shù)據(jù)進(jìn)行有效整合,將整合后的數(shù)據(jù)作為一個(gè)整體來(lái)進(jìn)行統(tǒng)計(jì)分析,以此來(lái)研究數(shù)據(jù)之間的關(guān)聯(lián)性,獲取新的信息;二是要實(shí)現(xiàn)數(shù)據(jù)的可視化,對(duì)數(shù)據(jù)所展示出來(lái)的匹配性進(jìn)行分析總結(jié),得出結(jié)果;三是要深入而正確地解讀數(shù)據(jù),這需要實(shí)施跨界合作。
(二)創(chuàng)新數(shù)據(jù)收集和分析方法
大數(shù)據(jù)下的統(tǒng)計(jì)工作具有一定的復(fù)雜性和難度,其在收集數(shù)據(jù)的過(guò)程中會(huì)發(fā)現(xiàn)諸多復(fù)雜數(shù)據(jù),這些數(shù)據(jù)來(lái)自于一些復(fù)雜事件。由于大數(shù)據(jù)基于互聯(lián)網(wǎng)技術(shù),因此其需要面臨一定的網(wǎng)絡(luò)安全風(fēng)險(xiǎn),數(shù)據(jù)很可能遭遇突發(fā)狀況而受到損傷。在這種情形下,為規(guī)避數(shù)據(jù)安全威脅,一方面要加強(qiáng)網(wǎng)絡(luò)安全管理,另一方面則要不斷地創(chuàng)新復(fù)雜數(shù)據(jù)收集和分析方法,不僅要識(shí)別數(shù)據(jù)的表面特征,還應(yīng)當(dāng)深入了解數(shù)據(jù)的結(jié)構(gòu)特點(diǎn)。
大數(shù)據(jù)驅(qū)動(dòng)的云計(jì)算平臺(tái),為大數(shù)據(jù)統(tǒng)計(jì)工作提供了一定的支持,尤其是在大數(shù)據(jù)規(guī)模逐漸擴(kuò)大,大數(shù)據(jù)數(shù)量逐漸增多的情形下,開(kāi)展大數(shù)據(jù)統(tǒng)計(jì)分析工作,需要多臺(tái)計(jì)算機(jī)的協(xié)同操作,這就涉及到大數(shù)據(jù)統(tǒng)計(jì)分析成本和時(shí)間問(wèn)題。對(duì)于企業(yè)來(lái)說(shuō),其當(dāng)然希望將大數(shù)據(jù)統(tǒng)計(jì)分析成本控制在最低范圍內(nèi),盡可能地縮短統(tǒng)計(jì)分析時(shí)間,提高統(tǒng)計(jì)時(shí)間效率。而要實(shí)現(xiàn)這一目標(biāo),則必須加強(qiáng)對(duì)大數(shù)據(jù)在統(tǒng)計(jì)學(xué)中的應(yīng)用研究,創(chuàng)建一套能夠滿足企業(yè)大數(shù)據(jù)統(tǒng)計(jì)分析日常需求的理論體系,并且根據(jù)大數(shù)據(jù)的特征來(lái)進(jìn)行統(tǒng)計(jì)和分析工具的開(kāi)發(fā),以促使其有效應(yīng)對(duì)復(fù)雜的大數(shù)據(jù),節(jié)約數(shù)據(jù)統(tǒng)計(jì)分析資源成本和時(shí)間成本。
在面對(duì)復(fù)雜數(shù)據(jù)的統(tǒng)計(jì)和分析時(shí),常常會(huì)遇到數(shù)據(jù)類別重疊,數(shù)據(jù)類別不均衡等問(wèn)題。為有效解決這些問(wèn)題,不僅要重視對(duì)統(tǒng)計(jì)學(xué)相關(guān)理論的研究,還應(yīng)當(dāng)提出科學(xué)的統(tǒng)計(jì)分析算法,如舍棄法、分隔法和合并法等。可充分利用AdaBoost技術(shù),并在此基礎(chǔ)上,實(shí)施局部聚類組合數(shù)據(jù)統(tǒng)計(jì)法,以使所收集到的復(fù)雜數(shù)據(jù)更加均衡。另外,常見(jiàn)的復(fù)雜數(shù)據(jù)統(tǒng)計(jì)分析方法還有C2C電子商務(wù)共謀欺詐識(shí)別、網(wǎng)絡(luò)入侵檢測(cè)等。
(三)全方位把握統(tǒng)計(jì)分析工作各環(huán)節(jié)
大數(shù)據(jù)在統(tǒng)計(jì)學(xué)的應(yīng)用過(guò)程中,要求統(tǒng)計(jì)人員從各方面來(lái)把握工作細(xì)節(jié),不斷地優(yōu)化每一個(gè)工作環(huán)節(jié),可從以下方面著手。
第一、要轉(zhuǎn)變傳統(tǒng)的統(tǒng)計(jì)學(xué)思想,充分掌握大數(shù)據(jù)的特征,堅(jiān)持現(xiàn)代化統(tǒng)計(jì)分析工作理念,重視抽樣調(diào)查和測(cè)量工作的開(kāi)展,并著重于發(fā)現(xiàn)和分析數(shù)據(jù)之間的關(guān)聯(lián)性。應(yīng)當(dāng)理清所收集的數(shù)據(jù),并且不斷地挖掘數(shù)據(jù)的價(jià)值,從數(shù)據(jù)呈現(xiàn)的形態(tài)來(lái)分析出結(jié)果,得到科學(xué)而準(zhǔn)確的數(shù)據(jù)信息反饋。
第二、要加強(qiáng)大數(shù)據(jù)下統(tǒng)計(jì)學(xué)研究,創(chuàng)新統(tǒng)計(jì)分析工作方法。應(yīng)當(dāng)融合不同學(xué)科,如自然科學(xué)、數(shù)據(jù)科學(xué)等,并充分發(fā)揮實(shí)質(zhì)性科學(xué)的主導(dǎo)地位。需改進(jìn)當(dāng)前的統(tǒng)計(jì)分析工作手段,實(shí)施全過(guò)程性數(shù)據(jù)分析,保障數(shù)據(jù)的時(shí)效性,對(duì)每一次統(tǒng)計(jì)分析工作進(jìn)行反思,轉(zhuǎn)變傳統(tǒng)的被動(dòng)統(tǒng)計(jì)模式,主動(dòng)地開(kāi)展數(shù)據(jù)統(tǒng)計(jì)分析工作。在保證數(shù)據(jù)準(zhǔn)確性和時(shí)效性的基礎(chǔ)上,對(duì)數(shù)據(jù)走勢(shì)進(jìn)行科學(xué)分析,以提高預(yù)判性的準(zhǔn)確率。
第三、要加強(qiáng)對(duì)統(tǒng)計(jì)人員的培訓(xùn),為其提供再教育機(jī)會(huì)。這是因?yàn)榕c傳統(tǒng)統(tǒng)計(jì)分析工作相比,大數(shù)據(jù)下的統(tǒng)計(jì)分析工作,對(duì)統(tǒng)計(jì)人員的要求更高,其不僅要掌握基礎(chǔ)的統(tǒng)計(jì)學(xué)知識(shí),還要對(duì)大數(shù)據(jù)等現(xiàn)代技術(shù)有所涉獵,需要其融合應(yīng)用統(tǒng)計(jì)技術(shù)和云技術(shù)。另外,要強(qiáng)化統(tǒng)計(jì)人員的責(zé)任意識(shí),使其認(rèn)識(shí)到自身職責(zé)的重要性,主動(dòng)地投入到工作中,提升統(tǒng)計(jì)人員的職業(yè)道德素養(yǎng)。
第四、為滿足社會(huì)對(duì)統(tǒng)計(jì)人才的需求,企業(yè)和學(xué)校應(yīng)當(dāng)實(shí)施有效的校企合作,企業(yè)為學(xué)校統(tǒng)計(jì)學(xué)專業(yè)的學(xué)生提供實(shí)踐平臺(tái),用豐富的實(shí)際案例來(lái)教導(dǎo)學(xué)生;而學(xué)校則可為企業(yè)傳輸更多優(yōu)秀的統(tǒng)計(jì)人才。
四、結(jié)語(yǔ)
大數(shù)據(jù)技術(shù)的應(yīng)用,對(duì)于各行各業(yè)的企業(yè)來(lái)說(shuō),有著極大的價(jià)值和作用。其不僅能夠?yàn)槠髽I(yè)轉(zhuǎn)型提供大量的有效數(shù)據(jù),還能幫助企業(yè)實(shí)現(xiàn)精準(zhǔn)營(yíng)銷,提高企業(yè)風(fēng)險(xiǎn)管理水平,優(yōu)化企業(yè)資源配置,充分發(fā)揮人的作用。有了大數(shù)據(jù)技術(shù)的支持,企業(yè)可以獲得龐大的信息數(shù)據(jù),而這些數(shù)據(jù)僅收集還遠(yuǎn)遠(yuǎn)不夠,要真正體現(xiàn)數(shù)據(jù)的作用,還需要企業(yè)加強(qiáng)統(tǒng)計(jì)分析工作,轉(zhuǎn)變傳統(tǒng)的統(tǒng)計(jì)分析思想,結(jié)合當(dāng)前大數(shù)據(jù)應(yīng)用實(shí)況來(lái)進(jìn)行不斷創(chuàng)新,針對(duì)大數(shù)據(jù)的特征來(lái)采取有效的統(tǒng)計(jì)方式,以實(shí)現(xiàn)統(tǒng)計(jì)分析工作效益最大化,從而提高大數(shù)據(jù)在統(tǒng)計(jì)學(xué)中的應(yīng)用水平,促進(jìn)企業(yè)市場(chǎng)競(jìng)爭(zhēng)力的提升。
參考文獻(xiàn):
[1]張媛媛.基于云計(jì)算的大數(shù)據(jù)統(tǒng)一分析平臺(tái)設(shè)計(jì)與應(yīng)用[J].信息與電腦(理論版),2018(18).
[2]喻勛勛.試論大數(shù)據(jù)及云計(jì)算平臺(tái)的應(yīng)用[J].電腦編程技巧與維護(hù),2018(07).
[3]劉士源.大數(shù)據(jù)和云計(jì)算平臺(tái)的應(yīng)用淺談[J].科技風(fēng),2017(24).
[4]楊華.基于云計(jì)算的大數(shù)據(jù)分析平臺(tái)設(shè)計(jì)[J].電腦編程技巧與維護(hù),2018(06).
[5]胡雯.基于大數(shù)據(jù)和云計(jì)算平臺(tái)應(yīng)用[J].中國(guó)新通信,2019(02).
[6]張騰.淺談大數(shù)據(jù)和云計(jì)算平臺(tái)的應(yīng)用[J].數(shù)碼世界,2018(01).
(作者單位:河南財(cái)政金融學(xué)院)