孫溪

【摘要】大數(shù)據(jù)的時(shí)代早已到來(lái)，它正在悄悄影響著人們的思維與習(xí)慣，它是一場(chǎng)新的革命。以數(shù)據(jù)為研究對(duì)象的統(tǒng)計(jì)學(xué)也逐漸出現(xiàn)了新動(dòng)向，但是統(tǒng)計(jì)學(xué)以數(shù)據(jù)為研究對(duì)象這一點(diǎn)未變、它的性質(zhì)和任務(wù)也未變，改變的是數(shù)據(jù)自身的內(nèi)涵、特征和分析思路等，本文從幾個(gè)方面來(lái)對(duì)大數(shù)據(jù)思維背景下統(tǒng)計(jì)學(xué)的若干理論問(wèn)題進(jìn)行了簡(jiǎn)要分析。

【關(guān)鍵詞】大數(shù)據(jù)思維；統(tǒng)計(jì)學(xué)；理論問(wèn)題

大數(shù)據(jù)指的是不限量的數(shù)據(jù)，它包含了一切可以記錄的全體數(shù)據(jù)，因此這里的“大”指的是“全體”的意思。大數(shù)據(jù)相對(duì)于傳統(tǒng)樣本數(shù)據(jù)來(lái)說(shuō)具有更大的數(shù)據(jù)選擇空間，可以進(jìn)行多角度、多層次的數(shù)據(jù)分析。一直以數(shù)據(jù)為研究對(duì)象的統(tǒng)計(jì)學(xué)歷經(jīng)了幾百年的發(fā)展，為人類的文明進(jìn)步做出了巨大的貢獻(xiàn)，統(tǒng)計(jì)學(xué)的發(fā)展與人類的發(fā)展息息相關(guān)。

一、大數(shù)據(jù)思維下的統(tǒng)計(jì)學(xué)的三個(gè)本質(zhì)

統(tǒng)計(jì)學(xué)已有近400年的發(fā)展歷史，從起初的簡(jiǎn)單算術(shù)一直發(fā)展到現(xiàn)代最先進(jìn)的數(shù)據(jù)科學(xué)，在這一漫長(zhǎng)的發(fā)展歷程中，統(tǒng)計(jì)學(xué)在期間的每一個(gè)發(fā)展階段都有其不同的特征，但是統(tǒng)計(jì)學(xué)的三大本質(zhì)在這一發(fā)展歷程中卻始終未曾發(fā)生過(guò)變化。

（一）研究對(duì)象未變

統(tǒng)計(jì)學(xué)起源于17世紀(jì)的歐洲，在這幾百年的發(fā)展歷程中，其所面對(duì)的外界大環(huán)境一直在發(fā)生變化，但是統(tǒng)計(jì)學(xué)一直基于以現(xiàn)象數(shù)據(jù)作為研究對(duì)象這一本質(zhì)卻未曾發(fā)生過(guò)變化?，F(xiàn)象數(shù)據(jù)是統(tǒng)計(jì)學(xué)必不可少的一部分，它主要囊括了五大方面，分別是：數(shù)量關(guān)系、數(shù)量大小、數(shù)量分布特征、數(shù)量變化規(guī)律以及數(shù)量界限。統(tǒng)訓(xùn)學(xué)就是以這五種數(shù)量形式作為基礎(chǔ)，運(yùn)用具體的分析方法來(lái)進(jìn)一步整合研究，從而清晰明了的反映出某種現(xiàn)象的主要特征規(guī)律，這種漫長(zhǎng)的現(xiàn)象數(shù)據(jù)研究過(guò)程在無(wú)形中促進(jìn)了統(tǒng)計(jì)學(xué)的不斷發(fā)展。

現(xiàn)今，大數(shù)據(jù)時(shí)代已經(jīng)來(lái)臨，在這一時(shí)代來(lái)臨之前，統(tǒng)計(jì)學(xué)經(jīng)歷了從最開(kāi)始的“只能收集少量數(shù)據(jù)”到現(xiàn)在“科學(xué)收集大數(shù)據(jù)”這一艱難過(guò)程。統(tǒng)計(jì)學(xué)不僅在收集數(shù)據(jù)方面取得了巨大進(jìn)展，其統(tǒng)計(jì)方法也變得更加豐富、更加科學(xué)。比如在起初進(jìn)行統(tǒng)計(jì)方面的研究時(shí)只能使用一些簡(jiǎn)單數(shù)字進(jìn)行運(yùn)算，到如今大數(shù)據(jù)思維進(jìn)入人們的世界，統(tǒng)計(jì)學(xué)領(lǐng)域隨即產(chǎn)生了歸納分析法、大量觀察法等更加新穎科學(xué)的分析方法。顯然，數(shù)據(jù)很好的推動(dòng)了統(tǒng)計(jì)學(xué)的進(jìn)步發(fā)展，數(shù)據(jù)與統(tǒng)計(jì)學(xué)是相互依存，互利互助的關(guān)系，從某種層面上來(lái)說(shuō)，可以把數(shù)據(jù)比作統(tǒng)訓(xùn)學(xué)的營(yíng)養(yǎng)供給物，統(tǒng)訓(xùn)學(xué)離不開(kāi)數(shù)據(jù)的支撐，以各種現(xiàn)象數(shù)據(jù)作為研究對(duì)象是統(tǒng)計(jì)學(xué)的必然選擇。

（二）性質(zhì)未變

統(tǒng)計(jì)學(xué)是一門通用又獨(dú)立的方法論科學(xué)，它是通過(guò)研究某一種現(xiàn)象的數(shù)據(jù)關(guān)系與特征來(lái)反映出這種現(xiàn)象的本質(zhì)。統(tǒng)計(jì)學(xué)作為方法論科學(xué)的性質(zhì)從未發(fā)生改變，但其實(shí)長(zhǎng)久以來(lái)，學(xué)術(shù)界對(duì)于統(tǒng)計(jì)學(xué)是方法論科學(xué)還是實(shí)質(zhì)性科學(xué)一直存在著爭(zhēng)議。但是事實(shí)是統(tǒng)計(jì)學(xué)的確是通過(guò)其特定的收集和分析數(shù)據(jù)的方法來(lái)發(fā)揮作用的，十七世紀(jì)末期威廉·配第的《政治算術(shù)》一書也印證了統(tǒng)計(jì)學(xué)是方法論科學(xué)這一觀點(diǎn)。書中大量運(yùn)用了統(tǒng)計(jì)學(xué)與推理方法相結(jié)合的定量分析方法，作者在書中主要使用了三種數(shù)字形式，第一種是將社會(huì)經(jīng)濟(jì)現(xiàn)象進(jìn)行統(tǒng)計(jì)調(diào)查與觀察得到的數(shù)字，第二種是運(yùn)用特定的數(shù)據(jù)推算方法推算出的數(shù)字，第三種是為了理論推理而使用的示例性數(shù)字。此書將統(tǒng)計(jì)學(xué)與理論分析方法很好的結(jié)合在一起，這種方法直到現(xiàn)在仍被廣泛的使用。

其實(shí)，單純使用現(xiàn)象數(shù)據(jù)來(lái)表現(xiàn)某一種現(xiàn)象特征十分困難，因此需要一種能夠?qū)ｉT將數(shù)據(jù)與分析方法相結(jié)合的科學(xué)，那就是所謂的統(tǒng)計(jì)學(xué)。在當(dāng)今這個(gè)大數(shù)據(jù)時(shí)代，統(tǒng)計(jì)學(xué)的方法論科.學(xué)的性質(zhì)更不會(huì)輕易改變，大數(shù)據(jù)時(shí)代，統(tǒng)計(jì)學(xué)所面臨的環(huán)境只會(huì)更復(fù)雜，數(shù)據(jù)也充滿了不確定性，通過(guò)數(shù)據(jù)看現(xiàn)象本質(zhì)的歷程會(huì)越來(lái)越艱難，但是統(tǒng)計(jì)學(xué)的存在為人類提供了平臺(tái)，事實(shí)證明，如何解讀數(shù)據(jù)，最需要的還是方法。

（三）根本任務(wù)未變

統(tǒng)計(jì)學(xué)一直以探求真理、追求真相為根本任務(wù)，在近400年漫長(zhǎng)的發(fā)展歷程中，統(tǒng)計(jì)學(xué)的這一根本任務(wù)從未改變，改變的只是外界環(huán)境和分析方法。統(tǒng)計(jì)學(xué)是通過(guò)具體的數(shù)據(jù)來(lái)探求某個(gè)現(xiàn)象的本質(zhì)，長(zhǎng)久以來(lái)，人們探求真理的過(guò)程復(fù)雜又艱辛，常常因?yàn)闆](méi)有合適的渠道去獲取有用的信息，即使得到了足夠的信息，也沒(méi)有能力去解讀信息所傳達(dá)的真相。統(tǒng)計(jì)學(xué)是以現(xiàn)象數(shù)據(jù)為基礎(chǔ)，運(yùn)用其特有的分析方式來(lái)獲取事物的真相，從而幫助人們更好的認(rèn)知事物真相。

統(tǒng)計(jì)學(xué)的一些作用更是印證了其以探求事物真相為根本任務(wù)這一說(shuō)法。如統(tǒng)計(jì)學(xué)可以根據(jù)其所依存的大數(shù)據(jù)信息去推斷未知的數(shù)據(jù)規(guī)律與特征，它包括用樣本數(shù)據(jù)推算大數(shù)據(jù)（整體數(shù)據(jù)），或用現(xiàn)存的數(shù)據(jù)去推算未來(lái)的數(shù)據(jù)及發(fā)展趨勢(shì)。推斷未知數(shù)據(jù)是人類探索事物真相的必要條件，誰(shuí)能更精準(zhǔn)的推算，誰(shuí)就更占優(yōu)勢(shì)。統(tǒng)計(jì)學(xué)始終將推斷未知與追求真理作為根本任務(wù)，但是由于外界環(huán)境的不確定因素的影響，其推斷未知的準(zhǔn)確度概率會(huì)稍微降低，尤其是在當(dāng)今的大數(shù)據(jù)思維背景下，數(shù)據(jù)每天的更新?lián)Q代，意味著統(tǒng)計(jì)學(xué)面臨著更大的挑戰(zhàn)。統(tǒng)計(jì)學(xué)的分析方法隨著時(shí)代一直在改變，但是其追求真理、探求真相的任務(wù)初衷卻從未發(fā)生變化。

二、大數(shù)據(jù)思維下統(tǒng)計(jì)學(xué)的新動(dòng)向

（一）統(tǒng)計(jì)學(xué)的數(shù)據(jù)特征發(fā)生改變

大數(shù)據(jù)與傳統(tǒng)數(shù)據(jù)最明顯的差距就是數(shù)據(jù)量更多，除此以外，這兩者之間的數(shù)據(jù)來(lái)源和特征也有較大的差異。以往統(tǒng)計(jì)學(xué)所收集到的數(shù)據(jù)量較少，比較結(jié)構(gòu)化，而且數(shù)據(jù)的類型比較單一，數(shù)據(jù)處理起來(lái)速度較慢，但是傳統(tǒng)統(tǒng)計(jì)學(xué)統(tǒng)計(jì)出的數(shù)據(jù)往往準(zhǔn)確度比較高。而大數(shù)據(jù)包含了一切可以記錄下來(lái)的數(shù)據(jù)，它所涉及的范圍較廣，數(shù)據(jù)的來(lái)源多樣化，內(nèi)部結(jié)構(gòu)更加復(fù)雜，這些特點(diǎn)導(dǎo)致數(shù)據(jù)在傳輸或計(jì)算的過(guò)程中極易丟失，導(dǎo)致發(fā)生結(jié)果誤差，并且一旦出現(xiàn)數(shù)據(jù)故障很難通過(guò)人工去修復(fù)。

（二）統(tǒng)計(jì)學(xué)的數(shù)據(jù)分析思路發(fā)生改變

統(tǒng)計(jì)學(xué)在最早進(jìn)行數(shù)據(jù)分析時(shí)，分析過(guò)程一般都是先假設(shè)再進(jìn)行驗(yàn)證，即以概率們?yōu)楸ＷC，再根據(jù)所統(tǒng)計(jì)到的樣本數(shù)據(jù)推斷出事物的總體特征。而如今在大數(shù)據(jù)思維背景下，統(tǒng)計(jì)學(xué)的數(shù)據(jù)分析思路變?yōu)橄纫允占降娜繑?shù)據(jù)作為基礎(chǔ)，然后再總結(jié)出數(shù)據(jù)的特征或規(guī)律，最后再進(jìn)行概率判斷?？偠灾?，大數(shù)據(jù)思維下的數(shù)據(jù)分析方法是摒棄假設(shè)直接去尋找數(shù)據(jù)規(guī)律，而傳統(tǒng)數(shù)據(jù)分析方法是先假設(shè)再找規(guī)律。

傳統(tǒng)統(tǒng)計(jì)數(shù)據(jù)的分析方式較為標(biāo)準(zhǔn)、嚴(yán)密，嚴(yán)格依附于事物的因果關(guān)系，雖然其分析效率較低，但是準(zhǔn)確度很高。而大數(shù)據(jù)思維下統(tǒng)計(jì)學(xué)的數(shù)據(jù)分析摒棄了傳統(tǒng)意義上的因果邏輯關(guān)系，走的是從數(shù)據(jù)直接到結(jié)果的捷徑，這種分析方法雖然準(zhǔn)確度稍低，但是非常適用于現(xiàn)今的大數(shù)據(jù)統(tǒng)訓(xùn)學(xué)，因?yàn)楫?dāng)今這個(gè)大數(shù)據(jù)時(shí)代下，三大處理數(shù)據(jù)的新理念分別是：要效率不要絕對(duì)精確、要整體不要樣本、要關(guān)聯(lián)不要因果邏輯，統(tǒng)計(jì)學(xué)的數(shù)據(jù)分析方法要與所處的時(shí)代相適應(yīng)，才能最大程度的發(fā)揮出效能。

（三）統(tǒng)計(jì)學(xué)的數(shù)據(jù)分析技術(shù)改變

在起初，統(tǒng)計(jì)學(xué)進(jìn)行數(shù)據(jù)分析時(shí)，所使用的僅是簡(jiǎn)單算術(shù)法，在當(dāng)時(shí)，接觸過(guò)少量數(shù)學(xué)知識(shí)的人即可勝任。再到統(tǒng)計(jì)學(xué)發(fā)展中期，統(tǒng)計(jì)學(xué)的數(shù)據(jù)分析開(kāi)始需要一定的數(shù)據(jù)庫(kù)進(jìn)行處理分析，相關(guān)技術(shù)人員通過(guò)特定的訓(xùn)練才可勝任。而如今的大數(shù)據(jù)時(shí)代，數(shù)據(jù)更新的速度更快，結(jié)構(gòu)更加復(fù)雜，統(tǒng)計(jì)學(xué)的數(shù)據(jù)分析人員既需要充分了解數(shù)據(jù)分析的工具，又需要具有較為專業(yè)的知識(shí)，所面臨的工作挑戰(zhàn)難度更大。

對(duì)大數(shù)據(jù)進(jìn)行處理分析時(shí)要充分考慮到其數(shù)據(jù)的復(fù)雜和價(jià)值密度低的特點(diǎn)，因?yàn)榇髷?shù)據(jù)所涉及的數(shù)據(jù)范圍很廣，相對(duì)來(lái)說(shuō)垃圾信息很多，如何過(guò)濾掉垃圾信息保留有用信息十分重要，并巨在篩選的過(guò)程中還要保證不能對(duì)正常數(shù)據(jù)造成影響。針對(duì)這種情況，Apache基金會(huì)發(fā)明了一種特殊的編程模型（MapReduce），它具有強(qiáng)大的過(guò)濾功能，處理數(shù)據(jù)的過(guò)程很精密，不會(huì)對(duì)有用數(shù)據(jù)產(chǎn)生影響，這個(gè)模型在如今大數(shù)據(jù)的處理中得到了廣泛的應(yīng)用。

（四）數(shù)據(jù)的質(zhì)量?jī)?nèi)涵發(fā)生變化

高質(zhì)量的數(shù)據(jù)是統(tǒng)計(jì)學(xué)進(jìn)行數(shù)據(jù)分析的必要條件，傳統(tǒng)的統(tǒng)計(jì)學(xué)數(shù)據(jù)具有因果關(guān)系明確、邏輯性強(qiáng)的質(zhì)量特征，而當(dāng)今的大數(shù)據(jù)是以數(shù)據(jù)的不確定性作為主要的質(zhì)量特征。從數(shù)據(jù)采集過(guò)程中來(lái)說(shuō)，傳統(tǒng)統(tǒng)計(jì)學(xué)數(shù)據(jù)的量比較小，一般情況下通過(guò)人工查找即可實(shí)現(xiàn)，而大數(shù)據(jù)思維下的統(tǒng)計(jì)學(xué)數(shù)據(jù)量多且復(fù)雜，收集過(guò)程中極易發(fā)生混亂，在獲取數(shù)據(jù)時(shí)必須采用特定的技術(shù)來(lái)保證做采集的大數(shù)據(jù)質(zhì)量。

數(shù)據(jù)質(zhì)量?jī)?nèi)涵還包含一個(gè)方面就是數(shù)據(jù)存儲(chǔ)，數(shù)據(jù)的存儲(chǔ)也是實(shí)現(xiàn)高水平數(shù)據(jù)質(zhì)量的必要保障，只有將所有收集到的數(shù)據(jù)完整、清晰的存儲(chǔ)起來(lái)，才能夠保證數(shù)據(jù)的質(zhì)量。傳統(tǒng)統(tǒng)計(jì)學(xué)所采集的數(shù)據(jù)具有結(jié)構(gòu)化的特征，因此采用結(jié)構(gòu)化存儲(chǔ)方式即可進(jìn)行簡(jiǎn)單的數(shù)據(jù)儲(chǔ)存，而當(dāng)今的大數(shù)據(jù)結(jié)構(gòu)復(fù)雜、數(shù)量龐大，必須要用到專門的大型數(shù)據(jù)庫(kù)來(lái)進(jìn)行分類存儲(chǔ)，以保證大數(shù)據(jù)的有效性。大數(shù)據(jù)時(shí)代下的數(shù)據(jù)質(zhì)量?jī)?nèi)涵有別于傳統(tǒng)數(shù)據(jù)，為了更好的保證大數(shù)據(jù)的質(zhì)量安全，不管是在大數(shù)據(jù)收集還是存儲(chǔ)的過(guò)程中都需要更加的專業(yè)、謹(jǐn)慎。

三、小結(jié)

大數(shù)據(jù)思維下，傳統(tǒng)的統(tǒng)計(jì)學(xué)方法已經(jīng)不能有效地處理大數(shù)據(jù)問(wèn)題，這就需要我們突破傳統(tǒng)的統(tǒng)計(jì)學(xué)去探尋更適合大數(shù)據(jù)的統(tǒng)訓(xùn)方法。大數(shù)據(jù)思維下的統(tǒng)計(jì)學(xué)地位不容忽視它是處理分析大數(shù)據(jù)的唯一途徑，大數(shù)據(jù)與統(tǒng)計(jì)學(xué)相互依存、不可分離。

參考文獻(xiàn)：

[1]李金昌.從政治算術(shù)到大數(shù)據(jù)分析[J].統(tǒng)計(jì)研究，2014（11）：13-14.

[2]趙民德.統(tǒng)計(jì)是數(shù)據(jù)科學(xué)（下）[J].中國(guó)統(tǒng)計(jì)，2004（9）：56-57.

[3]宗威，吳鋒.大數(shù)據(jù)時(shí)代下數(shù)據(jù)質(zhì)量的挑戰(zhàn)[J].西安交通大學(xué)學(xué)報(bào)：社會(huì)科學(xué)版，2013（5）：38-43.