武非 河南省鄭州市第十一中學(xué)
大數(shù)據(jù)管理:概念、技術(shù)與挑戰(zhàn)
武非 河南省鄭州市第十一中學(xué)
所謂大數(shù)據(jù),具體來(lái)說(shuō)是指將不同數(shù)據(jù)匯集,從而形成數(shù)量極大的數(shù)據(jù)組,從本質(zhì)屬性分析和計(jì)算機(jī)之間的關(guān)系極為密切,特別是隨著互聯(lián)網(wǎng)技術(shù)的快速發(fā)展,促使大數(shù)據(jù)時(shí)代的到來(lái),這不僅提升人民生活水平,帶動(dòng)消費(fèi),還在某種程度上緩解就業(yè)壓力。文章中簡(jiǎn)要分析了目前大數(shù)據(jù)時(shí)代大數(shù)據(jù)管理的相關(guān)內(nèi)容,以促進(jìn)大數(shù)據(jù)管理獲得良好的效果。
大數(shù)據(jù) 概念 技術(shù) 挑戰(zhàn)
現(xiàn)階段社會(huì)發(fā)展可謂是日新月異,這與科技創(chuàng)新有著密切的關(guān)聯(lián),促使人與人之間的交流不斷強(qiáng)化,這些都需要大數(shù)據(jù)的有效管理才能最終實(shí)現(xiàn),對(duì)于數(shù)據(jù)進(jìn)行有效的分析整理,能夠幫助企業(yè)掌握市場(chǎng)銷(xiāo)售規(guī)律,滿足大眾不同的消費(fèi)需求,以消費(fèi)拉動(dòng)經(jīng)濟(jì)增長(zhǎng),本文中簡(jiǎn)要分析了大數(shù)據(jù)時(shí)代到來(lái)如何強(qiáng)化大數(shù)據(jù)管理,從而促使大數(shù)據(jù)管理能夠真正體現(xiàn)價(jià)值性。
針對(duì)大數(shù)據(jù)本身來(lái)說(shuō),其并不屬于具體概念,從本質(zhì)層面分析,數(shù)據(jù)規(guī)模相對(duì)較大,根據(jù)最新的研究定義,所謂大數(shù)據(jù),其實(shí)質(zhì)上是指規(guī)模較大的數(shù)據(jù),以至于傳統(tǒng)軟件工具并不能對(duì)其進(jìn)行采集,也無(wú)法進(jìn)行存儲(chǔ)與管理。而從另一個(gè)角度分析,大數(shù)據(jù)還可以是借助現(xiàn)有理論與方法,加之技術(shù)與工具,都無(wú)法實(shí)現(xiàn)短時(shí)間數(shù)據(jù)分析計(jì)算,更無(wú)法談得上復(fù)雜數(shù)據(jù)集合。大數(shù)據(jù)時(shí)代的到來(lái)給我們的生活帶來(lái)極大的改變,也對(duì)社會(huì)經(jīng)濟(jì)的發(fā)展起到極大的促進(jìn)作用。
大數(shù)據(jù)技術(shù)的應(yīng)用在某種程度上能夠?qū)Υ髷?shù)據(jù)進(jìn)行有效的整理,并且是從不同數(shù)據(jù)中快速獲取有效信息,目前大數(shù)據(jù)技術(shù)種類(lèi)多樣,這使得大數(shù)據(jù)的收集、存儲(chǔ)、處理,再到呈現(xiàn)都更加便捷。通常來(lái)說(shuō),大數(shù)據(jù)關(guān)鍵技術(shù)主要包含以下幾個(gè)方面:首先,收集技術(shù)。所謂大數(shù)據(jù)收集,主要是通過(guò)大數(shù)據(jù)智能感知層,對(duì)其進(jìn)行數(shù)據(jù)的智能化識(shí)別,并進(jìn)行定位、跟蹤,再進(jìn)行連接與傳輸,而針對(duì)基礎(chǔ)支持層,其作用在于為數(shù)據(jù)給予所需虛擬服務(wù)器,還有數(shù)據(jù)庫(kù),以及網(wǎng)絡(luò)資源等等。在這一過(guò)程中,則需要優(yōu)化數(shù)據(jù)網(wǎng)絡(luò)傳輸,完善信息壓縮技術(shù),并且還能做好數(shù)據(jù)隱私保護(hù)。其次,大數(shù)據(jù)處理技術(shù)。針對(duì)上述環(huán)節(jié)中所獲取的數(shù)據(jù),實(shí)施抽取與清洗。對(duì)大數(shù)據(jù)抽取具有重要意義,能夠最大限度大數(shù)據(jù)繁雜的弊端,解決種類(lèi)繁多弊端,從而能夠讓繁雜的數(shù)據(jù)逐漸單一化,并且能夠快速分解,處理相關(guān)信息;而清洗的目的則非常明確,就是將大數(shù)據(jù)中無(wú)用的數(shù)據(jù)進(jìn)行處理,或是篩出錯(cuò)誤的信息,這樣讓數(shù)據(jù)的提取更有效。最后,存儲(chǔ)挖掘技術(shù)。對(duì)大數(shù)據(jù)進(jìn)行有效的存儲(chǔ),并且形成特定的數(shù)據(jù)庫(kù),這樣能夠便于管理與使用。數(shù)據(jù)庫(kù)種類(lèi)繁多,具體來(lái)說(shuō)主要有:鍵值、文檔及圖存等等,此外還需要突破以下技術(shù):數(shù)控鑒別真?zhèn)?、隱私保護(hù)、數(shù)據(jù)完整驗(yàn)證等等。而對(duì)于數(shù)據(jù)挖掘來(lái)說(shuō),能夠讓人獲得直觀的感受,提高效率,這樣才能讓專(zhuān)家獲取精準(zhǔn)的推測(cè),對(duì)于現(xiàn)實(shí)生活具有極大的促進(jìn)作用。
大數(shù)據(jù)管理對(duì)我國(guó)經(jīng)濟(jì)發(fā)展起到極大的促進(jìn)作用,然而其在發(fā)展過(guò)程中重視度相對(duì)較低,大數(shù)據(jù)的發(fā)展是為了更好的發(fā)展國(guó)民經(jīng)濟(jì),滿足時(shí)代需求。但是從目前情況分析,大數(shù)據(jù)在我國(guó)并未受到極高的關(guān)注度,針對(duì)部分重要信息利用率相對(duì)較低,特別是相關(guān)部門(mén),他們基本上就是各自為營(yíng),不能進(jìn)行信息溝通與共享,從某種程度來(lái)說(shuō),在信息收集方面存在不健全的情況,同時(shí)還存在重復(fù)性及缺乏時(shí)效性。而對(duì)于國(guó)外相關(guān)企業(yè)來(lái)說(shuō),他們彼此相互信任、互利共贏,并且進(jìn)行適當(dāng)?shù)馁Y源共享,相較于我國(guó)大數(shù)據(jù)管理具有絕對(duì)的優(yōu)勢(shì)。這就需要我國(guó)政府部門(mén)做好相應(yīng)的宏觀調(diào)控,完善相關(guān)體制建設(shè),關(guān)注信息公開(kāi)化,從而防止數(shù)據(jù)分裂形式的產(chǎn)生,并且要求其構(gòu)建信息網(wǎng),提升社會(huì)服務(wù)水平,優(yōu)化社會(huì)服務(wù)能力。
大數(shù)據(jù)時(shí)代的到來(lái)促使創(chuàng)新型人才出現(xiàn)缺失情況,而且相關(guān)體制建設(shè)存在不健全的情況。從人口分布情況分析,我國(guó)屬于世界人口大國(guó),但是對(duì)于大數(shù)據(jù)應(yīng)用人才而言缺乏,這就需要針對(duì)于此提出積極有效的人才隊(duì)伍建設(shè),從而打破理論型人才的壟斷,逐步向?qū)嵺`型人才靠攏,這樣才能將所學(xué)知識(shí)應(yīng)用到實(shí)踐?,F(xiàn)階段網(wǎng)絡(luò)暴露的弊端越來(lái)越顯著,特別是安全性問(wèn)題日益突出,所以國(guó)家相關(guān)法律法規(guī)也在不斷完善,改革也勢(shì)在必行,這樣才能防止數(shù)據(jù)信息流失,被濫用,或是被惡意篡改,避免被不法分子竊取,還能最大限度保障客戶(hù)信息的安全性,避免私人信息泄露帶來(lái)的不便,保障大眾個(gè)人信息安全,同時(shí)也能保障信息的安全。
在大數(shù)據(jù)時(shí)代,數(shù)據(jù)管理的安全性是非常重要的任務(wù),現(xiàn)階段數(shù)據(jù)安全威脅非常常見(jiàn),基本隨時(shí)可以發(fā)生,信息網(wǎng)承擔(dān)著極為重要的職責(zé),一旦出現(xiàn)不法分子破壞,應(yīng)當(dāng)引起警覺(jué),這樣才能減少對(duì)國(guó)家發(fā)展安全威脅,這期間需要嚴(yán)格關(guān)注大數(shù)據(jù)空氣氣囊,由此判別大數(shù)據(jù)的安全是否受到威脅,以便采取相應(yīng)的措施避免數(shù)據(jù)管理的安全性受到威脅。
總體來(lái)說(shuō),大數(shù)據(jù)時(shí)代的到來(lái)對(duì)國(guó)民經(jīng)濟(jì)的發(fā)展起到一定的促進(jìn)作用,并且能夠優(yōu)化人民的生活狀態(tài),改善生活質(zhì)量,提升大眾的生活水平。文章簡(jiǎn)要闡述了大數(shù)據(jù)的基本概念,分析了大數(shù)據(jù)管理涉及到的關(guān)鍵技術(shù),并且重點(diǎn)剖析了大數(shù)據(jù)管理迎接的挑戰(zhàn),以便更好的認(rèn)知大數(shù)據(jù)管理內(nèi)容,獲得更好的管理效果,帶動(dòng)經(jīng)濟(jì)的發(fā)展。
[1]黎建輝,沈志宏,孟小峰.科學(xué)大數(shù)據(jù)管理:概念、技術(shù)與系統(tǒng)[J].計(jì)算機(jī)研究與發(fā)展,2017,54(02):235-247.
[2]王欽,蔣懷光,文福拴,梅天華.智能電網(wǎng)中大數(shù)據(jù)的概念、技術(shù)與挑戰(zhàn)[J].電力建設(shè),2016,37(12):1-10.
[3]郭長(zhǎng)亮.探析大數(shù)據(jù)技術(shù)對(duì)財(cái)務(wù)管理的機(jī)遇與挑戰(zhàn)[J].財(cái)經(jīng)界(學(xué)術(shù)版),2016,(09):186+188.
[4]劉銘.大數(shù)據(jù)管理面臨的挑戰(zhàn)及技術(shù)新趨勢(shì)[J].信息安全與通信保密,2014,(10):42-43.
[5]孟小峰,慈祥.大數(shù)據(jù)管理:概念、技術(shù)與挑戰(zhàn)[J].計(jì)算機(jī)研究與發(fā)展,2013,50(01):146-169.