郭云清
摘 要 云計(jì)算和云數(shù)據(jù)管理技術(shù)是信息化時(shí)代針對(duì)處理海量數(shù)據(jù)研發(fā)的技術(shù),能夠有效處理大量的數(shù)據(jù),并且因?yàn)樘幚砑夹g(shù)以及相關(guān)技術(shù)具有一定的容錯(cuò)性,因此能夠?qū)Υ罅康牟淮_定的數(shù)據(jù)進(jìn)行處理。同時(shí),其數(shù)據(jù)存儲(chǔ)量大,而且云計(jì)算是以網(wǎng)絡(luò)為核心的分布式系統(tǒng),這樣能夠處理更多的數(shù)據(jù)。因此,本文主要針對(duì)云計(jì)算以及云數(shù)據(jù)管理技術(shù)進(jìn)行分析和探討,主要論述Dynamo技術(shù)、Big Table技術(shù)和GFS技術(shù)分析在云計(jì)算管理中起到的作用。
關(guān)鍵詞 云計(jì)算 云數(shù)據(jù)管理技術(shù) Dynamo技術(shù) Big Table技術(shù) GFS技術(shù)
一、引言
我國(guó)經(jīng)濟(jì)社會(huì)的快速發(fā)展讓企業(yè)在處理信息的時(shí)候承擔(dān)了更多的壓力。尤其是對(duì)海量數(shù)據(jù)的整理、分析和總結(jié),傳統(tǒng)的計(jì)算機(jī)分析系統(tǒng)已經(jīng)不能滿足企業(yè)的需求,云計(jì)算和云數(shù)據(jù)管理技術(shù)應(yīng)運(yùn)而生。目前,在我國(guó)云計(jì)算已經(jīng)逐步應(yīng)用到了各個(gè)行業(yè)之中。這樣不僅可以有效節(jié)省用戶的資源,同時(shí)還可以降低企業(yè)的經(jīng)濟(jì)成本。最重要的是,其提高了計(jì)算的效率和準(zhǔn)確率,擴(kuò)大了數(shù)據(jù)存儲(chǔ)的空間。因此,對(duì)云計(jì)算和云數(shù)據(jù)管理技術(shù)的分析成為有關(guān)行業(yè)的重要目標(biāo)。
二、云計(jì)算的特征分析
云計(jì)算操作簡(jiǎn)單方便,數(shù)據(jù)處理效率高、準(zhǔn)確率高,能夠處理大量的數(shù)據(jù),而且不會(huì)出現(xiàn)系統(tǒng)崩潰的情況。因此,通過云計(jì)算在實(shí)際對(duì)數(shù)據(jù)的處理中體現(xiàn)出的特征進(jìn)行總結(jié)和分析,主要體現(xiàn)在可靠性、經(jīng)濟(jì)性、管理性、服務(wù)性內(nèi)容之上。經(jīng)過具體的操作分析可以發(fā)現(xiàn),高服務(wù)性主要體現(xiàn)于客戶可以不了解云計(jì)算的特性以及具體操作方式,而云計(jì)算可以分析出客戶的需求,這樣可以有針對(duì)性地幫助客戶。其次,云計(jì)算的可靠性體現(xiàn)在利用率分布式的存儲(chǔ)方式上,這樣即使是用多臺(tái)計(jì)算機(jī)計(jì)算而產(chǎn)生了一定的錯(cuò)誤,也可以通過數(shù)據(jù)冗余管理的方式和容錯(cuò)性指導(dǎo)計(jì)算機(jī)進(jìn)一步進(jìn)行計(jì)算。
三、云數(shù)據(jù)管理技術(shù)的分析探討
云數(shù)據(jù)管理技術(shù)是云計(jì)算的具體執(zhí)行過程,主要分為四個(gè)環(huán)節(jié)。第一,是數(shù)據(jù)組織管理,既可以采用分布式數(shù)據(jù)存儲(chǔ)系統(tǒng),對(duì)海量的數(shù)據(jù)進(jìn)行存儲(chǔ)和訪問,主要具有容錯(cuò)性,可以完成云計(jì)算中的數(shù)據(jù)運(yùn)算功能;第二,則是數(shù)據(jù)集合管理,就是對(duì)具有動(dòng)態(tài)性和不確定性的數(shù)據(jù)進(jìn)行統(tǒng)一的管理,對(duì)大量的數(shù)據(jù)進(jìn)行歸類和分類處理,主要采用的處理技術(shù)是分布式處理技術(shù);第三,則是分布式并行處理,主要體現(xiàn)在分布式數(shù)據(jù)環(huán)境中,可以對(duì)數(shù)據(jù)進(jìn)行大量的挖掘?qū)Ρ?,然后依?jù)數(shù)據(jù)的特點(diǎn),可以形成映射關(guān)系,找到數(shù)據(jù)之間的關(guān)系,對(duì)于下一步的管理以及數(shù)據(jù)的匹配具有重要的作用;第四,則是數(shù)據(jù)分析,數(shù)據(jù)分析是云數(shù)據(jù)管理技術(shù)的最終目的,因此想要完成數(shù)據(jù)分析,首先應(yīng)該在海量數(shù)據(jù)庫(kù)中提取和挖掘數(shù)據(jù),并且判斷挖掘的數(shù)據(jù)的可靠性和可利用性,然后對(duì)挖掘出來的數(shù)據(jù)包含的信息和潛在的信息進(jìn)行分析、總結(jié),為將其應(yīng)用到其他領(lǐng)域做準(zhǔn)備。
四、Dynamo技術(shù)分析
Dynamo技術(shù)在云計(jì)算和云數(shù)據(jù)管理中是一個(gè)存儲(chǔ)系統(tǒng),其形式是分布式的,具有數(shù)據(jù)庫(kù)的特點(diǎn),而且Dynamo技術(shù)是以AWS為基礎(chǔ)技術(shù)實(shí)現(xiàn)自身的存儲(chǔ)功能。另外,因?yàn)镈ynamo技術(shù)是以DHT的理念為基礎(chǔ)進(jìn)行設(shè)計(jì)的,因此在各個(gè)環(huán)節(jié)的銜接點(diǎn)上具有環(huán)內(nèi)自主轉(zhuǎn)發(fā),而且自主性極強(qiáng)的特點(diǎn)。同時(shí),由于各個(gè)環(huán)節(jié)是被主控制點(diǎn)控制的,所以出現(xiàn)故障的概率十分小,每個(gè)節(jié)點(diǎn)都是被嚴(yán)格控制的。而且其中最突出的一個(gè)優(yōu)點(diǎn)就是能夠提供多個(gè)副本,然后經(jīng)過實(shí)際的數(shù)據(jù)調(diào)整和改變,重新進(jìn)行記錄和修改,確保最終的記錄是正確的。同時(shí),因?yàn)槠湄?fù)載均衡,所以能夠采用DHT的模式,把數(shù)據(jù)均勻地分布在各個(gè)節(jié)點(diǎn)進(jìn)行儲(chǔ)存。而保證數(shù)據(jù)的訪問量也是均衡的,這對(duì)于數(shù)據(jù)處理十分重要。
五、Big Table技術(shù)分析
Big Table技術(shù)是一種巨型的分布式的數(shù)據(jù)庫(kù),主要以GFS和Map Reduce為基礎(chǔ)。其實(shí)際的表現(xiàn)就是一個(gè)巨型的數(shù)據(jù)表格,通過把不同類型的數(shù)據(jù)進(jìn)行歸類整理,形成的數(shù)據(jù)表格和數(shù)據(jù)包的規(guī)模要大于1024TB。同時(shí),因?yàn)锽ig Table技術(shù)也具有擴(kuò)展性,因此在存儲(chǔ)海量的數(shù)據(jù)的時(shí)候也可以不斷擴(kuò)大,導(dǎo)致利用Big Table技術(shù)可以不斷擴(kuò)大存儲(chǔ)空間和存儲(chǔ)數(shù)據(jù)的量,有效地顯現(xiàn)了云數(shù)據(jù)管理技術(shù)的優(yōu)勢(shì)和特點(diǎn)。而且利用Big Table技術(shù)可以保存每一個(gè)頁(yè)面的內(nèi)容,而每一個(gè)字符串代表的就是單元格的內(nèi)容,因此可以存儲(chǔ)海量的數(shù)據(jù)。最重要的是,可以利用Big Table技術(shù)對(duì)文件進(jìn)行編名、標(biāo)注,這樣在查找的時(shí)候就會(huì)更加方便。
六、GFS技術(shù)分析
GFS技術(shù)也是一個(gè)巨型的分布式的存儲(chǔ)系統(tǒng),與Big Table技術(shù)以及Dynamo技術(shù)的聯(lián)系是十分緊密的,能夠?yàn)槭褂谜咛峁┐罅康臄?shù)據(jù)支持和海量的數(shù)據(jù)存儲(chǔ)。而且由于GFS技術(shù)主要面向客戶使用,因此在節(jié)點(diǎn)上存在客戶端和服務(wù)器,并且可以提供專業(yè)的數(shù)據(jù)接口,同時(shí)可以利用同一個(gè)數(shù)據(jù)函數(shù)完成數(shù)據(jù)的鏈接。而且GFS技術(shù)是一個(gè)數(shù)學(xué)邏輯,對(duì)于數(shù)據(jù)的管理十分重要,避免數(shù)據(jù)存儲(chǔ)出現(xiàn)錯(cuò)誤。
七、結(jié)語(yǔ)
云數(shù)據(jù)管理技術(shù)和云計(jì)算是社會(huì)信息化發(fā)展,海量數(shù)據(jù)誕生引發(fā)的一種數(shù)據(jù)計(jì)算和存儲(chǔ)的變革技術(shù),對(duì)當(dāng)今社會(huì)的數(shù)據(jù)處理具有重要的作用。通過本文的分析可以知道,Dynamo技術(shù)、Big Table技術(shù)以及GFS技術(shù)都是云數(shù)據(jù)管理技術(shù)之一,具有擴(kuò)大數(shù)據(jù)存儲(chǔ)空間、快速處理數(shù)據(jù)的特性,而且因?yàn)榫哂幸欢ǖ娜蒎e(cuò)性,所以不會(huì)因?yàn)槟承?shù)據(jù)錯(cuò)誤而導(dǎo)致系統(tǒng)崩潰,能夠繼續(xù)運(yùn)行。因此,云數(shù)據(jù)管理技術(shù)和云計(jì)算在當(dāng)今社會(huì)起到了重要的作用。
(作者單位為成都理工大學(xué))
參考文獻(xiàn)
[1] 周治宇.云計(jì)算和云數(shù)據(jù)管理技術(shù)分析與探討[J].信息通信,2015(08):178
-179.
[2] 羅亞東.云計(jì)算和云數(shù)據(jù)管理技術(shù)的思考[J].電子制作,2015(04):111-113.
[3] 劉正偉,文中領(lǐng),張海濤.云計(jì)算和云數(shù)據(jù)管理技術(shù)[J].計(jì)算機(jī)研究與發(fā)展,2012(05):122-124.
[4] 崔超.有關(guān)云計(jì)算和云數(shù)據(jù)管理技術(shù)的分析[J].無線互聯(lián)科技,2014(05):123-124.