張鵬飛，錢 晨

(廣東農(nóng)工商職業(yè)技術學院計算機系，廣東廣州510507)

云計算環(huán)境下的分布存儲關鍵技術

張鵬飛，錢 晨

(廣東農(nóng)工商職業(yè)技術學院計算機系，廣東廣州510507)

隨著網(wǎng)絡技術的迅猛發(fā)展，云計算在信息技術發(fā)展中的重要性日漸顯現(xiàn)。作為一種新型的技術，云計算的優(yōu)化利用大大提高了信息數(shù)據(jù)處理與存儲的安全性，而在云計算環(huán)境下，分布存儲關鍵技術的應用極大地提高了分布存儲的高效性和適應性，有利于促進云計算的進一步發(fā)展。該文從不同角度入手客觀闡述了云計算環(huán)境下分布存儲技術產(chǎn)生的背景，分析了云計算環(huán)境下分布存儲關鍵技術的基本構成，并多角度、多層次地探討了云計算環(huán)境下分布存儲關鍵技術的應用。

云計算環(huán)境；分布存儲；關鍵技術

在互聯(lián)網(wǎng)飛速發(fā)展的今天，互聯(lián)網(wǎng)已成為社會大眾日常工作、生活、學習中不可割舍的重要組成部分。隨著網(wǎng)絡技術水平的日漸提高，社會的不斷進步，云技術應運而生，已成為一種全新的信息技術，深受社會大眾的喜愛。因為在不同行業(yè)、領域的飛速發(fā)展過程中，都不可避免地要對海量信息數(shù)據(jù)進行必要地統(tǒng)計、存儲，所以在云計算中，數(shù)據(jù)中心是其關鍵性基礎。目前，在云計算環(huán)境下，相關人員要借助對應的數(shù)據(jù)中心，動態(tài)控制海量數(shù)據(jù)信息，其對應的分布存儲關鍵技術已被廣泛應用到現(xiàn)代生活中，提高了信息數(shù)據(jù)處理的效率和準確率，但還需要進一步優(yōu)化完善分布存儲關鍵技術，在降低能耗、控制成本的同時，順利實現(xiàn)經(jīng)濟效益的最大化。

一、云計算環(huán)境下分布存儲技術產(chǎn)生的背景

隨著科技的迅猛發(fā)展以及網(wǎng)絡的普及化，社會大眾已悄然步入“互聯(lián)網(wǎng)、智能化、大數(shù)據(jù)”時代，信息化程度不斷加深，出現(xiàn)了海量現(xiàn)代信息數(shù)據(jù)，但其存儲受到已有的存儲介質(zhì)的制約，無法滿足社會發(fā)展的客觀需求。針對這個問題，云計算應運而生，借助計算機環(huán)境，有效整合各類信息資源，滿足社會大眾的個性化需求。

云計算是以互聯(lián)網(wǎng)為基點的一種計算方式，它是一個能夠共享基礎資源并可以提供可用配置的計算機模型，服務商不需要過多介入，也能順利完成對應的任務，例如訪問與存儲網(wǎng)絡資源。在云計算系統(tǒng)建構過程中，大部分數(shù)據(jù)中心都是在網(wǎng)絡節(jié)點的作用下相互連接，形成大型的網(wǎng)絡數(shù)據(jù)庫，以便能夠有效滿足用戶多樣化的服務需求，例如基礎設施服務、存儲服務、軟件服務[1]。云計算具有多樣化、規(guī)模大、價格低廉的特點。作為一種關鍵性的新型計算模式，云計算的應用促使不同領域運行中的海量數(shù)據(jù)、信息資源順利實現(xiàn)共享，在這個過程中硬件、軟件是云計算必不可少的關鍵性組成要素，各自發(fā)揮著不同的作用，為進一步開發(fā)、利用共享的信息資源提供了有力的保障。相應地，在云計算運行過程中，數(shù)據(jù)中心發(fā)揮著關鍵性作用，軟硬件是其重要組成元素，其服務器與交換機相融合的形式，提高了數(shù)據(jù)處理及存儲能力，降低了數(shù)據(jù)中心的投資成本，實現(xiàn)了多樣化的功能。

二、云計算環(huán)境下分布存儲關鍵技術的基本結構

(一)以服務器為中心的結構

在互聯(lián)網(wǎng)技術領域中，服務器設備的出現(xiàn)對傳統(tǒng)的服務模式造成了深遠的影響，有利于提高網(wǎng)絡技術產(chǎn)業(yè)的整體效益。以服務器為中心的結構是在網(wǎng)絡線路作用下，把各臺服務器的網(wǎng)卡相連，使其處于統(tǒng)一的網(wǎng)絡體系中，順利實現(xiàn)服務器互聯(lián)。在這種結構的運行過程中，必須科學、合理地處理和存儲對應的數(shù)據(jù)信息，及時轉(zhuǎn)發(fā)數(shù)據(jù)包，實現(xiàn)一系列數(shù)據(jù)信息的共享。與其他結構相比，以服務器為中心的結構并不復雜，沒有相關的數(shù)據(jù)信息轉(zhuǎn)發(fā)設備，例如交換機、路由器[2]，這使得其整體結構及線路連接得以簡化，有效地防止了樹型結構中單點瓶頸問題的出現(xiàn)，在服務器運行中，可以順利傳輸海量的基層網(wǎng)絡數(shù)據(jù)信息。但以服務器為中心的結構也具有一定的缺陷性，一旦網(wǎng)絡線路運行中出現(xiàn)補償，服務器的運轉(zhuǎn)負荷將會大幅度增加，會導致系統(tǒng)設備無法處于安全、穩(wěn)定的運行中，還會在一定程度上增加時間成本，降低系統(tǒng)設備的整體性能。以服務器為中心的結構，其代表是Cam Cube數(shù)據(jù)中心網(wǎng)絡結構，在這種結構中，服務器在三維中的各個節(jié)點都會和其他服務器相連，構成了三維環(huán)狀網(wǎng)絡結構。

(二)以交換機為中心的結構

以交換機為中心的結構屬于傳統(tǒng)型分布存儲技術，但隨著信息化建設步伐的不斷加快，這類結構在各方面存在的問題也不斷顯現(xiàn)，無法有效發(fā)揮這類結構的多樣化性能。這類結構以交換機為基點，有效連接對應的服務器，使其處于統(tǒng)一的網(wǎng)絡體系中，轉(zhuǎn)發(fā)多樣化的數(shù)據(jù)包，但其中的服務器只起到儲存信息數(shù)據(jù)的作用。以交換機為中心的結構類型主要以樹形結構為主，聚合層、核心層、邊緣層是其組成部分[3]，這類結構不復雜，其連接也非常便捷。但在信息化時代背景下，信息數(shù)據(jù)爆炸式增長，樹形結構的存儲量非常有限，無法有效存儲海量的信息數(shù)據(jù)，運轉(zhuǎn)效率也比較低下，因而無法滿足用戶的多樣化需求。

(三)服務器與交換機相結合的結構

從某種角度來說，以服務器為中心、以交換機為中心的結構都存在一定的缺陷性，而二者相結合的結構則可以有效彌補它們各自存在的缺陷，其優(yōu)越性體現(xiàn)在可擴展性、路由費用、網(wǎng)絡結構[4]等方面。在網(wǎng)絡結構方面，服務器、交換機二者相結合的結構可以同時發(fā)揮二者多樣化的作用，更好地發(fā)揮路由轉(zhuǎn)發(fā)功能，促使對應的網(wǎng)絡結構更加自由、靈活。在成本構建方面，這種混合結構同時具備服務器、交換機多樣化的優(yōu)勢，可以在一定程度上降低系統(tǒng)設備運行成本。在可擴展性方面，這類混合結構會受到各服務器所安裝網(wǎng)卡數(shù)量的限制，數(shù)據(jù)中心節(jié)點規(guī)模也會受到限制，并不是無限擴大的。在實際應用中，這類混合結構可以高速傳輸海量的信息數(shù)據(jù)，進一步提高數(shù)據(jù)計算、存儲工作的效率與質(zhì)量，簡化工作流程，減少工作人員的工作量，提高系統(tǒng)運行效益。

三、云計算環(huán)境下分布存儲關鍵技術問題

(一)容錯性與可擴展性問題

在傳統(tǒng)數(shù)據(jù)存儲模式作用下，必須借助高效能的服務器、專業(yè)化的存儲設備，才能實現(xiàn)技術所需的容錯性，但在實現(xiàn)技術目標的過程中，會大大增加設備運行成本，還會在一定程度上降低信息數(shù)據(jù)存儲的準確率，出現(xiàn)各種技術方面的問題。在云計算環(huán)境下，數(shù)據(jù)存儲失效已成為一種常見現(xiàn)象。據(jù)相關統(tǒng)計分析，在系統(tǒng)設備運行中，經(jīng)常出現(xiàn)節(jié)點失效問題，經(jīng)過具體運算，失效的節(jié)點不止一個，而在大規(guī)模數(shù)據(jù)采集運行作業(yè)中，每隔6個小時，便會有一個磁盤會出現(xiàn)節(jié)點失效問題，導致數(shù)據(jù)采集作業(yè)無法順利進行，采集的數(shù)據(jù)信息準確率低下，相關工作無法順利開展，造成無法估量的經(jīng)濟損失。針對這種情況，必須優(yōu)化利用分布存儲關鍵技術，有效解決高強度作業(yè)中存在的問題，合理解決存在的容錯性以及可擴展性問題，提高數(shù)據(jù)存儲準確率，盡可能挽回造成的經(jīng)濟損失。

(二)成本控制問題

在傳統(tǒng)分布存儲結構作用下，只能存儲、計算乃至處理小規(guī)模的信息數(shù)據(jù)，能耗率較高。在信息時代背景下，世界范圍內(nèi)各個國家的聯(lián)系日益緊密，計算機網(wǎng)絡信息技術持續(xù)發(fā)展，數(shù)據(jù)規(guī)模持續(xù)擴大，海量數(shù)據(jù)不斷涌現(xiàn)，如何動態(tài)控制成本已成為新時期信息企業(yè)值得思考的重大問題，而降低能耗與成本、獲取更多的經(jīng)濟利潤，已成為商家關注的焦點，也是急需要解決的重大課題，這也是云計算環(huán)境下分布存儲關鍵技術不斷發(fā)展壯大的關鍵所在。

四、云計算環(huán)境下分布存儲關鍵技術的應用

在云計算環(huán)境下，分布存儲關鍵技術應用中也會出現(xiàn)各種問題，例如成本控制問題、可擴展性問題、容錯性問題等。但隨著信息技術的飛速發(fā)展，這些問題都逐步得到了有效的解決，提高了云計算環(huán)境下的數(shù)據(jù)分析及處理效率，也使分布存儲關鍵技術得以更好地應用，起到了舉足輕重的作用，有利于促進相關領域、行業(yè)的持續(xù)發(fā)展。

(一)數(shù)據(jù)容錯技術的應用

站在客觀的角度講，容錯技術是時代發(fā)展的產(chǎn)物，也是云計算環(huán)境下關鍵性的分布存儲技術之一，良好的容錯技術可以在一定程度上提高系統(tǒng)設備的可用性，提高海量信息數(shù)據(jù)的訪問率。數(shù)據(jù)容錯技術是指在計算機系統(tǒng)的穩(wěn)定運行過程中，即使出現(xiàn)錯誤激活問題，對應的系統(tǒng)仍然能為用戶提供優(yōu)質(zhì)信息數(shù)據(jù)服務。在相關領域、行業(yè)的發(fā)展過程中，數(shù)據(jù)容錯技術的應用進一步提高了計算機的可靠性和應用性。但冗余信息數(shù)據(jù)也會不斷出現(xiàn)，如何根據(jù)其具體情況，通過不同途徑采取可行的措施實現(xiàn)容錯，并在此基礎上優(yōu)化利用各類存儲資源，已成為新時期相關領域研究人員研究的重要課題。就容錯技術來說，結合其性質(zhì)、特點等，可以將其分為兩類，一是糾刪碼容錯技術，一是復制容錯技術[5]。

1.糾刪碼容錯技術的應用

糾刪碼容錯技術是借助信道實現(xiàn)傳輸?shù)木幋a技術，可以容忍不止一個信息數(shù)據(jù)塊的丟失，并能將其巧妙引入對應的分布式存儲領域，減少對應的存儲空間。在編碼過程中，在糾刪碼容錯技術作用下，可以將多個信息數(shù)據(jù)對象應用其中，新的編碼數(shù)據(jù)對象便應運而生，可以完全復制一系列的信息數(shù)據(jù)，降低存儲量。但在具體應用中，糾刪碼容錯技術存在一定的缺陷性，需要花費大量的計算成本，如果信息數(shù)據(jù)出現(xiàn)失真現(xiàn)象，也需要花費大筆的修復費用。針對這種情況，在應用糾刪碼容錯技術的過程中，相關人員必須堅持具體問題具體分析的原則，根據(jù)具體情況，加以優(yōu)化調(diào)整，更好地發(fā)揮其多樣化作用。

2.復制容錯技術

在應用復制容錯技術的過程中，必須在某數(shù)據(jù)對象中創(chuàng)建多個同樣的模塊，將其合理分布在不同存儲節(jié)點中，也就是說如果某數(shù)據(jù)對象失效，用戶可以利用其它相同模塊獲取所需的數(shù)據(jù)信息。復制容錯技術簡單易用，操作并不復雜，具有較高的讀取效率，在實際應用中深受社會大眾的喜愛。需要注意的是，復制容錯技術也存在一定的缺陷性，這是因為每個數(shù)據(jù)對象都有多個數(shù)據(jù)模塊，必須擁有較大的存儲空間。

(二)節(jié)能技術的應用

根據(jù)相關的調(diào)查分析，在正常運行過程中，存儲系統(tǒng)的實際消耗大約占45%左右，也就是說在節(jié)能技術研究中，研究人員必須將重心放在能耗方面，動態(tài)控制設備系統(tǒng)成本，從而取得一定的生態(tài)環(huán)境效益。

一是軟件節(jié)能技術。在實踐中，軟件節(jié)能技術的應用可以提高設備系統(tǒng)的運行性能，盡可能降低存儲信息數(shù)據(jù)的能耗，科學地管理對應的節(jié)點與信息數(shù)據(jù)。在云計算環(huán)境下，相關人員可以全面、客觀的分析存儲節(jié)點的具體分布情況，并加以優(yōu)化調(diào)整，借助云計算，自動化分析對應的信息數(shù)據(jù)，促使計算機處于自動化關閉狀態(tài)，降低各方面的能耗率，提高各方面的資源利用率，降低系統(tǒng)設備的運行成本。

二是硬件節(jié)能技術。就硬件節(jié)能技術來講，我們可以從硬件層次入手進行深入分析，將其分為兩類，即數(shù)據(jù)中心技術和計算機整體技術[6]。應用過程中，在數(shù)據(jù)中心技術作用下，云計算環(huán)境下的低性能設備將被高性能設備取代，從而提高了相關領域、行業(yè)的運行效率。在計算機整體技術作用下，云計算背景下的高能耗結構將被低能耗結構、新型體系結構所取代，具有較好的節(jié)能效果，圖1為海量空間數(shù)據(jù)存儲服務結構圖，是這些結構的典型代表。

圖1 海量空間數(shù)據(jù)存儲服務結構圖

五、結語

總而言之，在新形勢下，云計算的多樣化功能不斷顯現(xiàn)，逐漸被廣泛應用到多個領域。在云計算環(huán)境下的具體應用過程中，相關人員必須根據(jù)分布存儲關鍵技術的特點、性質(zhì)等，有效解決存在的問題，從多個角度有效彌補存在的缺陷，在提高計算機系統(tǒng)兼容性的基礎上，降低信息數(shù)據(jù)的存儲冗余性等不足。相關人員必須全面、深入地研究對應的網(wǎng)絡拓撲結構，確保海量信息數(shù)據(jù)的存儲擁有高效運轉(zhuǎn)的存儲空間，優(yōu)化調(diào)整數(shù)據(jù)存儲方式，促使對應的系統(tǒng)設備處于安全、穩(wěn)定的運行中，降低系統(tǒng)設備的故障發(fā)生率，降低其運營成本，提高其運營效益，從而取得較好的“經(jīng)濟、社會、生態(tài)”效益。不斷促進云計算持續(xù)發(fā)展，為不同行業(yè)、領域持續(xù)注入新鮮的血液，促進社會經(jīng)濟的持續(xù)發(fā)展，將是所有云計算技術人員未來必須要持續(xù)進行的工作。

[1]涂振發(fā).云計算環(huán)境下海量空間數(shù)據(jù)高效存儲關鍵技術研究[D].武漢大學，2012.

[2]陳曉紅.云計算環(huán)境下的分布存儲的相關技術[J].計算機光盤軟件與應用，2014(21):33－35.

[3]張琛，楊浩.分布存儲關鍵技術在云計算環(huán)境下的分析[J].當代教育實踐與教學研究，2016(2):70.

[4]馮敬益.基于云計算環(huán)境下的分布存儲關鍵技術分析[J].電腦編程技巧與維護，2016(5):59－60.

[5]趙鑫.基于云計算環(huán)境下的分布存儲關鍵技術分析[J].電子技術與軟件工程，2015(5):211.

[6]宋煒煒.基于時空信息云平臺的空間大數(shù)據(jù)管理和高性能計算研究[D].昆明理工大學，2015.

(責任編輯:肖勝中)

Key Technologies of Distributed Storage in Cloud Computing Environment

ZHANG Pengfei,QIAN Chen
(Guangdong Agriculture Industry Business Polytechnic,Guangzhou 510507,China)

With the rapid development of network technology,the importance of cloud computing in the development of information technology is becoming more and more important.As a new type of resource,optimizing the cloud computer use can improve the security of information processing and storage of data,and in the cloud computing environment,the application of the key technology of distributed storage has greatly improved the efficiency and adaptability of distributed storage,which is conducive to promoting the further development of cloud computing.Therefore,the author expounds the background of distributed storage technology in cloud computing environment at the different angles,analyses the basic structure of key technologies of distributed storage in cloud computing environment,discusses the application of storage and distribution of key technology in cloud computing environment in a multi angle and multi-level way.

cloud computing environment;distributed storage;key technology

TP333

A

1009－931X(2016)04—0037－04

2016－09－20

張鵬飛(1976－)，女，山西朔州人，副教授，軟件工程碩士，研究方向:云計算及軟件開發(fā)方面的研究及教學。