周 源，馮文龍，黃夢(mèng)醒

（海南大學(xué) 信息科學(xué)技術(shù)學(xué)院，海南 ?？?70100）

0 引 言

目前云計(jì)算安全研究主要集中在云資源安全，數(shù)據(jù)安全，和用戶接入控制等方面，而對(duì)云服務(wù)系統(tǒng)的主要構(gòu)件中間件的安全研究很少。中間件的可靠性是云服務(wù)系統(tǒng)安全運(yùn)行的前提。在云計(jì)算環(huán)境下，中間件的安全包括很多方面，而實(shí)現(xiàn)安全中間件的最基本最首要的條件就是要做到負(fù)載均衡。

目前，在云計(jì)算環(huán)境下的負(fù)載均衡機(jī)制大部分都是基于云資源的，這樣的負(fù)載均衡機(jī)制在一些架構(gòu)相對(duì)簡(jiǎn)單的云服務(wù)系統(tǒng)確實(shí)能夠?qū)崿F(xiàn)很好的均衡效果，但是卻不適用于基于中間件的復(fù)雜的云服務(wù)系統(tǒng)。本文提出的云計(jì)算環(huán)境下基于中間件的負(fù)載均衡機(jī)制充分考慮了云服務(wù)系統(tǒng)的特點(diǎn)，實(shí)現(xiàn)了更細(xì)粒度的負(fù)載均衡。

1 中間件負(fù)載均衡機(jī)制總體設(shè)計(jì)

云服務(wù)系統(tǒng)的體系結(jié)構(gòu)如圖1所示。

圖1 云服務(wù)系統(tǒng)體系結(jié)構(gòu)

中間件是云服務(wù)系統(tǒng)的業(yè)務(wù)邏輯組件，處于數(shù)據(jù)層之上，為客戶端提供服務(wù)。在這里，云資源指在物理資源的基礎(chǔ)上，通過(guò)虛擬化技術(shù)得到的一系列虛擬資源。

本文基于圖1所示的云服務(wù)系統(tǒng)的體系結(jié)構(gòu)，提出了一種中間件負(fù)載均衡機(jī)制。首先建立一種基于中間件的監(jiān)控模型，在監(jiān)控模型中監(jiān)控影響中間件負(fù)載的參數(shù)，周期性獲取各個(gè)參數(shù)的值，并對(duì)各個(gè)參數(shù)的值進(jìn)行加權(quán)計(jì)算后及時(shí)將計(jì)算結(jié)果向?qū)?yīng)的中間件處理機(jī)反饋。其次，建立一種基于中間件的負(fù)載均衡結(jié)構(gòu)模型，并根據(jù)這個(gè)結(jié)構(gòu)模型使用適當(dāng)?shù)木馑惴?，?shí)現(xiàn)各個(gè)中間件的均衡，保障云服務(wù)系統(tǒng)的安全可靠。中間件負(fù)載均衡機(jī)制總體設(shè)計(jì)如圖2所示。

圖2 中間件負(fù)載均衡機(jī)制總體設(shè)計(jì)

2 監(jiān)控模型設(shè)計(jì)

2.1 監(jiān)控模型

云計(jì)算環(huán)境下基于中間件的負(fù)載均衡算法的實(shí)現(xiàn)，首先要確定負(fù)載的定義，這里負(fù)載指用戶的服務(wù)請(qǐng)求，然后要確定影響負(fù)載的參數(shù)，并建立一個(gè)監(jiān)控機(jī)制來(lái)獲取這些參數(shù)的值。為了準(zhǔn)確地描述中間件的負(fù)載，選擇虛擬服務(wù)器的CPU利用率、內(nèi)存利用率、網(wǎng)絡(luò)利用率和中間件的處理能力、連接利用率作為影響中間件負(fù)載的參數(shù)：

（1）虛擬服務(wù)器是云服務(wù)系統(tǒng)架構(gòu)的基礎(chǔ)設(shè)施，所以云服務(wù)系統(tǒng)的性能必然與虛擬服務(wù)器的配置有關(guān)。因此選擇虛擬服務(wù)器的CPU利用率、內(nèi)存利用率、網(wǎng)絡(luò)利用率作為影響中間件負(fù)載的參數(shù)。

（2）由于部署云服務(wù)系統(tǒng)的中間件時(shí)，很可能采用不同的中間件技術(shù)，比如部署一個(gè)web系統(tǒng)的中間件時(shí)，應(yīng)用服務(wù)器有的使用Jboss，有的使用Weblogic，這樣會(huì)使得中間件的處理能力存在很大差別。另外，即便是使用同樣的中間件技術(shù)，比如一個(gè)web系統(tǒng)的中間件都是Weblogic，但是根據(jù)部署系統(tǒng)的實(shí)際需求購(gòu)買的Weblogic的版本不同，這種情況下中間件的處理能力也是可能存在差異的。因此選擇中間件的處理能力作為影響中間件負(fù)載的參數(shù)。

（3）由于軟件本身的限制，中間件一般只能進(jìn)行一定數(shù)量的連接，因此就可能出現(xiàn)這樣的情況，虛擬服務(wù)器的CPU利用率、內(nèi)存利用率、網(wǎng)絡(luò)利用率還不高，但是中間件的連接已經(jīng)超負(fù)荷了，在這種情況下，中間件處理機(jī)是不能將用戶的服務(wù)請(qǐng)求轉(zhuǎn)發(fā)給這個(gè)中間件的。因此選擇中間件的連接利用率作為影響中間件負(fù)載的參數(shù)。

從提高系統(tǒng)性能、增加網(wǎng)絡(luò)吞吐量、縮短中間件平均響應(yīng)時(shí)間等方面考慮，云計(jì)算環(huán)境下基于中間件的監(jiān)控模型如圖3所示，主要分為：①中間件處理機(jī)的均衡算法模塊：主要通過(guò)一種均衡算法將各個(gè)中間件反饋過(guò)來(lái)的負(fù)載信息進(jìn)行處理，并根據(jù)該均衡算法轉(zhuǎn)發(fā)服務(wù)請(qǐng)求到各個(gè)中間件。②中間件處理機(jī)的監(jiān)控模塊：主要用來(lái)周期性檢測(cè)其管理的中間件的可用性。③中間件的負(fù)載收集模塊：主要用來(lái)周期性收集影響中間件負(fù)載的參數(shù)的值。④中間件的負(fù)載算法模塊：主要通過(guò)一種負(fù)載算法對(duì)收集來(lái)的參數(shù)的值進(jìn)行處理。⑤中間件的警報(bào)模塊：主要用來(lái)周期性檢測(cè)云資源和中間件中影響中間件負(fù)載的各個(gè)參數(shù)的使用狀況。

圖3 監(jiān)控模型

云計(jì)算環(huán)境下基于中間件的監(jiān)控模型的各個(gè)模塊協(xié)同工作的實(shí)現(xiàn)：

（1）中間件通過(guò)自身的負(fù)載收集模塊，周期性地收集影響自身負(fù)載的參數(shù)的值，并且將收集到的參數(shù)的值交給自身的負(fù)載算法模塊進(jìn)行處理。負(fù)載算法模塊將根據(jù)一個(gè)負(fù)載算法處理數(shù)據(jù)，并將處理結(jié)果通過(guò)網(wǎng)絡(luò)反饋給對(duì)應(yīng)的中間件處理機(jī)。

（2）中間件處理機(jī)在收到其管理的中間件反饋過(guò)來(lái)的負(fù)載信息之后，將負(fù)載信息交給自己的均衡算法模塊進(jìn)行處理。均衡算法模塊將根據(jù)一個(gè)均衡算法對(duì)負(fù)載信息進(jìn)行處理，并將處理結(jié)果保存。

當(dāng)中間件處理機(jī)收到服務(wù)請(qǐng)求之后，就交給均衡算法模塊。均衡算法模塊查找負(fù)載信息處理結(jié)果，并根據(jù)均衡算法，將服務(wù)請(qǐng)求轉(zhuǎn)發(fā)到合適的中間件處理。

（3）根據(jù)各個(gè)影響中間件負(fù)載的參數(shù)對(duì)中間件性能影響大小，可以設(shè)置不同的閾值。

中間件的警報(bào)模塊周期性地對(duì)云資源和中間件中影響中間件負(fù)載的參數(shù)進(jìn)行檢測(cè)。當(dāng)某個(gè)參數(shù)的值在n次檢測(cè)中都超過(guò)了設(shè)定的閾值，中間件的警報(bào)模塊就告訴對(duì)應(yīng)的中間件處理機(jī)，讓該中間件處理機(jī)禁止再把服務(wù)請(qǐng)求轉(zhuǎn)發(fā)過(guò)來(lái)。

除了對(duì)影響中間件負(fù)載的參數(shù)設(shè)定閾值，其實(shí)還有些參數(shù)也需要設(shè)置閾值，比如中間件的平均響應(yīng)時(shí)間等。

（4）中間件處理機(jī)的監(jiān)控模塊周期性地向其管理的中間件發(fā)送詢問(wèn)信息，如果在規(guī)定的時(shí)間內(nèi)收到中間件的確認(rèn)信息，表明這個(gè)中間件狀況良好且這個(gè)中間件與中間件處理器之間的網(wǎng)絡(luò)連接是正常的；如果中間件處理機(jī)未收到確認(rèn)信息或者收到超時(shí)的確認(rèn)信息，將再向該中間件發(fā)出詢問(wèn)信息。假如反復(fù)m次詢問(wèn)都沒收到確認(rèn)信息或者只收到超時(shí)的確認(rèn)信息，則判斷中間件或網(wǎng)絡(luò)連接出現(xiàn)故障。出現(xiàn)故障之后中間件處理機(jī)就把這個(gè)中間件設(shè)為不可用，以后的服務(wù)請(qǐng)求就不再轉(zhuǎn)發(fā)到這個(gè)中間件。

2.2 中間件負(fù)載算法的實(shí)現(xiàn)

中間件的負(fù)載狀況由虛擬服務(wù)器的CPU利用率C、內(nèi)存利用率M，網(wǎng)絡(luò)利用率N和中間件的處理能力Ability、連接利用率L決定。綜合考慮這些影響中間件負(fù)載的參數(shù)，并考慮各個(gè)參數(shù)對(duì)中間件負(fù)載影響作用的大小，對(duì)中間件的負(fù)載算法進(jìn)行設(shè)計(jì)：

（1）部署中間件的時(shí)候，由于使用的中間件技術(shù)可能不同，或者是同樣的中間件技術(shù)，使用不同的版本，因此會(huì)導(dǎo)致各個(gè)中間件的處理能力的不同。所以，首先對(duì)各個(gè)中間件的處理能力進(jìn)行評(píng)估，并設(shè)置權(quán)值A(chǔ)bility，處理能力越強(qiáng)，Ability的值就設(shè)置的越大。Ablility的值需要通過(guò)反復(fù)測(cè)試進(jìn)行調(diào)整，對(duì)于同一個(gè)中間件在不同的系統(tǒng)環(huán)境中，Ablility的值可能有所不同。

（2）中間件上的連接分為靜態(tài)連接與動(dòng)態(tài)連接，靜態(tài)連接指放在連接池中處于監(jiān)聽狀態(tài)的連接；動(dòng)態(tài)連接指已經(jīng)處于接收或發(fā)送數(shù)據(jù)的連接。因?yàn)橹虚g件處理動(dòng)態(tài)連接與處理靜態(tài)連接所消耗的系統(tǒng)資源不一樣，因此中間件的連接數(shù)需要通過(guò)靜態(tài)連接數(shù)與動(dòng)態(tài)連接數(shù)進(jìn)行加權(quán)計(jì)算。如下所示

式中：Link——加權(quán)計(jì)算后的中間件連接數(shù)，dynamicLink——?jiǎng)討B(tài)連接數(shù)，staticLink——靜態(tài)連接數(shù)。k——權(quán)重系數(shù)，顯然動(dòng)態(tài)連接所消耗的系統(tǒng)資源要比靜態(tài)連接要多，因此k＞1，通過(guò)實(shí)驗(yàn)得到，對(duì)于不同的系統(tǒng)環(huán)境，k可能有所不同。

根據(jù)所使用的中間件的性能，可以得出各個(gè)中間件的最大連接能力，用中間件的最大連接數(shù)來(lái)表示，這個(gè)連接數(shù)是指靜態(tài)連接數(shù)。通過(guò)式1，將中間件已經(jīng)使用的靜態(tài)連接數(shù)和動(dòng)態(tài)連接數(shù)，統(tǒng)一歸化為以靜態(tài)連接數(shù)為基本單位的連接數(shù)，則中間件的連接利用率L

TotalLink為中間件最大連接數(shù)，Link由式 （1）得到，為中間件已經(jīng)使用的連接數(shù)。

其中，Load反應(yīng)中間件負(fù)載的狀況，值越大，負(fù)載越重。α、β、γ、δ、ε表示各種因素對(duì)中間件負(fù)載狀況的影響程度，值越大，影響越大，且α＋β＋γ＋δ＋ε＝1。

3 均衡設(shè)計(jì)

3.1 中間件的負(fù)載均衡結(jié)構(gòu)模型

云計(jì)算環(huán)境下基于中間件的負(fù)載均衡模型有分布式模型和集中式模型兩種。

在云服務(wù)系統(tǒng)中，如果使用集中式負(fù)載均衡模型，則客戶端的所有服務(wù)請(qǐng)求都通過(guò)一臺(tái)中間件處理機(jī)處理，那么這臺(tái)中間件處理機(jī)必然會(huì)成為云服務(wù)系統(tǒng)的瓶頸。而采用分布式負(fù)載均衡模型，使用多臺(tái)中間件處理機(jī)并行處理客戶端的服務(wù)請(qǐng)求，分?jǐn)偡?wù)請(qǐng)求量，就能很好的解決這個(gè)問(wèn)題。因此，本文采用的云計(jì)算環(huán)境下基于中間件的負(fù)載均衡模型使用分布式模型結(jié)構(gòu)，如圖4所示。所有中間件處理機(jī)通過(guò)網(wǎng)絡(luò)連接起來(lái)，使它們可以實(shí)現(xiàn)同步和數(shù)據(jù)交換。每個(gè)中間件處理機(jī)管理著數(shù)個(gè)中間件，中間件處理機(jī)與這些中間件通過(guò)網(wǎng)絡(luò)相連。

圖4 負(fù)載均衡模型

在圖4所示的云計(jì)算環(huán)境下基于中間件的負(fù)載均衡模型中，客戶端訪問(wèn)云服務(wù)系統(tǒng)的流程：

（1）客戶端向云服務(wù)系統(tǒng)發(fā)起服務(wù)請(qǐng)求。

（2）云服務(wù)系統(tǒng)根據(jù)一定的策略，將客戶端發(fā)起的服務(wù)請(qǐng)求轉(zhuǎn)發(fā)給某個(gè)中間件處理機(jī)。比如基于DNS，在所有中間件處理機(jī)中選擇與用戶在地理上最接近的中間件處理機(jī)。

（3）中間件處理機(jī)收到請(qǐng)求后，通過(guò)均衡算法，將服務(wù)請(qǐng)求轉(zhuǎn)發(fā)給合適的中間件進(jìn)行處理。

建筑精裝修施工技術(shù)人員作為建筑精裝修工程建設(shè)當(dāng)中首要因素，他們奮戰(zhàn)在施工前線，貫穿精裝修工程建設(shè)各施工環(huán)節(jié)，對(duì)于建筑精裝修工程總體質(zhì)量有著決定性因素，由此可見精裝修施工隊(duì)伍總體素質(zhì)是多么的重要。為此，建筑企業(yè)應(yīng)當(dāng)高度重視精裝修施工隊(duì)伍建設(shè)工作，加強(qiáng)施工隊(duì)伍專業(yè)技能以及安全責(zé)任意識(shí)等方面培訓(xùn)工作，使得施工人員具有更高的專業(yè)技能以及安全責(zé)任意識(shí)。通過(guò)相關(guān)培訓(xùn)以及教育活動(dòng)，使得從業(yè)人員能夠恪守施工管理制度，有效避免違規(guī)施工作業(yè)，保障精裝修項(xiàng)目順利進(jìn)行。

（4）中間件將服務(wù)請(qǐng)求處理之后，應(yīng)該將處理結(jié)果反饋給客戶端。此時(shí)，為了減輕中間件處理機(jī)的負(fù)擔(dān)，避免中間件處理機(jī)成為系統(tǒng)的瓶頸，中間件應(yīng)該將處理結(jié)果直接反饋給客戶端，而不要再通過(guò)中間件處理機(jī)來(lái)轉(zhuǎn)發(fā)。

3.2 中間件均衡算法的實(shí)現(xiàn)

云服務(wù)系統(tǒng)各個(gè)中間件均衡的實(shí)現(xiàn)，核心就是均衡算法的實(shí)現(xiàn)。均衡算法的主要作用是將來(lái)自客戶端的服務(wù)請(qǐng)求比較合理地分?jǐn)偟礁鱾€(gè)中間件，使得各個(gè)中間件能夠均衡地承擔(dān)這些服務(wù)請(qǐng)求，從而實(shí)現(xiàn)整個(gè)云服務(wù)系統(tǒng)的均衡性。

常用的均衡算法包括輪轉(zhuǎn)法、加權(quán)輪轉(zhuǎn)法、最小負(fù)載優(yōu)先法、加權(quán)最小負(fù)載優(yōu)先法等。本文采用最小負(fù)載優(yōu)先法：各個(gè)中間件周期性地將其Load值反饋給對(duì)應(yīng)的中間件處理機(jī)，這個(gè)中間件處理機(jī)在收到這些Load值之后，根據(jù)Load值的大小排序，Load值越大表示負(fù)載越重。中間件處理機(jī)每次收到客戶端的請(qǐng)求之后，都將請(qǐng)求轉(zhuǎn)發(fā)給Load值最小的中間件。

4 仿真實(shí)驗(yàn)

為了驗(yàn)證本文設(shè)計(jì)的云計(jì)算環(huán)境下中間件的負(fù)載均衡機(jī)制的效果，根據(jù)圖4所示，搭建一個(gè)Web服務(wù)平臺(tái)作為仿真實(shí)驗(yàn)平臺(tái)，進(jìn)行一個(gè)簡(jiǎn)單的仿真實(shí)驗(yàn)。平臺(tái)描述：

（1）服務(wù)器集群由兩臺(tái)PC機(jī)組成，分別為PC機(jī)a和PC機(jī)b，兩臺(tái)PC機(jī)在配置上有區(qū)別，主要參數(shù)對(duì)比見表1。

（2）中間件處理機(jī)由一臺(tái)PC機(jī)實(shí)現(xiàn)。

（3）在PC機(jī)a，b上分別布置一個(gè)中間件，為中間件a和中間件b，提供web服務(wù)。采用的中間件技術(shù)是Sun的J2EE標(biāo)準(zhǔn)，使用的具體技術(shù)為EJB，JSP等，EJB容器均為Jboss。

表1 實(shí)驗(yàn)PC機(jī)配置對(duì)比

在仿真實(shí)驗(yàn)平臺(tái)中，通過(guò)比較傳統(tǒng)的基于云資源的，只考慮虛擬服務(wù)器CPU、內(nèi)存、網(wǎng)絡(luò)等參數(shù)的負(fù)載均衡機(jī)制與本文設(shè)計(jì)的負(fù)載均衡機(jī)制的均衡效果，來(lái)驗(yàn)證本文設(shè)計(jì)的負(fù)載均衡機(jī)制的性能。測(cè)試采用的評(píng)價(jià)指標(biāo)為中間件的平均響應(yīng)時(shí)間。每種算法取9個(gè)測(cè)試點(diǎn)，每個(gè)點(diǎn)測(cè)試10次，取平均值作為測(cè)試結(jié)果。測(cè)試中，中間件收集負(fù)載的周期為20s，中間件對(duì)云資源和中間件中影響中間件負(fù)載的參數(shù)進(jìn)行檢測(cè)的周期為10s，n的取值為3，中間件處理機(jī)監(jiān)控中間件可用性的周期為10s，m的取值為3，式 （1），式 （3）中的權(quán)重系數(shù)k，α、β、γ、δ、ε的取值見表2，各個(gè)參數(shù)所設(shè)定的閾值見表3。

表2 各個(gè)權(quán)重系數(shù)的實(shí)驗(yàn)取值

表3 各個(gè)參數(shù)的閾值設(shè)定

經(jīng)過(guò)實(shí)驗(yàn)仿真，中間件a的平均響應(yīng)時(shí)間測(cè)試結(jié)果如圖5所示，中間件b的平均響應(yīng)時(shí)間測(cè)試結(jié)果如圖6所示。

圖5 中間件a平均響應(yīng)時(shí)間對(duì)比

圖6 中間件b平均響應(yīng)時(shí)間對(duì)比

圖5、圖6分析結(jié)果表明，當(dāng)服務(wù)請(qǐng)求數(shù)比較少的時(shí)候，傳統(tǒng)基于云資源的負(fù)載均衡機(jī)制與本文設(shè)計(jì)的基于中間件的負(fù)載均衡機(jī)制的均衡效果相差不大。但是隨著服務(wù)請(qǐng)求數(shù)的增加，基于中間件的負(fù)載均衡機(jī)制的均衡效果明顯優(yōu)于傳統(tǒng)基于云資源的負(fù)載均衡機(jī)制的均衡效果。

5 結(jié)束語(yǔ)

本文針對(duì)云服務(wù)系統(tǒng)的特點(diǎn)，結(jié)合中間件處理異構(gòu)系統(tǒng)的優(yōu)勢(shì)，提出了一種在云計(jì)算環(huán)境下基于中間件的負(fù)載均衡機(jī)制。該負(fù)載均衡機(jī)制在傳統(tǒng)基于云資源的負(fù)載均衡機(jī)制的基礎(chǔ)上，充分考慮了中間件對(duì)云服務(wù)系統(tǒng)的安全可靠性的影響，提出了基于中間件的監(jiān)控模型和負(fù)載均衡算法，保證了中間件的可靠運(yùn)行，從而在一定程度上解決傳統(tǒng)負(fù)載均衡機(jī)制的局限性，提高云服務(wù)系統(tǒng)的負(fù)載均衡效果。從仿真實(shí)驗(yàn)結(jié)果和性能分析可以看出，該負(fù)載均衡機(jī)制效果良好，實(shí)現(xiàn)了負(fù)載均衡，并且能夠有效縮短處理用戶請(qǐng)求的中間件的平均響應(yīng)時(shí)間，具有良好的可用性。

［1］Armbrust M，F(xiàn)ox A，Griffith R，et al.A view of cloud computing ［J］.Communications of the ACM，2010，53 （4）：50－58.

［2］WU Quanyuan.Network computing middleware ［J］.Journal of software，2013，24 （1）：67－76 （in Chinese）.［吳泉源.網(wǎng)絡(luò)計(jì)算中間件 ［J］.軟件學(xué)報(bào)，2013，24 （1）：67－76.］

［3］Blair G S，Coulson G，Robin P，et al.An architecture for next generation middleware ［C］／／Proceedings of the IFIP International Conference on Distributed Systems Platforms and Open Distributed Processing，2009：191－206.

［4］TIAN Wenhong，ZHAO Yong.Cloud computing：Resource scheduling management ［M］.Beijing：National Defense Industry Press，2011：81－91 （in Chinese）.［田文洪，趙勇.云計(jì)算：資源調(diào)度管理 ［M］.北京：國(guó)防工業(yè)出版社，2011：81－91.］

［5］GE Junwei，ZHANG Bo，F(xiàn)ANG Yiqiu.Study on resource monitoring model in cloud computing environment ［J］.Computer Engineering，2011，37 （11）：31－33 （in Chinese）.［葛君偉，張博，方義秋.云計(jì)算環(huán)境下的資源監(jiān)測(cè)模型研究 ［J］.計(jì)算機(jī)工程，2011，37 （11）：31－33.］

［6］Radojevic B，Zagar M.Analysis of issues with load balancing algorithms in hosted（cloud）environments ［C］／／Proceedings of the 34th International Convention.IEEE，2011：416－420.

［7］LI Yuanhong.Design and implementation of dynamic load balancing based on feedback scheduling algorithm in heterogeneous environment of Hadoop ［D］.Nanjing：Nanjing University of Science and Technology，2012：24－36 （in Chinese）.［李元洪.基于反饋的動(dòng)態(tài)負(fù)載平衡調(diào)度算法在Hadoop異構(gòu)環(huán)境中的設(shè)計(jì)與實(shí)現(xiàn) ［D］.南京：南京理工大學(xué)，2012：24－36.］

［8］Wood T，Shenoy P，Venkataramani A，et al.Black－box and gray－box strategies for virtual machine migration ［C］／／Proceedings of the 4th USENIX conference on Networked systems design ＆implementation，2007.

［9］Tian W，Zhao Y，Zhong Y，et al.A dynamic and integrated load－balancing scheduling algorithm for cloud datacenters［C］／／IEEE International Conference on Cloud Computing and Intelligence Systems，2011：311－315.

［10］WANG Jun，ZHENG Di，WU Quanyuan.Resear ch of high scalable distributed load balancing middleware technologies［J］.Computer Engineering，2008，34 （5）：39－41 （in Chinese）.［王俊，鄭笛，吳泉源.分布式高可擴(kuò)展負(fù)載平衡中間件技術(shù)研究 ［J］.計(jì)算機(jī)工程，2008，34 （5）：39－41.］

［11］ZHAO Chunyan.Research and implementation of job seheduling algorithm in cloud computing ［D］.Beijing：Beijing Jiaotong University，2009：32－51 （in Chinese）.［趙春燕.云環(huán)境下作業(yè)調(diào)度算法研究與實(shí)現(xiàn) ［D］.北京：北京交通大學(xué)，2009：32－51.］

［12］FENG Xiuling.Research and design the load balancing algorithm in cloud computing ［D］.Beijing：Beijing University of Posts and Telecommunications，2012：6－24 （in Chinese）.［馮秀玲.云計(jì)算環(huán)境下的負(fù)載均衡算法的研究與設(shè)計(jì) ［D］.北京：北京郵電大學(xué)，2012：6－24.］

［13］ MA Hui，TAO Shaohua.Load balance middleware model based on service type ［J］.Computer Engineering，2010，36（12）：277－278 （in Chinese）.［馬慧，陶少華.基于服務(wù)類型的負(fù)載平衡中間件模型 ［J］.計(jì)算機(jī)工程，2010，36（12）：277－278.］