王奇，曹良帥，趙賢敬，舒敏根，熊文劍，鮑海峰

（1 中國移動（深圳）有限公司，深圳 518048；2. 中國移動通信集團黑龍江有限公司，哈爾濱 150001）

基于SaaS的自動化測試云平臺研究

王奇1，曹良帥1，趙賢敬1，舒敏根1，熊文劍1，鮑海峰2

（1 中國移動（深圳）有限公司，深圳 518048；2. 中國移動通信集團黑龍江有限公司，哈爾濱 150001）

本文首先針對中國移動在系統(tǒng)測試方面的現(xiàn)狀，分析了自動化測試的優(yōu)勢以及在進行測試中存在的問題，開發(fā)了基于案例解析的自動化測試框架并闡述了其構(gòu)造流程。結(jié)合多用戶遠程集中支撐的需求，提出了SaaS云服務(wù)的架構(gòu)。最后，本文搭建了基于SaaS的自動化測試平臺，并實現(xiàn)了可視化的用例編寫和運維。結(jié)果表明，基于該平臺，用戶可以快部署建自動化測試并提高了測試效率。

自動化測試；集中化；云計算；SaaS

1 引言

中國移動業(yè)務(wù)運營支撐系統(tǒng)是中國移動公司業(yè)務(wù)運營的核心系統(tǒng)，承擔(dān)著中國移動數(shù)億用戶業(yè)務(wù)受理、賬務(wù)管理、繳費、查詢等支撐任務(wù)，是全球最大的電信運營支撐系統(tǒng)之一，由集團公司統(tǒng)一規(guī)劃，集團公司與各省市分公司建設(shè)的兩級結(jié)構(gòu)。隨著其規(guī)模的不斷擴大和復(fù)雜度的日益增加，其系統(tǒng)測試和建設(shè)質(zhì)量的重要性也日益突出。同時，各省公司為了快速適應(yīng)市場需求，新業(yè)務(wù)的上線頻度較高，但留給系統(tǒng)上線測試的時間窗口很短，使得測試壓力較大。如何能保證系統(tǒng)在最短的時間得到充分的測試以降低上線風(fēng)險，是系統(tǒng)建設(shè)和運維需要考慮的一個十分重要的問題。系統(tǒng)測試包括功能測試和性能測試，其中功能測試更為突出，因為每次上線都要對其功能點進行驗證測試，性能測試則往往是階段性的測試，部分功能點的變更一般對其性能不會帶來較大的變化。本文也重點關(guān)注功能測試。

中國移動業(yè)務(wù)運營支撐系統(tǒng)測評中心（后文簡稱測評中心）隸屬于中國移動（深圳）有限公司，致力于中國移動業(yè)務(wù)支撐系統(tǒng)的功能測試和性能測試工作，并在功能測試方面進行了深入的研究。一方面通過將手工測試的工作轉(zhuǎn)化為計算機自動執(zhí)行，提升測試效率，設(shè)計了先進的集中化自動化測試框架；同時考慮測試的管理和維護，可以對多個省公司進行集中化的并行測試支撐，并開發(fā)了基于SaaS（軟件即服務(wù)）的自動化測試云平臺。

基于SaaS模式的自動化測試云平臺，由測評中心統(tǒng)一建設(shè)并部署在設(shè)于中國移動的南方基地機房，以授權(quán)的方式提供給各省公司使用。該平臺的特點是可以在較短時間內(nèi)快速部署并投入使用；同時各省公司無需關(guān)心測試平臺的構(gòu)建和設(shè)計，可以專注于業(yè)務(wù)系統(tǒng)的規(guī)劃和建設(shè)，降低了各省公司在測試領(lǐng)域的技術(shù)門檻及專業(yè)人員的投入。另外，由于與我們合作的省公司本地不需要再部署測試平臺，所以相應(yīng)減少了平臺建設(shè)、軟件購買和系統(tǒng)維護的壓力。

下文將對自動化測試框架和SaaS平臺進行詳細闡述。

2 功能自動化測試技術(shù)及其框架設(shè)計

自動化測試是把以人為驅(qū)動的測試行為轉(zhuǎn)化為機器執(zhí)行的一種過程，即通過自動化測試工具或其它手段，按照我們預(yù)定的計劃進行自動測試的活動。自動化測試從發(fā)展之初至今，在各個方面都得到了長足的發(fā)展和應(yīng)用[1-2]。其優(yōu)勢主要表現(xiàn)在以下方面：

（1）提高測試效率，縮短軟件開發(fā)測試周期；

（2）節(jié)省人力資源，降低測試成本；

（3）增強測試的穩(wěn)定性和可靠性；

（4）提高軟件測試的準確度和精確度，增加軟件信任度。

功能自動化測試，一般分為基于GUI（圖形界面）的方式和基于數(shù)據(jù)協(xié)議分組的方式，兩者在于模擬用戶的方式不同，可以達到類似的效果，本文主要討論前者。

2.1 基于GUI的功能自動化測試原理

基于GUI的功能自動化測試是模擬用戶使用軟件的步驟，通過功能自動化測試工具來驅(qū)動鼠標(biāo)和鍵盤操作應(yīng)用軟件。

在進行測試之前，用戶需要使用功能自動化測試工具，根據(jù)測試用例進行腳本的錄制，也就是使用工具記錄操作的每一個步驟，然后將錄制下的腳本保存下來，以便多次進行回放使用。

在錄制的過程中，工具將主要記錄3大部分的內(nèi)容：操作對象或測試路徑，操作行為和操作數(shù)據(jù)。如圖1所示。

圖1 某功能測試腳本

基于錄制回放的自動化測試過程如圖所示包括以下幾個步驟：（1）編寫自動化測試用例；（2）根據(jù)測試用例的步驟，通過自動化測試工具來錄制腳本；（3）根據(jù)測試用例，再次完善腳本；（4）加載測試數(shù)據(jù)，控制測試循環(huán)；（5）測試自動化腳本運行。其中，第2步是自動化測試的關(guān)鍵，其通過錄制方式來簡化操作，達到易用目的。

與手工測試相比，前4步相對復(fù)雜，比手工測試花的成本要高，但第5步可以由計算機自動執(zhí)行，這也說明自動化測試適用于測試用例可以多次重復(fù)的場景，用例重復(fù)次數(shù)越多，自動化測試優(yōu)勢越明顯。而對于測試用例重復(fù)執(zhí)行次數(shù)很少的場景，自動化測試無明顯優(yōu)勢。

一般來說，上文簡單的錄制回放的自動化測試方法存在一些不足之處：

（1）通過簡單錄制方式產(chǎn)生自動化測試腳本，不方便修改。而且需要腳本的編寫和維護人員具有一定的編程基礎(chǔ)；同時隨著腳本數(shù)量的增加，一旦測試流程變化或者頁面元素發(fā)生變化，很難從大量的腳本中快速定位和修改；

（2）測試數(shù)據(jù)的管理不便，測試數(shù)據(jù)和腳本融合在一起，無法進行測試數(shù)據(jù)的管理；

（3）測試結(jié)果無法進行分類管理和統(tǒng)計查詢，通過工具回放模式產(chǎn)生的日志無法滿足測試后分析和統(tǒng)計的需要；

（4）測試缺陷無法處理和跟蹤，往往需要再配合其它的測試管理工具。

因此，為了更好的對測試進行管理，降低測試腳本的維護量，使得測試人員可以編寫測試用例，我們開發(fā)了一套滿足目前需要的自動化測試框架。該框架以案例解析引擎為核心，故命名為基于案例解析引擎的自動化測試框架。

2.2 基于案例解析引擎的自動化測試框架

基于案例解析引擎的自動化測試框架，其系統(tǒng)結(jié)構(gòu)如圖2所示。

其中，案例解析引擎是整個框架的核心。其主要工作是將測試用例直接轉(zhuǎn)化為可以執(zhí)行的自動化測試腳本，用戶只需要按照框架文件的格式進行用例的編寫即可。在測試執(zhí)行時，案例解析引擎將根據(jù)不同的測試引擎生成不同的腳本。

圖2 自動化測試框架結(jié)構(gòu)圖

案例解析引擎設(shè)計的核心思想是采用描述性編程的方法，把用戶提供的3個屬性（對象、操作和數(shù)據(jù)）根據(jù)測試工具的腳本語法規(guī)則映射成腳本代碼。在執(zhí)行過程中，動態(tài)加載用例參數(shù)，一步步執(zhí)行用例中的測試步驟。

基于該框架，自動化測試的執(zhí)行流程如圖3所示。

圖3 自動化測試框架執(zhí)行流程

3 SaaS云架構(gòu)設(shè)計

上文通過設(shè)計自動化測試框架解決了自動化測試關(guān)鍵技術(shù)及管理問題，對于如何解決將該框架應(yīng)用于各省公司，下文引入了云計算理念，并設(shè)計了基于SaaS云的技術(shù)架構(gòu)。

3.1 SaaS云定義

根據(jù)權(quán)威的NIST（美國國家標(biāo)準技術(shù)研究院）定義，云計算主要有3種服務(wù)模式： SaaS，這層的作用是將應(yīng)用作為服務(wù)提供給客戶；PaaS，這層的作用是將一個開發(fā)平臺作為服務(wù)提供給用戶；IaaS，這層的作用是提供虛擬機或者其它資源作為服務(wù)提供給用戶。[3-6]

本文主要考慮SaaS，它是通過互聯(lián)網(wǎng)（可以為公用網(wǎng)和私有網(wǎng)，對應(yīng)共有云和私有云）以服務(wù)形式交付和使用軟件的業(yè)務(wù)模式。在SaaS模式下，軟件使用者無需購置額外硬件設(shè)備、軟件許可證及安裝和維護軟件系統(tǒng)，通過互聯(lián)網(wǎng)瀏覽器在任何時間、任何地點都可以輕松使用軟件并按照使用量定期支付費用。

SaaS服務(wù)依托于軟件和互聯(lián)網(wǎng)，無論從技術(shù)上還是從商務(wù)上來看，都擁有不同于傳統(tǒng)軟件的特性，如互聯(lián)網(wǎng)特性、多租戶特性及服務(wù)特性等。

3.2 基于云的3層架構(gòu)設(shè)計

本文對云服務(wù)的3層框架做了實例化，其中SaaS層針對具體的測試應(yīng)用做了實例化的延伸。IaaS層主要基于虛擬化技術(shù)實現(xiàn)虛擬主機的分割，根據(jù)需要可以分給多個任務(wù)或用戶。PaaS層主要考慮服務(wù)的客戶化定制和服務(wù)器的分布式部署、模塊引擎。SaaS層主要考慮子服務(wù)的模塊化，子服務(wù)的整合和調(diào)度。其中SaaS層主要考慮和實現(xiàn)的重點是通過將子服務(wù)按照功能進行劃分若干不同的子模塊，各模塊之間通過數(shù)據(jù)接口和控制服務(wù)進行串接，再根據(jù)服務(wù)提供進行整合和調(diào)度，各測試任務(wù)通過SaaS服務(wù)調(diào)度模塊和數(shù)據(jù)庫統(tǒng)一配置，從而實現(xiàn)不同的測試服務(wù)。

3.3 SaaS服務(wù)架構(gòu)設(shè)計

對于3層架構(gòu)的IaaS和PaaS層，本文將不再進行闡述。本文重點討論SaaS層的建設(shè)和如何將自動化測試框架應(yīng)用到該層，提供對外服務(wù)。圖4為基于SaaS的自動化測試服務(wù)的架構(gòu)圖。該架構(gòu)底層設(shè)計為數(shù)據(jù)接口服務(wù)，主要提供數(shù)據(jù)相關(guān)的增刪改查服務(wù)；基礎(chǔ)框架層主要包括自動化測試案例引擎、報表引擎和工作流；接下來是相關(guān)的告警服務(wù)相關(guān)接口，如郵件和短信接口；最上兩層為組合提供的相關(guān)服務(wù)以及子服務(wù)。

圖4 基于SaaS的自動化測試服務(wù)架構(gòu)圖

SaaS理念的核心思想有兩個：一是租戶的概念，即所有用戶都定義為租戶，每個租戶根據(jù)權(quán)限定制自己的服務(wù)；二是權(quán)限的設(shè)置、管理與控制，租戶的服務(wù)定制化程度取決于對資源的權(quán)限劃分的顆粒度。由于本SaaS服務(wù)只在形式上租賃，本文中租戶和用戶同概念，均指省公司。SaaS設(shè)計思想在該架構(gòu)中體現(xiàn)為SaaS服務(wù)平臺。

4 SaaS自動化測試平臺

基于前文自動化測試框架的設(shè)計與SaaS云服務(wù)的研究，本文開發(fā)了自動化測試平臺。該平臺一方面基于先進的自動化測試框架技術(shù)，采取以案例解析為核心思想，通過分布驅(qū)動部署和圖形化界面實現(xiàn)，簡化測試相關(guān)操作和管理；另一方面，考慮SaaS的租戶服務(wù)定制的核心理念，將平臺所有功能模塊設(shè)計為子服務(wù)，各個子服務(wù)均設(shè)計租戶權(quán)限控制，這樣不同租戶可以根據(jù)權(quán)限控制定制自己的服務(wù)需求。

該自動化測試服務(wù)平臺具備如下特點，克服了2.1節(jié)中描述的簡單錄制回放自動化測試方法的不足。

（1）低門檻和去專業(yè)化：測試人員無需學(xué)習(xí)自動化測試技術(shù)，手工測試人員可以直接參與該自動化測試實施；用例腳本分離，測試人員只需關(guān)心測試用例，無需學(xué)習(xí)腳本相關(guān)技術(shù)；測試工作不再以測試執(zhí)行為重心，測試人員主要是完善測試用例的設(shè)計，為項目的整體測試質(zhì)量提供了時間和效率的保障；

（2）可視化：一是用例編寫采用直觀的圖形拖拽方式，簡化了用戶操作難度，提升了測試設(shè)計的編寫速度；二是圖形化的運行結(jié)果展示和監(jiān)控，既方便了管理人員對測試項目的宏觀把控和了解，也可以協(xié)助缺陷分析人員快速定位缺陷，提升了整體的測試工作效率；可視化監(jiān)控也可以方便管理人員直觀實時了解用例執(zhí)行情況和系統(tǒng)運行情況；

（3）定時調(diào)度和實時監(jiān)控：測試腳本的定時調(diào)度機制和自動化測試過程中消息實時傳遞（測試過程的監(jiān)控、測試運行結(jié)果的實時通知），使得測試人員無需關(guān)心測試執(zhí)行過程，重點關(guān)心測試結(jié)果，同時降低了自動化測試過程中的溝通成本；

（4）用戶功能定制化：本平臺的SaaS服務(wù)定制設(shè)計，用戶可以根據(jù)需要，選擇定制自己關(guān)心的功能模塊，以滿足個性化需求；

（5）快速部署：本平臺的SaaS服務(wù)部署為B/S架構(gòu)，使得用戶端無需任何部署，只需調(diào)通網(wǎng)絡(luò)，即可進行測試；即使有的用戶自己部署測試引擎，本平臺也提供了遠程接口，也可以快速部署連接。

本平臺的總的功能模塊如圖5所示，當(dāng)然用戶可以根據(jù)需求部分裁剪定制部分功能。

自動化測試平臺部署為SaaS云服務(wù)模式，各個省公司通過網(wǎng)絡(luò)（IP承載網(wǎng)），即可按需定制其所需要的自動化測試服務(wù)。

本文中的系統(tǒng)用戶分為3種類型，分別為SaaS權(quán)限管理員，平臺管理員和用戶。其中SaaS權(quán)限管理員負責(zé)對租戶的申請審查、租戶信息管理、租戶租用服務(wù)分配和租戶的權(quán)限管理。平臺管理員負責(zé)SaaS軟件測試平臺的服務(wù)發(fā)布、版本更新等運維工作。用戶是租戶下的企業(yè)內(nèi)部用戶，是系統(tǒng)的最終使用者即省公司。

圖5 平臺功能模塊

省公司使用該服務(wù)平臺，可以滿足多個省份同時使用進行測試任務(wù)的執(zhí)行，并將測試結(jié)果返回給省公司，可以實時監(jiān)控任務(wù)的執(zhí)行狀態(tài)和問題跟蹤。租戶使用該服務(wù)平臺的流程如圖6所示。

5 結(jié)束語

本文創(chuàng)新提出一種自動化測試框架，構(gòu)建了可視化腳本編寫方式的自動化測試平臺，并部署為SaaS云的服務(wù)模式。該平臺由測評中心負責(zé)建設(shè)，各省公司通過租賃的方式來使用平臺服務(wù)。

基于上文的分析可以看出，本文的設(shè)計思路適用于測試對象系統(tǒng)相對穩(wěn)定的系統(tǒng)，具體來說是要求對象系統(tǒng)的業(yè)務(wù)流程和前臺界面變化不大，這樣測試用例執(zhí)行重復(fù)度才會較高，以體現(xiàn)本文自動化測試平臺的效率和優(yōu)勢。就目前看，各省公司的多數(shù)業(yè)務(wù)支撐系統(tǒng)和管理信息系統(tǒng)（MIS）系統(tǒng)小版本上線頻繁，且其核心業(yè)務(wù)的流程和前臺變化較小。因此本文的自動化測試平臺可用于省公司的業(yè)務(wù)支撐系統(tǒng)和MIS系統(tǒng)小版本上線前的回歸測試。

省公司基于該平臺可以有效的完成自動化測試，加快系統(tǒng)上線時間，降低系統(tǒng)風(fēng)險；通過回歸，可以提高覆蓋率；通過合理調(diào)度安排，可以有效提升測試資源的使用率和測試人員效率。

基于SaaS模式，各省公司通過承載網(wǎng)定制化使用該平臺相關(guān)服務(wù)，可以快速的組織自動化測試的流程和部署，同時也可以節(jié)省測試資源和軟硬件投資。

另外，該平臺經(jīng)過改造，還可以承載基于后臺的功能自動化測試及性能測試。

圖6 自動化測試平臺使用流程

[1] Isenberg H. Automated testing[OL/EB]. http：//www.automatedtesting.com/， 2007.

[2] 陳技能. QTP自動化測試實踐[M]. 北京： 電子工業(yè)出版社， 2008.

[3] Elfatatry A， Layzell P. Software as a service： a negotiation perspective[A]. Proceedings of the 26th Annual International Computer Software and Applications Conference[C]. 2002.501-506.

[4] 葉偉. 互聯(lián)網(wǎng)實彈的軟件革命： SaaS架構(gòu)設(shè)計[M]. 北京：電子工業(yè)出版社，2009.

[5] 謝億民. 互聯(lián)網(wǎng)和軟件融合成就SaaS[J]. 軟件世界， 2006，(15)：31.

[6] 王舜燕，黃芬. 基于SaaS模式的軟件設(shè)計方法探討[J]. 計算機與數(shù)字工程， 2008(10)：102-105

Hillstone高性能數(shù)據(jù)中心防火墻喜獲ICSA最高級別認證

10月10日，Hillstone宣布其旗下高性能數(shù)據(jù)中心防火墻獲得ICSA LabsEN級標(biāo)準的防火墻認證，充分證明Hillstone網(wǎng)絡(luò)安全產(chǎn)品經(jīng)過市場的嚴格考驗，擁有高安全性。在信息安全領(lǐng)域中，國際組織ICSA Labs的測試是具知名度與公信力的測試，以公開、公平、公正和嚴格苛刻而著稱，一向是安全廠商證明技術(shù)實力的佐證，也是用戶選擇安全產(chǎn)品的風(fēng)向標(biāo)。

富士通一體化云基礎(chǔ)架構(gòu)解決方案亮相“第五屆CCS云計算高峰論壇”

在近期舉辦的為期兩天的第五屆CCS云計算高峰論壇上，F(xiàn)ujitsu (富士通)攜云基礎(chǔ)架構(gòu)解決方案亮相。會上，富士通（中國）信息系統(tǒng)有限公司首席架構(gòu)師邱弘發(fā)表了主題為“馳騁云端，自由縱橫—富士通云計算基礎(chǔ)架構(gòu)解決方案”的演講，對Fujitsu（富士通）的云計算技術(shù)理念，云架構(gòu)解決方案以及相關(guān)案例進行了詳細介紹，獲得現(xiàn)場觀眾的一致好評。

Dialogic入圍Light Reading公司的Leading Lights最佳新產(chǎn)品（移動產(chǎn)品）獎提名

Dialogic公司近日宣布其Dialogic PowerMedia Extended Media Server（PowerMedia XMS）入圍Light Reading公司的Leading Lights最佳新產(chǎn)品（移動產(chǎn)品）獎提名名單。被提名產(chǎn)品的評選依據(jù)是其在“憑借其工程和技術(shù)優(yōu)勢，在實現(xiàn)下一代可贏利移動服務(wù)部署上可發(fā)展為市場主導(dǎo)產(chǎn)品”方面的表現(xiàn)。PowerMedia XMS的入選使其成功進入諸如蘋果、谷歌、優(yōu)科無線（Ruckus Wireless）、三星和泰科來（Tekelec）等新型移動產(chǎn)品優(yōu)秀開發(fā)公司的行列。

Vishay推出用于通信電源的170V TMBS整流器

10月11日，Vishay Intertechnology， Inc.宣布推出9款采用功率TO-220AB、TO-263AB和TO-3PW封裝的170V器件，豐富和擴大了TMBS Trench MOS勢壘肖特基整流器系列。這些器件定位于通信電源應(yīng)用，電流等級從10~80A，在30A下的典型正向壓降為0.65V。

Research on SaaS-based automated testing cloud platform

WANG Qi1, CAO Liang-shuai1, ZHAO Xian-jing1, SHU Min-gen1, XIONG Wen-jian1, Bao Hai-feng2
(1 China Mobile (Shenzhen) Limited, Shenzhen 518048, China; 2 China Mobile Group Heilongjiang Co., Ltd., Harbin 150001, China)

According the status of the system test of China Mobile Communications Corporation, advantages of automated testing and the corresponding problems in manually testing were analyzed, then an automated testing framework based on case analysis was presented. Next, a SaaS-based cloud services architecture was brought forward to meet the request of remote central support of users. Last, a SaaS-based automated testing platform was built, in which the visualized test case building and operation was brought forward. Finally, the results show that, the more eff i cient automated testing system can be fast deployed by using the platform.

automated testing; centralization; cloud computing; SaaS

TN929.5

A

1008-5599（2012）10-0067-06

2012-09-01

王奇：教授級高級工程師，現(xiàn)任中國移動（深圳）有限公司總經(jīng)理。