□ 劉名卓 劉名海
網(wǎng)絡課程可用性質量的衡量與評估*
□ 劉名卓 劉名海
評估和改進網(wǎng)絡課程的可用性質量,需要有一種客觀、統(tǒng)一和定量的衡量標準作為參照系。目前,國際上已有的網(wǎng)絡課程評價標準,雖然對可用性的評價有所涉及,但不像“教學設計”、“媒體設計”等指標,對網(wǎng)絡課程“可用性質量”的評價指標重視程度還不夠,考慮得不夠系統(tǒng)、全面和成熟,這和當前“可用性”在網(wǎng)絡課程質量評價中的突顯地位是不對稱的,所以構建一份客觀、統(tǒng)一和定量的網(wǎng)絡課程可用性衡量標準是現(xiàn)實所需。本文在國際上已有的網(wǎng)絡課程評價標準的基礎上,構建了一份適于我國國情的網(wǎng)絡課程建設質量檢查表,以期為我國的網(wǎng)絡課程建設及國家網(wǎng)絡精品課程的評審提供借鑒。
可用性;網(wǎng)絡課程;衡量;評估
可用性又被稱之為“有用的(useful)”、“能用的(usable)”。當我們談論可用性的時候,通常采用國際標準化組織ISO DIS 9241-11的定義:產品在特定使用環(huán)境下為特定用戶用于特定用途時所具有的有效性(effectiveness)、效率(efficiency)和用戶主觀滿意度(satisfaction)。可用圖1簡單地總結ISO DIS 9241-11的定義(Jakob Nielsen,1993;http://www.usabilitynet.org/tools/r_international. htm)。
圖1 可用性定義示意圖
實際上,有幾家不同的ISO/IEC(國際電子技術協(xié)會)給出了跟可用性有關的定義(Bevan,2001)。如,ISO/IEC FDIS 9126-1(軟件工程——產品質量——第一部分:2000質量模型)重點關注用戶界面設計??捎眯詫<襃akob Nielsen認為,可用性并不是用戶界面的一個單維屬性,可用性具有多種成分,傳統(tǒng)上與如下五個可用性屬性相聯(lián)系(Jakob Nielsen,1993):
(1)可學習性(learnability):系統(tǒng)應當容易學習,從而學習者可以在短時間內開始用系統(tǒng)來做某些事情??蓪W習性(Learnability)對很多交互設計來說是很重要的一個方面,并且它是用戶滿意度的重要因素之一。
(2)高效率(efficiency):系統(tǒng)的使用應當高效,因此當學習者學會使用系統(tǒng)之后,可能具有高的生產力水平。
(3)可記憶性(memorability):系統(tǒng)應當容易記憶,從而那些非頻繁使用系統(tǒng)的學習者,在中間有一段時間沒有使用之后還能夠重新使用系統(tǒng),而不用一切事情從頭學起。
(4)低出錯率(errors):系統(tǒng)應當具有低的出錯率,從而學習者在使用系統(tǒng)的過程中能夠少出錯,在出錯之后也能夠迅速恢復。而且必須能夠防止災難性錯誤的發(fā)生。
(5)高滿意度(satisfaction):系統(tǒng)應當使用起來令人愉快,從而讓學習者在使用時主觀上感到滿意,喜歡使用系統(tǒng)。
以上五個屬性是業(yè)內公認的一般軟件所具有的可用性屬性。根據(jù)諾曼關于技術制品的觀點,可以說網(wǎng)絡課程是一種信息密集型的人工制造的教育軟件產品,所以在進行網(wǎng)絡課程設計時,除了要考慮一般軟件所應具備的以上可用性五要素外,還應考慮網(wǎng)絡課程所具有的教育可用性方面的設計要素。
荷蘭虛擬大學的研究者們在基于Web學習的可用性方面已做了一些探索,他們認為教育維度的可用性(簡稱“教育的可用性”)包括教學過程支持、學習過程支持(導學、助學和達到學習目標的支持),以及學習技能養(yǎng)成的支持(比如與他人交互、學習自治能力的養(yǎng)成等)。那么,網(wǎng)絡課程的可用性要素到底有哪些呢?一般的說,網(wǎng)絡課程的可用性要素首先需具備一般軟件的可用性五要素:易學、高效、可記憶、低錯誤率以及高滿意度,其次需包括三個教育可用性要素:有效的溝通機制(協(xié)作與交互)、良好的學習支持和人性化的服務。網(wǎng)絡課程的可用性屬性如圖2所示。下面將著重解釋教育的可用性的三個要素。
由于現(xiàn)代遠程教育是一種新型的教育形式,教師和學生還沒有做好充分的準備接受這種教育形式,所以在開展現(xiàn)代遠程教育的過程中必須做一些支持工作,如教師培訓、學生培訓以及必要的技術支持等,以使教師和學生盡快轉變角色,使教師適應和主動承擔起遠程教育環(huán)境下的“導學”任務。最常見的做法是在網(wǎng)絡課程中內置一些學習支持模塊。內置的學習支持模塊相當于一組正規(guī)的、與內容有關的補充學習材料,如預先提問、計劃安排、目錄、索引、導讀、目標、所學內容的回顧等等。內置的支持設計致力于為學習過程搭建一座向上攀登的腳手架,以引導學習者制定有效的自導式學習策略,有助于促進學習者認知機能的發(fā)展和情感態(tài)度的良性變化。所以,內置的學習支持設計也是網(wǎng)絡課程建設中要著重考慮的方面。
現(xiàn)代遠程教育不再以教定學,不再直接塑造人、改造人,而是以教助學、按需助學,以人性化的服務幫助人,現(xiàn)代遠程教育機構變成了個性化學習的服務中心。網(wǎng)絡課程中提供的服務主要表現(xiàn)為學生自主學習服務,具體表現(xiàn)見表1。
表1 學習服務體系功能模塊表
調查表明,我國當前的現(xiàn)代遠程教育在課程資源和學習支持與服務兩個子系統(tǒng)上都存在著一些薄弱環(huán)節(jié),而且這兩個子系統(tǒng)的發(fā)展也存在明顯的不平衡。人們將更多的精力放在課程內容的制作和傳遞上,但卻忽視了學習支持與服務的重要性,師生及同學之間的交互明顯不足,這樣的網(wǎng)絡遠程教育系統(tǒng)難以保證實現(xiàn)高質量的大學教育。大量研究表明,便捷有力的學習支持與服務是成功的遠程學習的一個關鍵因素。網(wǎng)絡中的教育資源和學習資源日益豐富,直接送到學習者手中,學校、教師作為知識壟斷者和裁定者的地位逐漸削弱,人們對教育的自主性、選擇性要求日益加強,個性化、互動的、終生的學習成為必要和可能。在這種情況下,教育不再服務于人才的批量生產,而提倡學制靈活化、教學個性化、課程多樣化、學生自主化、學習終生化,要為學習服務,為學習者服務。
網(wǎng)絡課程中的交互設計通常體現(xiàn)在以下幾個方面:①人與人之間的交互形成“群體意識”(或者說群體價值);②人與資源之間的深度互動形成人與環(huán)境之間的和諧關系;③群體與群體之間的協(xié)同形成群組文化;④系統(tǒng)模塊與模塊之間、子系統(tǒng)與子系統(tǒng)之間、異構平臺之間的交互協(xié)同形成和諧的系統(tǒng)環(huán)境??偠灾?,網(wǎng)絡課程中的交互設計較之其它軟件對交互的需求更加迫切、要求更高,人的因素應作為設計的核心被體現(xiàn)出來,筆者認為可聚焦在以下幾個問題上:
●應提供哪些溝通渠道?如大家通常采用的BBS、在線答疑、E-mail等手段。一直以來,教育技術領域的專家學者、實踐者也正在努力嘗試將一些良好的社會性軟件引入到網(wǎng)絡教學領域中來,如Blog、Wiki、Facebook、Second Life等。
●如何保持溝通渠道的暢通?該問題是指應保證溝通工具的易用性、效率和低錯誤率,并將實時在線教學或答疑功能,提前通告給學習者。
●應為溝通交流提供哪些支持?在人與人、人與機器之間的互動過程中,經常會遇到一些不可預知的問題,所以必須有專門的人員負責給予及時、有效的支持服務。
對于網(wǎng)絡課程的評價,國際上已經有一些正在應用的大家比較熟知的評價標準,如:美國教學設計與應用專業(yè)委員會建立的在線學習認證標準(E-learning Certification Standards);美國培訓開發(fā)協(xié)會ASTD(American Society for Training& Development)主持開發(fā)的網(wǎng)上課件和多媒體課件的認證標準(E-learning Courseware Certification),又稱ECC認證;美國密歇根大學的網(wǎng)絡課程建設標準;美國普度大學軟件可用性測試檢查表;以及我國教育信息化技術標準CELTS中關于網(wǎng)絡課件的評價標準等。這些標準也包含關于可用性的評價指標,只不過這些指標散列在其它的評價指標中,我們針對這些標準中的可用性評價指標進行了梳理與分析,相關情況如表2所示。
在對這些標準進行分析的過程中,我們發(fā)現(xiàn),雖然在現(xiàn)有的網(wǎng)絡課程評價標準中,對可用性評價有所涉及,但不像“教學設計”、“媒體設計”等指標那樣普遍,將“可用性”作為一級評價指標的標準不多,“可用性”評價指標一般散落體現(xiàn)在其它的評價指標中。這種現(xiàn)象說明:
表2 各評價標準可用性評價指標對應表
其一,對網(wǎng)絡課程“可用性”的評價關注不夠。可用性已成為衡量網(wǎng)絡課程質量高低的一個重要質量指標,評價標準對網(wǎng)絡課程的建設起著舉足輕重的導向作用,但該評價指標散落在其它的評價指標中,很顯然這不利于網(wǎng)絡課程可用性水平的提高。
其二,評價指標以質的評價為主,缺乏量的評價,可操作性不強。如上所述,評價指標以概括性描述為主,而對評價的標準、評定等級、權重、解決方法等并沒有進行界定。
其三,評審采用專家評審法,缺乏最終用戶學習者的參與。由此評審出的網(wǎng)絡課程,雖然確實在某些方面具有一定的優(yōu)勢,但可能學習者的使用滿意度并沒有專家們認為的那么高。
網(wǎng)絡課程的高可用性并不是一蹴而就的,可用性的衡量與評估應該貫穿在網(wǎng)絡課程建設流程(分析、設計、開發(fā)、測試和應用維護)的各個關鍵階段,并且必須是要反復進行的工作。在網(wǎng)絡課程的設計與開發(fā)流程中嵌入對可用性的測試與評估,根據(jù)測試與評估的反饋,對階段性成果不斷進行改進。如果等課程開發(fā)完畢,再進行測試與評價,可能一切為時已晚,或者要付出更多的人力、物力和財力進行修改。如上所述,目前還沒有一種客觀、統(tǒng)一和定量的衡量標準,以評估和改進網(wǎng)絡課程的可用性質量,并且現(xiàn)有的標準基本上都是從課程認證的角度制定的,而不是一種過程性評價。
在筆者的研究過程中還發(fā)現(xiàn),盡管一些量化的可用性測試對發(fā)現(xiàn)存在的可用性問題很重要(如任務分析法、出聲思維和視線追蹤法等),但這些方法在人力、物力、財力等方面要求高,如必須在可用性實驗室中進行,并且需要軟硬件條件的支持。在華東師范大學網(wǎng)絡教育學院多年來大批量網(wǎng)絡課程的設計與開發(fā)實踐中,筆者發(fā)現(xiàn)除此之外,最經濟有效的方法是一些非正式的質性的評價方法,如焦點小組、認知走查、訪談等,而這些方法的執(zhí)行人一般對可用性的評價指標不是很清楚,所以最好有一份可用性測試檢查表,由評審人員根據(jù)檢查表中列舉的問題對不同開發(fā)階段網(wǎng)絡課程的可用性情況進行檢查,這種方法通常可以作為實驗室測試的很好補充。那么,如何構建一種客觀、統(tǒng)一和定量的適于網(wǎng)絡課程過程性評價的可用性衡量標準呢?
基于已有的網(wǎng)絡課程評價標準,根據(jù)網(wǎng)絡課程可用性的八要素(如圖2所示),并結合工作實踐,我們制定了如表3所示的可用性測試檢查表,用以指導網(wǎng)絡課程設計與開發(fā)需要。此表從7個方面來診斷網(wǎng)絡課程的可用性,包括:界面設計、學習導航、媒體表現(xiàn)、交流溝通、學習支持、內容要求和技術要求。從人類信息處理模型來看,這些指標又涵蓋兼容性、一致性、靈活性、可學習性、最少的行動、最小的記憶負擔、知覺的有限性、用戶指導等方面。
本檢查表共設計了70道題(70個問題),調查表可以使用下面的公式給出一個可用性的評分:
其中:i=第i個問題;
Si=該課程在第i個問題上所得的分數(shù),若該問題不存在,則Si=0;
Pi=1,若第i個問題適用,但不存在;
Pi=0,若第i個問題不適用或者第i個問題存在且適用;
Ii=1,若第i個問題適用;
Ii=0,若第i個問題不適用;
Wi=第i個問題重要性的得分。
對于每一個問題,評審人員需要評估該問題是否適用于被評審系統(tǒng)。如果不適用,Ii項為0;如果適用,Ii項為1,評審人員則要評估該問題在系統(tǒng)中是否存在,如果不存在,將有相對應的懲罰項。這意味著因為缺少該項,系統(tǒng)可能存在著潛在的可用性問題。如果該項適用且存在,評審人員則根據(jù)該項為系統(tǒng)從1到7打分,1為最糟,7為最好。評審人員還要為適用項的重要性打分(從1到3),分越高則越重要。系統(tǒng)可用性的得分將是總分和可能的完美分數(shù)之間比值的百分數(shù)。表3為網(wǎng)絡課程可用性測試檢查表,表4為檢查表的答案紙。
表3 網(wǎng)絡課程可用性測試檢查表
?
表4 可用性測試檢查表答案紙
以上介紹的檢查表主要在已有國內外網(wǎng)絡課程評價標準、相關理論的啟發(fā)和筆者網(wǎng)絡課程建設實踐經驗基礎上構建的,研究者希望通過此項研究,拋磚引玉,共享在這方面的一些思考和經驗,該表已在華東師范大學網(wǎng)絡教育學院的網(wǎng)絡課程建設中得到了廣泛應用。
[1]Nielsen J(1993).Usability Engineering[M].Boston:Academic Press.
[2]http://www.usabilitynet.org/tools/r_international.htm.
[3]Knowles,M.(1975).Self-Directed Learning:a Guide for Learners and Teachers.Englewood Cliffs:Prentice Hall/Cambridge,135.
[4]顧靜相,方慕真.遠程教育學習支持服務體系構建探索[J].中國電化教育,2007,(6).
[5]Farhad Saba(2002).Evolution of Research in Distance Education: Challenges of the Online Distance Learning Environment.The 2nd Conference on Research in Distance Adult Learning in Asia.
[6]劉名卓.網(wǎng)絡課程的可用性研究[D].博士論文,華東師范大學,2010.
[7]羅曉春.網(wǎng)絡教育課程質量認證標準的研究與設計[D].碩士學位論文,南京師范大學,2002:20.
[8]董建明,傅利民,饒培倫等.人機交互:以用戶為中心的設計與評估[M].北京:清華大學出版社,2007:191-192.
[9]http://www.celtsc.edu.cn
[10]Nigel Bevan(2001).International Standards for HCI and Usability. International Journal of Human Computer Studies,55(4):533-552.
責任編輯 池塘
G420
B
1009—458x(2011)04—0027—05
*該論文受教育部青年專項課題資助,項目號:ECA080287。
2010-12-15
劉名卓,博士,副研究員,華東師范大學網(wǎng)絡教育學院資源建設部主任(200062)。
劉名海,碩士,中學一級教師,山東省諸誠市第一中學(262200)。