網(wǎng)絡(luò)課程可用性質(zhì)量的衡量與評(píng)估*

□ 劉名卓 劉名海

網(wǎng)絡(luò)課程可用性質(zhì)量的衡量與評(píng)估*

□ 劉名卓 劉名海

評(píng)估和改進(jìn)網(wǎng)絡(luò)課程的可用性質(zhì)量，需要有一種客觀、統(tǒng)一和定量的衡量標(biāo)準(zhǔn)作為參照系。目前，國際上已有的網(wǎng)絡(luò)課程評(píng)價(jià)標(biāo)準(zhǔn)，雖然對(duì)可用性的評(píng)價(jià)有所涉及，但不像“教學(xué)設(shè)計(jì)”、“媒體設(shè)計(jì)”等指標(biāo)，對(duì)網(wǎng)絡(luò)課程“可用性質(zhì)量”的評(píng)價(jià)指標(biāo)重視程度還不夠，考慮得不夠系統(tǒng)、全面和成熟，這和當(dāng)前“可用性”在網(wǎng)絡(luò)課程質(zhì)量評(píng)價(jià)中的突顯地位是不對(duì)稱的，所以構(gòu)建一份客觀、統(tǒng)一和定量的網(wǎng)絡(luò)課程可用性衡量標(biāo)準(zhǔn)是現(xiàn)實(shí)所需。本文在國際上已有的網(wǎng)絡(luò)課程評(píng)價(jià)標(biāo)準(zhǔn)的基礎(chǔ)上，構(gòu)建了一份適于我國國情的網(wǎng)絡(luò)課程建設(shè)質(zhì)量檢查表，以期為我國的網(wǎng)絡(luò)課程建設(shè)及國家網(wǎng)絡(luò)精品課程的評(píng)審提供借鑒。

可用性；網(wǎng)絡(luò)課程；衡量；評(píng)估

一、網(wǎng)絡(luò)課程可用性概述

可用性又被稱之為“有用的（useful）”、“能用的（usable）”。當(dāng)我們談?wù)摽捎眯缘臅r(shí)候，通常采用國際標(biāo)準(zhǔn)化組織ISO DIS 9241-11的定義：產(chǎn)品在特定使用環(huán)境下為特定用戶用于特定用途時(shí)所具有的有效性（effectiveness）、效率（efficiency）和用戶主觀滿意度（satisfaction）?？捎脠D1簡單地總結(jié)ISO DIS 9241-11的定義（Jakob Nielsen，1993；http://www.usabilitynet.org/tools/r_international. htm）。

圖1 可用性定義示意圖

實(shí)際上，有幾家不同的ISO/IEC（國際電子技術(shù)協(xié)會(huì)）給出了跟可用性有關(guān)的定義（Bevan,2001）。如，ISO/IEC FDIS 9126-1（軟件工程——產(chǎn)品質(zhì)量——第一部分：2000質(zhì)量模型）重點(diǎn)關(guān)注用戶界面設(shè)計(jì)?？捎眯詫＜襃akob Nielsen認(rèn)為，可用性并不是用戶界面的一個(gè)單維屬性，可用性具有多種成分，傳統(tǒng)上與如下五個(gè)可用性屬性相聯(lián)系（Jakob Nielsen，1993）：

（1）可學(xué)習(xí)性（learnability）：系統(tǒng)應(yīng)當(dāng)容易學(xué)習(xí)，從而學(xué)習(xí)者可以在短時(shí)間內(nèi)開始用系統(tǒng)來做某些事情。可學(xué)習(xí)性（Learnability）對(duì)很多交互設(shè)計(jì)來說是很重要的一個(gè)方面，并且它是用戶滿意度的重要因素之一。

（2）高效率（efficiency）：系統(tǒng)的使用應(yīng)當(dāng)高效，因此當(dāng)學(xué)習(xí)者學(xué)會(huì)使用系統(tǒng)之后，可能具有高的生產(chǎn)力水平。

（3）可記憶性（memorability）：系統(tǒng)應(yīng)當(dāng)容易記憶，從而那些非頻繁使用系統(tǒng)的學(xué)習(xí)者，在中間有一段時(shí)間沒有使用之后還能夠重新使用系統(tǒng)，而不用一切事情從頭學(xué)起。

（4）低出錯(cuò)率（errors）：系統(tǒng)應(yīng)當(dāng)具有低的出錯(cuò)率，從而學(xué)習(xí)者在使用系統(tǒng)的過程中能夠少出錯(cuò)，在出錯(cuò)之后也能夠迅速恢復(fù)。而且必須能夠防止災(zāi)難性錯(cuò)誤的發(fā)生。

（5）高滿意度（satisfaction）：系統(tǒng)應(yīng)當(dāng)使用起來令人愉快，從而讓學(xué)習(xí)者在使用時(shí)主觀上感到滿意，喜歡使用系統(tǒng)。

以上五個(gè)屬性是業(yè)內(nèi)公認(rèn)的一般軟件所具有的可用性屬性。根據(jù)諾曼關(guān)于技術(shù)制品的觀點(diǎn)，可以說網(wǎng)絡(luò)課程是一種信息密集型的人工制造的教育軟件產(chǎn)品，所以在進(jìn)行網(wǎng)絡(luò)課程設(shè)計(jì)時(shí)，除了要考慮一般軟件所應(yīng)具備的以上可用性五要素外，還應(yīng)考慮網(wǎng)絡(luò)課程所具有的教育可用性方面的設(shè)計(jì)要素。

荷蘭虛擬大學(xué)的研究者們?cè)诨赪eb學(xué)習(xí)的可用性方面已做了一些探索，他們認(rèn)為教育維度的可用性（簡稱“教育的可用性”）包括教學(xué)過程支持、學(xué)習(xí)過程支持（導(dǎo)學(xué)、助學(xué)和達(dá)到學(xué)習(xí)目標(biāo)的支持），以及學(xué)習(xí)技能養(yǎng)成的支持（比如與他人交互、學(xué)習(xí)自治能力的養(yǎng)成等）。那么，網(wǎng)絡(luò)課程的可用性要素到底有哪些呢？一般的說，網(wǎng)絡(luò)課程的可用性要素首先需具備一般軟件的可用性五要素：易學(xué)、高效、可記憶、低錯(cuò)誤率以及高滿意度，其次需包括三個(gè)教育可用性要素：有效的溝通機(jī)制（協(xié)作與交互）、良好的學(xué)習(xí)支持和人性化的服務(wù)。網(wǎng)絡(luò)課程的可用性屬性如圖2所示。下面將著重解釋教育的可用性的三個(gè)要素。

1.良好的學(xué)習(xí)支持（Knowles，1975；Farhad Saba，2002；顧靜相，方慕真，2007）

由于現(xiàn)代遠(yuǎn)程教育是一種新型的教育形式，教師和學(xué)生還沒有做好充分的準(zhǔn)備接受這種教育形式，所以在開展現(xiàn)代遠(yuǎn)程教育的過程中必須做一些支持工作，如教師培訓(xùn)、學(xué)生培訓(xùn)以及必要的技術(shù)支持等，以使教師和學(xué)生盡快轉(zhuǎn)變角色，使教師適應(yīng)和主動(dòng)承擔(dān)起遠(yuǎn)程教育環(huán)境下的“導(dǎo)學(xué)”任務(wù)。最常見的做法是在網(wǎng)絡(luò)課程中內(nèi)置一些學(xué)習(xí)支持模塊。內(nèi)置的學(xué)習(xí)支持模塊相當(dāng)于一組正規(guī)的、與內(nèi)容有關(guān)的補(bǔ)充學(xué)習(xí)材料，如預(yù)先提問、計(jì)劃安排、目錄、索引、導(dǎo)讀、目標(biāo)、所學(xué)內(nèi)容的回顧等等。內(nèi)置的支持設(shè)計(jì)致力于為學(xué)習(xí)過程搭建一座向上攀登的腳手架，以引導(dǎo)學(xué)習(xí)者制定有效的自導(dǎo)式學(xué)習(xí)策略，有助于促進(jìn)學(xué)習(xí)者認(rèn)知機(jī)能的發(fā)展和情感態(tài)度的良性變化。所以，內(nèi)置的學(xué)習(xí)支持設(shè)計(jì)也是網(wǎng)絡(luò)課程建設(shè)中要著重考慮的方面。

2.人性化的學(xué)習(xí)服務(wù)

現(xiàn)代遠(yuǎn)程教育不再以教定學(xué)，不再直接塑造人、改造人，而是以教助學(xué)、按需助學(xué)，以人性化的服務(wù)幫助人，現(xiàn)代遠(yuǎn)程教育機(jī)構(gòu)變成了個(gè)性化學(xué)習(xí)的服務(wù)中心。網(wǎng)絡(luò)課程中提供的服務(wù)主要表現(xiàn)為學(xué)生自主學(xué)習(xí)服務(wù)，具體表現(xiàn)見表1。

表1 學(xué)習(xí)服務(wù)體系功能模塊表

調(diào)查表明，我國當(dāng)前的現(xiàn)代遠(yuǎn)程教育在課程資源和學(xué)習(xí)支持與服務(wù)兩個(gè)子系統(tǒng)上都存在著一些薄弱環(huán)節(jié)，而且這兩個(gè)子系統(tǒng)的發(fā)展也存在明顯的不平衡。人們將更多的精力放在課程內(nèi)容的制作和傳遞上，但卻忽視了學(xué)習(xí)支持與服務(wù)的重要性，師生及同學(xué)之間的交互明顯不足，這樣的網(wǎng)絡(luò)遠(yuǎn)程教育系統(tǒng)難以保證實(shí)現(xiàn)高質(zhì)量的大學(xué)教育。大量研究表明，便捷有力的學(xué)習(xí)支持與服務(wù)是成功的遠(yuǎn)程學(xué)習(xí)的一個(gè)關(guān)鍵因素。網(wǎng)絡(luò)中的教育資源和學(xué)習(xí)資源日益豐富，直接送到學(xué)習(xí)者手中，學(xué)校、教師作為知識(shí)壟斷者和裁定者的地位逐漸削弱，人們對(duì)教育的自主性、選擇性要求日益加強(qiáng)，個(gè)性化、互動(dòng)的、終生的學(xué)習(xí)成為必要和可能。在這種情況下，教育不再服務(wù)于人才的批量生產(chǎn)，而提倡學(xué)制靈活化、教學(xué)個(gè)性化、課程多樣化、學(xué)生自主化、學(xué)習(xí)終生化，要為學(xué)習(xí)服務(wù)，為學(xué)習(xí)者服務(wù)。

3.有效的溝通機(jī)制（劉名卓，2010）

網(wǎng)絡(luò)課程中的交互設(shè)計(jì)通常體現(xiàn)在以下幾個(gè)方面：①人與人之間的交互形成“群體意識(shí)”（或者說群體價(jià)值）；②人與資源之間的深度互動(dòng)形成人與環(huán)境之間的和諧關(guān)系；③群體與群體之間的協(xié)同形成群組文化；④系統(tǒng)模塊與模塊之間、子系統(tǒng)與子系統(tǒng)之間、異構(gòu)平臺(tái)之間的交互協(xié)同形成和諧的系統(tǒng)環(huán)境?？偠灾?，網(wǎng)絡(luò)課程中的交互設(shè)計(jì)較之其它軟件對(duì)交互的需求更加迫切、要求更高，人的因素應(yīng)作為設(shè)計(jì)的核心被體現(xiàn)出來，筆者認(rèn)為可聚焦在以下幾個(gè)問題上：

●應(yīng)提供哪些溝通渠道？如大家通常采用的BBS、在線答疑、E-mail等手段。一直以來，教育技術(shù)領(lǐng)域的專家學(xué)者、實(shí)踐者也正在努力嘗試將一些良好的社會(huì)性軟件引入到網(wǎng)絡(luò)教學(xué)領(lǐng)域中來，如Blog、Wiki、Facebook、Second Life等。

●如何保持溝通渠道的暢通？該問題是指應(yīng)保證溝通工具的易用性、效率和低錯(cuò)誤率，并將實(shí)時(shí)在線教學(xué)或答疑功能，提前通告給學(xué)習(xí)者。

●應(yīng)為溝通交流提供哪些支持？在人與人、人與機(jī)器之間的互動(dòng)過程中，經(jīng)常會(huì)遇到一些不可預(yù)知的問題，所以必須有專門的人員負(fù)責(zé)給予及時(shí)、有效的支持服務(wù)。

二、國內(nèi)外網(wǎng)絡(luò)課程可用性評(píng)價(jià)現(xiàn)狀

對(duì)于網(wǎng)絡(luò)課程的評(píng)價(jià)，國際上已經(jīng)有一些正在應(yīng)用的大家比較熟知的評(píng)價(jià)標(biāo)準(zhǔn)，如：美國教學(xué)設(shè)計(jì)與應(yīng)用專業(yè)委員會(huì)建立的在線學(xué)習(xí)認(rèn)證標(biāo)準(zhǔn)（E-learning Certification Standards）；美國培訓(xùn)開發(fā)協(xié)會(huì)ASTD（American Society for Training& Development）主持開發(fā)的網(wǎng)上課件和多媒體課件的認(rèn)證標(biāo)準(zhǔn)（E-learning Courseware Certification），又稱ECC認(rèn)證；美國密歇根大學(xué)的網(wǎng)絡(luò)課程建設(shè)標(biāo)準(zhǔn)；美國普度大學(xué)軟件可用性測試檢查表；以及我國教育信息化技術(shù)標(biāo)準(zhǔn)CELTS中關(guān)于網(wǎng)絡(luò)課件的評(píng)價(jià)標(biāo)準(zhǔn)等。這些標(biāo)準(zhǔn)也包含關(guān)于可用性的評(píng)價(jià)指標(biāo)，只不過這些指標(biāo)散列在其它的評(píng)價(jià)指標(biāo)中，我們針對(duì)這些標(biāo)準(zhǔn)中的可用性評(píng)價(jià)指標(biāo)進(jìn)行了梳理與分析，相關(guān)情況如表2所示。

在對(duì)這些標(biāo)準(zhǔn)進(jìn)行分析的過程中，我們發(fā)現(xiàn)，雖然在現(xiàn)有的網(wǎng)絡(luò)課程評(píng)價(jià)標(biāo)準(zhǔn)中，對(duì)可用性評(píng)價(jià)有所涉及，但不像“教學(xué)設(shè)計(jì)”、“媒體設(shè)計(jì)”等指標(biāo)那樣普遍，將“可用性”作為一級(jí)評(píng)價(jià)指標(biāo)的標(biāo)準(zhǔn)不多，“可用性”評(píng)價(jià)指標(biāo)一般散落體現(xiàn)在其它的評(píng)價(jià)指標(biāo)中。這種現(xiàn)象說明：

表2 各評(píng)價(jià)標(biāo)準(zhǔn)可用性評(píng)價(jià)指標(biāo)對(duì)應(yīng)表

其一，對(duì)網(wǎng)絡(luò)課程“可用性”的評(píng)價(jià)關(guān)注不夠?？捎眯砸殉蔀楹饬烤W(wǎng)絡(luò)課程質(zhì)量高低的一個(gè)重要質(zhì)量指標(biāo)，評(píng)價(jià)標(biāo)準(zhǔn)對(duì)網(wǎng)絡(luò)課程的建設(shè)起著舉足輕重的導(dǎo)向作用，但該評(píng)價(jià)指標(biāo)散落在其它的評(píng)價(jià)指標(biāo)中，很顯然這不利于網(wǎng)絡(luò)課程可用性水平的提高。

其二，評(píng)價(jià)指標(biāo)以質(zhì)的評(píng)價(jià)為主，缺乏量的評(píng)價(jià)，可操作性不強(qiáng)。如上所述，評(píng)價(jià)指標(biāo)以概括性描述為主，而對(duì)評(píng)價(jià)的標(biāo)準(zhǔn)、評(píng)定等級(jí)、權(quán)重、解決方法等并沒有進(jìn)行界定。

其三，評(píng)審采用專家評(píng)審法，缺乏最終用戶學(xué)習(xí)者的參與。由此評(píng)審出的網(wǎng)絡(luò)課程，雖然確實(shí)在某些方面具有一定的優(yōu)勢，但可能學(xué)習(xí)者的使用滿意度并沒有專家們認(rèn)為的那么高。

三、網(wǎng)絡(luò)課程可用性測試檢查表設(shè)計(jì)

網(wǎng)絡(luò)課程的高可用性并不是一蹴而就的，可用性的衡量與評(píng)估應(yīng)該貫穿在網(wǎng)絡(luò)課程建設(shè)流程（分析、設(shè)計(jì)、開發(fā)、測試和應(yīng)用維護(hù)）的各個(gè)關(guān)鍵階段，并且必須是要反復(fù)進(jìn)行的工作。在網(wǎng)絡(luò)課程的設(shè)計(jì)與開發(fā)流程中嵌入對(duì)可用性的測試與評(píng)估，根據(jù)測試與評(píng)估的反饋，對(duì)階段性成果不斷進(jìn)行改進(jìn)。如果等課程開發(fā)完畢，再進(jìn)行測試與評(píng)價(jià)，可能一切為時(shí)已晚，或者要付出更多的人力、物力和財(cái)力進(jìn)行修改。如上所述，目前還沒有一種客觀、統(tǒng)一和定量的衡量標(biāo)準(zhǔn)，以評(píng)估和改進(jìn)網(wǎng)絡(luò)課程的可用性質(zhì)量，并且現(xiàn)有的標(biāo)準(zhǔn)基本上都是從課程認(rèn)證的角度制定的，而不是一種過程性評(píng)價(jià)。

在筆者的研究過程中還發(fā)現(xiàn)，盡管一些量化的可用性測試對(duì)發(fā)現(xiàn)存在的可用性問題很重要（如任務(wù)分析法、出聲思維和視線追蹤法等），但這些方法在人力、物力、財(cái)力等方面要求高，如必須在可用性實(shí)驗(yàn)室中進(jìn)行，并且需要軟硬件條件的支持。在華東師范大學(xué)網(wǎng)絡(luò)教育學(xué)院多年來大批量網(wǎng)絡(luò)課程的設(shè)計(jì)與開發(fā)實(shí)踐中，筆者發(fā)現(xiàn)除此之外，最經(jīng)濟(jì)有效的方法是一些非正式的質(zhì)性的評(píng)價(jià)方法，如焦點(diǎn)小組、認(rèn)知走查、訪談等，而這些方法的執(zhí)行人一般對(duì)可用性的評(píng)價(jià)指標(biāo)不是很清楚，所以最好有一份可用性測試檢查表，由評(píng)審人員根據(jù)檢查表中列舉的問題對(duì)不同開發(fā)階段網(wǎng)絡(luò)課程的可用性情況進(jìn)行檢查，這種方法通?？梢宰鳛閷?shí)驗(yàn)室測試的很好補(bǔ)充。那么，如何構(gòu)建一種客觀、統(tǒng)一和定量的適于網(wǎng)絡(luò)課程過程性評(píng)價(jià)的可用性衡量標(biāo)準(zhǔn)呢？

基于已有的網(wǎng)絡(luò)課程評(píng)價(jià)標(biāo)準(zhǔn)，根據(jù)網(wǎng)絡(luò)課程可用性的八要素（如圖2所示），并結(jié)合工作實(shí)踐，我們制定了如表3所示的可用性測試檢查表，用以指導(dǎo)網(wǎng)絡(luò)課程設(shè)計(jì)與開發(fā)需要。此表從7個(gè)方面來診斷網(wǎng)絡(luò)課程的可用性，包括：界面設(shè)計(jì)、學(xué)習(xí)導(dǎo)航、媒體表現(xiàn)、交流溝通、學(xué)習(xí)支持、內(nèi)容要求和技術(shù)要求。從人類信息處理模型來看，這些指標(biāo)又涵蓋兼容性、一致性、靈活性、可學(xué)習(xí)性、最少的行動(dòng)、最小的記憶負(fù)擔(dān)、知覺的有限性、用戶指導(dǎo)等方面。

本檢查表共設(shè)計(jì)了70道題（70個(gè)問題），調(diào)查表可以使用下面的公式給出一個(gè)可用性的評(píng)分：

其中：i=第i個(gè)問題；

Si=該課程在第i個(gè)問題上所得的分?jǐn)?shù)，若該問題不存在，則Si=0；

Pi=1，若第i個(gè)問題適用，但不存在；

Pi=0，若第i個(gè)問題不適用或者第i個(gè)問題存在且適用；

Ii=1，若第i個(gè)問題適用；

Ii=0，若第i個(gè)問題不適用；

Wi=第i個(gè)問題重要性的得分。

對(duì)于每一個(gè)問題，評(píng)審人員需要評(píng)估該問題是否適用于被評(píng)審系統(tǒng)。如果不適用，Ii項(xiàng)為0；如果適用，Ii項(xiàng)為1，評(píng)審人員則要評(píng)估該問題在系統(tǒng)中是否存在，如果不存在，將有相對(duì)應(yīng)的懲罰項(xiàng)。這意味著因?yàn)槿鄙僭擁?xiàng)，系統(tǒng)可能存在著潛在的可用性問題。如果該項(xiàng)適用且存在，評(píng)審人員則根據(jù)該項(xiàng)為系統(tǒng)從1到7打分，1為最糟，7為最好。評(píng)審人員還要為適用項(xiàng)的重要性打分（從1到3），分越高則越重要。系統(tǒng)可用性的得分將是總分和可能的完美分?jǐn)?shù)之間比值的百分?jǐn)?shù)。表3為網(wǎng)絡(luò)課程可用性測試檢查表，表4為檢查表的答案紙。

表3 網(wǎng)絡(luò)課程可用性測試檢查表

?

表4 可用性測試檢查表答案紙

以上介紹的檢查表主要在已有國內(nèi)外網(wǎng)絡(luò)課程評(píng)價(jià)標(biāo)準(zhǔn)、相關(guān)理論的啟發(fā)和筆者網(wǎng)絡(luò)課程建設(shè)實(shí)踐經(jīng)驗(yàn)基礎(chǔ)上構(gòu)建的，研究者希望通過此項(xiàng)研究，拋磚引玉，共享在這方面的一些思考和經(jīng)驗(yàn)，該表已在華東師范大學(xué)網(wǎng)絡(luò)教育學(xué)院的網(wǎng)絡(luò)課程建設(shè)中得到了廣泛應(yīng)用。

[1]Nielsen J(1993).Usability Engineering[M].Boston:Academic Press.

[2]http://www.usabilitynet.org/tools/r_international.htm.

[3]Knowles,M.(1975).Self-Directed Learning:a Guide for Learners and Teachers.Englewood Cliffs:Prentice Hall/Cambridge,135.

[4]顧靜相，方慕真.遠(yuǎn)程教育學(xué)習(xí)支持服務(wù)體系構(gòu)建探索[J].中國電化教育，2007，（6）.

[5]Farhad Saba(2002).Evolution of Research in Distance Education: Challenges of the Online Distance Learning Environment.The 2nd Conference on Research in Distance Adult Learning in Asia.

[6]劉名卓.網(wǎng)絡(luò)課程的可用性研究[D].博士論文，華東師范大學(xué)，2010.

[7]羅曉春.網(wǎng)絡(luò)教育課程質(zhì)量認(rèn)證標(biāo)準(zhǔn)的研究與設(shè)計(jì)[D].碩士學(xué)位論文，南京師范大學(xué)，2002：20.

[8]董建明，傅利民，饒培倫等.人機(jī)交互:以用戶為中心的設(shè)計(jì)與評(píng)估[M].北京：清華大學(xué)出版社，2007：191-192.

[9]http://www.celtsc.edu.cn

[10]Nigel Bevan(2001).International Standards for HCI and Usability. International Journal of Human Computer Studies,55(4):533-552.

責(zé)任編輯 池塘

G420

B

1009—458x（2011）04—0027—05

*該論文受教育部青年專項(xiàng)課題資助，項(xiàng)目號(hào)：ECA080287。

2010－12－15

劉名卓，博士，副研究員，華東師范大學(xué)網(wǎng)絡(luò)教育學(xué)院資源建設(shè)部主任（200062）。

劉名海，碩士，中學(xué)一級(jí)教師，山東省諸誠市第一中學(xué)（262200）。