基于德爾菲法的線上教學(xué)質(zhì)量評(píng)價(jià)指標(biāo)體系構(gòu)建及實(shí)踐應(yīng)用

趙銀雙，張紅萍，杜秦媛，何文，秦青，吳婧

（武漢輕工大學(xué)醫(yī)學(xué)與健康學(xué)院，湖北 武漢 430023）

0 引言

新冠疫情期間，教育部提出利用網(wǎng)絡(luò)平臺(tái)進(jìn)行線上教學(xué),保證教學(xué)進(jìn)度和教學(xué)質(zhì)量[1]。各大高校積極響應(yīng)教育部的號(hào)召，貫徹“停課不停教，停課不停學(xué)”精神，教師們開始采取網(wǎng)絡(luò)授課的方式，學(xué)生們網(wǎng)絡(luò)上課已成常態(tài)化，形成了龐大的在線學(xué)習(xí)規(guī)模，教學(xué)質(zhì)量就成了首當(dāng)其沖需要關(guān)注的問題[2]。線上教學(xué)是教師運(yùn)用網(wǎng)絡(luò)組織，學(xué)生在終端接收后的在線和線下等多方式實(shí)現(xiàn)的泛在學(xué)習(xí)[3]，是一種以網(wǎng)絡(luò)為介質(zhì)的學(xué)習(xí)方式，不受時(shí)間地域限制，資源較為豐富[4]。當(dāng)前，我國(guó)在線課程已走過近20年的發(fā)展歷程[5]，線上教學(xué)的方式和內(nèi)容也在不斷的豐富與多樣化，來滿足教學(xué)與學(xué)習(xí)的需求[6]。

盡管如此，發(fā)展的同時(shí)也會(huì)有問題的出現(xiàn)，隨著國(guó)家大力推進(jìn)在線開放課程建設(shè)，倡導(dǎo)在線課程學(xué)分認(rèn)定等政策以及新的課程理念、技術(shù)的涌現(xiàn)，以往制定的線上教學(xué)評(píng)價(jià)指標(biāo)體系可能會(huì)顯得陳舊，難以滿足在線開放課程的質(zhì)量認(rèn)定需求,而新的權(quán)威性的質(zhì)量認(rèn)定標(biāo)準(zhǔn)尚未出臺(tái)[5]。尤其疫情期間，雖然線上教學(xué)為教育者和受教育者帶來了極大的方便，但是在這個(gè)過程中卻很難貫徹執(zhí)行 “以評(píng)促建、以評(píng)促改”“以學(xué)評(píng)教，過程評(píng)教”[7]的導(dǎo)向，線上教學(xué)的質(zhì)量、學(xué)生的學(xué)習(xí)效果也很難去嚴(yán)格評(píng)價(jià)與衡量。因此如何確保線上教學(xué)質(zhì)量仍是近年來重點(diǎn)研究的熱點(diǎn)問題之一，更是疫情期間所有學(xué)校共同面臨的重要課題[8,9]。所以本研究主要圍繞護(hù)理學(xué)專業(yè)線上教學(xué)質(zhì)量評(píng)價(jià)展開探討，嘗試建立起線上教學(xué)質(zhì)量評(píng)價(jià)體系，并以在校護(hù)理專業(yè)學(xué)生為例進(jìn)行實(shí)踐應(yīng)用研究，以期為護(hù)理學(xué)專業(yè)線上教學(xué)質(zhì)量的提高提供借鑒意義。

2 線上教學(xué)質(zhì)量評(píng)價(jià)體系的構(gòu)建

2.1 研究方法

①結(jié)合文獻(xiàn)分析法、質(zhì)性訪談法：與本校護(hù)理專業(yè)學(xué)生、少量教師訪談,及問卷調(diào)查法來總結(jié)出影響線上教學(xué)質(zhì)量的影響因素，綜合起來確定初步的線上教學(xué)質(zhì)量評(píng)價(jià)指標(biāo)體系和權(quán)重的確定；②采用德爾菲法，通過匿名方式進(jìn)行多輪專家函詢，并對(duì)每輪意見進(jìn)行整理分析，再反饋給專家供其分析判斷，提出新的意見，經(jīng)過2 輪函詢意見趨于一致，形成最終的線上教學(xué)評(píng)價(jià)指標(biāo)體系及相應(yīng)的權(quán)重指標(biāo)；③權(quán)重的算法：采用主觀賦權(quán)法中的專家咨詢法，專家根據(jù)實(shí)際情況，結(jié)合自身的知識(shí)和經(jīng)驗(yàn)對(duì)各條目的權(quán)重進(jìn)行排序，進(jìn)行打分：對(duì)4個(gè)一級(jí)指標(biāo)和20個(gè)二級(jí)指標(biāo)初始權(quán)重進(jìn)行歸一化處理，使同一層次的指標(biāo)歸一化權(quán)重之和等于1。其次，計(jì)算二級(jí)指標(biāo)的組合權(quán)重采用“乘積法”[10]。

2.2 研究過程研究步驟

2.2.1 成立課題研究小組

該小組主要包括2 名副教授，2 名講師，均從事高校教學(xué)的一線教師，具有豐富的線上教學(xué)經(jīng)驗(yàn)，并能熟悉應(yīng)用德爾菲法。

2.2.2 質(zhì)性訪談

首先研究者查閱資料及相關(guān)研究，確定訪談目的擬定訪談提綱，抽取護(hù)理學(xué)專業(yè)5 名學(xué)生1 名教師進(jìn)行預(yù)訪談，根據(jù)預(yù)訪談結(jié)果對(duì)訪談提綱進(jìn)行修改，形成訪談提綱成稿。于2021年4 月至5 月，研究者采用目的性抽樣方法，選取本校醫(yī)學(xué)院在校學(xué)生10名和2 名在校教師并確定好訪談的時(shí)間地點(diǎn)，告知訪談目的并圍繞線上教學(xué)質(zhì)量進(jìn)行談。訪談過程中和訪談結(jié)束后，研究者整理好相關(guān)內(nèi)容和數(shù)據(jù)，并作為初步線上教學(xué)質(zhì)量評(píng)價(jià)指標(biāo)體系建立的參考資料。

2.2.3 確定函詢專家

此次函詢專家主要為從事高校護(hù)理專業(yè)教學(xué)工作的一線教師和教學(xué)管理人員：①碩士及以上學(xué)歷；②從事高校教學(xué)或教學(xué)管理工作1年及以上；③熟悉線上教學(xué)工作。然后通過電話、郵件等方式與之聯(lián)系，明確研究目的與內(nèi)容，征得專家本人同意，確保每位專家能自始至終參與本次研究。

2.2.4 編制專家咨詢表

編制依據(jù)：課題研究小組主要參考2002年教育部信息化標(biāo)準(zhǔn)技術(shù)委員會(huì)發(fā)布的《網(wǎng)絡(luò)課程評(píng)價(jià)規(guī)范》，并在此參考文獻(xiàn)的基礎(chǔ)上結(jié)合對(duì)本在校學(xué)生關(guān)于線上課程的一些訪談與調(diào)查，以及本項(xiàng)目組成員線上教學(xué)實(shí)踐經(jīng)驗(yàn)的基礎(chǔ)上設(shè)計(jì)完成專家函詢表。

第一輪專家咨詢指標(biāo)體系：包括“授課工具及技術(shù)支持”“課程內(nèi)容”“教學(xué)設(shè)計(jì)”“評(píng)價(jià)與考核”4個(gè)一級(jí)指標(biāo)，每個(gè)一級(jí)指標(biāo)又包含若干子項(xiàng)目，初步構(gòu)建20 項(xiàng)目二級(jí)指標(biāo)，并對(duì)每項(xiàng)指標(biāo)的含義進(jìn)行了解釋，具體見表1。

表1 初步構(gòu)建線上教學(xué)評(píng)價(jià)指標(biāo)體系

2.2.5 第一輪專家咨詢結(jié)果

本研究小組將以上二級(jí)指標(biāo)后面再加上具體的指標(biāo)解釋，設(shè)計(jì)成專家《線上教學(xué)課程教學(xué)質(zhì)量評(píng)價(jià)指標(biāo)體系建立》咨詢表，咨詢表包括導(dǎo)語、一級(jí)指標(biāo)、二級(jí)指標(biāo)、關(guān)于每個(gè)指標(biāo)的具體解釋、每個(gè)指標(biāo)的重要性選擇、每個(gè)指標(biāo)的權(quán)重分配意見、專家基本情況、專家對(duì)各指標(biāo)的熟悉程度等。第一輪共發(fā)放紙質(zhì)版和電子版問卷共計(jì)21 份，回收21 份，專家積極系數(shù)為100%（21/21），說明專家對(duì)于本次函詢比較重視，其中剔除3 份無效問卷（3 份均為數(shù)據(jù)不完整問卷），因此共18 份有效問卷，具體情況見表2。

表2 德爾菲專家基本情況（例）

專家權(quán)威程度：按照專家權(quán)威性判斷指標(biāo)系數(shù)的評(píng)分方法計(jì)算咨詢專家權(quán)威系數(shù)，計(jì)算公式為計(jì)算公式為Cr 專家權(quán)威系數(shù)=(Ca 專家對(duì)內(nèi)容的熟悉程度+Cs 專家對(duì)內(nèi)容判斷依據(jù))／2，經(jīng)計(jì)算：Ca 為0.81，Cs 為0.84，Cr 為0.83，均＞0.8，說明專家具有較高的權(quán)威性。

專家意見協(xié)調(diào)程度：第一輪專家咨詢的肯德爾系數(shù)為0.528，P＜0.05，說明一致性較好，結(jié)果可靠。

通過第一輪專家函詢結(jié)果可以看出，雖然專家對(duì)現(xiàn)有指標(biāo)的認(rèn)可度較高，但是有2 位專家提出“屏幕布局”與“課件制作”“課程說明”與“重難點(diǎn)突出”均有交叉重復(fù)的方面，有4 位專家提出“多元評(píng)價(jià)”應(yīng)該具體體現(xiàn)站在教師和學(xué)生的不同角度的多元評(píng)價(jià)，還有1 位專家提出學(xué)生端學(xué)生的網(wǎng)絡(luò)條件如網(wǎng)速等也大大影響教師的線上教學(xué)質(zhì)量。根據(jù)專家函詢意見，經(jīng)研究小組討論后再次對(duì)評(píng)價(jià)指標(biāo)進(jìn)行了合并、刪減、增加、修改與完善。

2.2.6 第二輪專家函詢及結(jié)果分析

在第一輪評(píng)價(jià)指標(biāo)體系的基礎(chǔ)上，本研究小組將“1.屏幕布局”合并到了“3.4 課件制作：簡(jiǎn)潔美觀清楚，圖像、音頻、視頻、動(dòng)畫等運(yùn)用適當(dāng)，內(nèi)容充分全面、更新及時(shí)與時(shí)俱進(jìn)”。將“2.課程說明”合并到了“2.1 重難點(diǎn)突出：課程內(nèi)容重難點(diǎn)突出，課程目標(biāo)明確，主次詳略得當(dāng)”同時(shí)也增加了“1.3 學(xué)生網(wǎng)絡(luò)支持：學(xué)生能夠接觸的網(wǎng)絡(luò)條件包括網(wǎng)絡(luò)學(xué)習(xí)的工具和網(wǎng)絡(luò)質(zhì)量等能夠支持本次線上教學(xué)”和“4.2 學(xué)生多元評(píng)價(jià)：學(xué)生對(duì)于線上教學(xué)的效果、學(xué)習(xí)狀態(tài)等滿意度的評(píng)價(jià)”，并對(duì)每個(gè)指標(biāo)的具體說明進(jìn)行了進(jìn)一步的修改和完善。

第二輪專家函詢中共發(fā)放15 份問卷，回收15份，全部有效，專家積極系數(shù)為100%，專家權(quán)威系數(shù)為0.89，專家咨詢的肯德爾系數(shù)為0.63。

2.2.7 權(quán)重的確定

綜上所述，初步構(gòu)建了線上教學(xué)質(zhì)量評(píng)價(jià)指標(biāo)體系，接下來需要確定指標(biāo)的權(quán)重，權(quán)重即權(quán)數(shù)即對(duì)各項(xiàng)指標(biāo)在此指標(biāo)體系中的重要程度的判斷[7]，本研究采用德爾菲法確定指標(biāo)權(quán)重，即請(qǐng)所邀請(qǐng)的專家背對(duì)背反復(fù)填寫權(quán)重分配的意見并求平均值確定最終權(quán)重。本研究中一級(jí)指標(biāo)的權(quán)重為專家評(píng)分的均值，二級(jí)指標(biāo)的權(quán)重屬于組合權(quán)重，采用乘積法計(jì)算[10]，即二級(jí)指標(biāo)不僅要考慮同一層次指標(biāo)的權(quán)重，還應(yīng)當(dāng)考慮上一層次指標(biāo)的權(quán)重。二級(jí)指標(biāo)的組合權(quán)重是二級(jí)指標(biāo)的歸一化權(quán)重與相應(yīng)上一層一級(jí)指標(biāo)的歸一化權(quán)重的乘積。如1.1 操作幫助的最終權(quán)重=1.授課工具及技術(shù)支持歸一化權(quán)重×操作幫助的歸一化權(quán)重，具體見表3。

表3 線上教學(xué)質(zhì)量評(píng)價(jià)指標(biāo)體系

3 線上教學(xué)質(zhì)量評(píng)價(jià)體系的實(shí)踐應(yīng)用

3.1 數(shù)據(jù)收集

采取方便抽樣法，選取本校醫(yī)學(xué)院在校學(xué)生進(jìn)行疫情期間線上教學(xué)質(zhì)量評(píng)價(jià)的調(diào)查，發(fā)放問卷共計(jì)88 份，收回88 份問卷，回收率為100%，學(xué)生積極系數(shù)為100%（88/88）表明學(xué)生對(duì)于本次調(diào)查較為重視，剔除5 份無效問卷（3 份數(shù)據(jù)缺失不完整問卷，2 份完全重復(fù)問卷），共計(jì)83 份有效問卷。主要包括67 名在讀本科生與16 名在讀碩士生。調(diào)查問卷主要包括兩部分：①年級(jí)、年齡、性別等一般資料。②本研究中的線上教學(xué)質(zhì)量的評(píng)價(jià)指標(biāo)。

3.2 結(jié)果

使用SPSS 23.0 對(duì)調(diào)查結(jié)果進(jìn)行整理分析后發(fā)現(xiàn)，該線上課程質(zhì)量評(píng)價(jià)指標(biāo)體系的Cronbach’s α 為0.942，整個(gè)評(píng)價(jià)指標(biāo)體系和各評(píng)價(jià)指標(biāo)的Cronbach’s α 系數(shù)均大于0.930，Cronbach’s α 系數(shù)大于0.7，可認(rèn)為條目之間的一致性較好[11]。說明本研究中的線上教學(xué)質(zhì)量評(píng)價(jià)指標(biāo)體系間的內(nèi)在一致性、評(píng)價(jià)指標(biāo)間的穩(wěn)定性較好。能夠全面地評(píng)價(jià)疫情期間線上教學(xué)質(zhì)量的等級(jí)，方便教師根據(jù)調(diào)查的評(píng)價(jià)結(jié)果去進(jìn)行線上教學(xué)的改進(jìn)與完善，更好地保障線上教學(xué)的教學(xué)質(zhì)量。

4 小結(jié)

線上教學(xué)不受地域、時(shí)間等條件的限制，為學(xué)生學(xué)習(xí)帶來了很大的便利，今后線上與線下相結(jié)合的教育模式也是發(fā)展的主要趨勢(shì)。當(dāng)前國(guó)家也開放了仿真模擬教學(xué)平臺(tái)來滿足實(shí)踐性強(qiáng)的專業(yè)課程的實(shí)踐需求，但是線上教學(xué)過程中不能真實(shí)地關(guān)注到學(xué)生的學(xué)習(xí)狀態(tài)，不能真實(shí)反映學(xué)生實(shí)踐練習(xí)情況[12]，尤其是疫情期間這種現(xiàn)象更為突出。

所以本研究考慮到各個(gè)專業(yè)的實(shí)踐性，在文獻(xiàn)查閱、訪談、專家函詢、實(shí)踐應(yīng)用的基礎(chǔ)上，圍繞授課工具、課程內(nèi)容、教學(xué)設(shè)計(jì)、評(píng)價(jià)與考核四大方面建立線上教學(xué)質(zhì)量評(píng)價(jià)體系來確保學(xué)生的學(xué)習(xí)效果，滿足學(xué)生專業(yè)知識(shí)、專業(yè)技能的學(xué)習(xí)需求。但是仍然存在一些不足，也會(huì)繼續(xù)不斷完善優(yōu)化，為今后線上教學(xué)的質(zhì)量評(píng)價(jià)提供參考。