基于層次分析法的中職網(wǎng)絡(luò)課堂教學(xué)效果評(píng)價(jià)指標(biāo)構(gòu)建

摘要：本文利用層次分析法構(gòu)建以網(wǎng)絡(luò)教學(xué)設(shè)計(jì)評(píng)價(jià)指標(biāo)體系為目標(biāo)層，教學(xué)內(nèi)容，教學(xué)實(shí)施，教學(xué)反饋，診斷提升為準(zhǔn)則層，以及科學(xué)性，規(guī)范性，嚴(yán)謹(jǐn)性，啟發(fā)性，情境性等29個(gè)因素為指標(biāo)層的三級(jí)評(píng)價(jià)指標(biāo)體系。參照商業(yè)化網(wǎng)絡(luò)課程設(shè)計(jì)標(biāo)準(zhǔn)及中職生網(wǎng)絡(luò)學(xué)習(xí)特點(diǎn)，結(jié)合互聯(lián)網(wǎng)知識(shí)傳播特性，采用專家打分的方式構(gòu)造判斷矩陣，并計(jì)算指標(biāo)層綜合權(quán)重，成功建立一個(gè)系統(tǒng)、客觀、操作性良好的網(wǎng)絡(luò)教學(xué)設(shè)計(jì)評(píng)價(jià)模型。

Summary：This paper uses the analytic hierarchy process to build a network of teaching effect evaluation index system ，and takes it as the target layer.It also uses teaching content， teaching implementation， teaching feedback， and teaching diagnosis and upgraded as the criterion layer. Eventually it forms 29 factors of three-level evaluation index system including scientific， standardized， rigorous， enlightening， contextual and so on. According to the design standards of commercial online courses and the characteristics of online learning for secondary vocational students， it combines with the characteristics of internet knowledge transmission， the judgment matrix constructed by expert scoring， and the comprehensive weight of the index layer to establish a system successfully， which is a objective and well-operable online teaching effect evaluation model.

關(guān)鍵詞：層次分析法 教學(xué)效果 評(píng)價(jià)指標(biāo)

Keywords： analytic hierarchy process; teaching effect; evaluation index

一、研究背景

隨著“互聯(lián)網(wǎng)+”教育的深入推進(jìn)，教育信息化進(jìn)入2.0時(shí)代，教育信息化網(wǎng)絡(luò)平臺(tái)日趨完善，教師信息化應(yīng)用能力顯著提高，“互聯(lián)網(wǎng)+”教育打破了傳統(tǒng)教育時(shí)間與空間的限制，實(shí)現(xiàn)優(yōu)質(zhì)教育資源共享，滿足學(xué)生個(gè)性化學(xué)習(xí)需要[1]。同時(shí)互聯(lián)網(wǎng)提升了教育服務(wù)效率，優(yōu)化在線課堂組織形式，將前期測(cè)評(píng)、過程監(jiān)控，成果反饋融為一體，提高學(xué)習(xí)的針對(duì)性?；ヂ?lián)網(wǎng)教育憑借著獨(dú)特的優(yōu)勢(shì)，成為傳統(tǒng)課堂教學(xué)的有益補(bǔ)充，然而在其快速發(fā)展過程中，如何有效評(píng)價(jià)網(wǎng)絡(luò)教學(xué)效果，也引發(fā)了專家和學(xué)者的關(guān)注。

在國(guó)外網(wǎng)絡(luò)教學(xué)效果評(píng)價(jià)體系的研究，主要分為三個(gè)方面。（1）網(wǎng)絡(luò)教學(xué)平臺(tái)的開發(fā)和評(píng)價(jià)，以O(shè)penLearn為代表的公眾學(xué)習(xí)平臺(tái)，為用戶提供免費(fèi)訪問開放大學(xué)的教育資源。以Udacity為代表的商業(yè)平臺(tái)，開發(fā)高等教育在線課程，并提供行業(yè)應(yīng)用型人才的在線培訓(xùn)和認(rèn)證。自從2003年，國(guó)外針對(duì)不同類型的網(wǎng)絡(luò)教學(xué)平臺(tái)進(jìn)行比較和評(píng)價(jià)研究，已經(jīng)形成多個(gè)較為典型的網(wǎng)絡(luò)教學(xué)平臺(tái)評(píng)級(jí)指標(biāo)體系。（2）網(wǎng)絡(luò)教學(xué)中教師的作用，認(rèn)為課程的組織者，策劃者和實(shí)施者，也是教學(xué)反饋的評(píng)估者，對(duì)于教師的標(biāo)準(zhǔn)化訓(xùn)練至關(guān)重要[2]。（3）從用戶體驗(yàn)出發(fā)，美國(guó)教學(xué)設(shè)計(jì)與適用專業(yè)委員會(huì)從可用性，技術(shù)性和教學(xué)性三個(gè)方面對(duì)在線學(xué)習(xí)進(jìn)行了評(píng)價(jià)并提出在線課程的應(yīng)用標(biāo)準(zhǔn)。

在國(guó)內(nèi)網(wǎng)絡(luò)課程質(zhì)量體系構(gòu)建中，學(xué)者提出必須從學(xué)校支持，課程開發(fā)，教學(xué)過程，教學(xué)組織，學(xué)生服務(wù)，教師培訓(xùn)和教學(xué)效果等多方面進(jìn)行綜合管理，而網(wǎng)絡(luò)教學(xué)設(shè)計(jì)研究，則認(rèn)為教學(xué)設(shè)計(jì)應(yīng)該體現(xiàn)互聯(lián)網(wǎng)碎片化學(xué)習(xí)的特點(diǎn)和情景遷移的學(xué)習(xí)習(xí)慣[3]。

綜上所述，國(guó)內(nèi)外對(duì)網(wǎng)絡(luò)教學(xué)設(shè)計(jì)的評(píng)價(jià)指標(biāo)體系的研究各有所長(zhǎng)，還未形成一套操作性強(qiáng)的評(píng)價(jià)標(biāo)準(zhǔn)，缺少各指標(biāo)在評(píng)價(jià)體系中科學(xué)的權(quán)重賦值。因此，構(gòu)建中職院校合理、系統(tǒng)、有效的新型網(wǎng)絡(luò)教學(xué)效果評(píng)級(jí)指標(biāo)體系，具有相對(duì)重要的應(yīng)用和實(shí)踐價(jià)值。

二、網(wǎng)絡(luò)教學(xué)效果評(píng)價(jià)指標(biāo)體系構(gòu)建

（一）構(gòu)建三級(jí)評(píng)價(jià)結(jié)構(gòu)模型

為確保評(píng)價(jià)指標(biāo)的科學(xué)性和有效性，項(xiàng)目組邀請(qǐng)網(wǎng)絡(luò)教學(xué)經(jīng)驗(yàn)豐富的專家和一線教師組成研究團(tuán)隊(duì)。首先根據(jù)網(wǎng)絡(luò)教學(xué)的特點(diǎn)，認(rèn)真詳細(xì)分析構(gòu)建總目標(biāo)，然后根據(jù)問題的性質(zhì)和要達(dá)到的總目標(biāo)，將問題分解為不同的組成因素，并按照因素間的相互關(guān)聯(lián)影響以及隸屬關(guān)系將因素聚集組合，最終將問題歸結(jié)至底層，形成客觀，科學(xué)，可執(zhí)行的行動(dòng)方案和解決措施[4]。三級(jí)評(píng)價(jià)指標(biāo)體系（見表1）

（二）構(gòu)建兩兩比較的判斷矩陣

在確定各層次各因素之間的權(quán)重時(shí)，借助Saaty的九分位標(biāo)度法，采用相對(duì)尺度，以盡可能減少性質(zhì)不同的因素相互比較的困難，提高準(zhǔn)確性[5]。通過對(duì)同一層次兩兩元素重要性的比較，可以得到表示本層某一因素針對(duì)其他因素的相對(duì)重要性的成對(duì)比較矩陣A，其中滿足（A-λE）W=0的λ值叫做矩陣A的特征值，W是特征向量，最大特征值λmax所對(duì)應(yīng)的方程組的解向量W（w1，w2， …，wn）即為各個(gè)因素的權(quán)重。

（三）層次單排序和一致性檢驗(yàn)

層次單排序：W的元素為同一層次因素對(duì)于上一層次因素某因素相對(duì)重要性的排序權(quán)值，這一過程稱為層次單排序，能否確認(rèn)層次單排序，需要進(jìn)行一致性檢驗(yàn)，所謂一致性檢驗(yàn)是指對(duì)成對(duì)比較矩陣確定不一致的允許范圍[6]。一致性檢驗(yàn)是通過計(jì)算一致性比例來進(jìn)行：在CR=CI/RI中CI是一致性指標(biāo)，RI是平均隨機(jī)一致性指標(biāo)，若CR<0.1，則通過一致性檢驗(yàn);若CR>0.1，則一致性檢驗(yàn)未通過。

如果成對(duì)比較矩陣是一致陣，則我們自然回取對(duì)應(yīng)于最大特征根λ的歸一化特征向量W（w1，w2， …，wn），且，wi表示下層第i個(gè)因素對(duì)上層某個(gè)因素影響程度的權(quán)值。

若成對(duì)比較矩陣不是一致陣，Saaty等人建議用其最大特征根對(duì)應(yīng)的歸一化特征向量作為權(quán)向量W，或者重新構(gòu)造判斷矩陣[7]。

首先構(gòu)建目標(biāo)層A與準(zhǔn)則層B的判斷矩陣，得到B層各個(gè)元素相對(duì)于A層的權(quán)重。以準(zhǔn)則層的四個(gè)要素兩兩比較的判斷矩陣為例，教學(xué)內(nèi)容與教學(xué)實(shí)施比較，認(rèn)為后者較前者稍微重要，所以賦值為3，教學(xué)內(nèi)容與教學(xué)反饋相比，前者重要性介于明顯重要和強(qiáng)烈重要之間，所以賦值為6，教學(xué)內(nèi)容與改善提升相比，前者相比后者強(qiáng)烈重要，所以賦值為7，以此類推。在構(gòu)建判斷矩陣時(shí)，為了提高指標(biāo)評(píng)分的客觀性、全面性和準(zhǔn)確性。我們依據(jù)專家評(píng)分的方式，對(duì)指標(biāo)層的各項(xiàng)指標(biāo)做出科學(xué)的評(píng)估，去掉一個(gè)最低分和一個(gè)最高分取剩余專家對(duì)各項(xiàng)指標(biāo)評(píng)分的均值。

準(zhǔn)則層B1-B4關(guān)于目標(biāo)層A構(gòu)成A-B判斷矩陣，如下所示：

（三）計(jì)算指標(biāo)層相對(duì)于目標(biāo)層的綜合權(quán)重

如果準(zhǔn)則層對(duì)目標(biāo)層的權(quán)重向量為W=（W1，W2，…，Wn）T，而且指標(biāo)層元素對(duì)準(zhǔn)則層的權(quán)重向量為，P=（P1，P2，…，Pn）那么指標(biāo)層對(duì)目標(biāo)層的綜合權(quán)重向量為 W=P*W

通過Matlab軟件計(jì)算所得綜合權(quán)重，可以看出教學(xué)活動(dòng)執(zhí)行的規(guī)范性和準(zhǔn)確性，以及教學(xué)活動(dòng)中的情景設(shè)計(jì)和互動(dòng)感知所占比重較大，分別為0.16，0.091和0.086，因此教學(xué)活動(dòng)的執(zhí)行環(huán)節(jié)是評(píng)價(jià)網(wǎng)絡(luò)教學(xué)效果的關(guān)鍵，同時(shí)也明確了其他指標(biāo)對(duì)目標(biāo)層的影響程度，該指標(biāo)體系對(duì)于中職院校網(wǎng)絡(luò)課程建設(shè)和教學(xué)效果評(píng)估具有良好的指導(dǎo)作用。

三、總結(jié)

本文所構(gòu)建的網(wǎng)絡(luò)教學(xué)設(shè)計(jì)評(píng)價(jià)指標(biāo)體系，重點(diǎn)解決了以下幾個(gè)目標(biāo)。一是評(píng)價(jià)指標(biāo)比較客觀。克服了人為主觀定級(jí)評(píng)分的缺陷。二是評(píng)價(jià)相對(duì)精確。按照網(wǎng)絡(luò)教學(xué)活動(dòng)進(jìn)程的內(nèi)在邏輯，通過定性與定量研究對(duì)指標(biāo)進(jìn)行識(shí)別，篩選，確保指標(biāo)權(quán)值的科學(xué)性和規(guī)范性;三是指標(biāo)可操作性強(qiáng)，該指標(biāo)體系遵循教學(xué)活動(dòng)規(guī)律展開，從教學(xué)內(nèi)容，教學(xué)執(zhí)行，教學(xué)反饋和改善提升四個(gè)環(huán)節(jié)重新還原了教學(xué)設(shè)計(jì)過程，通過知識(shí)重組，知識(shí)呈現(xiàn)，學(xué)習(xí)行為管理，學(xué)習(xí)效果診斷，輔導(dǎo)提升等步驟，形成教學(xué)閉環(huán)。同時(shí)結(jié)合網(wǎng)絡(luò)學(xué)習(xí)者偏好和互聯(lián)網(wǎng)內(nèi)容傳播的特性，為進(jìn)一步細(xì)化為課程實(shí)施方案提供了依據(jù)。當(dāng)然在實(shí)際應(yīng)用中，可以根據(jù)學(xué)科導(dǎo)向，參考教學(xué)實(shí)施者和教學(xué)感知者的體驗(yàn)調(diào)整各項(xiàng)指標(biāo)權(quán)重，滿足實(shí)際教學(xué)評(píng)價(jià)的需要，使教學(xué)評(píng)價(jià)結(jié)果更加科學(xué)，公正，客觀。

參考文獻(xiàn)：

[1] 周俊.以質(zhì)量為核心 推進(jìn)職業(yè)教育持續(xù)發(fā)展——《國(guó)家教育事業(yè)發(fā)展“十三五”規(guī)劃》解讀 [J].江蘇教育，2018（44）：23-27.

[2] 孫楠，徐麗君，王子龍，關(guān)英紅.基于層次分析法的網(wǎng)絡(luò)教學(xué)效果評(píng)級(jí)分析[J].黑龍江教育（理論與實(shí)踐），2017，（11）：20- 21.

[3] 譚光興，徐峰，屈文建.高校學(xué)生網(wǎng)絡(luò)教學(xué)行為意向影響因素與模型[J].電化教育研究，2012，33（01）：47-53.

[4] 齊宏影. 中職學(xué)校電子商務(wù)專業(yè)課堂教學(xué)中的激勵(lì)問題及對(duì)策研究[D].吉林：吉林外國(guó)語大學(xué)，2019.

[5] 李寶斌，許曉東.高校課堂教學(xué)效果的教師評(píng)價(jià)維度探究[J].中國(guó)大學(xué)教學(xué)，2011（8）.

[6] 馮麗霞，施韶亭，杜文明.基于層次分析法的教學(xué)評(píng)價(jià)指標(biāo)模型[J].西北師范大學(xué)學(xué)報(bào)：自然科學(xué)版，2010（5）.

[7] T.L.Saaty. The Analytic Hierarchy Process[M].Mc.Graw： Hill International Book Company.1980.

基金項(xiàng)目：上海市職業(yè)教育協(xié)會(huì)2020—2021年度一般課題，《課證融合模式下網(wǎng)絡(luò)教學(xué)效果評(píng)價(jià)指標(biāo)研究》階段性成果之一。

上海市現(xiàn)代流通學(xué)校 林明輝