在線課程學(xué)習(xí)效果評價指標(biāo)中的學(xué)習(xí)者認(rèn)可度研究

張?jiān)侜t，邵江燕，吳靜萍，劉艾明，李廷秋

（武漢理工大學(xué) 船海與能源動力工程學(xué)院，武漢 430063）

大規(guī)模在線開放課程（Massive Open Online Course，簡寫MOOC）自Dave Cormier 與Bryan Alexander教授2008 年首次提出以來，在全球范圍內(nèi)得到了廣泛應(yīng)用，特別是2012 年以來建立了Udacity、Coursera和edx 等多個MOOC 平臺。因這類平臺具有大規(guī)模、開放及能夠共享的優(yōu)質(zhì)教學(xué)資源，在高校等教育機(jī)構(gòu)和相關(guān)領(lǐng)域受到了廣泛關(guān)注和積極推廣。2013年，Armando Fox 提出小規(guī)模限制性在線課程（Small Private Online Course，簡寫SPOC），以小規(guī)模的特定人群為對象，通過結(jié)合在線資源來實(shí)現(xiàn)傳統(tǒng)教育方式的轉(zhuǎn)變。因該方式針對小規(guī)模人群授課，具有較高的靈活性，能夠有效提升高等教育課堂的教學(xué)質(zhì)量。隨著SPOC 的廣泛應(yīng)用，用戶使用SPOC 學(xué)習(xí)的效果亟需精準(zhǔn)有效的評價體系和指標(biāo)，相關(guān)研究近年來愈發(fā)受到關(guān)注。

基于學(xué)習(xí)者視角方面，針對MOOC 和SPOC 的學(xué)習(xí)效果已建立有各種學(xué)習(xí)效果評價模型，例如，劉娜[1]從學(xué)習(xí)者視角出發(fā)構(gòu)建了MOOC 課程質(zhì)量評價標(biāo)準(zhǔn)。通過對成熟的在線課程質(zhì)量模型進(jìn)行分析，得到了在線課程質(zhì)量的影響因子，構(gòu)建了MOOC 課程質(zhì)量評估模型。隨后遵照評價指標(biāo)構(gòu)建原則和課程質(zhì)量模型，確定了學(xué)習(xí)者視角出發(fā)的質(zhì)量指標(biāo)維度，并通過專家評價法進(jìn)一步修訂和完善指標(biāo)，最終形成評價指標(biāo)體系。李楊[2]針對目前MOOC 課程學(xué)生學(xué)習(xí)評價方式的不足，從“知識與技能”“過程與方法”“情感態(tài)度與價值觀”三維教學(xué)目標(biāo)出發(fā)，以大學(xué)計(jì)算機(jī)基礎(chǔ)MOOC 課程為例，基于MOOC 教學(xué)模式，使用多平臺進(jìn)行輔助教學(xué)，通過對MOOC 平臺、問卷星及通用考試客戶端系統(tǒng)中的有效學(xué)生學(xué)習(xí)行為數(shù)據(jù)進(jìn)行獲取，構(gòu)建MOOC 環(huán)境下學(xué)生學(xué)習(xí)評價指標(biāo)體系并確定各級評價指標(biāo)權(quán)重，完成在實(shí)際教學(xué)中的應(yīng)用與實(shí)現(xiàn)。沈欣憶等[3]充分利用在MOOCAP（中國慕課大學(xué)先修課程）中學(xué)習(xí)者的在線行為和數(shù)據(jù)，通過德爾菲法和專家工作坊等多種方法，建立了MOOCAP 中在線學(xué)習(xí)和行為的評價模型，具有較好的全面性和系統(tǒng)性。周怡林[4]基于用戶畫像數(shù)據(jù)，構(gòu)建了學(xué)習(xí)者在線學(xué)習(xí)效果的評價模型。在充分分析使用數(shù)據(jù)基礎(chǔ)上，提出了考慮學(xué)習(xí)投入和持久性及媒體資源受歡迎程度的評價指標(biāo)，同時結(jié)合使用者的用戶畫像數(shù)據(jù)，從不同特征維度對學(xué)習(xí)者進(jìn)行刻畫，得到了更加多元化的用戶在線學(xué)習(xí)評價方法。

在上述評價模型中，研究者主要通過觀察學(xué)習(xí)者學(xué)習(xí)行為來評價使用效果，遺憾的是，研究中未能夠考慮學(xué)習(xí)者自身對這些評價指標(biāo)的感想和認(rèn)可度，正如曾奕等[5]提出的主體性缺失問題。

國內(nèi)近年來開展了少量關(guān)于學(xué)習(xí)者對評價指標(biāo)認(rèn)可程度的研究。李林光[6]從中國大學(xué)MOOC 平臺上提取了學(xué)習(xí)者使用過程中評論的課程特征-意見詞作為評價體系的一部分，結(jié)合已有教學(xué)理論和評價方法形成了一套評價指標(biāo)體系，并邀請了多名專家和具有豐富使用經(jīng)驗(yàn)的學(xué)習(xí)者給各指標(biāo)的重要程度打分，得到了一套能夠同時反映專家和學(xué)習(xí)者觀點(diǎn)的指標(biāo)權(quán)重系數(shù)，打分結(jié)果顯示專家和學(xué)生對于評價指標(biāo)的認(rèn)可度并不完全一致。在傳統(tǒng)課程中也有學(xué)者對評價指標(biāo)的學(xué)生認(rèn)可度開展了研究，劉曉瀛[7]對高職藥學(xué)專業(yè)化學(xué)專業(yè)基礎(chǔ)課的學(xué)業(yè)評價指標(biāo)進(jìn)行了學(xué)生認(rèn)可度調(diào)查分析，針對這門傳統(tǒng)線下教學(xué)課程，其課題組通過專家咨詢、期望調(diào)查及層次分析法等確定了學(xué)生學(xué)業(yè)評價的一級和二級指標(biāo)，然而對學(xué)生認(rèn)可度的調(diào)查結(jié)果顯示，部分指標(biāo)內(nèi)容并不能得到學(xué)生的認(rèn)可。何潔等[8]針對在浙江中醫(yī)藥大學(xué)進(jìn)行的藥物合成反應(yīng)課程，從學(xué)生認(rèn)可度方面分析了學(xué)生的學(xué)業(yè)評價體系，并介紹了改革措施與方法。

可以看到，課程設(shè)計(jì)者與學(xué)習(xí)者對于不同評價指標(biāo)的認(rèn)可度是有差異的，而且這種差異無法從專家評價中得到。其中，學(xué)習(xí)者作為評價指標(biāo)的被施方，其對于評價指標(biāo)的看法不容忽視。同時，由于在線資源主要由教師制作，難以從使用者的角度全面考慮，必然帶來一些設(shè)計(jì)時的盲區(qū)，比如在線資源應(yīng)以什么樣的形式呈現(xiàn)給學(xué)生更能夠得到學(xué)生認(rèn)可的問題。為了解決這些問題，有必要從學(xué)習(xí)者的角度看待在線課程平臺評價指標(biāo)使用情況。

本文對武漢理工大學(xué)在線課程平臺中的工程流體力學(xué)課程進(jìn)行了混合式教學(xué)的探索和實(shí)踐，并通過問卷調(diào)查的形式探究了學(xué)習(xí)者對在線課程資源類型及評價指標(biāo)在工程流體力學(xué)教學(xué)中的認(rèn)可度，為這類課程的在線資源建設(shè)及評價指標(biāo)體系構(gòu)建提供參考。

一、混合式教學(xué)模式的設(shè)計(jì)與實(shí)施

（一）教學(xué)設(shè)計(jì)

工程流體力學(xué)課程作為工科類專業(yè)的主要專業(yè)基礎(chǔ)課，在武漢理工大學(xué)由筆者所在團(tuán)隊(duì)采取線上線下混合式教學(xué)模式開展教學(xué)工作。本文中所討論的工程流體力學(xué)課程包括船舶與海洋工程專業(yè)的船舶流體力學(xué)課程、輪機(jī)工程專業(yè)的流體力學(xué)D 課程、能源與動力工程專業(yè)的流體力學(xué)D 課程及油氣儲運(yùn)專業(yè)的流體力學(xué)A課程等。雖然各課程內(nèi)容重點(diǎn)和難度有所差別，但主講內(nèi)容均屬于工程流體力學(xué)范疇，并采用了相同的教學(xué)模式，因此在本文中一并考慮，不同專業(yè)的區(qū)別也在后文中進(jìn)行了分析。

船舶與海洋工程專業(yè)船舶流體力學(xué)課程采取課堂教學(xué)和線上自學(xué)相結(jié)合的教學(xué)形式，共64 學(xué)時（56 學(xué)時理論教學(xué)，8 學(xué)時實(shí)驗(yàn)），理論教學(xué)開課14 周（每周4課時），實(shí)驗(yàn)教學(xué)8 學(xué)時。能源與動力工程專業(yè)流體力學(xué)D 課程采取課堂教學(xué)和線上自學(xué)的教學(xué)形式，共32 學(xué)時（26 學(xué)時理論教學(xué)，6 學(xué)時實(shí)驗(yàn)），理論教學(xué)開課7 周（前6 周每周4 學(xué)時，第7 周2 學(xué)時），實(shí)驗(yàn)教學(xué)6 學(xué)時。油氣儲運(yùn)專業(yè)流體力學(xué)A 課程采取課堂教學(xué)和線上自學(xué)的教學(xué)形式，共64 學(xué)時（58 學(xué)時理論教學(xué)，6 學(xué)時實(shí)驗(yàn)），理論教學(xué)開課15 周（前14 周每周4 課時，第15 周2 學(xué)時），實(shí)驗(yàn)教學(xué)6 學(xué)時。

學(xué)習(xí)過程中學(xué)生每周需完成課堂學(xué)習(xí)，并利用課余時間進(jìn)行線上資源的自學(xué)和在線討論，完成任課教師布置的課后任務(wù)。

（二）教學(xué)實(shí)施

1.課堂教學(xué)

課堂開始前五分鐘為復(fù)習(xí)階段，梳理前幾節(jié)課的主要知識點(diǎn)，回顧本章中的思路和已了解的學(xué)習(xí)內(nèi)容。隨后，教師講授本節(jié)課的授課內(nèi)容，對基本概念和知識點(diǎn)進(jìn)行細(xì)致講解，講解過程中穿插例題并邀請學(xué)生進(jìn)行分析，驗(yàn)證學(xué)生的學(xué)習(xí)效果，同時允許學(xué)生相互討論，增強(qiáng)課堂互動氛圍。最后，布置課后作業(yè)，使學(xué)生通過課后聯(lián)系鞏固核心知識點(diǎn)，提高學(xué)生靈活應(yīng)用流體力學(xué)相關(guān)知識解決問題的能力；發(fā)送下次課前預(yù)習(xí)任務(wù)，讓學(xué)生完成課前網(wǎng)絡(luò)在線學(xué)習(xí)任務(wù)。

學(xué)生對課程內(nèi)容掌握情況的考核評價主要由兩部分組成，一是上課和使用在線資源過程中的評價，一是期末考試成績評價。上課和使用在線資源過程中的評價占考核評價總成績的40%，期末測試成績占課程考核評價總成績的60%。上課和使用在線資源過程中的評價由在線資源學(xué)習(xí)效果、課堂學(xué)生表現(xiàn)及各章課后作業(yè)成績?nèi)齻€部分組成，其中在線資源學(xué)習(xí)效果評價成績占考核總成績的20%，課堂學(xué)生表現(xiàn)成績和課后作業(yè)成績分別占考核總成績的10%。

2.線上自學(xué)

在線課程包括PPT 資源、視頻資源、在線作業(yè)、在線測試和在線論壇等。每個知識點(diǎn)都有對應(yīng)的講解視頻和PPT，便于學(xué)生對照學(xué)習(xí)。課程教學(xué)團(tuán)隊(duì)在線下課程中詳細(xì)介紹了在線課程平臺的各項(xiàng)功能及和教學(xué)內(nèi)容之間的聯(lián)系，并通過將PPT 資源上線、布置在線作業(yè)和發(fā)布在線自測題等方式加強(qiáng)了學(xué)生與在線課程平臺的交集。同時，團(tuán)隊(duì)成員通過更新平臺中視頻資源，在論壇中與學(xué)生交流和討論，充分利用自身在流體力學(xué)領(lǐng)域的知識積累和了解到的最新科研進(jìn)展，回答學(xué)生學(xué)習(xí)過程中產(chǎn)生的疑問，幫助學(xué)生拓展相關(guān)領(lǐng)域視野。各部分項(xiàng)目包括以下幾項(xiàng)。

（1）PPT 資源

通過Powerpoint 的使用，根據(jù)教學(xué)內(nèi)容合理的使用和安排圖片、視頻等不同的素材，使得學(xué)習(xí)者不必僅從單調(diào)的語言和文字中獲取知識，能夠接觸不同的表達(dá)形式，通過美觀、炫目的平面和動畫設(shè)計(jì)吸引學(xué)習(xí)者的注意力，將他們的注意力吸引到教學(xué)演示之中。用PPT 來幫助我們突出演示的重點(diǎn)，幫助學(xué)習(xí)者理解演示的內(nèi)容，跟上演示的節(jié)奏，同時協(xié)助營造適宜的演示氛圍，通過感性的視覺信號增強(qiáng)學(xué)習(xí)者對內(nèi)容的良好印象。

（2）視頻資源

視頻資源通過采用實(shí)時音頻、視頻信息的多媒體文件，使得原本靜止的教學(xué)內(nèi)容變得生動活潑，表現(xiàn)形式直觀且易理解。學(xué)習(xí)者在看和聽視頻時充分利用了視覺和聽覺來刺激大腦，隨著視頻中的音樂節(jié)奏和動作逐漸沉浸在教學(xué)內(nèi)容中，容易形成良好的學(xué)習(xí)氛圍，同時可以隨時暫停、快進(jìn)及倒退的資源播放形式確保了學(xué)習(xí)者能夠根據(jù)自身的情況量身定制合理的學(xué)習(xí)進(jìn)度，重復(fù)回顧難點(diǎn)，快進(jìn)略過已掌握的內(nèi)容，提高了學(xué)習(xí)效率。

（3）在線作業(yè)

作業(yè)在線提交和批閱模塊是為課后所需練習(xí)環(huán)節(jié)專門設(shè)計(jì)的交互平臺，教師可通過該模塊發(fā)布作業(yè)任務(wù)。學(xué)習(xí)者通過查閱和回復(fù)該內(nèi)容完成課后作業(yè)，隨后教師在該模塊中對作業(yè)進(jìn)行打分，實(shí)現(xiàn)了每次作業(yè)的存檔、記錄及完成情況統(tǒng)計(jì)，減輕了由收改紙質(zhì)作業(yè)給教師帶來的額外工作負(fù)擔(dān)，學(xué)生的賬號與班級綁定，可輕松獲取班級內(nèi)的所有作業(yè)任務(wù)，有效避免課程繁多而造成作業(yè)遺忘，提交作業(yè)的同時，還可將作業(yè)過程中的疑問一并提交，真正實(shí)現(xiàn)作業(yè)的互動管理。

（4）在線測試

線上課程每隔一段時間都會發(fā)布一個小測驗(yàn)，測試內(nèi)容為上課相關(guān)知識點(diǎn)，題型包括選擇題、填空題、判斷題、簡答題及計(jì)算題等。

（5）在線論壇

討論區(qū)用于線上交流討論，教師或者學(xué)習(xí)者均可在論壇討論區(qū)發(fā)起討論話題和參與話題討論，除教師、助教可以在討論區(qū)留言和答疑外，也鼓勵學(xué)生互助答疑。

二、混合式教學(xué)模式下的教學(xué)試驗(yàn)與效果

本研究在2019—2020 第二學(xué)期的教學(xué)實(shí)踐基礎(chǔ)上進(jìn)行了問卷調(diào)查，以便了解學(xué)生對于不同在線課程資源能否體現(xiàn)學(xué)習(xí)效果的評價。問卷以五點(diǎn)量表形式呈現(xiàn)，按照符合程度由低到高分別賦予1（不能）、2（不太能）、3（一般）、4（比較可以）、5（完全可以）的分值。調(diào)查從在線課程平臺的（1）登錄次數(shù)；（2）PPT 資源觀看次數(shù)和時長；（3）視頻資源觀看次數(shù)和時長；（4）在線作業(yè)提交次數(shù)和完成情況；（5）在線測試參與次數(shù)與完成情況；（6）在線論壇提問、跟帖和回帖次數(shù)幾個方面展開，從學(xué)生的角度，給出各部分內(nèi)容能否體現(xiàn)學(xué)習(xí)效果的評價，并通過樣本的均值和標(biāo)準(zhǔn)差進(jìn)行分析。

通過調(diào)查問卷搜集，共收到有效問卷243 份，其中包括船舶與海洋工程專業(yè)問卷114 份（46.9%）、輪機(jī)專業(yè)78 份（32.1%）、油氣專業(yè)15 份（6.2%）、能源與動力工程專業(yè)36 份（14.8%）。對資源類型的正態(tài)性檢驗(yàn)和總體評價見表1。

表1 學(xué)生對課程資源類型反映學(xué)習(xí)效果程度的樣本統(tǒng)計(jì)量表

總體上看，作業(yè)和測試這兩類傳統(tǒng)的教學(xué)效果考察手段，雖然改為了在線進(jìn)行，卻是學(xué)生最為認(rèn)可的能夠體現(xiàn)學(xué)習(xí)效果的方式。相較而言，在線登錄次數(shù)、PPT 資源觀看次數(shù)和時長、視頻資源觀看次數(shù)和時長及論壇參與程度等與線下教學(xué)完全不同的考察手段，學(xué)生的認(rèn)可度相對較低。分析可能由于學(xué)生考慮到了考察指標(biāo)的不合理性，例如資源觀看次數(shù)和時長是因人而異的，有的學(xué)生認(rèn)真看一次理解后不需要再看，而有的學(xué)生精神不夠集中，看完一次后還需要再看，導(dǎo)致次數(shù)和時長的多少與學(xué)習(xí)效果之間聯(lián)系不夠明顯。同時，在線論壇是否能產(chǎn)生學(xué)習(xí)效果很大程度取決于學(xué)生如何使用，以及是否能夠得到及時的回復(fù)，提問、跟帖和回帖的次數(shù)并不能完全體現(xiàn)學(xué)習(xí)效果。各項(xiàng)內(nèi)容具體分析如下。

1.登錄次數(shù)

在“我認(rèn)為在線教學(xué)平臺中，系統(tǒng)登錄次數(shù)能否體現(xiàn)學(xué)習(xí)效果”的問題上，總體均值近似為3.06，標(biāo)準(zhǔn)差為1.210，標(biāo)準(zhǔn)誤為0.078，表明學(xué)生的選擇較集中，大部分學(xué)生認(rèn)為在線平臺系統(tǒng)登錄次數(shù)一般能夠體現(xiàn)學(xué)習(xí)效果。由表2 可知，不同專業(yè)結(jié)果與整體結(jié)果基本保持一致，能動專業(yè)的學(xué)生更傾向于登錄次數(shù)一定程度上能夠體現(xiàn)學(xué)習(xí)效果。

表2 不同專業(yè)學(xué)生對登錄次數(shù)反映學(xué)習(xí)效果程度的樣本統(tǒng)計(jì)量表

2.PPT 資源

在“我認(rèn)為在線教學(xué)平臺中，觀看PPT 資源的次數(shù)和時長能否體現(xiàn)學(xué)習(xí)效果”的問題上，總體均值近似為3.22，標(biāo)準(zhǔn)差為1.212，表明學(xué)生的選擇分布比較集中，大部分學(xué)生認(rèn)為觀看PPT 資源的次數(shù)和時長一般能夠體現(xiàn)學(xué)習(xí)效果。由表3 可知，不同專業(yè)結(jié)果與整體結(jié)果基本保持一致，能動專業(yè)的學(xué)生更傾向于觀看PPT 資源的次數(shù)和時長一定程度上能夠體現(xiàn)學(xué)習(xí)效果。

表3 不同專業(yè)學(xué)生對PPT 資源反映學(xué)習(xí)效果程度的樣本統(tǒng)計(jì)量表

3.視頻資源

在“我認(rèn)為在線教學(xué)平臺中，觀看視頻資源的次數(shù)和時長能否體現(xiàn)學(xué)習(xí)效果”的問題上，總體均值近似為3.22，標(biāo)準(zhǔn)差為1.215，表明學(xué)生的選擇分布比較集中，大部分學(xué)生認(rèn)為觀看視頻資源的次數(shù)和時長一般能夠體現(xiàn)學(xué)習(xí)效果。由表4 可知，不同專業(yè)結(jié)果與整體結(jié)果基本保持一致，船舶專業(yè)的學(xué)生更傾向于觀看視頻資源的次數(shù)和時長一定程度上能夠體現(xiàn)學(xué)習(xí)效果。

表4 不同專業(yè)學(xué)生對視頻資源反映學(xué)習(xí)效果程度的樣本統(tǒng)計(jì)量表

4.在線作業(yè)

在“我認(rèn)為在線教學(xué)平臺中，在線作業(yè)的提交次數(shù)和完成情況能否體現(xiàn)學(xué)習(xí)效果”的問題上，總體均值近似為3.98，標(biāo)準(zhǔn)差為0.985，表明學(xué)生的選擇分布比較集中，大部分學(xué)生認(rèn)為在線作業(yè)的提交次數(shù)和完成情況比較能夠體現(xiàn)學(xué)習(xí)效果。由表5 可知，不同專業(yè)結(jié)果與整體結(jié)果基本保持一致，油氣專業(yè)的學(xué)生更傾向于在線作業(yè)提交次數(shù)和完成情況一定程度上能夠體現(xiàn)學(xué)習(xí)效果。

表5 不同專業(yè)學(xué)生對在線作業(yè)反映學(xué)習(xí)效果程度的樣本統(tǒng)計(jì)量表

5.在線測試

在“我認(rèn)為在線教學(xué)平臺中，在線測試的參與次數(shù)與完成情況能否體現(xiàn)學(xué)習(xí)效果”的問題上，總體均值近似為3.80，標(biāo)準(zhǔn)差為1.096，表明學(xué)生的選擇分布比較集中，大部分學(xué)生認(rèn)為在線測試的參與次數(shù)與完成情況比較能夠體現(xiàn)學(xué)習(xí)效果。由表6 可知，不同專業(yè)結(jié)果與整體結(jié)果基本保持一致，油氣專業(yè)的學(xué)生更傾向于在線測試的參與次數(shù)與完成情況一定程度上能夠體現(xiàn)學(xué)習(xí)效果。

表6 不同專業(yè)學(xué)生對在線測試反映學(xué)習(xí)效果程度的樣本統(tǒng)計(jì)量表

6.在線論壇

在“我認(rèn)為在線教學(xué)平臺中，論壇提問、跟帖和回帖的次數(shù)能否體現(xiàn)學(xué)習(xí)效果”的問題上，總體均值近似為3.00，標(biāo)準(zhǔn)差為1.238，表明學(xué)生的選擇分布比較集中，大部分學(xué)生認(rèn)為論壇提問、跟帖和回帖的次數(shù)一般能夠體現(xiàn)學(xué)習(xí)效果。由表7 可知，不同專業(yè)結(jié)果與整體結(jié)果基本保持一致，輪機(jī)專業(yè)的學(xué)生更傾向于論壇提問、跟帖和回帖的次數(shù)一定程度上能夠體現(xiàn)學(xué)習(xí)效果。

表7 不同專業(yè)學(xué)生對在線論壇反映學(xué)習(xí)效果程度的樣本統(tǒng)計(jì)量表

上述數(shù)據(jù)顯示，不同專業(yè)之間對最能夠體現(xiàn)學(xué)習(xí)效果的資源形式觀點(diǎn)不一，這可能是由于不同專業(yè)學(xué)生間交流不同，以及部分專業(yè)統(tǒng)計(jì)樣本量較少所致。

三、結(jié)束語

基于對工程流體力學(xué)在線課程的學(xué)生問卷調(diào)查，探討了學(xué)生對學(xué)習(xí)效果評價指標(biāo)的認(rèn)可程度。結(jié)果表明，作業(yè)和測試這兩類傳統(tǒng)的教學(xué)考察手段，改為在線進(jìn)行后，仍是學(xué)生最為認(rèn)可的能夠體現(xiàn)學(xué)習(xí)效果的方式。相較而言，在線登錄次數(shù)、PPT 資源觀看次數(shù)和時長、視頻資源觀看次數(shù)和時長及論壇參與程度等與傳統(tǒng)線下教學(xué)完全不同的考察手段，從學(xué)生角度而言認(rèn)可度相對較低。