基于眾包思想的實時教學評價模式探索

王志波，胡佳慧，王 騫

（武漢大學 計算機學院，湖北 武漢 430072）

0 引 言

教學評價系統(tǒng)是近年來興起用于評價教師教學質量的系統(tǒng)，已逐漸成為高校教學中不可欠缺的一環(huán)，對提高教學質量發(fā)揮了重要作用。文獻[1]面向“算法與數(shù)據(jù)結構”課程，提出一種全面、科學的教學評價方法，對教學的全過程進行動態(tài)、多因素的綜合評價，可有效促進教學水平不斷提高；文獻[2]探討教學評價對于幫助教師總結教學經(jīng)驗、改進教學方法、提高教學質量的好處；文獻[3]闡述智能化方法在課程評價中的應用前景。目前，大多數(shù)高校采用教學評價系統(tǒng)來衡量教師教學水平，甚至部分學校引入評價結果來決定教師的工資和津貼待遇，使教師認真對待學生評價從而提升教學熱情。然而，當前的評價系統(tǒng)雖然能從某種程度上起到評價教師的積極作用，但同時存在參與性低、零交互、評價滯后等問題，導致教學評價的效果大大減弱。此外，偶爾發(fā)生的惡意評價情況，也大大損害教師教學的積極性。因此，亟須改進現(xiàn)有的教學評價系統(tǒng)，真正促進教師與學生之間的實時互動，進而推動教師教學水平的提高，改善高校的整體教學質量。

眾包（crowdsourcing）思想[4]是指通過大眾的廣泛參與實現(xiàn)某個共同目標，它充分發(fā)揮“人多力量大”的特點，將大量用戶（在教學評價系統(tǒng)中用戶就是學生）擰成一股繩，并借助智能設備，實現(xiàn)隨時隨地的用戶參與。教學評價系統(tǒng)離不開學生的廣泛參與，只有實時收集大量的學生反饋信息，才能真正評價教學質量的高低，才能快速發(fā)現(xiàn)教師教學中不足之處、掌握學生的學習狀況，從而提高教學質量。

1 教學評價系統(tǒng)存在的問題

在現(xiàn)有的教學評價系統(tǒng)中，通常在學期結束之后，學生可進入教師評價頁面，對教師的教學質量做出評價，但該系統(tǒng)存在參與性低、零交互、評價滯后以及惡意評價等問題，難以真正起到促進教學質量改進的效果。

1.1 參與性低

由于教學評價在課程結束之后，學生缺乏足夠的動力或者激勵去參與評價：一方面，對于任何一位學生來說，本次的評價不會改變自己在本課程接受到的教育情況；另一方面，部分高校采取強迫的方式，要求學生必須做出評價。即便在這種情況下，學生的參與度仍然很低。筆者對此深有感觸，作為“數(shù)據(jù)庫原理及安全”課程老師，六十多位學生僅僅只有十幾位學生做出評價。此外，強迫評價的一個后果就是亂評價，在評價系統(tǒng)中經(jīng)常會發(fā)現(xiàn)“張冠李戴”情況，學生為完成評價任務，將對一位老師的評價復制到另外一位老師身上，這樣的評價毫無意義。基于該情況，必須改進教學評價系統(tǒng)，提高學生的評價積極性。

1.2 零交互

在教學過程中，師生之間的交互性非常重要。教師要實時掌握學生的學習情況，學生要積極反饋教師的教學情況。只有實時交互，不斷改進教學，才能起到良好的教育效果。然而，在現(xiàn)實中，大部分學生是不主動的，或者對老師是畏懼的，并不會主動反映老師的教學情況；而且學生評價是在課程結束之后，且只有一次評價的機會，本質上沒有發(fā)揮任何交互的作用。沒有交互，則無法實現(xiàn)良好的教育效果?；谠撉闆r，必須改進教學評價系統(tǒng)，提供多次的交互功能，促進師生相互了解、相互磨合，提高教學質量。

1.3 評價滯后

學生參與評價，是為了反映教師的教學情況，比如教學形式的好壞、授課速度的快慢、教學重點是否突出，以及希望教師下一次授課的時候能夠注意哪些問題并加以改進。現(xiàn)有的教學評價是在授課結束之后，即便學生做了評價，等教師意識到問題后，這批學生也無法享受到改進后的授課。此外，一門課程通常有固定的課程計劃安排，一般連續(xù)兩次上同一門課程的時間間隔為半年。既便教師在本次評價之后發(fā)現(xiàn)了問題，等半年之后也很容易忘記。此外，本次學生和下批學生的素質不同，本次評價后的改進并不一定適合下一批學生?；谠撉闆r，必須改進教學評價系統(tǒng)，實現(xiàn)實時無滯后的評價機制，促進師生間的相互了解，改善教學質量。

1.4 惡意評價

在現(xiàn)有的教學評價系統(tǒng)中，經(jīng)常會出現(xiàn)一些惡意評價，甚至張冠李戴的情況，進而影響學校對教師教學水平的實際評估，甚至以此為根據(jù)處分教師。惡意評價的出現(xiàn)是由幾方面因素導致的：①部分學生素質較差，借助教學評價的機會，故意抹黑教師；②部分學校強制學生必須參與某些課程的評價，導致學生產(chǎn)生逆反心理，從而惡意評價教師，甚至張冠李戴。惡意評價會嚴重影響教師的授課積極性，進而嚴重影響教學效果，最終受害的還是學生?；谠撉闆r，必須改進教學評價系統(tǒng)，通過激勵而非強迫的方式鼓勵學生參與評價，表達真實想法，有效過濾惡意評價，提高教師的授課積極性。

2 實時眾包教學評價模式

基于教學評價系統(tǒng)中存在的問題，我們將眾包思想融入教學評價，提出基于眾包思想的實時教學評價模式，其基本流程是：通過適當?shù)募钜龑?，激發(fā)學生參與評價的熱情，實現(xiàn)課程教學的實時眾包反饋，從而實現(xiàn)師生實時交互，促進教師改進教學方式，提高教學質量。在新的模式中，學生不再是授課結束后進行一次性評價，而是每周做出教學評價，通過設計激勵機制激發(fā)學生參與評價的熱情；通過設計友好的評價界面以及提供移動端界面方便學生評價；通過自動分析系統(tǒng)撰寫評價報告供教師與學生參考。

2.1 每周實時評價

在新的模式下，采取讓學生每周進行教學評價方式而非學期授課結束后進行評價。相比以前的評價模式，每周進行評價有幾個優(yōu)勢。

（1）細粒度的實時評價。原先的教學評價只能對整個學期的授課情況進行評價，粒度太粗，無法反映課程中某個章節(jié)或者教師在某個階段的授課情況。采用每周評價后，學生可以對當前周次的授課內(nèi)容、教師的授課情況作出實時評價，可以細粒度地實時反映當前授課內(nèi)容的掌握情況和教師的授課情況。

（2）良好的交互性。原先的教學評價在學期結束之后，即便學生做了評價，教師做出改進后，這批做出評價的學生也無法享受到改進后的授課教育。換言之，原先的教學評價是沒有交互的。采取每周評價后，有了實時的評價信息，教師了解學生的掌握情況，授課速度的快慢以及教學內(nèi)容的重點情況，從而可以迅速做出調整，實現(xiàn)真正的交互教課。

（3）準確的教學評價。原先的教學評價是對整個學期的評價，粒度粗且不夠準確。采用每周評價，一方面是對每周的授課情況進行評價，細粒度且評價及時準確；另一方面，通過多次評價，可以真實反映教師的授課水平，可有效避免惡意評價對教師的影響。

2.2 簡潔清晰的評價界面

為減少學生參與的負擔，提高學生參與評價的積極性，一個簡潔清晰的評價界面是必不可少的。此外，還可以通過提供移動端應用或者在微信公眾號中引入評價界面，方便學生隨時隨地做出評價。這樣的界面設計要從以下幾個方面考慮。

（1）耗時要少。學生能夠在幾分鐘之內(nèi)回答問題并且做出評價，盡可能將時間控制在3分鐘之內(nèi)，減少學生參與的負擔。

（2）問題簡短明確。首先，在問題類型上，盡可能以選擇題和評分題為主，容易回答且用時較短；其次，允許學生做出簡短的反饋評價，從自己的角度評價課程教學的長處和不足；再次，在問題內(nèi)容上，設計要有針對性，只設計反映本周課程內(nèi)容和教師教學水平的問題，保證反饋的實時性和準確性；最后，在問題數(shù)目上，盡可能精煉準確，減少問題數(shù)目。

（3）提供移動端應用或者公眾號平臺。學生不僅能在電腦上參與評價，還可在移動端（如手機、平板）上參與評價。有了移動端應用或者公眾號平臺，學生可以隨時隨地做出實時評價反饋，比如吃飯、坐車甚至上廁所的時候，將極大提高學生的參與度。

2.3 評價激勵機制

雖然學生參與評價能夠反映真實的學習情況和教師的教授水平，然而在沒有明確的激勵機制下，學生的參與程度普遍是不高的。因此，有效的評價激勵機制就顯得非常重要了?？蓮囊韵聨讉€方面設計激勵機制，提高學生參與評價的積極性。

（1）將參與評價作為獎勵成績。對于學生的每次評價作為一次有效記錄，將每個學生的參與評價次數(shù)作為一項指標，折算為獎勵分數(shù)加到學生的最終成績中。通過該方式，學習好的學生會追求更高分數(shù)，學習不好的學生會為了達到及格分數(shù)，因此將激勵各個層次的學生參與評價，將有效提高學生的參與積極性。

（2）將參與評價抵消處分。隨著學校對學生上課的要求越來越高，部分學生由于缺堂導致收到學校處分。比如，武漢大學計算機學院在2016—2017學年曾連續(xù)幾次通報缺堂學生，缺堂一次做出警告，缺堂兩次則直接取消本學期評優(yōu)資格?？蓪⑴c評價次數(shù)與通報批評關聯(lián)，根據(jù)參與次數(shù)的不同抵消不同程度的處分。通過該方式，不僅有效激勵在學習過程中犯錯的學生參與評價，還將激勵學生積極參與評價提前預防犯錯。

2.4 自動分析模塊

現(xiàn)有的評價系統(tǒng)中只是對于某些評分項目做出平均處理，并沒有針對評價做出總體分析，也沒有撰寫評價報告，并不利于教師及時發(fā)現(xiàn)教學問題。因此，一個能夠分析學生評價并形成總結報告的自動分析模塊就顯得尤為重要。評價系統(tǒng)中的自動分析模塊需要提供以下幾個功能。

（1）匯總結果的直觀顯示。對于評分題、選擇題，可以通過柱狀圖、直方圖的形式顯示統(tǒng)計結果，比如平均值、頻率值、最大值、最小值等。對于文字評價，可采用自然預言處理，提取關鍵詞，并對相應關鍵詞進行重要性評價，以圖標的形式進行展示。

（2）匯總報告自動撰寫。人工智能技術已成功應用于新聞撰寫。通過自然語言處理以及引入人工智能，將匯總結果撰寫為直觀清晰且自然閱讀的匯報報告，供教師和學生參考。

為解決現(xiàn)有評價系統(tǒng)中面臨的參與度差、零交互、滯后甚至惡意評價的問題，本文提出一種實時眾包的教學評價模式，是對現(xiàn)有教學評價系統(tǒng)不足的有益探索和理念的創(chuàng)新。該模式從評價頻率、界面設計、激勵機制、智能分析等多個維度提出改進措施，系統(tǒng)實現(xiàn)較為負責，有待需要進一步實現(xiàn)并應用到真實教學評價系統(tǒng)中。

3 結 語

教學評價系統(tǒng)的好壞將影響一個學校的教學質量，而教學質量又與師生息息相關。隨著互聯(lián)網(wǎng)+、大數(shù)據(jù)、移動計算的快速發(fā)展，基于眾包思想的實時教學評價模式將在教學質量評價體系中發(fā)揮更好的作用。

[1]王曉東, 吳英杰, 林偉, 等. 課程教學評價方法的探索與實踐[J]. 教育與教學研究, 2008(14): 107-109.

[2]楊爽, 李剛. 課堂教學質量評價實踐與探析[J]. 計算機教育, 2006(10): 69-71.

[3]邵允學, 周建濤. 智能化方法在課程評價中的應用前景[J]. 計算機教育, 2017(8): 152-154.

[4]劉云浩. 群智感知計算[J]. 中國計算機學會通訊, 2012(10): 38-41.