試論基于學(xué)習(xí)者體驗(yàn)的在線直播課程評價(jià)體系

摘要：踐行“以學(xué)習(xí)者為中心”的理念，從學(xué)習(xí)者體驗(yàn)出發(fā)，綜合運(yùn)用文獻(xiàn)研究、用戶訪談和網(wǎng)絡(luò)研究等方法，構(gòu)建評價(jià)維度和指標(biāo)，通過問卷調(diào)查對指標(biāo)進(jìn)一步篩選和優(yōu)化，運(yùn)用層次分析法計(jì)算指標(biāo)權(quán)重，并結(jié)合相關(guān)性分析和信度、效度校驗(yàn)驗(yàn)證指標(biāo)合理性，最后結(jié)合具體課程開展實(shí)踐應(yīng)用。從實(shí)際應(yīng)用效果來看，指標(biāo)評價(jià)結(jié)果與學(xué)習(xí)者的直接反饋基本一致，表明指標(biāo)具有一定的合理性和可操作性。應(yīng)用該指標(biāo)體系評價(jià)直播課程，可以發(fā)現(xiàn)直播課程的不足，改善學(xué)習(xí)者的直播學(xué)習(xí)體驗(yàn)，提高教學(xué)效果。

關(guān)鍵詞：學(xué)習(xí)者體驗(yàn)；在線直播課程；評價(jià)指標(biāo)；層次分析法

中圖分類號：G642? ? ? 文獻(xiàn)標(biāo)志碼：A? ? ? 文章編號：1008-4657（2023）02-0082-07

0? ? ? ? 引言

自2019新冠疫情出現(xiàn)，為響應(yīng)教育部“停課不停學(xué)”的要求和部署，各高職院校紛紛建立和運(yùn)用網(wǎng)絡(luò)資源實(shí)施在線教學(xué)，而在線直播課程因其鮮明的現(xiàn)場感和互動特征，成為在線教學(xué)的主要形式。相對于傳統(tǒng)課堂教學(xué)，在線直播課程教學(xué)不僅僅是教學(xué)場地的變化，同時也在教師的教學(xué)形式、學(xué)生的學(xué)習(xí)方式和師生互動等方面產(chǎn)生巨大變革。直播課程的教學(xué)效果如何，是否滿足學(xué)生的需要，直播課程影響因素有哪些，如何評價(jià)在線直播課程教學(xué)質(zhì)量等，都是教育教學(xué)工作者需要關(guān)注的問題?；诖?，本文從學(xué)習(xí)者體驗(yàn)的角度出發(fā)，探索在線直播課程的評價(jià)標(biāo)準(zhǔn)，為提升在線直播課程的教學(xué)效果提供思路和參考。

1? ? ? ?研究現(xiàn)狀

自網(wǎng)絡(luò)課程開展以來，不少機(jī)構(gòu)、教育教學(xué)工作者以及技術(shù)工作者進(jìn)行相關(guān)的研究，以期取得更好的教學(xué)效果。歐洲遠(yuǎn)程教育大學(xué)協(xié)會（Europe? Association? of? ?Distance? Teaching? University，EADTU）制定的遠(yuǎn)程教育質(zhì)量標(biāo)準(zhǔn)，設(shè)計(jì)了35個質(zhì)量標(biāo)準(zhǔn)和若干觀測指標(biāo)，覆蓋了課程的設(shè)計(jì)、課程的傳送和學(xué)習(xí)者支持等六個維度［ 1 ］。美國“QM質(zhì)量標(biāo)準(zhǔn)”作為頗具影響力的網(wǎng)絡(luò)課程認(rèn)證標(biāo)準(zhǔn)，從課程介紹、課程活動、學(xué)習(xí)者支持、評價(jià)與測量等八個維度對網(wǎng)絡(luò)課程的設(shè)計(jì)和建設(shè)進(jìn)行指導(dǎo)和評議［ 2 ］。我國早在2003年，教育部教育信息化技術(shù)標(biāo)準(zhǔn)委員會發(fā)布《網(wǎng)絡(luò)教育服務(wù)質(zhì)量管理體系規(guī)范》（CELTS-24），提出網(wǎng)絡(luò)教育服務(wù)質(zhì)量評價(jià)參考模型和量表，用以對網(wǎng)絡(luò)教育服務(wù)質(zhì)量進(jìn)行評估和規(guī)范。2018年中國國家標(biāo)準(zhǔn)化管理委員會和國家市場監(jiān)督管理總局發(fā)布《信息技術(shù)—學(xué)習(xí)、教育和培訓(xùn)在線課程》，提出在線課程的信息模型、評價(jià)模型和在線平臺運(yùn)營的基本要求，用于指導(dǎo)在線課程的設(shè)計(jì)、建設(shè)和評價(jià)。2015年教育部印發(fā)《關(guān)于加強(qiáng)高等學(xué)校在線開放課程建設(shè)應(yīng)用與管理的意見》，從建設(shè)、認(rèn)定、應(yīng)用和推廣等七個方面，明確在線開放課程的建設(shè)任務(wù)和要求［ 3 ］。這些標(biāo)準(zhǔn)或規(guī)范為本文的研究提供了一定的理論借鑒和參考，但由于其主要圍繞在線課程的設(shè)計(jì)、開發(fā)和實(shí)施，對直播課程缺乏針對性，且很少從學(xué)習(xí)者體驗(yàn)角度出發(fā)，不能反映學(xué)習(xí)者的直播學(xué)習(xí)體驗(yàn)。

學(xué)習(xí)者是直播課程教學(xué)的直接參與者和主要體驗(yàn)者，學(xué)習(xí)者體驗(yàn)是衡量教學(xué)質(zhì)量的一個重要方面［ 4 ］。唐環(huán)環(huán)［ 5 ］基于貝恩特·施密特的五大用戶體驗(yàn)?zāi)Ｐ?，從感官體驗(yàn)、行為體驗(yàn)、情感體驗(yàn)、內(nèi)容體驗(yàn)和關(guān)聯(lián)體驗(yàn)五個維度，建立MOOC課程評價(jià)指標(biāo)體系。安哲鋒等［ 6 ］基于學(xué)習(xí)者體驗(yàn)視角，從學(xué)習(xí)內(nèi)容質(zhì)量、學(xué)習(xí)支持質(zhì)量、學(xué)習(xí)交互質(zhì)量、學(xué)習(xí)期望質(zhì)量和學(xué)習(xí)感知質(zhì)量五個維度，提出MOOC學(xué)習(xí)質(zhì)量模型。陳志華［ 7 ］認(rèn)為網(wǎng)絡(luò)課程作為一種教育產(chǎn)品，具有產(chǎn)品的特征，由此基于用戶體驗(yàn)角度，從網(wǎng)絡(luò)課程符合學(xué)習(xí)者的需求和對學(xué)習(xí)的支持等六個方面，構(gòu)建網(wǎng)絡(luò)課程有用性評價(jià)指標(biāo)體系。Ding? Gang等［ 8 ］基于模糊綜合評價(jià)法，從平臺設(shè)計(jì)合理性、平臺操作可用性、用戶學(xué)習(xí)滿意度三方面，建立網(wǎng)絡(luò)教學(xué)平臺用戶體驗(yàn)評價(jià)體系。這些研究從不同方面、運(yùn)用不同方法關(guān)注學(xué)習(xí)者體驗(yàn)，但多是圍繞錄播課程或針對網(wǎng)絡(luò)平臺建立評價(jià)指標(biāo)，對于線上直播課程，并不能完全適用。從學(xué)習(xí)者體驗(yàn)出發(fā)，緊密結(jié)合直播課程的特點(diǎn)，構(gòu)建符合直播課程特征的評價(jià)體系，是本文重點(diǎn)研究的內(nèi)容。

2? ? ? ? 在線直播課程評價(jià)指標(biāo)體系構(gòu)建

為構(gòu)建科學(xué)有效的評價(jià)指標(biāo)體系，綜合運(yùn)用文獻(xiàn)研究法、用戶訪談法和網(wǎng)絡(luò)研究法等多種方法，從理論和實(shí)踐兩方面確定指標(biāo)維度和指標(biāo)要素。采用調(diào)查問卷和專家咨詢的方式對指標(biāo)進(jìn)行篩選和優(yōu)化，運(yùn)用層次分析法對指標(biāo)進(jìn)行定量分析并計(jì)算指標(biāo)權(quán)重。

2.1? ? ? ?構(gòu)建直播課程評價(jià)維度

學(xué)習(xí)體驗(yàn)是指學(xué)習(xí)者對學(xué)習(xí)過程和結(jié)果的感知和體驗(yàn)，包含學(xué)習(xí)認(rèn)知和學(xué)習(xí)情感雙重內(nèi)涵，關(guān)注學(xué)習(xí)者的實(shí)際感受。也有研究者認(rèn)為，教學(xué)交互、學(xué)習(xí)環(huán)境和學(xué)習(xí)支持是學(xué)習(xí)體驗(yàn)的重要組成部分［ 9 ］。

運(yùn)用文獻(xiàn)研究法，以“在線課程”“直播課程”“評價(jià)”“用戶體驗(yàn)”和“學(xué)習(xí)者體驗(yàn)”等關(guān)鍵詞作為限定條件展開高級檢索，并對所搜集大量文獻(xiàn)中相關(guān)的指標(biāo)要素進(jìn)行梳理、篩選、分析、比較和匯總。對直播授課的一線教師和直播學(xué)習(xí)的學(xué)生進(jìn)行有準(zhǔn)備的問題訪談，并對教師的授課體驗(yàn)和學(xué)生的學(xué)習(xí)體驗(yàn)進(jìn)行分析和整理。綜合文獻(xiàn)分析結(jié)果和直播參與者實(shí)際體驗(yàn)，結(jié)合貝恩特·施密特五大用戶體驗(yàn)?zāi)Ｐ?，從學(xué)習(xí)者體驗(yàn)出發(fā)，針對直播課程在線教學(xué)的特點(diǎn)，初步構(gòu)建直播課程評價(jià)模型維度和指標(biāo)要素。

2.1.1? ? ? ?直播內(nèi)容體驗(yàn)度

直播內(nèi)容是直播課程的核心和前提，體現(xiàn)在直播教學(xué)內(nèi)容的選取、設(shè)計(jì)以及呈現(xiàn)等方面。在課程定位和目標(biāo)已經(jīng)明確的前提下，合理選取、設(shè)計(jì)和組織教學(xué)內(nèi)容，才能從根本上激發(fā)學(xué)習(xí)者的學(xué)習(xí)愿望和興趣，滿足其學(xué)習(xí)需求，讓學(xué)習(xí)者感受課程學(xué)習(xí)的價(jià)值。參考國內(nèi)外相關(guān)標(biāo)準(zhǔn)，結(jié)合直播課程特點(diǎn)，提取準(zhǔn)確性、實(shí)用性、遞進(jìn)性、前沿性、多樣性、趣味性和文化性七個指標(biāo)。

2.1.2? ? ? ?直播課堂體驗(yàn)度

直播課堂顛覆了傳統(tǒng)線下課堂面對面的互動模式，學(xué)生僅以網(wǎng)絡(luò)在線的方式參與教學(xué)活動，教師也無法直觀地感知學(xué)生的課堂反應(yīng)。高質(zhì)量的課堂活動可以促進(jìn)學(xué)生主動參與和積極表現(xiàn)的愿望，從而激發(fā)學(xué)生的認(rèn)知和情感。課堂交互形式和教師對課堂活動的組織都是影響課堂的關(guān)鍵因素。根據(jù)在線直播課堂的特點(diǎn)，提取清晰性、互動性、啟發(fā)性、多元性、及時性、恰當(dāng)性六個指標(biāo)。

2.1.3? ? ? ?直播平臺體驗(yàn)度

直播平臺是直播課程的載體，為直播提供技術(shù)支持和服務(wù)，是直播課程能否正常開展的基本條件和重要保障。直播平臺的技術(shù)性、功能性和可靠性等都對用戶是否愿意、持續(xù)使用平臺軟件產(chǎn)生直接影響。平臺的用戶體驗(yàn)是直播課程體驗(yàn)的一部分，從直播平臺的一般性特點(diǎn)和對課程教學(xué)的支持角度，提取易操作性、穩(wěn)定性、兼容性、合理性、交互性、可訪問性、及時性、美學(xué)性八個指標(biāo)。

2.1.4? ? ? ?直播情感體驗(yàn)度

直播情感體驗(yàn)度是學(xué)習(xí)者對直播學(xué)習(xí)的過程和結(jié)果情感的綜合體驗(yàn)。由線下課程轉(zhuǎn)為直播教學(xué)，學(xué)習(xí)者能否適應(yīng)直播教學(xué)、是否樂于參與直播課程活動以及課程學(xué)習(xí)的成就感和興趣度，都是直播情感體驗(yàn)度的關(guān)鍵指標(biāo)，據(jù)此本維度提取適應(yīng)性、參與性、成就感、興趣度四個指標(biāo)。

2.2? ? ? ? 評價(jià)指標(biāo)的篩選和優(yōu)化

指標(biāo)的篩選和優(yōu)化采用調(diào)查問卷和專家咨詢相結(jié)合的方式。問卷方面，為了既保證指標(biāo)的科學(xué)性和合理性，又能充分反應(yīng)學(xué)習(xí)者對指標(biāo)的意見，問卷對象分別選取兼具教研水平和直播教學(xué)經(jīng)驗(yàn)的高校教師，以及具有直播學(xué)習(xí)實(shí)際經(jīng)驗(yàn)的高職學(xué)生。針對初定的4個一級指標(biāo)和24個二級指標(biāo)，編制“在線直播課程學(xué)習(xí)者體驗(yàn)影響因素”調(diào)查問卷，對每項(xiàng)指標(biāo)進(jìn)行“十分明確”“明確” “不一定”“不明確”和“十分不明確”5個選項(xiàng)的區(qū)分，對應(yīng)分?jǐn)?shù)分別為5、4、3、2、1。如對指標(biāo)“不一定”“不明確”或“十分不明確”，需要給出相應(yīng)的修改意見。問卷結(jié)果顯示，一級指標(biāo)明確度評分均在4分以上，表示基本認(rèn)同，而對二級指標(biāo)，結(jié)合專家咨詢反饋，提出以下修改意見：

一是刪除針對性不強(qiáng)的指標(biāo)。如“直播內(nèi)容體驗(yàn)度”中的“文化性”指標(biāo)，具有一定的學(xué)科偏向，且屬于不太重要的指標(biāo)，建議刪除?！爸辈テ脚_體驗(yàn)度”中的“流暢性”指標(biāo)，一般多用以描述網(wǎng)絡(luò)傳輸質(zhì)量，對直播平臺性能方面表述指代性不強(qiáng)，建議刪除。

二是指標(biāo)概念劃分太細(xì)，需要精簡合并。如“直播平臺體驗(yàn)度”中“合理性”“交互性”和“可訪問性”均屬于平臺功能方面的展開描述，三者可合并調(diào)整為“完備性”。

三是指標(biāo)描述不當(dāng)，易引起歧義。如“直播課堂體驗(yàn)度”中的“多元性”是指對學(xué)生進(jìn)行多元評價(jià)，僅用以闡述評價(jià)方式多樣性，側(cè)重過程，不能反映評價(jià)結(jié)果，應(yīng)改為“客觀性”，強(qiáng)調(diào)評價(jià)結(jié)果的公正性?！扒‘?dāng)性”指代的內(nèi)容范圍太寬泛，語義不明確，改為“調(diào)控性”，特指教學(xué)過程的有效調(diào)控。“直播平臺體驗(yàn)度”的“及時性”表述不當(dāng)，且易混淆，改為“容錯性”，表示平臺對于學(xué)習(xí)者錯誤操作，能及時給出反饋信息和操作指引。

綜合上述意見，對原有指標(biāo)體系進(jìn)行修改和優(yōu)化，確立第二輪指標(biāo)體系如表1所示。

由上述數(shù)據(jù)可以看出，在一級指標(biāo)中，“B1直播內(nèi)容體驗(yàn)度”權(quán)重最大，即直播內(nèi)容在直播課程體驗(yàn)中占據(jù)最重要的位置，其次是“B2直播課堂體驗(yàn)度”。在二級指標(biāo)中，“B22互動性”占據(jù)最重要位置，其次是“B11準(zhǔn)確性”“B12實(shí)用性”“B31易操作性”和“B21清晰性”。

3? ? 評價(jià)指標(biāo)體系的檢驗(yàn)和應(yīng)用

3.1? ? 評價(jià)指標(biāo)體系的相關(guān)性分析

Pearson相關(guān)性分析用于衡量元素間是相關(guān)的還是獨(dú)立的［ 11 ］。相關(guān)系數(shù)為0.6～0.8為強(qiáng)相關(guān)，而大于等于0.8，則意味著兩元素存在極強(qiáng)相關(guān)性，一般需要修改或刪除。再次運(yùn)用SPSS對指標(biāo)數(shù)據(jù)進(jìn)行相關(guān)性分析得出，“清晰性”與“及時性”（相關(guān)系數(shù)0.717），“啟發(fā)性”與“趣味性”（相關(guān)系數(shù)0.621），“完備性”與“美學(xué)性”（相關(guān)系數(shù)0.625），雖然存在重疊部分，但22個指標(biāo)的相關(guān)系數(shù)值均小于0.8，說明指標(biāo)仍具有較好的獨(dú)立性。

3.2? ? 評價(jià)指標(biāo)體系的信度和效度檢驗(yàn)

信度和效度校驗(yàn)分別檢測指標(biāo)的可靠性和合理性。使用Cronbachs α系數(shù)作為可靠性測試值，值越大，表示指標(biāo)的內(nèi)在一致性越高，即越可靠，如果低于0.6，則表示信度不理想，需要修改問題項(xiàng)［ 12 ］。經(jīng)測試，系數(shù)α為0.827，表示指標(biāo)信度不錯，可以使用。采用因子分析方法進(jìn)行效度分析，Kaiser-Meyer-Olkin（KMO）值為0.729，大于0.6，符合因子分析要求。Bartlett球形度檢驗(yàn)顯著值為0.000，小于0.05，22個指標(biāo)的4個因子累積方差貢獻(xiàn)率為68.331%，問題項(xiàng)與因子的對應(yīng)關(guān)系沒有嚴(yán)重偏差，表示指標(biāo)效度符合要求。

3.3? ? 評價(jià)指標(biāo)體系的應(yīng)用

3.3.1? ? 評價(jià)指標(biāo)體系的應(yīng)用過程

為進(jìn)一步驗(yàn)證評價(jià)指標(biāo)體系的可操作性，應(yīng)用該評價(jià)指標(biāo)體系制作問卷，對在線直播課程進(jìn)行評價(jià)。共設(shè)計(jì)問卷題目23個，前面22個題目運(yùn)用已構(gòu)建的22個評價(jià)指標(biāo)，分別從直播內(nèi)容、直播課堂、直播平臺和直播情感四個方面對直播課程進(jìn)行相應(yīng)評價(jià)。問卷題目采用客觀單選題方式，選項(xiàng)采用李克特式五級量表，從5到1依次表示“非常滿意”到“非常不滿意”五個等級。將問卷每項(xiàng)指標(biāo)得分Bij與該指標(biāo)總層次權(quán)重Pn相乘，并將各項(xiàng)指標(biāo)評價(jià)結(jié)果相加，得出單份問卷評價(jià)得分，即：

Σ指標(biāo)分值Bij × 指標(biāo)權(quán)重Pn，n = 1，2，3，…，22

問卷最后1題，采用主觀簡答題的方式，要求學(xué)習(xí)者報(bào)告主觀學(xué)習(xí)體驗(yàn)并闡述理由，以便驗(yàn)證學(xué)習(xí)者的偏好程度與指標(biāo)結(jié)果是否一致，為指標(biāo)的進(jìn)一步完善提供依據(jù)。

選取問卷對象為本校大一下學(xué)期兩個批次班級學(xué)生共96名，參與評價(jià)的這部分學(xué)生該學(xué)期因地方突發(fā)疫情，所有課程隨即轉(zhuǎn)為線上直播，對直播課程學(xué)習(xí)有直接而深刻的實(shí)際體驗(yàn)。

3.3.2? ? 評價(jià)指標(biāo)體系的應(yīng)用及分析

首次選取問卷對象為非計(jì)算機(jī)類專業(yè)班級學(xué)習(xí)者52名。選取直播平臺為“超星課堂”，選取課程為“信息技術(shù)”。向52名學(xué)習(xí)者發(fā)放試卷，回收有效問卷52份，計(jì)算“信息技術(shù)”直播課程總體得分為4.012，表示學(xué)生對該門直播課程總體是滿意的。由于二級指標(biāo)的評分?jǐn)?shù)據(jù)更能直觀反映優(yōu)缺點(diǎn)，分析二級單項(xiàng)指標(biāo)項(xiàng)得分發(fā)現(xiàn)，B11準(zhǔn)確性、B21清晰性、B33兼容性評分相對較高，表明學(xué)習(xí)者對課程內(nèi)容準(zhǔn)確性、課堂教學(xué)清晰性以及平臺兼容性方面滿意度較高，而B22互動性，B31易操作性和B44興趣度評分相對較低，表明該課程直播課堂互動性不夠，“超星課堂”平臺的易操作性方面體驗(yàn)欠佳，學(xué)生的學(xué)習(xí)興趣度有待提高，均一定程度地影響了學(xué)習(xí)者的直播學(xué)習(xí)體驗(yàn)。

為進(jìn)一步驗(yàn)證指標(biāo)在不同專業(yè)和不同課程中的合理性和適用范圍，進(jìn)行第二次問卷發(fā)放，發(fā)放對象為計(jì)算機(jī)類專業(yè)班級44名學(xué)習(xí)者，選取直播平臺為“超星課堂”，選取課程為專業(yè)課程“網(wǎng)頁設(shè)計(jì)與制作”。問卷結(jié)果顯示，該直播課程總體得分為4.326。分析二級指標(biāo)發(fā)現(xiàn)，B12實(shí)用性、B22互動性、B41適應(yīng)性評分較高，表明學(xué)生對課程內(nèi)容實(shí)用性、課堂互動性和直播適應(yīng)性體驗(yàn)良好，而B32穩(wěn)定性和B34完備性評分相對較低，學(xué)生的主觀體驗(yàn)報(bào)告認(rèn)為直播平臺有遭遇卡頓、操作不流暢情形，且在資源訪問方面不夠便捷。

上述指標(biāo)評價(jià)結(jié)果與通過課程訪談、線上調(diào)查以及問題報(bào)道等途徑收集的學(xué)習(xí)者關(guān)于直播課程的反饋基本一致，表明該評價(jià)指標(biāo)具有一定的可行性和適用性。一級指標(biāo)四個維度能夠較客觀、全面地反映直播課程不同方面對學(xué)習(xí)者體驗(yàn)的影響。而在二級指標(biāo)上，對于不同的專業(yè)和課程，學(xué)習(xí)者對于直播課體驗(yàn)的側(cè)重點(diǎn)也會有所不同，如非計(jì)算機(jī)類專業(yè)學(xué)生對直播平臺的易操作性比較關(guān)注，而計(jì)算機(jī)類專業(yè)學(xué)生對于直播平臺資源可訪問性要求更高。

4? ? 結(jié)語

在疫情防控常態(tài)化形式下，在線直播課程在高職院校數(shù)字化教學(xué)中得到快速應(yīng)用和推廣。直播課程不同于MOOC和精品課程類在線課程，其異地同步教學(xué)的方式，使其既兼具在線課程和線下課堂的部分特征，又與兩者不完全相同，需要建立符合直播課程特點(diǎn)的課程評價(jià)方式。本文基于學(xué)習(xí)者體驗(yàn)視角，提出從直播內(nèi)容、直播課堂、直播平臺和直播情感四個維度，評價(jià)在線直播課程質(zhì)量，突出學(xué)習(xí)者的主體地位，重視學(xué)習(xí)者的體驗(yàn)和需求，更利于提高教學(xué)滿意度。應(yīng)用本文構(gòu)建的評價(jià)指標(biāo)體系，可以對高職院校直播課程教學(xué)進(jìn)行評價(jià)，其不同維度指標(biāo)能夠直觀體現(xiàn)和描述直播教學(xué)效果的影響因素，從而發(fā)現(xiàn)直播課程教學(xué)的不足，明確改進(jìn)和提升的方向。

本文的研究尚存在不足之處：一方面，由于直播課程學(xué)習(xí)質(zhì)量評價(jià)的研究尚處于探索階段，相關(guān)的標(biāo)準(zhǔn)仍在不斷完善，后續(xù)還需結(jié)合新的理論和標(biāo)準(zhǔn)進(jìn)一步完善評價(jià)指標(biāo)。另一方面，在確定權(quán)重時，雖然運(yùn)用層次分析法盡量做到科學(xué)，但由于調(diào)查范圍和分析方法的有限，指標(biāo)仍帶有一定的主觀性，可通過擴(kuò)大調(diào)查者范圍并采用德爾菲法和層次分析法相結(jié)合的方式，增加指標(biāo)的科學(xué)性。另外，后期可以根據(jù)直播課程內(nèi)容所屬的專業(yè)領(lǐng)域特征進(jìn)一步完善指標(biāo)體系，以提高課程評價(jià)的針對性。隨著直播課程的普及和推廣，相應(yīng)的實(shí)踐和理論都將更加科學(xué)化、規(guī)范化、深入化，學(xué)習(xí)者的直播課程體驗(yàn)也將不斷提升。

參考文獻(xiàn)：

［1］ 劉紹英.廣西開放大學(xué)教學(xué)質(zhì)量標(biāo)準(zhǔn)構(gòu)建研究［J］.廣西廣播電視大學(xué)學(xué)報(bào)，2020，31（4）：5-12.

［2］ 潘曉彥，蔣家瓊，莫蘭，等.美國“QM質(zhì)量標(biāo)準(zhǔn)”與我國“精品在線開放課程”評價(jià)指標(biāo)體系比較研究［J］.湖南師范大學(xué)教育科學(xué)學(xué)報(bào)，2019，18（3）：105-110.

［3］ 聶建峰，蔡佳林，徐娜.我國高校在線開放課程建設(shè)與應(yīng)用的問題分析和改進(jìn)策略［J］.國家教育行政學(xué)院學(xué)報(bào)，2020（4）：60-65.

［4］ 劉斌，張文蘭.在線課程學(xué)習(xí)體驗(yàn)的影響因素及其結(jié)構(gòu)研究［J］.現(xiàn)代教育技術(shù)，2017，27（9）：107-113.

［5］ 唐環(huán)環(huán).基于用戶體驗(yàn)的大規(guī)模開放在線課程評價(jià)研究［D］.杭州：寧波大學(xué)，2017.

［6］ 安哲鋒，張峰峰.MOOC學(xué)習(xí)質(zhì)量立體模型的構(gòu)建研究——基于學(xué)習(xí)者體驗(yàn)視角的研究［J］.成人教育，2018，38（6）：18-23.

［7］ 陳志華.基于用戶體驗(yàn)的網(wǎng)絡(luò)課程有用性評價(jià)指標(biāo)體系設(shè)計(jì)與應(yīng)用［D］.北京：首都師范大學(xué)，2014.

［8］ Ding Gang，Wei Lihong，Cao Danyang，et al. User experience evaluation of service platform for online courses based on fuzzy comprehensive evaluation method——the user experience of “machine principles” as an example［J］. Science Innovation， 2018， 6（2）：97-97.

［9］ 劉妍，張?zhí)扃?設(shè)計(jì)思維視角下的學(xué)習(xí)體驗(yàn)設(shè)計(jì)［J］.上海教育，2022（6）：12-14.

［10］ 成先娟.不確定型層次分析法排序方法的研究［D］.南寧：廣西大學(xué)，2006.

［11］ 程娟娟.高?？蒲信c教學(xué)關(guān)系實(shí)證研究——基于皮爾遜相關(guān)系數(shù)的分析［J］.中國高校科技，2022（10）：46-52.

［12］ 王淑華.漢字應(yīng)用水平測試信度和效度研究——以上海市2012和2015年測試為例［J］.鹽城工學(xué)院學(xué)報(bào)（社會科學(xué)版），2022，35（4）：71-76.

［責(zé)任編輯：許立群］

On the Evaluation System of Online Live Courses

Based on Learner Experience

YE? Genmei

（Department of Software Engineering， Ma'anshan Teacher's College， Ma'anshan 243041， China）

Abstract：Practicing the concept of "learner centered"， the evaluation system of live course is constructed based on learner experience. The preliminary evaluation dimensions and indicators are constructed by using literature research， user interviews and network research. Indicators are further screened and optimized through questionnaire investigations. Then the weight of indicators is calculated by using the analytic hierarchy process， and the rationality of indicators is verified by combining correlation analysis and reliability and validity checks. Finally， the practical application is carried out in combination with specific courses. From the practical application effect， the evaluation results of indicators are basically consistent with the direct feedback from learners. It indicates that the indicators are reasonable and operable. By applying this indicator system to evaluate live courses， we can find the shortages of the live courses， improve the learners live learning experience and enhance the teaching effect.

Key words：learner experience；online live course；evaluation indicator；analytic hierarchy process

收稿日期：2022-11-12

基金項(xiàng)目：安徽省高校優(yōu)秀青年人才支持計(jì)劃項(xiàng)目（gxyq2021264）；安徽省質(zhì)量工程項(xiàng)目（2020kfkc541）

作者簡介：葉根梅（1982-），女，安徽桐城人，馬鞍山師范高等?？茖W(xué)校副教授，碩士，主要研究方向：軟件技術(shù)及教學(xué)研究。