高職院校課程考試工作評價指標(biāo)體系的研制

【摘 要】本文論述高職院校課程考試工作評價指標(biāo)體系的研制，闡述課程考試工作評價指標(biāo)體系研制的指導(dǎo)思想、質(zhì)量標(biāo)準(zhǔn)、原則，構(gòu)建包括科學(xué)性和規(guī)范性2個一級評價指標(biāo)，以及效度、難度、區(qū)分度、多樣性、重復(fù)率、正確率、完整性、計(jì)劃性、規(guī)范性達(dá)標(biāo)9個二級評價指標(biāo)在內(nèi)的課程考試質(zhì)量評價指標(biāo)體系，并確定各項(xiàng)指標(biāo)權(quán)重。

【關(guān)鍵詞】高職院校 課程考試工作 評價指標(biāo)體系 研制

【中圖分類號】G 【文獻(xiàn)標(biāo)識碼】A

【文章編號】0450-9889（2018）03C-0058-03

課程考試是高職院校一項(xiàng)常規(guī)教學(xué)工作，也是一項(xiàng)重要的教學(xué)管理工作。做好課程考試工作，對于深化高職院校教學(xué)改革，提升人才培養(yǎng)質(zhì)量具有重要的引領(lǐng)作用。因此，如何科學(xué)準(zhǔn)確地評價課程考試工作質(zhì)量是高職教學(xué)改革與教學(xué)管理研究的熱點(diǎn)之一。本文結(jié)合課題研究和多年的課程教學(xué)工作實(shí)踐，采用層次分析法建構(gòu)“課程考試工作評價指標(biāo)體系”，期望實(shí)現(xiàn)科學(xué)準(zhǔn)確評價課程考試工作質(zhì)量的目的。

一、課程考試工作內(nèi)涵

（一）考試及其功能。考試在人力資源開發(fā)和人才選拔方面具有廣泛的應(yīng)用價值?？荚囉羞x拔性考試和檢查性考試之分。高職院校的課程考試屬于檢查性考試，主要檢查學(xué)生掌握課程知識程度、給教師提供調(diào)整和改進(jìn)教學(xué)的信息、引導(dǎo)學(xué)生學(xué)習(xí)、激勵師生教學(xué)積極性和上進(jìn)心等功能。

（二）課程考試工作。課程考試工作主要包括命題和試卷制作、考試實(shí)施、成績評定和分析、考試組織和管理工作等。涉及的教學(xué)部門主要有組織考試和管理的教務(wù)處、課程教學(xué)的教學(xué)系部和試卷印刷和保管等部門?？荚嚬ぷ魃婕暗娜藛T主要有授課教師、監(jiān)考教師、參加考試學(xué)生、教學(xué)秘書、系領(lǐng)導(dǎo)、教務(wù)處領(lǐng)導(dǎo)和管理人員、教學(xué)質(zhì)量檢查員或督導(dǎo)員、試卷管理員等。

二、課程考試工作評價指標(biāo)體系的研制

（一）指導(dǎo)思想。課程考試工作評價指導(dǎo)思想是充分體現(xiàn)人才培養(yǎng)目標(biāo)，符合課程考試管理規(guī)定，堅(jiān)持質(zhì)量標(biāo)準(zhǔn)，注重能力考核，促進(jìn)科學(xué)制定考試命題和試卷制作、考試評卷和分析、考試組織和管理工作規(guī)范化，提高課程考試工作質(zhì)量進(jìn)而提高課程教學(xué)質(zhì)量。

（二）課程考試工作質(zhì)量標(biāo)準(zhǔn)。課程考試命題工作的質(zhì)量標(biāo)準(zhǔn)為：試題內(nèi)容的科學(xué)性；考核標(biāo)準(zhǔn)的準(zhǔn)確性；評分標(biāo)準(zhǔn)的合理性；試題素材的公平性。

課程考試組織管理工作質(zhì)量標(biāo)準(zhǔn)為：試題編制的規(guī)范性；考試程序的嚴(yán)肅性和完整性。

（三）課程考試工作評價指標(biāo)體系研制的原則。課程考試工作評價指標(biāo)體系的建立必須符合科學(xué)性原則、系統(tǒng)性原則和可行性原則。

1.科學(xué)性原則?？茖W(xué)性原則是指評價各項(xiàng)指標(biāo)和要素的確定和評價方式的選擇，體現(xiàn)了教育理論、學(xué)習(xí)理論和教學(xué)評價思想，符合教學(xué)規(guī)律，符合課程特點(diǎn)、課程考試大綱和課程教學(xué)內(nèi)容標(biāo)準(zhǔn)，評價指標(biāo)體系名稱科學(xué)規(guī)范。

2.系統(tǒng)性原則。評價指標(biāo)體系應(yīng)是一個完整系統(tǒng)，內(nèi)容涵蓋整個課程考試工作各方面，同時體現(xiàn)課程考試工作流程。

3.可行性原則。評價的可行性原則一是指評價的指標(biāo)和方法具備明晰、簡便、易于操作和推廣的特點(diǎn)，二是評價要素?cái)?shù)據(jù)容易獲取。

4.獨(dú)立性原則。盡可能選擇獨(dú)立性評價指標(biāo)，避免連鎖反應(yīng)。

（四）課程考試工作評價指標(biāo)體系設(shè)計(jì)。具體如下：

1.評價指標(biāo)。課程考試工作評價指標(biāo)體系是根據(jù)課程考試工作質(zhì)量標(biāo)準(zhǔn)和評價指標(biāo)體系研制原則進(jìn)行設(shè)計(jì)。設(shè)計(jì)中包含考試命題、試卷制作、考試評卷、考試分析、考試組織和考試管理等考試工作，一級評價指標(biāo)有科學(xué)性和規(guī)范性2個評價指標(biāo)，二級評價指標(biāo)涵蓋考試工作中必須完成的工作指標(biāo)共9個，其中一級評價指標(biāo)科學(xué)性對應(yīng)的二級指標(biāo)6個、規(guī)范性對應(yīng)的二級指標(biāo)3個。

2.權(quán)重。指標(biāo)權(quán)重確定是構(gòu)建量化指標(biāo)體系的關(guān)鍵，有客觀賦權(quán)法和主觀賦權(quán)法兩訓(xùn)種類型。本研究采用主觀賦權(quán)法，請教學(xué)經(jīng)驗(yàn)豐富的專家對各指標(biāo)在考試工作中的重要程度來進(jìn)行賦分。結(jié)果見表1。

三、評分方法

整個評價表共設(shè)計(jì)評價指標(biāo)9個，分成科學(xué)性指標(biāo)和規(guī)范性指標(biāo)兩類，總分為100分。各指標(biāo)的評分方法分述如下。

（一）科學(xué)性指標(biāo)評分?？茖W(xué)性指標(biāo)評分是一個連續(xù)函數(shù)，用數(shù)學(xué)計(jì)算方法計(jì)算出指標(biāo)的評分值。本研究共設(shè)計(jì)有6個科學(xué)性指標(biāo)，采用專家評價法評定，可由教研室主任評定，各指標(biāo)評分方法略有差異。

1.試卷效度。指內(nèi)容效度，考試題目對有關(guān)內(nèi)容或行為取樣的適用性亦即試題內(nèi)容與教學(xué)內(nèi)容符合程度。效度V等于試卷取自教學(xué)內(nèi)容知識點(diǎn)數(shù)N除以教學(xué)內(nèi)容的總知識點(diǎn)數(shù)T，即V=N÷T。效度是一個正向指標(biāo)，效度值越大越好，最大值為1.00，最小值為0。考慮到考試時間限制，本研究取V≥0.90時，效度指標(biāo)分SV=1.00，V≤0.50效度指標(biāo)分SV=0分。V值在0.89-0.51之間用內(nèi)插法計(jì)算效度指標(biāo)分SV，SV=（V-0.50）÷（0.9-0.5）。效度指標(biāo)評分=SV×30。如N=16，T=20，則V=16÷20=0.80，SV=（0.80-0.50）÷（0.9-0.5）=0.75，效度指標(biāo)評分=0.75×30=22.5分。

2.試卷難度。難度系數(shù)反映試題的難易程度。難度系數(shù)P的計(jì)算公式為：P=X÷F。X為考生平均得分值，F(xiàn)為滿分值。檢查性考試試卷難度要利于學(xué)生的學(xué)習(xí)，偏正態(tài)分布更能激發(fā)學(xué)生的學(xué)習(xí)積極性，同時也要考慮及格率，但一定的難度能增加區(qū)分度，有利于全面了解、掌握學(xué)生學(xué)習(xí)情況。因此，難度系數(shù)是一個中庸性指標(biāo)，難度系數(shù)過高過低都不好。故本研究取 P=0.80時，難度指標(biāo)分SP=1，P=0.80±0.20時，即P≥1.00或P≤0.60時，難度指標(biāo)分SP=0分。P值在0.81-0.99或0.61-0.79區(qū)間，用內(nèi)插法計(jì)算難度指標(biāo)分SP，SP=1-（|P-0.80|÷0.20）。難度指標(biāo)評分=SP×10。如F=100分的試卷，考生平均得分X=78分，則難度系數(shù)P=78/100=0.78。難度指標(biāo)分：SP=1-（|0.78-0.80|÷0.2）=0.90，難度指標(biāo)分=0.90×10=9分。

3.區(qū)分度。指試卷區(qū)分度，是試卷能有效區(qū)分出學(xué)生掌握知識、能力程度。區(qū)分度計(jì)算：先將分?jǐn)?shù)排序，PH=27%高分組的難度系數(shù)，PL=27%低分組的難度系數(shù)，區(qū)分度D=PH-PL。D≥0.30時，區(qū)分度指標(biāo)分SD=1.00；D≤0.10區(qū)分度指標(biāo)分SD=0分。0.10

4.多樣性。指試卷題型多樣性。題型多樣性是保證考試科學(xué)性的重要手段。題型的劃分有多種方法，通常有主觀題與客觀題之分，有開放式與封閉式之分，也有按選擇、判斷、填空、計(jì)算、簡答、綜合應(yīng)用等的進(jìn)行分類的方式。本評價表的題型多樣性是指試卷中的試題必須有主觀題和客觀題兩種類型，在此基礎(chǔ)上，按選擇、判斷、填空、計(jì)算、簡答、綜合應(yīng)用等的分類方式的試題，要求至少有兩種題型。本指標(biāo)為正向指標(biāo)，即題型多，得分高，2種題型多樣性評分記2分，3種題記3分，4種記4分，5種及其以上記滿分5分。

5.重復(fù)率。命題教師出卷2份，一份為A卷，一份為B卷?？荚囉镁砣纬槠湟唬怀橹姓咦鳛閭溆镁砘蜓a(bǔ)考卷。重復(fù)率C=n÷N，n為A、B兩卷中相同試題數(shù)，N為卷試題量總數(shù)。重復(fù)率是一個反向指標(biāo)，即重復(fù)率越高得分越低。為確?？勺鳛閭溆没蜓a(bǔ)考卷，同時，由于是課程檢查性考試，因此允許A、B卷有一定的重復(fù)率。本研究取重復(fù)率C=0.00時，重復(fù)率指標(biāo)分SC=1.00，C≥0.10時，SC=0.00。C值在0.01-0.10區(qū)間，SC=1-C。重復(fù)率評分=SC×5。如重復(fù)率為5%，則SC=1-0.05=0.95，重復(fù)率評分=0.95×5=4.75分。

6.正確率。指試卷成績批改、計(jì)算、登錄等工作正確率。正確率是一個正向指標(biāo)。正確率按試卷數(shù)計(jì)算，正確率Z=100%，正確率分SZ=1.00，正確率95%時，正確率分=0.00。正確率在95%-99%之間，用插入法計(jì)算正確率分SZ=（Z-0.95）÷0.05。如，正確率為99.5%，則正確率分SZ=（0.995-0.95）÷0.05=0.90，正確率評分=SZ×5=4.5分。

（二）規(guī)范性指標(biāo)評分。規(guī)范性指標(biāo)是考試必須要做的工作，其評分一個非連續(xù)函數(shù)，因此，采用賦值法給出指標(biāo)的評分值。本研究共設(shè)計(jì)有3個規(guī)范性指標(biāo)，14個賦分點(diǎn)，除計(jì)劃性指標(biāo)賦分點(diǎn)分值為4分外，其余各賦分點(diǎn)的分值均為2分。各指標(biāo)評分賦值標(biāo)準(zhǔn)如表1（7）、（8）、（9）。

四、課程考試工作評價表的實(shí)施

（一）建立考試工作組織機(jī)構(gòu)。成立校系兩級考務(wù)工作領(lǐng)導(dǎo)小組，校級領(lǐng)導(dǎo)小組下設(shè)的考務(wù)辦公室掛靠教導(dǎo)處，負(fù)責(zé)考試管理工作，包括全?？荚嚬ぷ骺傮w安排、試卷印制、裝訂、清點(diǎn)、核對、保管、發(fā)放等工作，對教師監(jiān)考紀(jì)律、學(xué)生考風(fēng)考紀(jì)、考試試卷復(fù)查等考試各環(huán)節(jié)組織管理、監(jiān)督檢查等，組織協(xié)調(diào)考試管理，確?？荚嚬ぷ黜樌M(jìn)行。系級協(xié)助教務(wù)處開展具體考試工作的安排，包括考試命題的審核、考試組織和考卷評定的檢查等。考務(wù)組織機(jī)構(gòu)的設(shè)置不僅是順利開展考試工作的組織保障，也是進(jìn)行課程考試工作評價的組織保障。

（二）制定考試工作規(guī)章制度。制訂學(xué)?？荚嚬ぷ鲗?shí)施方案，對命題原則及要求、試卷制作要求、評卷標(biāo)準(zhǔn)要求等做出明確的規(guī)定?！罢n程考試工作評價”應(yīng)為考試工作規(guī)章制度中的一項(xiàng)內(nèi)容。

（三）學(xué)習(xí)和領(lǐng)會考試工作規(guī)章制度和課程考試工作評價標(biāo)準(zhǔn)。認(rèn)真學(xué)習(xí)和研究《×××學(xué)?？荚嚬ぷ鲗?shí)施方案》和《課程考試工作評價表》，總結(jié)課程考試工作評價經(jīng)驗(yàn)，分析存在問題，切實(shí)加強(qiáng)考試工作的管理。

（四）院系評價。各院系成立院系一級課程考試工作評價領(lǐng)導(dǎo)小組。院系考試工作評價由院系組織考試工作評價小組開展工作，考評小組由院系主任、副主任、教研室主任和教師代表組成，主任任考評小組組長。

教師自查。對照《課程考試工作評價表》，教師根據(jù)課程考試工作的要求進(jìn)行對照并自查，自我評定是否達(dá)到合格以上標(biāo)準(zhǔn)。不達(dá)合格者則重做，達(dá)到上交教研室主任。

專業(yè)教研室主任評定。對照《課程考試工作評價表》，教師先向?qū)I(yè)教研室主任匯報(bào)自查情況，然后上交考試材料。教研室主任按照要求嚴(yán)格審核并評價，不達(dá)合格者則返回重做，出現(xiàn)小問題必須指出并責(zé)令改正，達(dá)到合格才能上交系部。系部教學(xué)副主任按照考試工作規(guī)章制度和，《課程考試工作評價表》認(rèn)真復(fù)核，只有達(dá)到合格才能上交學(xué)校教務(wù)處。

（五）學(xué)校抽查評價。學(xué)?？荚嚬ぷ髟u價小組每學(xué)期期末或者下學(xué)期期初對各系部的考試工作進(jìn)行抽查評價。按照《課程考試工作評價表》的要求重點(diǎn)審查命題和評卷、累分和材料的情況，看是否真實(shí)、準(zhǔn)確、全面。評價結(jié)果及評價意見及時反饋給各系部，肯定在考試工作中的優(yōu)點(diǎn)，指出工作中的缺點(diǎn)。對考評結(jié)果為不合格的教師進(jìn)行整改和批評，并對考核評價結(jié)果信息進(jìn)行反饋。起到表彰、教育全體教師和教育工作者的作用。

【參考文獻(xiàn)】

[1]劉代漢，何新風(fēng).教師教學(xué)工作評價指標(biāo)體系的研制[J].柳州職業(yè)技術(shù)學(xué)院學(xué)報(bào)，2006（3）

【基金項(xiàng)目】2014年度“國際職業(yè)教育學(xué)”赴德長期研修國家公派研究生留學(xué)基金項(xiàng)目（201408450030）；國家留學(xué)基金資助項(xiàng)目；廣西高校中青年教師基礎(chǔ)能力提升項(xiàng)目“中德高等職業(yè)院校人力資源開發(fā)比較研究”（2017KY0938）

【作者簡介】劉傳熙（1986— ），男，廣西人，桂林師范高等?？茖W(xué)校講師，助理研究員，中級“雙師型”教師，德國德累斯頓工業(yè)大學(xué)“國際職業(yè)教育學(xué)”博士研究生，研究方向：職業(yè)技術(shù)教育。

（責(zé)編 黎 原）