文/顧小清
教師教育評價系統(tǒng)提供診斷服務(wù)
文/顧小清
作為教師教育創(chuàng)新支持系統(tǒng)中的應(yīng)用之一,教師教育評價系統(tǒng)的設(shè)計目標(biāo),旨在為教師學(xué)習(xí)者提供其專業(yè)發(fā)展的診斷服務(wù)。
下一代互聯(lián)網(wǎng)教師教育創(chuàng)新支持系統(tǒng)是國家發(fā)改委為推進(jìn)下一代互聯(lián)網(wǎng)業(yè)務(wù)的應(yīng)用而委托國內(nèi)領(lǐng)銜教師教育的幾所師范大學(xué)合作開展的應(yīng)用項目。項目的核心目標(biāo),是面向北京師范大學(xué)、華東師范大學(xué)、華中師范大學(xué)、東北師范大學(xué)等院校的師范生、教育碩士以及附屬中小學(xué)教師等提供在線的學(xué)習(xí)支持,并為教師學(xué)習(xí)者提供終身化的專業(yè)發(fā)展的學(xué)習(xí)支持服務(wù),當(dāng)前受益者為項目范圍內(nèi)的教師學(xué)習(xí)者用戶,未來有望能夠使全國范圍內(nèi)更多教師學(xué)習(xí)者受益。
依托IPv6的高速互聯(lián)網(wǎng)帶寬,教師教育創(chuàng)新支持系統(tǒng)可望實現(xiàn)多個學(xué)校之間的資源高速共享;通過對數(shù)據(jù)層各類資源的組織管理以及應(yīng)用層各類系統(tǒng)及門戶的調(diào)用,項目學(xué)校的教師學(xué)習(xí)者有望經(jīng)由統(tǒng)一用戶認(rèn)證,實現(xiàn)單點登錄并獲得系統(tǒng)各項應(yīng)用所提供的學(xué)習(xí)服務(wù)。系統(tǒng)提供的各項應(yīng)用主要包括在線學(xué)習(xí)平臺、論文指導(dǎo)系統(tǒng)、實習(xí)系統(tǒng)與見習(xí)系統(tǒng)以及教師評價系統(tǒng)等。作為教師教育創(chuàng)新支持系統(tǒng)中的應(yīng)用之一,教師教育評價系統(tǒng)的設(shè)計目標(biāo),旨在為教師學(xué)習(xí)者提供其專業(yè)發(fā)展的診斷服務(wù);同時,教師教育評價系統(tǒng)也是一個基于數(shù)據(jù)的教育決策應(yīng)用實例,教師教育創(chuàng)新支持系統(tǒng)這一教師終身化專業(yè)發(fā)展學(xué)習(xí)平臺所累積的數(shù)據(jù),有望通過評價系統(tǒng)的挖掘與統(tǒng)計,為教師學(xué)習(xí)者及教師教育者提供決策的依據(jù)。
即便是在計算機(jī)技術(shù)發(fā)展的早期,挖掘計算機(jī)應(yīng)用系統(tǒng)中的數(shù)據(jù)并通過對數(shù)據(jù)的闡釋從而達(dá)到為決策提供支持的目的,在信息系統(tǒng)的應(yīng)用及研究領(lǐng)域一直有著重要的地位。隨著計算機(jī)運(yùn)算能力的發(fā)展以及數(shù)據(jù)管理技術(shù)的創(chuàng)新,數(shù)據(jù)決策應(yīng)用在商業(yè)、政治、管理等領(lǐng)域?qū)Q策起到了越來越重要的支持作用,也成為在教育領(lǐng)域中進(jìn)行教育決策的一種主動選擇。
教育數(shù)據(jù)的決策支持應(yīng)用,是為了將淹沒在眾多信息系統(tǒng)中的海量數(shù)據(jù)能夠“說話”,也就是為教育領(lǐng)域中的相關(guān)涉眾提供與他們利益相關(guān)的數(shù)據(jù)統(tǒng)計與分析結(jié)果,從而幫助他們作出知情的決策。對于教師教育創(chuàng)新支持系統(tǒng)而言,隨著系統(tǒng)的運(yùn)行并成長為教師學(xué)習(xí)者的終身化學(xué)習(xí)平臺,在其各項應(yīng)用中也將逐漸生成大量的并將持續(xù)增長的數(shù)據(jù)。教師教育評價系統(tǒng)作為其中的數(shù)據(jù)決策應(yīng)用,正是為了讓這些數(shù)據(jù)“說話”,以便為教師教育領(lǐng)域的相關(guān)涉眾提供決策支持。就目前的應(yīng)用而言,教師教育評價系統(tǒng)最為核心的任務(wù),是設(shè)計教師知能評估模型。隨著項目的推廣,如果足夠多的教師學(xué)習(xí)者以此平臺作為其終身化專業(yè)發(fā)展的支持系統(tǒng),評價系統(tǒng)則有望通過進(jìn)一步的數(shù)據(jù)挖掘,為教師教育質(zhì)量提供進(jìn)行監(jiān)測和評估所需的數(shù)據(jù)闡釋,為教師教育的質(zhì)量保障、資源配置及課程設(shè)置等提供決策支持。
來自教師教育創(chuàng)新支持系統(tǒng)各項應(yīng)用的眾多數(shù)據(jù),為提供涉眾相關(guān)的決策支持提供了數(shù)據(jù)來源。對于一個數(shù)據(jù)決策模型來說,需要確定評估模型及其所需要的數(shù)據(jù),以及建立進(jìn)行決策的數(shù)據(jù)闡釋框架。另一方面,由于涉及眾多利益相關(guān)者,數(shù)據(jù)決策模型對于不同涉眾也會在評估模型及其闡釋框架方面呈現(xiàn)些微差異。教師教育評價系統(tǒng)的決策模型如圖1所示。
1.教師標(biāo)準(zhǔn)
目前,我國尚未出臺教師專業(yè)知能標(biāo)準(zhǔn)。為此,我們可以參考相關(guān)的國際標(biāo)準(zhǔn)。比如國際培訓(xùn)、績效、教學(xué)標(biāo)準(zhǔn)委員會(International Board of Standards for Training, Performance and Instruction, ibstpi)制定的教師能力標(biāo)準(zhǔn),反應(yīng)了教師的核心能力——稱職教師所應(yīng)具備的知識、技能和情感態(tài)度。由于這套教師能力標(biāo)準(zhǔn)所描述的教師能力是與教學(xué)環(huán)境和教學(xué)組織無關(guān)的一般性技能。無論是在面授環(huán)境中進(jìn)行班級集體式教學(xué),還是在線環(huán)境中促進(jìn)小組討論學(xué)習(xí),稱職的教師都應(yīng)掌握標(biāo)準(zhǔn)中所規(guī)定的這些能力。因此,我們采用該能力標(biāo)準(zhǔn)作為教師評價模型的依據(jù):從五個能力維度對教師學(xué)習(xí)者進(jìn)行評估。這五個維度包括:專業(yè)基礎(chǔ),計劃與準(zhǔn)備,教學(xué)方法和策略,評估和評價,以及教學(xué)管理,共包含18項具體的知能要求,以及與這18項知能相配套的績效指標(biāo)。
2.參照標(biāo)準(zhǔn)的評估模型
與教師能力相對應(yīng)的績效指標(biāo),被用來作為對教師的知識和能力進(jìn)行評估的依據(jù)。而具體采用哪些評價的方法,則還需要針對應(yīng)用情境制定相應(yīng)的評價方案。
對于操作技能類的評估,最常用的方式是對被評估者在工作場所的實踐活動進(jìn)行觀察(實際的或模擬的)、實踐演示、提問(與操作內(nèi)容相關(guān)的)、分析第三方或工作單位提供的績效報告、分析被評估者自己提供的材料(視頻、文檔、案例研究)等。
以教師知能標(biāo)準(zhǔn)中的“專業(yè)基礎(chǔ)”維度為例,該維度中的具體知能所對應(yīng)的績效指標(biāo)包括(與他人或群體進(jìn)行)交流溝通、拓展自身知識和技能以及樹立和維護(hù)職業(yè)聲譽(yù)等??刹捎玫脑u價方法可以包括知識測試、過程觀察以及第三方的意見采納等,如表1所示。
同樣以教師知能標(biāo)準(zhǔn)中的“專業(yè)基礎(chǔ)”維度為例,參照標(biāo)準(zhǔn)的評估模型,如圖2所示。其他各位維度同樣參照標(biāo)準(zhǔn),通過教師學(xué)習(xí)者所表現(xiàn)出來的績效行為及其結(jié)果進(jìn)行評估。
3.評估數(shù)據(jù)獲取
參照上述的教師標(biāo)準(zhǔn),能夠闡釋教師學(xué)習(xí)者針對教師知能標(biāo)準(zhǔn)的發(fā)展現(xiàn)況的數(shù)據(jù),需要從分布在教師教育創(chuàng)新系統(tǒng)的各項應(yīng)用中去獲取,主要的數(shù)據(jù)來源包括課程學(xué)習(xí)系統(tǒng)、實習(xí)與見習(xí)系統(tǒng)等。其他的數(shù)據(jù)來源包括教師學(xué)習(xí)者提交的用以表明其知能的證據(jù)材料,以及來自第三方的意見表達(dá)。針對五個維度、18項能力及其相對應(yīng)的98項績效指標(biāo)的數(shù)據(jù)獲取,如圖3所示。
4.?dāng)?shù)據(jù)統(tǒng)計及闡釋
由于評估模型所涉及的數(shù)據(jù)覆蓋五個維度,來自多個應(yīng)用,并以知識測試、情境模擬、案例分析、第三方意見及過程評價等多種評價方式獲取,因此數(shù)據(jù)的統(tǒng)計是一個相對復(fù)雜的工作。在目前的系統(tǒng)中,采用了對三類評估數(shù)據(jù)分別進(jìn)行分類統(tǒng)計的方法:
(1)針對每一個教師學(xué)習(xí)者,對采用知識測試、情境模擬、案例分析等評價方法所獲得的知能評估數(shù)據(jù),分別通過知識測試量規(guī)、情境模擬量規(guī)及案例分析量規(guī)進(jìn)行標(biāo)準(zhǔn)化轉(zhuǎn)換,并分別按照五個維度加以累計進(jìn)行數(shù)據(jù)統(tǒng)計。
(2)對于以第三方意見的方式獲得的數(shù)據(jù),所采用的統(tǒng)計方法是,對被評估者獲得的大眾點評結(jié)果進(jìn)行統(tǒng)計。
(3)對于學(xué)習(xí)過程參與情況的評價數(shù)據(jù),可以按照參與的應(yīng)用系統(tǒng)(如實習(xí)系統(tǒng))進(jìn)行統(tǒng)計,或按照參與的活動(如資源瀏覽)進(jìn)行統(tǒng)計。
(4)從教師學(xué)習(xí)者的自評模塊獲得的自我評估數(shù)據(jù)單獨進(jìn)行統(tǒng)計。
以上的數(shù)據(jù)經(jīng)過分類統(tǒng)計,可以雷達(dá)圖、柱狀圖及折線圖等可視化的形式呈現(xiàn)給教師學(xué)習(xí)者,對于希望了解到自身的專業(yè)發(fā)展現(xiàn)狀的教師學(xué)習(xí)者,能夠獲得來自應(yīng)用系統(tǒng)的知能評估視圖,來自大眾的知能評估視圖,以及來自自我檢測的知能評估視圖。從決策支持的角度,教師學(xué)習(xí)者所了解到的自身的知能欠缺,能夠成為其今后進(jìn)一步專業(yè)發(fā)展定向的依據(jù)。同時,與專業(yè)發(fā)展可視化視圖相配合,系統(tǒng)為教師學(xué)習(xí)者初步地提供了反饋意見及課程推薦建議,如圖4所示。圖中左上部是教師學(xué)習(xí)者自我評估結(jié)果的可視化呈現(xiàn),右上部是五個維度之一的評估結(jié)果試圖,下部則是隨時間發(fā)展的評估結(jié)果變化。
表1 專業(yè)基礎(chǔ)維度評估方法
另一方面,上述統(tǒng)計數(shù)據(jù),進(jìn)一步按照教師教育者的關(guān)注進(jìn)行統(tǒng)計及可視化呈現(xiàn),包括按照學(xué)校、院系、年級及班級等對來自應(yīng)用系統(tǒng)的評估數(shù)據(jù)進(jìn)行統(tǒng)計,并可視化地呈現(xiàn)所關(guān)注群體(如某一個班級)在專業(yè)知能五個維度的結(jié)果,以及按照時間維度所統(tǒng)計的不同結(jié)果的變化情況。對于以第三方意見的方式獲得的大眾點評數(shù)據(jù),也可按照上述的分類統(tǒng)計方式、時間跨度統(tǒng)計方式統(tǒng)計并可視化呈現(xiàn)。
從決策支持的角度,教師教育者所了解到的學(xué)習(xí)者群體的知能欠缺,能夠成為其配置教育資源、設(shè)置課程及革新教學(xué)方法的依據(jù)。同時,與這些可視化視圖相配合,系統(tǒng)也為教師教育者初步提供了反饋的意見及課程設(shè)置的建議。
為了提高教師教育的質(zhì)量,教師教育的信息化、終身化以及標(biāo)準(zhǔn)化越來越成為教師教育者的共識?;谙乱淮ヂ?lián)網(wǎng)的教師教育創(chuàng)新支持系統(tǒng)正是為了給教師學(xué)習(xí)者提供終身化、信息化的學(xué)習(xí)服務(wù)所開發(fā)的應(yīng)用系統(tǒng),而評價子系統(tǒng)的功能,則主要是為了給教師學(xué)習(xí)者以及教師教育者提供參照標(biāo)準(zhǔn)的數(shù)據(jù),以支持利益相關(guān)者做出相應(yīng)的決策。
另一方面,教師教育評價系統(tǒng)正是試圖成為一個利用數(shù)據(jù)為系統(tǒng)的相關(guān)涉眾提供決策依據(jù)的應(yīng)用案例。
當(dāng)然,以一個成熟的基于數(shù)據(jù)的決策支持系統(tǒng)來衡量的話,目前的系統(tǒng)還存在諸多局限。首先,由于處于開發(fā)過程中,系統(tǒng)的多個應(yīng)用子系統(tǒng)尚未集成,這為數(shù)據(jù)的獲取以及數(shù)據(jù)獲取過程中可能存在的問題帶來了不確定性;第二,由于系統(tǒng)尚缺乏足夠的用戶數(shù)及足夠的用戶數(shù)據(jù),目前采取了一種臨時性的、較易得到數(shù)據(jù)結(jié)果的統(tǒng)計方法,更為綜合的數(shù)據(jù)統(tǒng)計模型還有待于完善并補(bǔ)充;第三,從決策支持的角度,為相關(guān)涉眾所提供的決策支持選項目前還較為有限,所提供的反饋和建議也只是處于初級階段。
(作者單位為華東師范大學(xué)教育信息技術(shù)學(xué)系)