張秋君 闕勇平
(廣西工商職業(yè)技術(shù)學(xué)院 廣西南寧 530008)
國務(wù)院于2019年2月出臺了《國家職業(yè)教育改革實施方案》;教育部、財政部于2019年3月出臺了《實施中國特色高水平高職學(xué)校和專業(yè)建設(shè)計劃的意見》;廣西于2019年8月出臺了《廣西職業(yè)教育改革實施方案》和《實施廣西高水平高職學(xué)校和高水平專業(yè)建設(shè)計劃的通知》[1]。這一系列文件要求高職院校優(yōu)化學(xué)校、專業(yè)布局,深化辦學(xué)體制改革和育人機制改革,完善教育教學(xué)相關(guān)標(biāo)準(zhǔn),推進(jìn)高等職業(yè)教育高質(zhì)量發(fā)展。要完成“雙高”建設(shè)目標(biāo),高職院校的教學(xué)評級體系必須不斷改革和完善,才能不斷推進(jìn)高職院校教學(xué)質(zhì)量。構(gòu)建和完善教學(xué)評級體系的重要組成部分之一則是教學(xué)效果的評價,而學(xué)生是教學(xué)中最直接的教育對象和服務(wù)對象,對教學(xué)的是否有效的評價比教師之間和專家評價更真實,更具有說服力發(fā)言權(quán)。但是,學(xué)生評教工作逐漸暴露出很多問題,對學(xué)生評教結(jié)果的有效性和評教的信度產(chǎn)生了很嚴(yán)重的影響,也在一定程度上影響了師生之間的感情,挫傷了教師的教學(xué)積極性。因此,本研究基于調(diào)研的基礎(chǔ)上,針對高職院校學(xué)生在教學(xué)效果評價中存在的問題,采用定量的科學(xué)研究方法,提出了影響學(xué)生對教師教學(xué)效果評價的影響因素,從而優(yōu)化了學(xué)生的評價問卷,這對完善教學(xué)評級體系,推動教學(xué)質(zhì)量有著重要意義。
在研究中發(fā)現(xiàn),部分高職院校編制的教學(xué)效果方面關(guān)于學(xué)生評價問卷存在的問題包含:一是問卷的內(nèi)容忽視了教學(xué)信息化手段帶來的變化,也沒有結(jié)合當(dāng)下新冠肺炎疫情帶來的影響,特別是學(xué)生網(wǎng)課后,教師的教學(xué)的有效性會受這些變化的影響,因此教學(xué)效果的學(xué)生評價問卷需要結(jié)合網(wǎng)絡(luò)在線學(xué)習(xí)的因素進(jìn)行設(shè)計。二是教學(xué)效果的學(xué)生評價問卷較少從學(xué)生的角度和視角去設(shè)計。許多高職院校的教學(xué)效果學(xué)生評價問卷都是從教學(xué)管理的角度提出的,更多的是以教師為本位的立場出發(fā),無法體現(xiàn)出學(xué)生的主體地位,缺乏對學(xué)生訴求的了解。三是教學(xué)效果學(xué)生評價問卷的指標(biāo)所占權(quán)重大部分是教師之間或者專家們按照個人經(jīng)驗來打分,缺乏對評價指標(biāo)的定量分析,導(dǎo)致對問卷的科學(xué)性和合理性設(shè)計產(chǎn)生影響[2]。
評價問卷設(shè)計完成后,問卷的結(jié)構(gòu)維度合理與否,信度和效度可靠與否,大部分由專家的經(jīng)驗進(jìn)行主觀決定,實證的定量分析不足。
調(diào)查研究發(fā)現(xiàn),許多的高職院校對于教學(xué)效果的學(xué)生評價數(shù)據(jù)的處理一般只是進(jìn)行簡單的相加平均,接著加權(quán)后直接把其當(dāng)作最后的教學(xué)效果評價結(jié)果,但因?qū)W生的認(rèn)知差異,打分的區(qū)間會有很大的差別。僅僅是把數(shù)據(jù)進(jìn)行簡單的相加平均,無法體現(xiàn)出學(xué)生評分的實際意義,導(dǎo)致評價結(jié)果的誤差很大[3]。
國內(nèi)外許多學(xué)者對教學(xué)效果的學(xué)生評價問卷設(shè)計做了大量研究。最經(jīng)典的學(xué)生評價教學(xué)效果的問卷是SEEQ,即《大學(xué)教師教學(xué)效果評價問卷(學(xué)生用)》,SEEQ問卷由Marsh教授于1986年首次撰寫,在新西蘭、印度、澳大利亞、美國、西班牙等眾多國家應(yīng)用時效果都很好。1994年,國內(nèi)學(xué)者將SEEQ問卷翻譯成中文,并對問卷的表達(dá)方式和題目的內(nèi)容進(jìn)行了適當(dāng)?shù)恼{(diào)整和修改因其問卷的科學(xué)性、全面性,結(jié)構(gòu)的穩(wěn)定性和有效性,中國臺灣、香港和內(nèi)地的許多高校都廣泛運用這一工具對教學(xué)效果進(jìn)行測量[4]。
SEEQ問卷由9大維度構(gòu)成,其中包含41個指標(biāo),根據(jù)題目內(nèi)容和表達(dá)方式,主要適用于本科院校。研究發(fā)現(xiàn),高職院校在實際中對教學(xué)效果的進(jìn)行學(xué)生評價問卷設(shè)計時,都是直接采用本科院校的SEEQ問卷標(biāo)準(zhǔn),或者直接自行編制,缺乏設(shè)計的科學(xué)和合理性,大部分的高職院校也沒有對問卷的效度與信度進(jìn)行檢驗。所以,本研究的主要目的為:首先結(jié)合SEEQ的問卷內(nèi)容,編制高職院校教學(xué)效果學(xué)生評價問卷,其次利用探索性因素分析驗證HVC-VSEEQ 的維度結(jié)構(gòu),最后通過對HVC-VSEEQ的信度和效度檢驗,測試其穩(wěn)定性和準(zhǔn)確性。
SEEQ問卷的穩(wěn)定性僅在本科院校得到有效證明,并且有些表達(dá)超出了高職學(xué)生的認(rèn)知范圍。因此,本研究根據(jù)SEEQ問卷編制HVC-VSEEQ,編制的原則為:一是結(jié)合“雙高”建設(shè)的背景,對高職院校的人才培養(yǎng)方向和學(xué)生職業(yè)綜合素質(zhì)的要求;二是根據(jù)新冠肺炎疫情防控的教學(xué)安排情況和教學(xué)信息化的趨勢;三是結(jié)合與高職院校學(xué)生就教師的課堂教學(xué)效果評價的訪談結(jié)果。在對教學(xué)效果問卷進(jìn)行初步設(shè)計后,
邀請副教授(含副教授)以上職稱的專家們對指標(biāo)進(jìn)行評價和修改,使問卷在評價內(nèi)容、結(jié)構(gòu)、表述等方面更能夠符合高職院校的特點,在此基礎(chǔ)上設(shè)計了HVC-SEEQ問卷。HVCSEEQ問卷總包含16個指標(biāo):“學(xué)習(xí)/價值、教學(xué)組織/清晰、個人親和力、在線學(xué)習(xí)、考試/成績”5大維度。項目評價形式采用5點量表,當(dāng)被要求填寫問卷時,要明確項目的指標(biāo)重要的程度。
本次研究選取了廣西工商職業(yè)技術(shù)學(xué)院一、二年級學(xué)生為試驗對象,共發(fā)放了問卷445份,收回了有效問卷420份。被試的樣本總量是420人。樣本的描述性統(tǒng)計見圖1至圖4。
圖1 樣本的性別統(tǒng)計
圖2 樣本所在的年級統(tǒng)計
圖3 樣本所在的系部統(tǒng)計
圖4 樣本所學(xué)的專業(yè)統(tǒng)計
本次研究通過SPSS 23.0,運用了探索性因素分析,進(jìn)行數(shù)據(jù)統(tǒng)計分析,討論了HVC-SEEQ問卷的評價指標(biāo),檢驗了HVC-SEEQ問卷的信度和結(jié)構(gòu)效度。
采用SPSS統(tǒng)計軟件計算各因子的負(fù)荷,表1中KMO的統(tǒng)計量0.956>0.6,Bartlett球形檢驗的P值0<0.05,說明適合探索性因子分析。
表1 因素分析KMO系數(shù)與Bartlett球形檢驗表
提取公因子。圖2列出了特征值大于1的因子,所以在HVC-SEEQ中總共提取了5個公因子。從表2可以看出,5個公因子的累積解釋變異為73.243(%),并且其中的第1個公因子的貢獻(xiàn)為73.243(%),與其他因子有較大差異。
表2 HVC-SEEQ總方差解釋
3 .649 4.055 82.645 4 .564 3.525 86.170 5 .325 2.034 88.203 6 .277 1.729 89.932 7 .252 1.574 91.506 8 .222 1.385 92.891 9 .190 1.185 94.076 10 .184 1.153 95.229 11 .168 1.052 96.281 12 .153 .953 97.234 13 .144 .903 98.136 14 .120 .752 98.888 15 .109 .679 99.567 16 .069 .433 100.000
提取目的:主成分分析法。
本次研究采用了探索性因子分析將16個項目中提取5個公因子。從表3可以看出,每個因子都有一組負(fù)載較高的變量,這些變量的公共信息構(gòu)成了該因子的隱藏特征。根據(jù)因子分析結(jié)果,把HVC-SEEQ的5個因子(維度)命名為:學(xué)習(xí)/價值、教學(xué)組織/清晰、個人親和力、在線學(xué)習(xí)、考試/成績。
表3 HVC-SEEQ因子負(fù)荷表
本文運用SPSS 23.0統(tǒng)計分析軟件計算得到16項指標(biāo)的總體α系數(shù)為0.975(表4),大于0.7,說明該問卷的信度很好,具有使用價值。
表4 HVC-SEEQ問卷信度檢驗
表5 HVC-SEEQ問卷效度檢驗
檢驗效度的方法有許多種,效度也可以分為結(jié)構(gòu)效度、外部效度、內(nèi)部效度、測評效度和統(tǒng)計結(jié)論效度。本研究主要采用效度檢驗中的結(jié)構(gòu)效度去檢驗HVC-SEEQ問卷的效度。結(jié)構(gòu)效度表示的是測評的結(jié)果所表現(xiàn)出來的某種結(jié)構(gòu)和測量值間的對應(yīng)程度。對結(jié)構(gòu)效度的檢查常常使用因子分析方法,在上述的因子分析中,已經(jīng)檢驗了各個指標(biāo)的相關(guān)性的KMO和Bartlett球形檢驗,當(dāng)KMO趨向于1,則說明效度越高。因子分析得出,HVC-SEEQ問卷的KMO值為0.956,在0.6以上,說明整體的效度還是很高的。
1.本研究以經(jīng)典教學(xué)評價問卷《高校教師教學(xué)效果評價問卷(學(xué)生用)》的結(jié)果為基礎(chǔ),創(chuàng)新提出高職院校教學(xué)效果學(xué)生問卷(HVC-SEEQ)。
2.本研究利用探索性因素分析的方法,科學(xué)合理的設(shè)計出高職院校教學(xué)效果的學(xué)生評價問卷(HVC-SEEQ)的5個維度:學(xué)習(xí)/價值、教學(xué)組織/清晰、個人親和力、在線學(xué)習(xí)、考試/成績。
3.本研究編制的HVC-SEEQ問卷,基本符合高職院校特色,問卷共有5個維度,16個指標(biāo),通過對教學(xué)效果的評價問卷進(jìn)行結(jié)構(gòu)效度和信度檢驗,實證了HVC-SEEQ問卷的穩(wěn)定性和準(zhǔn)確性。
從統(tǒng)計分析得出,HVC-SEEQ問卷的信度和效度科學(xué)合理,可以作為“雙高”建設(shè)背景下的高職院校教學(xué)效果的學(xué)生評價工具。