李鈺軒
(仙桃市煙草專賣局(公司)人事科,湖北 仙桃 433000)
員工培訓效果評估是企業(yè)培訓工作中的重要環(huán)節(jié),客觀合理的評估結果是了解培訓課程是否滿足學員要求的前提, 能夠為組織者提供培訓計劃安排、培訓課程選擇等信息的反饋,這就要求企業(yè)建立一套科學的培訓評估體系。針對煙草行業(yè)培訓,相關學者進行了研究。孫國光[1]通過分析當前煙草商業(yè)企業(yè)面臨的新形勢,針對員工培訓工作中存在的主要問題進行了調(diào)查和分析,以青島市煙草專賣局(公司)員工教育培訓體系搭建過程為主線,對煙草商業(yè)企業(yè)如何開展教育培訓工作進行了研究。王雁舒[2]發(fā)現(xiàn)培訓工作在企業(yè)的發(fā)展過程中發(fā)揮著不可替代的作用,是改善、提高企業(yè)員工素質(zhì)的基石。但是,培訓并不是一項一勞永逸的工作,對其進行效果評估,促使培訓效果轉化為工作實效,是培訓工作不能缺少的組成部分。孫紅濤[3]從當前煙草企業(yè)培訓重視程度、培訓形式和內(nèi)容、培訓隊伍、培訓效果評估和激勵機制等問題出發(fā),提出了解決問題的相應對策,為中國煙草企業(yè)教育培訓提出一些思路。綜上所述,目前煙草行業(yè)針對培訓質(zhì)量的評估仍以定性為主,評估手段單一,缺乏科學有效的定量評估方法,導致評估效果可信度低,無法用于培訓效果的改進和提升[4~6]。本文正是基于此種現(xiàn)象,以行業(yè)實際培訓評估內(nèi)容為例,運用層次分析法,通過定量方法對安全培訓效果進行了深入研究。
本文以企業(yè)的網(wǎng)絡學院課程實際培訓質(zhì)量評估表為例確定培訓的評估指標體系構建方法。評估體系構建具體可分為以下幾個步驟:
2.1 總目標確定
根據(jù)研究內(nèi)容將總目標設置為培訓質(zhì)量;
2.2 子目標確定
將培訓質(zhì)量評估內(nèi)容分為教案設計、授課能力兩個子目標,采用專家討論確定子目標之間的優(yōu)先級;
2.3 子目標分解:將子目標具體細化,確定下一階段的分析對象;
2.4 具體評價準則確定
針對每個細化過后的子目標確定具體的評價準則,是評估過程中的最基本單元。
本文通過參考實際培訓質(zhì)量評估表,并在4名專家的指導下,建立了針對網(wǎng)絡學院培訓質(zhì)量的評估指標體系,其中一級指標2個,二級指標5個,三級指標11個,對評估指標進行具體介紹。
培訓質(zhì)量評估的第一個要點是教案設計,教案的設計關系著培訓內(nèi)容的選擇和培訓形式的呈現(xiàn),主要為培訓內(nèi)容的選擇提供參考依據(jù)。對于一份教案通常從主體也就是也就是培訓內(nèi)容,以及客體也就是學員兩個角度進行評價。故在教案設計這一子層面中分為內(nèi)容設計和學員評價2部分。根據(jù)培訓質(zhì)量評估表將內(nèi)容設計分為教案、材料的組織和內(nèi)容的設置是否合理2個具體評價準則。將學員評價分為授課方式是否易于接受和培訓目標的體現(xiàn)2個具體評價準則。
培訓質(zhì)量評估的第二個要點是授課能力。教案設計主要是針對培訓內(nèi)容質(zhì)量的評估,而授課能力是對任課教師授課質(zhì)量的評估,主要為任課教師的選擇提供依據(jù)。授課能力分為組織能力、溝通交流、教學細節(jié)3部分。其中組織能力分為紀律維持和簽到打分2個具體評價準則,溝通交流分為語音語調(diào)是否合適、是否能夠調(diào)動學員的學習積極性、有比較適合的溝通方式3個具體評價準則,教學細節(jié)分為及時回答學員的問題、舉例貼切程度2個具體評價準則。
本文采用層次分析法(AHP)對評價指標進行權重確定,層次分析法通過構建“培訓子層面-培訓內(nèi)容-具體培訓準則”的體系構建分析層次[7~9]。在每一個層次中通過要素之間的兩兩比較構建判斷矩陣,隨后確定目標權重,并進行一致性檢驗。
3.1 指標權重確定
在培訓體系內(nèi)需要明確各個要素之間的相對權重,包括“培訓子層面-培訓內(nèi)容-具體培訓準則”每個層次內(nèi)的要素。在化工安全培訓評估指標體系標準框架下,需要對各安全培訓子層面的相對重要程度以及安全培訓子內(nèi)容下對應的各應急目標的相對重要程度進行確定。本文以授課能力為例具體介紹權重的確定方法。
3.1.1 安全培訓子層面內(nèi)各培訓內(nèi)容權重確定
在本文中對培訓質(zhì)量劃分2個子層面,分別為教案設計和授課能力。以其中的授課能力為例,授課能力子層面包括3個培訓準則,分別為:組織能力(Z3)、溝通交流(Z4)、教學細節(jié)(Z5)。按照層次分析法中T.L.Saaty1-9 標度評分標準,構造判斷矩陣,如表1所示。
表1 授課能力子內(nèi)容重要度
授課能力判斷矩陣:
通過計算矩陣一致性比率<0.1,矩陣一致性可以接受。3個培訓子內(nèi)容的權重分別為:
教案設計子層面中的培訓內(nèi)容權重計算過程與授課能力相似。
3.1.2 具體培訓準則之間的權重確定
對每個培訓質(zhì)量評估子層面下的具體準則進行指標權重計算有利于對評價指標的分數(shù)進行確定[10]。以授課能力下溝通交流的具體培訓準則(語音語調(diào)是否合適、是否能夠調(diào)動學員的積極性、有比較合適的溝通方式)為例,W3代表語音語調(diào)是否合適,W4代表是否能夠調(diào)動學員的積極性,W5代表有比較合適的溝通方式,如表2所示。
表2 溝通交流培訓準則重要度
溝通交流具體準則比較矩陣:
通過計算矩陣一致性比率<0.1,矩陣一致性可以接受。4個培訓具體準則的權重分別為:
其他具體培訓準則權重計算過程與溝通交流下的具體培訓準則相似。
3.2 評估指標分值與評估標準設定
通過對培訓質(zhì)量評估子層面內(nèi)部各個子內(nèi)容的權重計算,根據(jù)計算結果設置培訓質(zhì)量評估子層面內(nèi)部各個子內(nèi)容的評估分值和評分標準,設計針對培訓質(zhì)量評估的評分標準及打分方法。
將前文中獲得的培訓質(zhì)量評估子層面內(nèi)各個子內(nèi)容對應的權重保留兩位有效數(shù)字后轉化為分值,采用百分制。對應的分值如下:組織能力(Z1)32分、溝通交流(Z2)56分、教學細節(jié)(Z3)12分。
組織能力(Z1)32分中根據(jù)權重分配紀律維持(W1)18分、簽到打分(W2)14分。
溝通交流(Z2)56分中根據(jù)權重分配語音語調(diào)是否合適(W3)8分、是否能夠調(diào)動學員的積極性(W4)17分、有比較合適的溝通方式(W5)31分。
教學細節(jié)(Z3)12分中根據(jù)權重分配及時回答學員的問題(W6)9分、舉例貼切程度(W7)3分。
依據(jù)具體培訓準則、邏輯判斷以及所需接受知識的重要程度,結合專家分析討論設計評估標準,根據(jù)權重計算對評估標準進行分值設置,最終完成各培訓質(zhì)量評估子內(nèi)容的培訓評估打分,得到改進后的培訓質(zhì)量評估表,如表3所示。評估標準得分可以根據(jù)評估人員具體情況在區(qū)間內(nèi)打分。另外一個子層面,教案設計的評估打分表采用同樣的設計方法,在此不再贅述。
表3 培訓質(zhì)量評估表
本文采用上文中構建的培訓質(zhì)量評估體系,選取企業(yè)中某一員工作為典型研究對象,通過該體系對網(wǎng)絡學院某一課程培訓質(zhì)量進行評估,評估結果如表4所示。
表4 某員工針對網(wǎng)絡學院課程培訓質(zhì)量評估得分情況
從得分的整體情況來看在安全生產(chǎn)思想培訓、安全技能培訓和安全技術知識培訓三方面企業(yè)目前均存在不足之處,詳細分析如下:
4.1 教案設計
內(nèi)容設計:從得分不難看出教案、材料的組織是否合理34分中得到32分,內(nèi)容的設置是否合理31分中得到28分,由此可知本課程在內(nèi)容設計上質(zhì)量較高,在內(nèi)容設計上能滿足該學員要求。
學員評價:授課的方式是否易于接受20分中得到14分,說明該學員認為本課程授課方式不大容易接受,可能與之前接觸網(wǎng)絡授課培訓較少有關。培訓目標的體現(xiàn)是否明確15分中得到14分,說明本課程較好地體現(xiàn)了培訓目標。
4.2 授課能力
4.2.1 組織能力
紀律維持是否良好與簽到打分是否每節(jié)課執(zhí)行都得到了滿分。說明雖然是網(wǎng)絡培訓,但是課程組織有序,課堂紀律維持較好。
4.2.2 溝通交流
語音語調(diào)是否合適8分中得到了4分,說明本課程授課過程中教師的語音語調(diào)沒有令該學員滿意,說明本課程在教師授課過程中要注意語音語調(diào)是否合適,同時學員要調(diào)試好設備,確保授課時語音語調(diào)不會受到設備干擾。是否能夠調(diào)動學員的積極性17分中得到了15分,說明本課程教師的授課較為生動,能夠調(diào)動學員積極性。是否有比較合適的溝通方式31分中得到了25分,說明本課程教師的溝通方式有待改善,可能與教師授課速度過快有關。
4.2.3 教學細節(jié)
是否及時回答學員的問題9分中只得到了3分,說明教師沒有對學員提出的問題及時進行解答,可能與授課形式為網(wǎng)絡培訓,教師和學員之間無法即時溝通有關。舉例的貼切程度得到了3分滿分,說明該學員認為課程舉例較為貼切。
4.3 企業(yè)培訓建議
針對企業(yè)今后在網(wǎng)絡學院上開展相關培訓提出以下建議:一是增加網(wǎng)絡學院授課頻次,確保網(wǎng)絡培訓形式能被大多數(shù)員工接受。二是在教師授課過程中要注意語音語調(diào)是否合適,同時學員要調(diào)試好設備,確保授課時語音語調(diào)不會受到設備干擾。三是教師在授課過程中要注意語速,確保授課質(zhì)量。四是教師可以采用線上留言等方式及時對學員提出的問題及時進行解答。
本文對培訓質(zhì)量評估進行分級、分類分析,提出了一套具有針對性的企業(yè)培訓質(zhì)量評估指標體系構建方法。針對當前企業(yè)實際培訓表單,基于評價指標權重分析原則,采用層次分析法(AHP)確定各項評估指標權重,通過要素之間的兩兩比較構建判斷矩陣,解決了確定培訓評估指標權重的主觀性問題,最終分析得出評估體系。選取某企業(yè)員工作為典型研究對象,通過該體系對企業(yè)員工培訓質(zhì)量進行評估,分析得出在教案設計和授課能力方面存在的問題,為企業(yè)選擇合適的培訓課程和講師提供參考。