干部教育培訓評估的實踐

羅林明 趙亞南 鄧一

摘 要：本文著眼于對培訓評估形勢、國內評估進展情況的分析，氣象教育培訓評估的實踐進行了介紹，以期為進一步推進干部教育培訓評估的科學化、制度化、規(guī)范化提供一定的實踐借鑒。

關鍵詞：氣象；培訓；評估；評價

中圖分類號：G726 文獻標識碼：A

一、國外培訓評估的進展

以美國、英國、法國和加拿大培訓評估實踐來看，發(fā)達國家和地區(qū)的培訓評估呈現(xiàn)出：1.培訓評估制度法制化、制度化趨勢，通過制定法律、有關法令及配套的法規(guī)和政策，對培訓的各個方面做出具體規(guī)定，把培訓評估建立在“法制”的基礎上，使培訓評估工作目標明確，易于操作。2.培訓評估體系完備、程序嚴謹。綜合體現(xiàn)在訓前、訓中、訓后三個階段和評估過程和評估結果的反饋應用方面。訓前評估以素質測評和需求調研為重點，訓中評估以課程質量和學習效果為重點，跟蹤評估則以成果轉化評估和投資回報評估為重點；同時還特別注重以學員考核和機構選擇為重點的評估結果的運用。

另外從美國培訓和發(fā)展協(xié)會（ASTD）2009 年發(fā)布的一項研究報告《評估的價值：使培訓評估更有效》發(fā)現(xiàn)，柯克帕特里克技術和菲利普斯技術是使用最為普遍的評估技術。其中，柯氏評估技術由四層次評估內容組成，菲利普斯評估技術在柯氏四級評估技術的基礎上增加了投資收益評估，四/五層評估內容包括反映層評估（第一層），學習層評估（第二層），行為層評估（第三層），結果層評估（第四層）和投資回報率評估（第五層）。

二、氣象教育培訓評估的實踐

柯克帕特里克技術和菲利普斯技術是應用最為廣泛的評估技術，氣象教育培訓評估在具體評估實踐中，結合氣象業(yè)務特點，建立“質量調查——效果評估——效益評價”三級評估業(yè)務體系，其中質量調查重點關注學員滿意度和學員收獲，后效果評估是在質量調查的基礎上，重點關注學員受訓后能力的提升和對崗位履職能力的促進，效益評價則是在質量調查和后效果評估的基礎上重點關注收益與成本間的差異和無形效益。三級之間是由簡入深，層層遞進，覆蓋了包括反映層評估（第一層），學習層評估（第二層），行為層評估（第三層），結果層評估（第四層）和投資回報率評估（第五層）。四/五層評估內容包括反映層評估（第一層），學習層評估（第二層），行為層評估（第三層），結果層評估（第四層）和投資回報率評估（第五層）在實踐中取得了很好地效果。

（一）教學質量調查

教學質量調查主要是通過問卷調查、訪談、座談等了解在校培訓期間，學員對培訓設計、教學方式方法、課程內容、教師授課水平、教材（講義）、教學管理、教學保障等的滿意度，了解學員對知識和技能的掌握程度，進一步改進和規(guī)范在校培訓，從而達到監(jiān)控培訓質量的目的。教學質量調查對列入中國氣象局年度培訓計劃的所有培訓項目進行全覆蓋，并做到班班有調查，班班有分析，班班有反饋。調查對象以學員、班主任、授課教師為主。指標體系主要包括課程內容、教師授課水平、培訓設計、教學管理和教學保障五個一級指標，14個2級指標。培訓課程內容與教師授課水平是針對每門課程開展調查；培訓設計、教學管理、教學保障等是針對整個培訓項目開展調查。主要產(chǎn)品是年度（或月度）教學質量評估對當年（當月）實施的培訓項目教學質量進行整體評估分析。

（二）培訓效果評估

培訓效果評估主要是通過問卷調查（學員自評、送培單位評價、服務對象評價）、個人及送培單位訪談、重點對象跟蹤等對培訓后學員收獲情況、回到工作崗位后個人行為的改變情況及其對個人績效和組織工作績效改變的程度情況進行評估。培訓效果評估主要是針對規(guī)模大、具有可持續(xù)性的核心培訓項目開展，在實施過程中根據(jù)實際情況通常會分為試點培訓項目后效果評估，即對新開發(fā)的培訓項目在試點期間應該開展效果評估，以幫助調整教學計劃；崗位培訓，上崗培訓、任職培訓等針對固定崗位固定層次人員的培訓，因其對學員的學習成果有明確要求，因此需要開展效果評估，以確保培訓的效果達到預期。評估對象主要以參加過培訓的學員及其所在單位領導為主。指標體系主要以框架指標為主，根據(jù)具體情況對其中具體指標及內涵進行相應調整，框架指標主要包括學習收獲、行為改變、工作結果3個一級指標，知識、態(tài)度、技能、愿望、業(yè)務開展和業(yè)績提高6個2級指標，其中學習收獲主要是針對培訓學院，行為改變和工作結果主要是針對送培單位負責人。

（三）培訓效益評價

培訓效益評價主要是通過文獻調研法、問卷調查法、專家咨詢法等，估算培訓收益與培訓成本之間的比例，進一步估算出培訓的投資回報率。培訓效益評價主要是針對具有可持續(xù)性、系統(tǒng)性，能夠較為直觀地反映培訓的成本以及具有較為直觀的收益的培訓項目。培訓效益評估是繼反應層、學習層、行為層、結果層之后更高層次的評估，評估難度更大，評估方法更復雜，也沒有現(xiàn)成的經(jīng)驗可以借鑒，以氣象雷達培訓為例開展了氣象培訓效益評估的初步探索，其科學性、系統(tǒng)性和全面性還需不斷研究和探索。

氣象雷達培訓效益評價是在前期開展氣象雷達培訓教學質量調查、氣象雷達培訓效果評估的基礎上，采用波士頓矩陣模型和Phillips的投資回報率理論，探索性地開展了氣象雷達培訓效益評價，估算出培訓的投資回報率。評價對象主要是學員及其所在單位、相關管理管理機構、業(yè)務機構及科研機構人員等。指標設計主要是氣象培訓效益一部分是可以直接計算出的培訓成本與效益的比值，另一部分是非直接量化的經(jīng)濟指標，因此，評估指標設計主要圍繞影響培訓效益發(fā)揮的要素展開。根據(jù)學員及送培單位的調查，確定相關要素在培訓中的貢獻度以及發(fā)揮影響作用的方式，引入“置信區(qū)間”，在評估指標設計上明確各要素在效益發(fā)揮上等的重要性程度；各種手段在人員素質提高上的有效性程度，即：培訓貢獻度=培訓在人員素質提高方面的貢獻度、人員素質提高在具體業(yè)務效益發(fā)揮上的貢獻度，并在此思路的指導下建立培訓效益發(fā)揮影響因素指標體系。

參考文獻

[1]中共中央組織部干部教育局.干部教育培訓工作條例學習輔導[M].北京：黨建讀物出版社，2015.

[2]中共中央印發(fā).2013-2017年全國干部教育培訓規(guī)劃，2013-9-28.

[3]干部教育培訓項目評估的研究和思考[J].繼續(xù)教育，2016（1）.

[4]干部教育培訓質量評估研究[M].北京：科學出版社，2014.

[5]培訓效益評估實證分析研究[J].繼續(xù)教育，2016（4）.