教育裝備績效評價技術(shù)研究（1）：變量選擇與處理

艾 倫

1.教育信息化協(xié)同創(chuàng)新中心 湖北武漢 430079 2.首都師范大學(xué) 北京 100048

?

資產(chǎn)管理與設(shè)備采購

教育裝備績效評價技術(shù)研究（1）：變量選擇與處理

艾 倫1，2

1.教育信息化協(xié)同創(chuàng)新中心 湖北武漢 430079 2.首都師范大學(xué) 北京 100048

摘 要：績效考核是教育裝備管理部門必須面對的實際問題，其中績效評價屬于管理學(xué)的范疇。重點討論了教育裝備的績效評價技術(shù)中對教育教學(xué)產(chǎn)出變量的選擇與處理方法。

關(guān)鍵詞：教育裝備；績效評價；產(chǎn)出變量；顯變量與隱變量；數(shù)據(jù)挖掘

教育裝備的績效評價屬于教育裝備管理學(xué)中的概念，同時也是目前各個教育部門和單位在每個財政年度都必須面對的實際問題。我們在這里系列地討論績效評價技術(shù)是想為學(xué)校及其管理部門在績效考核時提供有效的測量方法。教育裝備應(yīng)采用科學(xué)化管理，所以對教育裝備績效應(yīng)使用科學(xué)評價，科學(xué)評價是“價值無涉”的，就是不能通過價值判斷（主觀判斷）而必須依據(jù)科學(xué)判斷，即客觀和量化的評價方式?？陀^、量化的測量評價需要確定變量和具有數(shù)據(jù)支持，這是在評價階段不可回避的現(xiàn)實問題。

教育部門屬于政府機關(guān)或事業(yè)單位，它們在進(jìn)行項目建立和績效考核時必然會遇到對教育裝備的貨物、服務(wù)以及工程采購項目中預(yù)期目標(biāo)的闡明和評價問題，這就必然要涉及對教育教學(xué)產(chǎn)出變量的選擇、確定、量化以及詳細(xì)描述。本文將重點討論對教育教學(xué)產(chǎn)出變量的處理方法。

1　績效評價

在正式討論績效評價技術(shù)之前，必須將有關(guān)的概念進(jìn)行界定，從而使我們的討論不偏離方向且更加具有針對性。

1.1教育裝備績效

績效（performance）是管理學(xué)中的一個概念，單純從語言學(xué)的角度來看，績效包含有成績和效益的意思。用在經(jīng)濟(jì)管理活動方面，是指社會經(jīng)濟(jì)管理活動的結(jié)果和成效；用在人力資源管理方面，是指主體行為或者結(jié)果中的投入產(chǎn)出比；用在公共部門中衡量政府活動的效果，則是一個包含多元目標(biāo)在內(nèi)的概念［1］。

可以看出，在不同的語境下對績效有著不同的理解。但是教育裝備的績效卻是一個復(fù)雜問題，它幾乎涉及了上述定義中的所有方面。教育裝備的投入是經(jīng)費，而做管理工作的是管理人員；教育裝備的產(chǎn)出其實就是教育的產(chǎn)出［2］，而教育的產(chǎn)出就是人才培養(yǎng)；教育裝備的投入是由學(xué)校的上級單位做決策的，而這些上級單位又是政府部門。所以，教育裝備績效就是反映教育裝備投入后的成績和效益，在其項目實施方面要關(guān)注結(jié)果和成效，在管理方面要計算的就是投入產(chǎn)出比，作為學(xué)校的上級單位就必須綜合考慮上述問題。我們在這里規(guī)定，教育裝備科學(xué)化管理中的績效就是考查其效益，而這個效益就是教育裝備的投入產(chǎn)出比。

1.2評價與評估

一般情況下“評價”與“評估”這兩個詞是可以混用的，人們不把它們做嚴(yán)格的區(qū)分。但是為了使我們的討論更加具有針對性且不偏離方向，就必須給出一個嚴(yán)格的概念界定。本文采用“評價”一詞而沒有使用“評估”是具有充分理由的?！督逃筠o典》中對評價和評估的解釋如下。

評價（evaluation）是對事物價值的判斷。如對教育目標(biāo)的實現(xiàn)程度做出的價值判斷。這類判斷有時只依據(jù)由測驗提供的測量值，更多的則是綜合各種測量、關(guān)鍵性事件、主觀印象以及其他各種證據(jù)［3］。

評估（evaluation）指評議和估價，是對事物和過程的一種判斷。是一個包含一系列的步驟和方法的連續(xù)性的系統(tǒng)過程。其一般程序是：規(guī)定目的，確定目標(biāo)，系統(tǒng)地采集信息，分析資料，運用包括數(shù)學(xué)在內(nèi)的科學(xué)手段，對某一對象進(jìn)行綜合的評議和估價。它為決策者提供信息和資料，為決策服務(wù)［3］。

雖然評價和評估的英文名稱完全相同，但在漢語解釋中卻有著根本不同的涵義。顯然，評估是在一個項目執(zhí)行前對該項目目標(biāo)和可能產(chǎn)生的結(jié)果進(jìn)行預(yù)測和估計，而評價則是在一個項目執(zhí)行后對該項目在初期建立的目標(biāo)和項目執(zhí)行后所產(chǎn)生效益進(jìn)行測量和評判。教育裝備績效考核是考查項目執(zhí)行完成后的效益問題，所以在本文和以后的序列討論中將一直使用績效評價這一稱呼。

1.3績效評價技術(shù)

人們對事物的評價，由判斷依據(jù)的主體區(qū)分可分為主觀評價與客觀評價，而由判斷依據(jù)的強度區(qū)分可分為定性評價與定量評價，于是就存在4種不同的評價方式：主觀定性評價、主觀定量評價、客觀定性評價以及客觀定量評價。其中，主觀定性評價與主觀定量評價屬于價值判斷，客觀定性評價屬于認(rèn)知判斷，客觀定量評價則屬于科學(xué)判斷，科學(xué)判斷的評價方式應(yīng)該是“價值無涉”的?？茖W(xué)研究一般應(yīng)避免使用屬于價值判斷的主觀評價方式，因為這種評價方式受到評價者知識背景、閱歷大小、經(jīng)驗多少、文化習(xí)俗、價值取向等主觀條件的限制，甚至評價者評價時的社會關(guān)系、身體狀況與心理情緒等都會成為重要的影響因素。

績效評價可以采用上述定義中的價值判斷，但是也可以采用認(rèn)知判斷或科學(xué)判斷。教育裝備管理應(yīng)該是科學(xué)化管理，須采用科學(xué)評價，而科學(xué)評價一定要使用客觀、量化的方法?？陀^、量化的方法通常需要依靠數(shù)學(xué)模型、數(shù)據(jù)計算實現(xiàn)，于是便形成了各種相關(guān)技術(shù)，這就是我們在這里討論的教育裝備績效評價技術(shù)。

2　評價變量的選擇

績效評價需要對項目的效益進(jìn)行計算，效益的具體體現(xiàn)就是投入產(chǎn)出比，客觀、量化的評價應(yīng)首先確定投入變量和產(chǎn)出變量。

2.1投入變量

投入變量亦稱輸入變量，教育裝備績效評價的投入變量反映出投入成本，是教育成本的一部分。在《教育大詞典》中對教育成本（Education Cost）的定義是：培養(yǎng)學(xué)生所耗費的社會勞動，包括物化勞動和活勞動。其貨幣表現(xiàn)為培養(yǎng)學(xué)生由社會和受教育者個人直接和間接支付的全部費用［3］。其中物化勞動是指教育資源中的人工資源部分，也就是教育裝備；而活勞動則是指教育在資源中的人力資源部分，包括教育教學(xué)的實施者（教師）、管理者（各級領(lǐng)導(dǎo)、各種管理人員）、生活服務(wù)人員等。教育裝備投入成本中的物化勞動其實就是教育裝備本身，活勞動則是指教育裝備的管理人員。所以教育裝備績效的投入變量應(yīng)選擇以貨幣形式呈現(xiàn)的教育裝備投入（即購置費用）和管理人員的人數(shù)、水平（學(xué)歷、職稱）、工作量等內(nèi)容。

2.2產(chǎn)出變量

產(chǎn)出變量亦稱輸出變量，教育裝備績效的產(chǎn)出變量其實也反映了教育的產(chǎn)出，它們是相同的概念。教育效益是指教育投入的產(chǎn)出效果，包括直接效益和間接效益、經(jīng)濟(jì)效益和政治文化效益。教育產(chǎn)出變量的選擇是一個非常復(fù)雜的問題，它與企業(yè)的產(chǎn)出不同，不是僅用貨幣量就可以反映的，并且討論教育的效益時并不是關(guān)注其經(jīng)濟(jì)效益，而是注重它的社會效益、政治文化效益。

一般情況下，人們多選擇以下可量化的變量作為教育或教育裝備績效的產(chǎn)出變量。

（1）培養(yǎng)學(xué)生人數(shù)。這是一項直接效益的產(chǎn)出變量，反映了一個教學(xué)單位培養(yǎng)人才的能力。但是由于在計算教育效益時常用“生均投入”作為投入變量，而且培養(yǎng)人數(shù)與教學(xué)單位規(guī)模一起被規(guī)定下來，一般不隨教育投入發(fā)生變化，所以這個產(chǎn)出變量不能夠很好地反映教育效益，很少被采用。

（2）學(xué)生學(xué)業(yè)水平。這也是一項直接效益的產(chǎn)出變量，它直接反映了一個教學(xué)單位的教育教學(xué)水平。學(xué)生的學(xué)業(yè)包括知識的獲取、能力的提高和道德的養(yǎng)成，于是這個變量還需要進(jìn)一步細(xì)分。知識也被稱為顯性知識，是通過紙筆考試進(jìn)行考核的，這個產(chǎn)出變量可以使用學(xué)生的卷面成績。能力屬于隱性知識，不易進(jìn)行量化測量，卻可以通過造詣測驗（亦稱成就測驗）針對學(xué)生獲得的成果或獎勵確定產(chǎn)出變量。道德的養(yǎng)成就是德育，德育作為產(chǎn)出變量是最不容易量化的，可以考慮通過社會對該教學(xué)單位學(xué)生道德水平的總體評價進(jìn)行賦值。應(yīng)該注意，在較大空間范圍內(nèi)進(jìn)行績效評價使用學(xué)生學(xué)業(yè)水平作為產(chǎn)出變量時，由于不同地區(qū)會有不同的測量標(biāo)準(zhǔn)，所以將一些成績（如：各地高考成績、中考成績等）作為產(chǎn)出變量就會帶來問題。但是可以通過下文介紹的變量變換方法來解決。

（3）學(xué)生身體素質(zhì)。對于非體育教育的普通教學(xué)單位，學(xué)生身體素質(zhì)雖然屬于人們關(guān)注的一個重要問題，但與學(xué)生學(xué)業(yè)水平這個產(chǎn)出變量要求不同，它一般只與教育或教育裝備在體育鍛煉相關(guān)的投入部分有關(guān)。有時，學(xué)生身體素質(zhì)甚至還會被設(shè)定為影響學(xué)生學(xué)業(yè)水平的輸入變量。

（4）畢業(yè)生中的成功人士數(shù)量與水平。這是一項間接效益的產(chǎn)出變量，因為它雖然與原教學(xué)單位的教育有關(guān)，但還與成功人士其他的經(jīng)歷與奮斗有關(guān)，通常它只是一個參考變量。

顯然，能夠反映教育效益的產(chǎn)出變量是非常少的，還會出現(xiàn)測量標(biāo)準(zhǔn)不統(tǒng)一而使得變量沒有使用意義的情況。所以尋找、發(fā)現(xiàn)和定義教育裝備效益的產(chǎn)出變量是一個技術(shù)含量很高的科學(xué)問題。

3　評價變量的產(chǎn)生方法

教育裝備績效產(chǎn)出變量的尋找和發(fā)現(xiàn)可以通過數(shù)據(jù)挖掘技術(shù)實現(xiàn)，下面通過實例介紹這些技術(shù)。

3.1顯變量與隱變量

教育裝備績效評價中的變量一般都可以賦予明確的社會科學(xué)或教育學(xué)意義，如前面提到的學(xué)生學(xué)業(yè)水平等，我們稱這樣的變量為顯變量。其實在教育裝備問題研究中還存在著大量的隱變量，它們并沒有明確的社會科學(xué)或教育學(xué)意義，甚至沒有一個確切的名稱，而只能用F1，F(xiàn)2等變量名代替。有時我們不得不使用隱變量進(jìn)行測量和評價。例如，由于學(xué)生創(chuàng)新能力是一個復(fù)合型能力，一般不具有直接進(jìn)行測量的方法，但是我們可以通過數(shù)據(jù)挖掘和統(tǒng)計分析找到一些隱變量，它們與創(chuàng)新能力具有一定的關(guān)系，并且能夠側(cè)面反映創(chuàng)新能力水平的高低。通常，投入變量一般都表現(xiàn)為顯變量，而產(chǎn)出變量則在很多情況下只能去挖掘那些隱變量。

3.2變量變換

3.2.1 空間變量與時間變量變換

空間變量與時間變量確切的叫法應(yīng)該是空間序列變量和時間序列變量，在教育裝備績效評價問題研究中經(jīng)常會存在它們之間的轉(zhuǎn)化應(yīng)用。例如，我們希望知道教育裝備投入是否會使得學(xué)生的學(xué)業(yè)水平有所提升，其輸入變量容易獲得，它們無非都是反映裝備投入實施情況的一些顯變量，而在采集學(xué)生學(xué)業(yè)水平情況時，由于不同地區(qū)測量學(xué)業(yè)水平的標(biāo)準(zhǔn)不同，如果使用空間序列變量的學(xué)業(yè)水平進(jìn)行對比研究將沒有實際意義。但是，如果使用時間序列變量的學(xué)業(yè)水平，在當(dāng)?shù)剡M(jìn)行逐年對比，研究結(jié)果就具有實際意義了。此時得到的是各地區(qū)學(xué)生學(xué)業(yè)水平隨時間逐步提高的曲線，而各地區(qū)這個曲線的斜率是不同的，通過斜率比較就能夠很好地體現(xiàn)教育裝備投入的效益。

3.2.2 變量功能變換

變量功能變換就是將一個可測量的變量功能引申，使得它可以反映另一個變量的水平值。例如，我們可以認(rèn)為學(xué)生參加網(wǎng)絡(luò)答題的速度能夠反映該生信息技術(shù)水平，從而設(shè)定該水平為一個評價產(chǎn)出變量。但是，能否真的當(dāng)作產(chǎn)出變量使用必須做相關(guān)性驗證。一般，如果該變量與投入變量相關(guān)，則有可能成為產(chǎn)出變量，否則不能作為產(chǎn)出變量。說“有可能成為”是因為兩個變量之間具有相關(guān)關(guān)系但不一定就是因果關(guān)系，要得到因果關(guān)系還需要進(jìn)一步推演證明才行（兩個變量不具有相關(guān)性則必然不會具有因果性，而具有相關(guān)性時則有可能會具有因果性）。以下是一個使用真實數(shù)據(jù)的實際例子。

某市6個區(qū)縣（用DMU1至DMU6表示）小學(xué)生的生均教育信息化投入經(jīng)費數(shù)如表1所示。學(xué)生信息化水平用網(wǎng)絡(luò)答題時間代替，平均答題時間長被認(rèn)為信息技術(shù)水平低，反之則認(rèn)為水平高，于是得到表2中的信息技術(shù)水平指數(shù)。變量變換方法采用了計算公式：信息技術(shù)水平指數(shù) = 10 / 平均答題時間。

表1　生均信息化投入數(shù)

表2　學(xué)生信息化水平指數(shù)

將生均教育信息化投入經(jīng)費數(shù)（作為投入變量）和學(xué)生信息技術(shù)水平指數(shù)（作為產(chǎn)出變量）填入統(tǒng)計分析軟件SPSS中，選擇相關(guān)分析選項，可以得到表3所示輸出結(jié)果。該結(jié)果顯示出這兩個變量的相關(guān)系數(shù)為0.545，它們似乎具有一定的相關(guān)性。但進(jìn)一步考查可見顯著性值ρ= 0.264。在相關(guān)分析時規(guī)定為0假設(shè)（H0），當(dāng)ρ＜ 0.05時才能夠認(rèn)為兩個變量具有相關(guān)性，所以我們開始設(shè)定的投入與產(chǎn)出變量不具有相關(guān)關(guān)系，當(dāng)然就更不會具有因果關(guān)系。于是得出的結(jié)論是：該變量變換可行（即可將答題時間變換為信息技術(shù)水平），但是在該項目中使用這個產(chǎn)出變量不可行。在該項目中，在這個城市的6個區(qū)縣之間，不能夠?qū)⑸鲜鰞蓚€變量用作為投入和產(chǎn)出的對應(yīng)變量來進(jìn)行小學(xué)校的教育信息化績效考核。

表3　SPSS相關(guān)性分析結(jié)果：相關(guān)性

3.3隱變量的挖掘

在產(chǎn)出變量十分稀少的情況下利用數(shù)據(jù)挖掘技術(shù)設(shè)定一些變量作為產(chǎn)出變量是一個不錯的選擇，這里介紹用主成分分析法（Principal Components Analysis，簡稱PCA法）進(jìn)行隱變量挖掘的實例。主成分分析是多元分析中一種常見的變量降維和賦權(quán)方法，在盡量不丟失信息的情況下將多個變量轉(zhuǎn)換成少數(shù)幾個變量（稱主成分變量）。這些主成分變量具有正交性（統(tǒng)計獨立、無相互依存性），而每個主成分中所包含的變量之間一般具有較強的相關(guān)性（同質(zhì)）。我們可以將主成分變量認(rèn)定為隱性產(chǎn)出變量，其依據(jù)主要出于以下幾點。

（1）趨同特點。與其他領(lǐng)域不同，教育在裝備投入上有著配備標(biāo)準(zhǔn)，人們多依標(biāo)準(zhǔn)進(jìn)行投入，即使在沒有建立標(biāo)準(zhǔn)的地方也根據(jù)經(jīng)驗盡量選擇一致性的配備，這種現(xiàn)象稱為趨同性。

（2）全局預(yù)測。在能夠獲得大范圍（全省市甚至全國范圍）投入數(shù)據(jù)的情況下，根據(jù)上述趨同性特點進(jìn)行產(chǎn)出隱變量的挖掘是有意義的。局部地區(qū)或該地區(qū)教學(xué)單位的教育裝備績效的產(chǎn)出指標(biāo)可根據(jù)這些隱變量進(jìn)行測量和評價。

（3）同質(zhì)聚類。主成分分析就是將趨同的變量聚類在一起。在進(jìn)行主成分分析時應(yīng)盡量提供一些已知的產(chǎn)出變量數(shù)據(jù)參與，這樣對于隱變量的有效性更加有利。

表4是某市小學(xué)校教育裝備投入變量（X01～X13）的名稱對照。將全市這些變量對應(yīng)的數(shù)據(jù)填入SPSS軟件，選擇主成分分析，可以得到表5和表6所示的結(jié)果。

表4　變量名對照表

表5　各主成分的最大特征值與對系統(tǒng)的貢獻(xiàn)率

表6　前3個主成分與各變量的關(guān)系

表5中的“Total”一欄為各主成分對應(yīng)的最大特征值，“Cumulative”為主成分累計貢獻(xiàn)率百分比，最大特征值大于1的主成分有3個，它們的累計貢獻(xiàn)率已經(jīng)達(dá)到82%以上。表6顯示的是前3個主成分與各變量（X01～X13）的關(guān)系。從表5中可見主成分F1的最大特征值λ1=7.036，主成分F2的最大特征值，主成分F3的最大特征值。根據(jù)以下公式計算綜合評價函數(shù)［4］。根據(jù)綜合評價函數(shù)F和表6中各個變量的系數(shù)確定出F的各個變量系數(shù)如表7所示，寫成百分?jǐn)?shù)形式（各個系數(shù)之和等于100）如表8所示。

表7　綜合評價函數(shù)各變量的系數(shù)

表8　綜合評價函數(shù)各變量的百分度系數(shù)

最后得到的隱性產(chǎn)出變量有兩個，分別為主成分F1和F2。主成分F3因只與X13（圖書資料）有關(guān)，不予考慮。計算兩個產(chǎn)出變量時，其對應(yīng)的各個投入變量和投入的權(quán)值由下面的表達(dá)式?jīng)Q定。

參考文獻(xiàn)

［1］ 百度百科.績效［EB/OL］.http：//baike.baidu.com/ view/122994.htm.

［2］ 艾倫，艾霽野.也談教育裝備的成本：效益研究［J］.中國教育技術(shù)裝備，2008（20）：1-2.

［3］ 顧明遠(yuǎn).教育大辭典：增訂合編本上、下［M］.上海：上海教育出版社，1998.

［4］ 艾倫，艾霽野.主成分分析在教育裝備管理評價指標(biāo)體系建立中的應(yīng)用［J］.中國教育技術(shù)裝備，2008（18）：3-4.

收稿日期：2016-03-06

作者簡介：艾倫，教授，本刊特約撰稿人。

Performance Evaluation Technology of Educational Equipment （1）：Selection and Processing of Variable

Ai Lun1，21. Collaborative & Innovative Center for Educational Technology， Wuhan， 430079， China 2. Capital Normal University， Beijing， 100048， China

Abstract：Performance evaluation is an actual problem that the educational equipment management department must face， and the performance evaluation is the category of management. This paper focuses on the selection and processing method of the output variables in the performance evaluation of educational equipment.

Key words：educational equipment； performance evaluation； output variables； explicit and implicit variables； data mining