基于R軟件的評分者可信度分析

謝騏澤

【摘要】評分者可信度分析是指多個評分者對同一批受考核者進行評分時的一致性程度.以兩組評委分別對同一批次紅葡萄酒的打分數(shù)據(jù)作為研究對象，在R軟件中運用T檢驗對兩組評委打分差異進行顯著性分析，結果顯示兩組評委的打分存在顯著性差異；為選出可信度高的評分，分別累加兩組評酒員對每種葡萄酒打分的變異系數(shù)之和，以此作為兩組評酒員的可信度指標.

【關鍵詞】可信度、R軟件、顯著性分析、T檢驗、變異系數(shù)

一、問題分析

由于兩組評委的打分數(shù)據(jù)較多且復雜，因此，需要對給定數(shù)據(jù)如何進行合適的處理、分析、應用，解決好這些步驟，根據(jù)假設檢驗模型，兩組評酒員的評價結果差異的顯著性分析問題即可解決.

二、數(shù)據(jù)處理與分析

首先對原始數(shù)據(jù)進行整理：

式中，xij：第i個對第j種紅葡萄酒的打分；μ1mj：第m組對第j種紅葡萄酒給出的平均分數(shù)；n1：紅葡萄酒種數(shù).

并對兩組評委的打分作差，結果見表1.

對同種樣品分數(shù)差異分布進行正態(tài)分布檢驗，將表1中的數(shù)據(jù)輸入SPSS軟件得出：紅葡萄酒差異擬合結果輸出h=0，sig=1，說明評分符合正態(tài)分布.

本題正態(tài)總體的方差未知，所以采用T檢驗法進行顯著性檢驗.其中μ0=0，α=0.05，將其輸入R軟件得，p值小于零，故兩組評分存在顯著性差異.

三、可信度分析

變異系數(shù)又稱“標準差率”，是衡量資料中各觀測值變異程度的另一個統(tǒng)計量.反映單位均值上的離散程度，常用在兩個總體均值不等的離散程度的比較上.變異系數(shù)可以消除單位和（或）平均數(shù)不同對兩個或多個資料變異程度比較的影響，習慣用CV表示，計算公式如下：

通過EXCEL計算，得出每組對每種葡萄酒的變異系數(shù)，然后對兩組評委的評分變異系數(shù)進行累加，變異系數(shù)小的即表示兩組評委的一致性程度高，即該組評價結果可信.

四、小結

專家評審是國內(nèi)外重大事情決策的重要環(huán)節(jié).本文以兩組葡萄酒評委對葡萄酒樣品的打分可信度進行了量化對比：以評價分數(shù)間的一致性評價打分可信度，對于有顯著性差異的兩組評分，引入變異系數(shù)，通過比對變異系數(shù)的大小，確定可信度大小.在評審過程中，組織者可以設定專家評審會的可信度指標，最終根據(jù)該指標判斷專家評審會所得結果的科學性.endprint