鄒 淵
(重慶第二師范學(xué)院,重慶400067)
重慶市自1994年開展普通話水平測(cè)試,到2012年5月,全市參測(cè)總?cè)藬?shù)達(dá)到106.9875萬人次,年測(cè)試量由1994年3萬余人次,增加到2011年的14.5萬余人次;[1]重慶市2007年10月啟用計(jì)算機(jī)輔助普通話水平測(cè)試系統(tǒng),自此人工測(cè)試和機(jī)輔測(cè)試并行;2010年以后,大面積采用機(jī)輔測(cè)試;2011年,基本實(shí)現(xiàn)了人工測(cè)試向機(jī)輔測(cè)試的轉(zhuǎn)變。
1.首個(gè)測(cè)試站建設(shè)情況
2007年,重慶市語言文字工作委員會(huì)作出批復(fù),同意在重慶教育學(xué)院設(shè)立“重慶市國(guó)家普通話水平智能測(cè)試基地”,對(duì)全市機(jī)輔測(cè)試進(jìn)行指導(dǎo)和管理,本測(cè)試基地也成為重慶首個(gè)啟用機(jī)輔測(cè)試的地方。
測(cè)試基地建有候測(cè)室、備測(cè)室和標(biāo)準(zhǔn)化測(cè)試室,三室毗鄰。測(cè)試室有10個(gè)獨(dú)立機(jī)房,并備有15臺(tái)筆記本電腦,網(wǎng)絡(luò)版與單機(jī)版并用?;剡€建有多功能培訓(xùn)室,智能模擬測(cè)試室,為考前培訓(xùn)和模擬測(cè)試提供了場(chǎng)所。為確保普通話水平測(cè)試數(shù)據(jù)傳輸,基地搭建了相關(guān)的網(wǎng)絡(luò)平臺(tái),配備了專用服務(wù)器,供數(shù)據(jù)有效傳輸。[2]
以此為出發(fā)點(diǎn)和技術(shù)依托,重慶市陸續(xù)開展機(jī)輔測(cè)試的推廣和建站工作。
2.人機(jī)測(cè)試對(duì)比情況
在啟用初期,本著大膽推進(jìn)、小心求證的原則,重慶市在2007年進(jìn)行了兩次大規(guī)模人機(jī)評(píng)測(cè)對(duì)比實(shí)驗(yàn),由測(cè)試員和計(jì)算機(jī)同時(shí)對(duì)參測(cè)者進(jìn)行評(píng)測(cè)。具體做法是:測(cè)試員根據(jù)PSC測(cè)試規(guī)范對(duì)測(cè)試者現(xiàn)場(chǎng)打分;智能評(píng)測(cè)系統(tǒng)對(duì)測(cè)試者除命題說話外的其它所有部分進(jìn)行自動(dòng)評(píng)測(cè),自動(dòng)評(píng)測(cè)所得各題分?jǐn)?shù)再加上測(cè)試員對(duì)命題說話部分的分?jǐn)?shù)得到最終機(jī)測(cè)成績(jī);最后,對(duì)本次測(cè)試的測(cè)試員打分和機(jī)測(cè)成績(jī)進(jìn)行分析。從分析結(jié)果來看,兩次對(duì)比的平均總分誤差為2.46和0.163,等級(jí)一致率分別為100%和81.5%。最后認(rèn)為:機(jī)輔測(cè)試結(jié)果客觀公正,可信度高,并極大地降低了測(cè)試員和工作人員的勞動(dòng)強(qiáng)度,規(guī)范和減化了管理程序。[3]
3.相關(guān)培訓(xùn)情況
自2007年10月以來,共開展測(cè)試員培訓(xùn)14次(含骨干測(cè)試員培訓(xùn)3次),培訓(xùn)人數(shù)達(dá)600余人次(含測(cè)試員重復(fù)參加培訓(xùn)的情況)。培訓(xùn)內(nèi)容涉及評(píng)分標(biāo)準(zhǔn)解析,在線評(píng)分操作示范,測(cè)試實(shí)例研討及考核4部分。培訓(xùn)人員從核心骨干測(cè)試員拓展到一般測(cè)試員,送培單位覆蓋全市所有區(qū)縣及有測(cè)試機(jī)構(gòu)的單位。開展測(cè)試站站長(zhǎng)培訓(xùn)和管理人員培訓(xùn)6期,培訓(xùn)人數(shù)200余人,培訓(xùn)內(nèi)容包括測(cè)試系統(tǒng)介紹、建站要求、系統(tǒng)操作要領(lǐng)等,為規(guī)范建站提供了人員保障。
以下數(shù)據(jù)均為截至2012年5月,據(jù)國(guó)家普通話水平測(cè)試信息管理系統(tǒng)查詢統(tǒng)計(jì)得出。
1.測(cè)試站數(shù)量
全市建成63個(gè)基層測(cè)試站,其中區(qū)縣測(cè)試站40個(gè),高校測(cè)試站17個(gè),其他機(jī)構(gòu)測(cè)試站3個(gè),未開展測(cè)試工作的測(cè)試站3個(gè)。固定考試機(jī)數(shù)量500余臺(tái)。
2.測(cè)試數(shù)量
流程結(jié)束的測(cè)試總?cè)藬?shù)183029人,人數(shù)逐年遞增。2012年1月至5月已測(cè)試308批次,28256人。高校測(cè)試站表現(xiàn)活躍,測(cè)試總?cè)藬?shù)已突破10萬人。
與測(cè)試站測(cè)試人數(shù)分布相適應(yīng)的是,從測(cè)試者的職業(yè)構(gòu)成看,教育系統(tǒng)參測(cè)人數(shù)為143647人,占測(cè)試總數(shù)的 78.48%,其中教師占19.4%,學(xué)生占55.08%。
3.測(cè)試質(zhì)量
從測(cè)試總?cè)藬?shù)上看,二級(jí)乙等所占比例最高,達(dá)46.66%。從測(cè)試者職業(yè)構(gòu)成來看,演播人員總體水平最高,成績(jī)大都在一級(jí)乙等及以上,其次為教育系統(tǒng)人員,其中學(xué)生序列略高于教師序列,公務(wù)員序列水平列第三。
4.評(píng)測(cè)情況
全市在編測(cè)試員共1078人左右[4],進(jìn)入機(jī)輔測(cè)試測(cè)試員庫的314人,有工作量記載的232人,直接參與在線評(píng)分并活躍在測(cè)試中的測(cè)試員只占20%左右。
1.測(cè)試系統(tǒng)運(yùn)作不夠穩(wěn)定,檢測(cè)工具靈敏度不夠
測(cè)試系統(tǒng)對(duì)于硬件設(shè)施存在兼容不確定性。比如,同一批次計(jì)算機(jī),雖然都能通過系統(tǒng)“環(huán)境檢測(cè)”,但系統(tǒng)在有的機(jī)器上運(yùn)轉(zhuǎn)正常,在有的機(jī)器上則表現(xiàn)不穩(wěn)定;再如在移動(dòng)測(cè)試中,筆記本品牌IBM和DELL相當(dāng)配置也都可通過檢測(cè),但實(shí)際測(cè)試中DELL重測(cè)或異常復(fù)審的機(jī)率遠(yuǎn)高于IBM。
另外,系統(tǒng)對(duì)考生聲音的包容也不確定。有的考生能夠試音成功,并在規(guī)定時(shí)間內(nèi)完成相應(yīng)題目,但卻無法評(píng)測(cè)成功,有的甚至連續(xù)幾次都不能通過。系統(tǒng)無法給出準(zhǔn)確的出錯(cuò)原因(比如聲音模糊、過高、過低、頻繁讀錯(cuò)等等)。遇到這種情況,網(wǎng)絡(luò)版尚可當(dāng)異常數(shù)據(jù)復(fù)審,但單機(jī)版則顯得比較尷尬,只能不斷嘗試直到通過評(píng)測(cè)。
2.系統(tǒng)無法給出失分詳情,評(píng)分?jǐn)?shù)據(jù)庫不夠豐富
機(jī)輔測(cè)試采用整體映射比較,無法給出各項(xiàng)失分詳細(xì)情況,不利于查找考生語音問題及彰顯測(cè)試的客觀公正。在測(cè)試中我們還發(fā)現(xiàn):系統(tǒng)對(duì)于華北、東北方言等與普通話相近的方言區(qū)考生評(píng)測(cè)較容易成功;對(duì)于文化水平較高的考生評(píng)測(cè)也容易成功;在評(píng)測(cè)成功前,屢屢測(cè)評(píng)失敗的考生等級(jí)往往較低。
1.測(cè)試機(jī)構(gòu)在布設(shè)考場(chǎng)時(shí)硬件設(shè)施不達(dá)標(biāo)
測(cè)試室的布局通常有兩種,一種是獨(dú)立封閉互有分隔的測(cè)試機(jī)房,一種是開放空間內(nèi)互有間隔但不獨(dú)立封閉的測(cè)試機(jī)位。按規(guī)定,測(cè)試機(jī)房應(yīng)為2平方米以上并具有良好隔音效果,開放式機(jī)位機(jī)器之間間隔至少2米以上。測(cè)試機(jī)房應(yīng)安裝攝像監(jiān)控和監(jiān)控通話設(shè)備。測(cè)試機(jī)構(gòu)往往因?yàn)榉N種原因,減少機(jī)房面積,縮小機(jī)器距離或者未安裝監(jiān)控和通話設(shè)備等等,加大了測(cè)試系統(tǒng)正常運(yùn)行的難度。
有的測(cè)試機(jī)構(gòu)則對(duì)計(jì)算機(jī)配置進(jìn)行減配或降低配置,如對(duì)系統(tǒng)極為重要的網(wǎng)卡、聲卡、耳機(jī)等配置不達(dá)標(biāo),就有可能造成測(cè)試不穩(wěn)定。
2.工作人員不能定崗定位,考試操作不規(guī)范
1個(gè)標(biāo)準(zhǔn)考場(chǎng)通常只需要考場(chǎng)負(fù)責(zé)人1人、候測(cè)室1人、備測(cè)室1人、測(cè)試室1人。有的測(cè)試機(jī)構(gòu)工作人員職責(zé)不明,人員配置隨意,有的甚至為每個(gè)測(cè)試室配備1人,專門輔助考生操作電腦。如果考生未提出輔助操作請(qǐng)求而貿(mào)然為考生操作電腦,可能會(huì)妨礙考生考試。
部分測(cè)試機(jī)構(gòu)力量薄弱,少數(shù)單位重視不夠,沒有專門的甚至固定的工作人員,考前臨時(shí)聘用工作人員,致使部分人員工作不熟練。部分機(jī)構(gòu)人員流動(dòng)性太強(qiáng),有時(shí)核心技術(shù)人員或管理人員工作調(diào)整,造成資料、技術(shù)、任務(wù)移交不到位,也導(dǎo)致了操作上的不規(guī)范。
在獨(dú)立分隔且未安裝監(jiān)控設(shè)備的考場(chǎng),考生不遵守考場(chǎng)規(guī)則的行為難以得到最有效的監(jiān)督,替考、夾帶、背稿子的現(xiàn)象時(shí)有發(fā)生[5],有的考生甚至為了尋求再考一次的機(jī)會(huì),在考試中途強(qiáng)行關(guān)機(jī)并謊稱機(jī)器故障要求重考。遇到上述情況,工作人員均很難發(fā)現(xiàn)并及時(shí)制止。
首先,提高軟件兼容性與穩(wěn)定性,加強(qiáng)環(huán)境檢測(cè)工具和試音軟件的準(zhǔn)確性。豐富數(shù)據(jù)庫內(nèi)容,尤其是充實(shí)南方方言語音數(shù)據(jù)量,以提高整體映射比較準(zhǔn)確性;充實(shí)一級(jí)乙等和一級(jí)甲等語音數(shù)據(jù),以提高對(duì)高分段考生評(píng)測(cè)準(zhǔn)確性;充實(shí)三級(jí)乙等及不入級(jí)語音數(shù)據(jù),以提高評(píng)測(cè)成功率。
其次,研發(fā)機(jī)構(gòu)應(yīng)及時(shí)公布最新版本以及操作技巧,積極搜集科研成果,整理成冊(cè),定期發(fā)行,以供各地測(cè)試機(jī)構(gòu)借鑒。如結(jié)合研發(fā)階段的評(píng)測(cè)程序設(shè)計(jì)和評(píng)判模式,對(duì)討論熱烈的單字復(fù)讀、字化朗讀現(xiàn)象作出說明解釋等。
1.加強(qiáng)測(cè)試站管理
嚴(yán)格執(zhí)行測(cè)試站管理相關(guān)規(guī)定,嚴(yán)格審查新建測(cè)試站,要求考場(chǎng)建設(shè)和測(cè)試管理不達(dá)標(biāo)的測(cè)試站及時(shí)整改。促成測(cè)試站的對(duì)口幫扶關(guān)系,加強(qiáng)各測(cè)試站之間的交流學(xué)習(xí)。組織專家技術(shù)人員隊(duì)伍,定期監(jiān)督和指導(dǎo)測(cè)試站的建設(shè)和操作。
2.強(qiáng)化測(cè)試員管理
(1)加強(qiáng)測(cè)試員培訓(xùn):加緊對(duì)未參加培訓(xùn)的測(cè)試員的培訓(xùn)。測(cè)試員應(yīng)嚴(yán)格執(zhí)行教育部、國(guó)家語委發(fā)布的《普通話水平測(cè)試大綱》“命題說話”測(cè)試項(xiàng)的評(píng)分標(biāo)準(zhǔn),對(duì)測(cè)試員的培訓(xùn)應(yīng)“反復(fù)抓,抓反復(fù)”,培訓(xùn)和考核均不能搞“終身有效制”。測(cè)試員的反復(fù)培訓(xùn)和定期考核應(yīng)該常抓不懈。
(2)建立測(cè)試員分級(jí)管理機(jī)制:將入庫測(cè)試員分為核心測(cè)試員和一般測(cè)試員兩級(jí),定期統(tǒng)計(jì)測(cè)試員工作總量,公布測(cè)試員有效測(cè)試量,幫助測(cè)試員及時(shí)調(diào)整評(píng)分尺度。對(duì)有效測(cè)試量低于一定比例的測(cè)試員及時(shí)培訓(xùn),考核合格方可再次上崗。通過建立分級(jí)機(jī)制、考評(píng)機(jī)制、獎(jiǎng)勵(lì)機(jī)制,完善薪酬發(fā)放制度,充分調(diào)動(dòng)測(cè)試員參與測(cè)試的積極性。
3.加強(qiáng)教材開發(fā)
測(cè)試教材應(yīng)增加機(jī)輔測(cè)試相關(guān)內(nèi)容,除此之外,在傳統(tǒng)教材專注于語音知識(shí)、語音理論培訓(xùn)的基礎(chǔ)上,應(yīng)重視學(xué)生表達(dá)的培訓(xùn)與指導(dǎo),重視對(duì)考生失分嚴(yán)重的命題說話項(xiàng)進(jìn)行專門梳理和拓展,以提高對(duì)考生說話項(xiàng)培訓(xùn)的針對(duì)性和有效性。
《計(jì)算機(jī)輔助普通話水平測(cè)試規(guī)程》對(duì)于考務(wù)管理的諸多方面如組織報(bào)名、設(shè)置考點(diǎn)、試卷流轉(zhuǎn)、應(yīng)試規(guī)則、證書發(fā)放、檔案保管以及工作人員崗位職責(zé)等都有明確規(guī)定,各測(cè)試機(jī)構(gòu)應(yīng)嚴(yán)格執(zhí)行,以最終實(shí)現(xiàn)各個(gè)測(cè)試機(jī)構(gòu)操作規(guī)范一致、管理科學(xué)嚴(yán)密、結(jié)果客觀公正。
考前培訓(xùn)和模擬測(cè)試對(duì)于考生迅速適應(yīng)機(jī)輔測(cè)試、熟練操作步驟、提高測(cè)試效度與信度都有重要作用。培訓(xùn)要通過介紹測(cè)試系統(tǒng)、分解應(yīng)試各個(gè)環(huán)節(jié)、介紹應(yīng)試技巧以及提高分?jǐn)?shù)的策略[6]等,使考生認(rèn)同并熟悉該系統(tǒng),最后對(duì)系統(tǒng)產(chǎn)生好感并樂意用這種方式進(jìn)行考試??荚囍校荚嚈C(jī)構(gòu)應(yīng)充分發(fā)揮其監(jiān)控設(shè)備的作用并加強(qiáng)考場(chǎng)巡視,以消除考生臨場(chǎng)作弊的僥幸心理。
計(jì)算機(jī)輔助普通話水平測(cè)試系統(tǒng)的應(yīng)用是普通話測(cè)試方式的歷史性飛躍,不斷優(yōu)化計(jì)算機(jī)輔助普通話水平測(cè)試系統(tǒng)、加大監(jiān)管力度、規(guī)范實(shí)施操作才能最大限度地維護(hù)普通話水平等級(jí)考試的嚴(yán)肅性、權(quán)威性和公正性,為推動(dòng)普通話測(cè)試工作健康有序地持續(xù)發(fā)展做出新的貢獻(xiàn)。
[1][4]重慶市語委辦.重慶市普通話培訓(xùn)測(cè)試調(diào)研報(bào)告[R].重慶:2010:11-15.
[2][3]國(guó)家語委普通話測(cè)試中心.計(jì)算機(jī)輔助普通話水平測(cè)試業(yè)務(wù)研討和質(zhì)量分析會(huì)會(huì)議材料[Z].北京:2008:7-8.
[5][6]劉愛民.高校計(jì)算機(jī)輔助普通話水平測(cè)試中存在的問題及對(duì)策[J].重慶文理學(xué)院學(xué)報(bào),2011,(6):90-92.