電子軟件評估在英語寫作中的設計及應用

王爾東

（陜西職業(yè)技術學院 陜西 西安 710100）

電子軟件評估在英語寫作中的設計及應用

王爾東

（陜西職業(yè)技術學院 陜西 西安 710100）

在英語寫作評估中，人工評估主要用于大規(guī)模寫作測試和半機械性測試中，然而由于人工評估面臨著很多不可避免的可信度問題，因此電子軟件評估就逐漸發(fā)展開來。本文概括了電子軟件評估在英語專業(yè)寫作中的應用，探討電子軟件評估代提人工評估的可能性，發(fā)現，電子評估系統與人工評估在分析測評方面存在相關性。皮爾遜相關系數0.324和定量分析相關系數0.7證明了電子軟件評估與人工評估之間具有相關性，不可代替人工評估。

電子軟件評估；應用分析；人工評估；皮爾遜相關系數

隨著計算機技術的應用發(fā)展，廣大教師在教學手段以及方法上都在逐漸使用電子軟件來進行改革，也取得了很大成就，我國傳統英語寫作評估采取人工評估，由于疲勞因素等原因，造成成績可信度存在很多問題，因此電子軟件評估應運而生，本文主要探討電子軟件評估在英文寫作中的可靠性。

1 研究背景

本實驗目的是為了研究在英文寫作中電子軟件評估的可靠性。試驗時間在2012年至2013年第二學期，使用工具包括電子評估軟件、電子軟件寫作評估標準。在活動中，先對學生進行一星期的軟件培訓，在學生完全會使用軟件測試的操作時，在進行下面的測試，測試期間，學生每周寫一篇英文文章，英文教師每月為學生布置一大篇作文，內容主要是敘事文、議論文以及讀后感等。

2 試驗內容

章的不同花費1～6 min進行整體的評分。網上作文旨在促進學生的寫作訓練，另一方面也能指出學生常犯的錯數，提高學生的寫作水平。文中所參選的寫作評分標準是電子軟件本身自帶的表尊，在評估過程中教師只需要給出學生的總體分數以及各級評語。

學生的寫作任務包括每周的小作文，以及每學期的三篇大作文，類型主要是敘事性、讀后感以及議論文，寫作目的是從各方面提高學生的寫作能力，使學生能夠形成比較清晰的寫作思路。本文對學生的寫作成果采取定性分析和定量分析兩種測評方式，共收集書面寫作157份、電子文檔980份。作文的定性分析是指包括語法、寫作風格、結構、用法以及篇謀等文本分析。定性分析主要是為了測定電子評估軟件在英語寫作中的可靠性。

3 結果與討論

3.1 定量分析結果與討論

為測定電子軟件評估在英文寫作中的應用可靠性，設定若是電子軟件評估與人工評估相關系數在-1.00（負相關）～1.00（正相關）之間，就表示這兩種評估方法勸相關性，也就是說，從數據上說明電子軟件評估與人工評估具有相關性，不可替代人工評估。

試驗內容主要包括網上電子寫作任務、大作文寫作任務以及數據的收集。電子評估軟件是為減輕教師在評測過程中的負擔而設計出的一種實時網上寫作測評軟件。學生將寫好的文章輸入到軟件系統中，在提交完成后，系統會根據文

本文比較分子了學生電子文章10篇的平均成績與3篇大作文的平均成績，更好的說明電子軟件評估與人工評估兩者逐漸的相關系數，同時為了保證文章評估數據的有效性和可靠性，本文提出了所有為完成寫作任務的學生寫作的文章，挑選出85名全額完成寫作的學生作業(yè)來作為數據分析，運用SPSS數據統計軟件結果如下表1所示。

表1電子軟件評估與人工評估相關性研究Tab.1 Electronic software assessment and evaluation of artificial correlation studies

從表1的數據中可以看出電子軟件評估與人工評估具有很高的相關性，由于統計學認為平均數相對于中值來說更加具有可靠性，因此本文以下研究選取平均值來作為指標。表1中的平均分差別小于1，因此可以認為兩種評估方法制件存在相關性。在統計學中，需要采用皮爾遜相關系數來研究學僧成績的成績序列，只要對于0.01，就認為存在相關性，并且數值越大，相關性越強，可以看出本文數據具有明顯的相關性。在相關系數中，認為只要在0.8附近，就代表寫作測試結果達到滿意標準，因此本文數據可以認為兩種評估方法具有相關性。綜合以上各種數據，可以看出電子軟件評估與人工評估之間具有相關性，不可代替人工評估。

3.2 定性分析結果與討論

經過包括語法、寫作風格、結構、用法以及篇謀等文本分析，發(fā)現電子評估軟件在檢測語法錯誤中不如人工檢測全面。具體而言電子評估軟件檢測主要傾向于主語、謂語、集成名詞、復合名詞以及分散短語等出現的錯誤之處，如句子“It is reported that the northem Europe countries has used……”中，電子軟件在檢測所有格的錯誤時，往往會將一些句子的所有格與縮寫形式相混淆，如上述句子的“It is”與“It、s”，其次在矯正句子錯誤中，電子軟件也不能好好的檢測出句子的漏詞、詞語錯誤以及填詞等錯誤形式。在識別詞匯的用法中電子評估軟件同樣存在一些缺陷，很多情況下，電子評估軟件只能指出一些錯誤的地方，卻不能說明錯在何因，其次對于一些容易混淆的詞匯，電力評估軟件常常難以區(qū)分出來，也就不能提出改正意見。如表2是指電子軟件評估與人工評估在語法檢測中的區(qū)別，表3是指詞匯構成法評估的不同之處。

表2電子軟件評估與人工評估在單詞用法中的區(qū)別Tab.2 Electronic software assessment and evaluation of artificial differences in word usage

表3電子軟件評估與人工評估在詞匯構成法中的區(qū)別Tab.3 Electronic software assessment and artificial assessment in vocabulary differences in composition method

表4電子軟件評估與人工評估在寫作風格中的區(qū)別Tab.4 Electronic software assessment and evaluation of artificial differences in writing style

以上定性分析中是電子評估軟件所存在的缺陷，在英語寫作中，同樣電子評估軟件具有極大的優(yōu)勢，首先電子評估軟件能夠輕易地之處句子中的拼音、人名、地名以及化學元素等錯誤之處，其次在漏寫逗號方面，電子評估軟件也具有非常大的優(yōu)勢，但是在一些特殊情況下，顯得不夠靈活，如“For example the economy by 2%this year”中，電子評估軟件仍然認為在句子“For example”后應加逗號。電子評估軟件在檢查句號的漏寫時，人們對于軟件的規(guī)定是“問句后應加上句號”，因此在處理文章時，靈活性不夠強，如在句子“What/s more,the local people is insisted their lifestyles.”中認為“What/s more”短語后應是問好，顯然不合時。電子評估軟件在檢查句子的完整性時，具有非常大的優(yōu)勢，表4是兩種評估方法在寫作風格上的評估區(qū)別[6]。

電子軟件評估與人工評估在評估寫作風格中都存在缺陷，如對于被動句型，電子評估軟件認為所有句子都應為主動句型，顯然不合適，在人工評估中則是認為被動語句會使得文章質量下降。在評估文章的導演、論題以及結語方面，兩種評估方法存在一些不同之處，電子軟件評估在結語評估中不及人工評估。

4 結束語

綜上所述，文中先概括了電子軟件評估在英語專業(yè)寫作中的應用，探討電子軟件評估代提人工評估的可能性，發(fā)現，電子評估系統與人工評估在分析測評方面存在相關性。皮爾遜相關系數0.324和定量分析相關系數0.7證明了電子軟件評估與人工評估之間具有相關性，不可代替人工評估，但是在評語反饋等方面，仍然有很大的不足之處。

[1]萬鵬杰.電子軟件評估系統測試大學英語寫作的研究報告[J].外語電化教學,2005(3):11-13，31.

WAN Peng-jie.Electronic software evaluation system test study of college English writing [J].Foreign Language Audiovisual Education,2005,(3):11-13，31.

[2]律 原,丁興富.網絡教學中影響在線協作學習的因素初探[J].中國電化教育,2003(11):24-26.

LV Yuan,DING Xing-fu.The influencing factors of online collaborative learning in network teaching[J].China Audio-Visual Education,2003(11):24-26.

[3]陸鑫,廖建明.基于模糊集理論的軟件質量評估研究[J].電子科技大學學報,2007(3):652-655.

LU Xin,LIAO Jian-ming.Software quality evaluation based on fuzzy set theory research [J].Journal of University of Electronic Science and Technology,2007(3):652-655.

[4]孫博,李青,王俊芹,等.論英文寫作教學中網絡資源的運用[J].山東省青年管理干部學院學報,2006(5):112-114.

SUN Bo,LI Qing,WANG Jun-qin,et al.Theory of English writing teaching in the use of network resources[J].Journal of Shandong Youth Management Cadre Institute,2006(5):112-114.

[5]蘇航，楊磊.結果教學法與過程教學法—談英語寫作教學改革[J].北京第二外國語學院學報，2011(5):154-157.

SU Hang,YANG Lei.The teaching method and process-talk about English writing teaching reform[J].Journal of Beijing Second Foreign Languages Institute,2011(5):154-157.

[6]成燕,江建慧,樓俊鋼.電子商務軟件負載能力評估的實例分析[J].北京化工大學學報：自然科學版,2007(A01):68-72.

CHENG Yan,JIANG Jian-hui,LOU Jun-gang.E-commerce software load capability assessment example analysis[J].Journal of Beijing University of Chemical Industry:Natural Science,2007(A01):68-72.

Electronic software evaluation design and its application in english writing

WANG Er-dong
（Shaanxi Vocational&Technical College，Xi’an 710100，China）

In foreign language writing assessment field，human rater been predominantil used to writing samples both in largescale test and classroom test.But human rater is facing a lot of credibility problem，English writeing is applied in fore ign languagew riting assessmen.This article summarizes the research report carried out in the English Department by using eratersoftw are to d iscuss the possib ility of replacing human rater，English writeing and human rater in evaluation of correlationanalysis.Pearson correlation coefficient of 0.324 and a quantitative analysis of correlation coefficient 0.7 showed that electronic software evaluation have more reliability than the human rater.

electronic software evaluation;application analysis;human rater；Pearson correlation coefficient

TN99

A

1674-6236（2014）17-042-02

2014-02-21 稿件編號：201402132

王爾東（1984—），男，陜西咸陽人，助教。研究方向：英語教學。