大規(guī)?？荚囉⒄Z作文自動評分系統(tǒng)的研制

內(nèi)容概要

　　《外語考試自動評分研究系列叢書：大規(guī)?？荚囉⒄Z作文自動評分系統(tǒng)的研制》在梁茂成（2005）的基礎(chǔ)上，挖掘新的文本特征變量，設(shè)計英語作文自動評分系統(tǒng)，并對該評分系統(tǒng)的評分信度、最低訓練集樣本量、適用文體類型、信度影響因素等問題進行探討。
　　《外語考試自動評分研究系列叢書：大規(guī)?？荚囉⒄Z作文自動評分系統(tǒng)的研制》收集了5個不同題目共1067篇大學生英語命題作文，其中4個題目為議論文，1個為說明文。首先組織多名人工評分員對以上作文進行分析型人工評分，分析其評分信度，然后對這些作文進行多輪、多次抽樣，組建訓練集，對自行設(shè)計的作文評分系統(tǒng)的性能進行較大規(guī)模的驗證。此外，研究中還對自動評分系統(tǒng)的構(gòu)架、變量類型、匯編語言等進行了介紹，并就幾個有代表性的變量進行了研究，對這些變量在自動評分系統(tǒng)中的應用進行了描述。

書籍目錄

第1部分 緒論及相關(guān)研究回顧
第一章 緒論
1.1 本研究的背景
1.2 研究目的及研究問題
1.3 本研究報告的結(jié)構(gòu)
第二章 國外作文自動評分系統(tǒng)評述
2.1 引言
2.2 二語及外語作文評分要素
2.3 國外現(xiàn)有作文自動評分系統(tǒng)述評
2.4 國外作文自動評分系統(tǒng)的啟示
第2部分 研究方法
第三章 數(shù)據(jù)準備
3.1 本研究中使用的語料
3.2 文本轉(zhuǎn)換、清理與預處理
3.3 人工評分
3.4 人工評分信度報告
第四章 系統(tǒng)構(gòu)架及研究的操作步驟
4.1 引言及系統(tǒng)概要
4.2 研究工具
4.3 變量類型
4.4 多元回歸
4.5 匯編語言
4.6 研究的操作步驟
第3部分 學習者作文的三項分析
第五章 學習者作文中的連貫性分析
5.1 話語的連貫性
5.2 相關(guān)文獻回顧
5.3 研究方法
5.4 結(jié)果與討淪
5.5 小結(jié)及本研究在英語作文自動評分系統(tǒng)中的應用
第六章 潛在語義分析在學生作文內(nèi)容分析中的應用
6.1 引言
6.2 潛在語義分析與學習者作文內(nèi)容的自動評價
6.3 研究方法及程序沒計
6.4 研究結(jié)果及其在英語作文自動評分系統(tǒng)中的應用
第七章 學習者作文中的情態(tài)序列分析
7.1 情態(tài)動詞、情態(tài)序列與情態(tài)意義
7.2 對二語學習者情態(tài)動詞習得情況的研究
7.3 研究設(shè)計
7.4 研究結(jié)果與討淪
7.5 小結(jié)及本研究在英語作文自動評分系統(tǒng)中的應用
第4部分 系統(tǒng)的評分信度和系統(tǒng)的應用
第八章 作文自動評分信度分析
8.1 引言
8.2 自動評分信度的影響因素
8.3 機器評分與人工評分之間的相關(guān)性分析
8.4 吻合率分析
8.5 白動評分系統(tǒng)對不同文體學生作文的適應能力
8.6 小結(jié)
第九章 作文自動評分系統(tǒng)的應用
9.1 適用丈體
……
第5部分 結(jié)論
參考文獻
附錄

章節(jié)摘錄

版權(quán)頁：   插圖：   在語言質(zhì)量方面，建議從流利度、準確度和復雜度三個主要方面進行評分。流利度主要考慮的因素包括作文的長短；準確度主要考慮作文中是否包含較多的語言錯誤。在評判錯誤時，建議采用減分的方法，對嚴重錯誤和小錯賦以不同的分值。復雜度又細分為詞匯復雜度和句法復雜度兩個方面。在對每個分項進行評分時，建議給予評分員適當?shù)淖杂啥取?在內(nèi)容評判方面，建議首先從總體中抽取一部分樣本進行閱讀，歸納作文中可能出現(xiàn)的多種論點，然后就各種論點的切題度進行討論，并制定評分標準。內(nèi)容的評分按照本報告第三章的方法，從三個主要方面進行評判。 篇章結(jié)構(gòu)質(zhì)量的評判標準與作文的內(nèi)容無關(guān)，因此完全可以采用本報告第三章的方法進行。 建議組織評分員對語言、內(nèi)容和篇章結(jié)構(gòu)分別進行三輪評分，即第一輪只對語言質(zhì)量進行評分，第二輪只對內(nèi)容質(zhì)量進行評分，而第三輪只對篇章結(jié)構(gòu)質(zhì)量進行評分。評分時，每個單項記分50或100分，這樣便于評分員評分，使他們不至于在分數(shù)換算環(huán)節(jié)上花費過多的精力，而是把精力集中在評分上。分數(shù)的計算和權(quán)重由專人負責，在評分完成后進行。 語言、內(nèi)容和篇章結(jié)構(gòu)建議參照Jacobs et al.（1981）的評分方案，適當提高語言的權(quán)重，按照40％、30％、30％的比例權(quán)重進行。最后可以換算成百分制，需要換算成5、10或20分制的，可以在機器評分完成之后進行。在低風險考試中，出于特定的需要，也可以改動這一權(quán)重方案，機器評分系統(tǒng)在訓練的過程中會進行自動調(diào)整。 9.2.3評分員培訓 由于不少評分員并不適應分析型評分方法，評分員培訓顯得尤其必要。培訓可以與討論同時進行，這樣便于汲取大家的意見，制訂出更加合理、容易執(zhí)行的評分標準。 在培訓過程中，可以先抽取一部分樣品作文進行試評分，試評分與討論同時進行，力求使得所有評分員接受評分標準，這樣有利于提高評分信度。試評一份作文后，交流每名評分員的打分情況，如果某評分員打分未能按照標準進行，應該予以提醒。

編輯推薦

《中國外語教育研究中心?外語考試自動評分研究系列叢書:大規(guī)?？荚囉⒄Z作文自動評分系統(tǒng)的研制》由高等教育出版社出版。

圖書封面

評論、評分、閱讀與下載

---

    大規(guī)?？荚囉⒄Z作文自動評分系統(tǒng)的研制 PDF格式下載

---