大規(guī)模考試英語(yǔ)作文自動(dòng)評(píng)分系統(tǒng)的研制

內(nèi)容概要

　　《外語(yǔ)考試自動(dòng)評(píng)分研究系列叢書(shū)：大規(guī)?？荚囉⒄Z(yǔ)作文自動(dòng)評(píng)分系統(tǒng)的研制》在梁茂成（2005）的基礎(chǔ)上，挖掘新的文本特征變量，設(shè)計(jì)英語(yǔ)作文自動(dòng)評(píng)分系統(tǒng)，并對(duì)該評(píng)分系統(tǒng)的評(píng)分信度、最低訓(xùn)練集樣本量、適用文體類(lèi)型、信度影響因素等問(wèn)題進(jìn)行探討。
　　《外語(yǔ)考試自動(dòng)評(píng)分研究系列叢書(shū)：大規(guī)模考試英語(yǔ)作文自動(dòng)評(píng)分系統(tǒng)的研制》收集了5個(gè)不同題目共1067篇大學(xué)生英語(yǔ)命題作文，其中4個(gè)題目為議論文，1個(gè)為說(shuō)明文。首先組織多名人工評(píng)分員對(duì)以上作文進(jìn)行分析型人工評(píng)分，分析其評(píng)分信度，然后對(duì)這些作文進(jìn)行多輪、多次抽樣，組建訓(xùn)練集，對(duì)自行設(shè)計(jì)的作文評(píng)分系統(tǒng)的性能進(jìn)行較大規(guī)模的驗(yàn)證。此外，研究中還對(duì)自動(dòng)評(píng)分系統(tǒng)的構(gòu)架、變量類(lèi)型、匯編語(yǔ)言等進(jìn)行了介紹，并就幾個(gè)有代表性的變量進(jìn)行了研究，對(duì)這些變量在自動(dòng)評(píng)分系統(tǒng)中的應(yīng)用進(jìn)行了描述。

書(shū)籍目錄

第1部分 緒論及相關(guān)研究回顧
第一章 緒論
1.1 本研究的背景
1.2 研究目的及研究問(wèn)題
1.3 本研究報(bào)告的結(jié)構(gòu)
第二章 國(guó)外作文自動(dòng)評(píng)分系統(tǒng)評(píng)述
2.1 引言
2.2 二語(yǔ)及外語(yǔ)作文評(píng)分要素
2.3 國(guó)外現(xiàn)有作文自動(dòng)評(píng)分系統(tǒng)述評(píng)
2.4 國(guó)外作文自動(dòng)評(píng)分系統(tǒng)的啟示
第2部分 研究方法
第三章 數(shù)據(jù)準(zhǔn)備
3.1 本研究中使用的語(yǔ)料
3.2 文本轉(zhuǎn)換、清理與預(yù)處理
3.3 人工評(píng)分
3.4 人工評(píng)分信度報(bào)告
第四章 系統(tǒng)構(gòu)架及研究的操作步驟
4.1 引言及系統(tǒng)概要
4.2 研究工具
4.3 變量類(lèi)型
4.4 多元回歸
4.5 匯編語(yǔ)言
4.6 研究的操作步驟
第3部分 學(xué)習(xí)者作文的三項(xiàng)分析
第五章 學(xué)習(xí)者作文中的連貫性分析
5.1 話語(yǔ)的連貫性
5.2 相關(guān)文獻(xiàn)回顧
5.3 研究方法
5.4 結(jié)果與討淪
5.5 小結(jié)及本研究在英語(yǔ)作文自動(dòng)評(píng)分系統(tǒng)中的應(yīng)用
第六章 潛在語(yǔ)義分析在學(xué)生作文內(nèi)容分析中的應(yīng)用
6.1 引言
6.2 潛在語(yǔ)義分析與學(xué)習(xí)者作文內(nèi)容的自動(dòng)評(píng)價(jià)
6.3 研究方法及程序沒(méi)計(jì)
6.4 研究結(jié)果及其在英語(yǔ)作文自動(dòng)評(píng)分系統(tǒng)中的應(yīng)用
第七章 學(xué)習(xí)者作文中的情態(tài)序列分析
7.1 情態(tài)動(dòng)詞、情態(tài)序列與情態(tài)意義
7.2 對(duì)二語(yǔ)學(xué)習(xí)者情態(tài)動(dòng)詞習(xí)得情況的研究
7.3 研究設(shè)計(jì)
7.4 研究結(jié)果與討淪
7.5 小結(jié)及本研究在英語(yǔ)作文自動(dòng)評(píng)分系統(tǒng)中的應(yīng)用
第4部分 系統(tǒng)的評(píng)分信度和系統(tǒng)的應(yīng)用
第八章 作文自動(dòng)評(píng)分信度分析
8.1 引言
8.2 自動(dòng)評(píng)分信度的影響因素
8.3 機(jī)器評(píng)分與人工評(píng)分之間的相關(guān)性分析
8.4 吻合率分析
8.5 白動(dòng)評(píng)分系統(tǒng)對(duì)不同文體學(xué)生作文的適應(yīng)能力
8.6 小結(jié)
第九章 作文自動(dòng)評(píng)分系統(tǒng)的應(yīng)用
9.1 適用丈體
……
第5部分 結(jié)論
參考文獻(xiàn)
附錄

章節(jié)摘錄

版權(quán)頁(yè)：   插圖：   在語(yǔ)言質(zhì)量方面，建議從流利度、準(zhǔn)確度和復(fù)雜度三個(gè)主要方面進(jìn)行評(píng)分。流利度主要考慮的因素包括作文的長(zhǎng)短；準(zhǔn)確度主要考慮作文中是否包含較多的語(yǔ)言錯(cuò)誤。在評(píng)判錯(cuò)誤時(shí)，建議采用減分的方法，對(duì)嚴(yán)重錯(cuò)誤和小錯(cuò)賦以不同的分值。復(fù)雜度又細(xì)分為詞匯復(fù)雜度和句法復(fù)雜度兩個(gè)方面。在對(duì)每個(gè)分項(xiàng)進(jìn)行評(píng)分時(shí)，建議給予評(píng)分員適當(dāng)?shù)淖杂啥取?在內(nèi)容評(píng)判方面，建議首先從總體中抽取一部分樣本進(jìn)行閱讀，歸納作文中可能出現(xiàn)的多種論點(diǎn)，然后就各種論點(diǎn)的切題度進(jìn)行討論，并制定評(píng)分標(biāo)準(zhǔn)。內(nèi)容的評(píng)分按照本報(bào)告第三章的方法，從三個(gè)主要方面進(jìn)行評(píng)判。 篇章結(jié)構(gòu)質(zhì)量的評(píng)判標(biāo)準(zhǔn)與作文的內(nèi)容無(wú)關(guān)，因此完全可以采用本報(bào)告第三章的方法進(jìn)行。 建議組織評(píng)分員對(duì)語(yǔ)言、內(nèi)容和篇章結(jié)構(gòu)分別進(jìn)行三輪評(píng)分，即第一輪只對(duì)語(yǔ)言質(zhì)量進(jìn)行評(píng)分，第二輪只對(duì)內(nèi)容質(zhì)量進(jìn)行評(píng)分，而第三輪只對(duì)篇章結(jié)構(gòu)質(zhì)量進(jìn)行評(píng)分。評(píng)分時(shí)，每個(gè)單項(xiàng)記分50或100分，這樣便于評(píng)分員評(píng)分，使他們不至于在分?jǐn)?shù)換算環(huán)節(jié)上花費(fèi)過(guò)多的精力，而是把精力集中在評(píng)分上。分?jǐn)?shù)的計(jì)算和權(quán)重由專(zhuān)人負(fù)責(zé)，在評(píng)分完成后進(jìn)行。 語(yǔ)言、內(nèi)容和篇章結(jié)構(gòu)建議參照J(rèn)acobs et al.（1981）的評(píng)分方案，適當(dāng)提高語(yǔ)言的權(quán)重，按照40％、30％、30％的比例權(quán)重進(jìn)行。最后可以換算成百分制，需要換算成5、10或20分制的，可以在機(jī)器評(píng)分完成之后進(jìn)行。在低風(fēng)險(xiǎn)考試中，出于特定的需要，也可以改動(dòng)這一權(quán)重方案，機(jī)器評(píng)分系統(tǒng)在訓(xùn)練的過(guò)程中會(huì)進(jìn)行自動(dòng)調(diào)整。 9.2.3評(píng)分員培訓(xùn) 由于不少評(píng)分員并不適應(yīng)分析型評(píng)分方法，評(píng)分員培訓(xùn)顯得尤其必要。培訓(xùn)可以與討論同時(shí)進(jìn)行，這樣便于汲取大家的意見(jiàn)，制訂出更加合理、容易執(zhí)行的評(píng)分標(biāo)準(zhǔn)。 在培訓(xùn)過(guò)程中，可以先抽取一部分樣品作文進(jìn)行試評(píng)分，試評(píng)分與討論同時(shí)進(jìn)行，力求使得所有評(píng)分員接受評(píng)分標(biāo)準(zhǔn)，這樣有利于提高評(píng)分信度。試評(píng)一份作文后，交流每名評(píng)分員的打分情況，如果某評(píng)分員打分未能按照標(biāo)準(zhǔn)進(jìn)行，應(yīng)該予以提醒。

編輯推薦

《中國(guó)外語(yǔ)教育研究中心?外語(yǔ)考試自動(dòng)評(píng)分研究系列叢書(shū):大規(guī)?？荚囉⒄Z(yǔ)作文自動(dòng)評(píng)分系統(tǒng)的研制》由高等教育出版社出版。

圖書(shū)封面

評(píng)論、評(píng)分、閱讀與下載

---

    大規(guī)模考試英語(yǔ)作文自動(dòng)評(píng)分系統(tǒng)的研制 PDF格式下載

---