語(yǔ)言測(cè)試構(gòu)念效度研究

前言

　　汪順玉的專著《語(yǔ)言測(cè)試構(gòu)念效度研究》是在他的博士論文的基礎(chǔ)上撰寫而成的。該書正式出版了，作為導(dǎo)師，我頗感欣慰?！　≡缭谏鲜兰o(jì)中期，語(yǔ)言測(cè)試界已開始認(rèn)識(shí)到效度是考試評(píng)價(jià)中的最重要因素。20世紀(jì)八九十年代起人們對(duì)效度的認(rèn)識(shí)有了新飛躍，效度的概念從多類效度發(fā)展到統(tǒng)一構(gòu)念效度，效度的各個(gè)方面不再是互不關(guān)聯(lián)的環(huán)節(jié)；構(gòu)念效度上升到統(tǒng)領(lǐng)各個(gè)效度的地位；效度驗(yàn)證不僅包括對(duì)分?jǐn)?shù)的解釋，還包含對(duì)分?jǐn)?shù)的使用及結(jié)果。這一系列認(rèn)識(shí)上的變化都與Mcssick的經(jīng)典論述有直接關(guān)聯(lián)。與效度概念發(fā)展相聯(lián)系，效度驗(yàn)證的范式和方法也產(chǎn)生了變化。因此，對(duì)于語(yǔ)言測(cè)試研究者而言，如何在實(shí)踐中全面準(zhǔn)確地詮釋效度、探索和掌握效度驗(yàn)證的科學(xué)方法，是一個(gè)既有理論意義又有應(yīng)用價(jià)值的課題，本書作者汪順玉在這個(gè)領(lǐng)域作了有意義的探索?！　∽髡邚谋倔w論、認(rèn)識(shí)論、方法論的視角對(duì)統(tǒng)一效度概念進(jìn)行了全面科學(xué)評(píng)述，在此基礎(chǔ)上提出了一個(gè)英語(yǔ)專業(yè)八級(jí)考試效度驗(yàn)證的理論和方法框架。然后在該理論和方法框架下，對(duì)八級(jí)考試的客觀試題從實(shí)證角度進(jìn)行效度驗(yàn)證。效度驗(yàn)證旨在解答四個(gè)研究問題：（1）八級(jí)考試客觀試題的測(cè)量學(xué)屬性如何？（2）客觀題目實(shí)際測(cè)量的維度與考試設(shè)計(jì)的理念是否一致？（3）客觀試題分?jǐn)?shù)的意義在不同的群體中是否具有類似的解釋？（4）新增加的人文知識(shí)分測(cè)驗(yàn)是否存在考試偏差？　　特別值得一提的是，作者在效度驗(yàn)證過(guò)程中采用不同的研究方法，為后來(lái)者提供了可借鑒的范式，作者對(duì)構(gòu)念效度的理論和方法討論采用文獻(xiàn)綜述方式，對(duì)八級(jí)考試客觀題目的效度驗(yàn)證則運(yùn)用定量方式，如：相關(guān)方法分析題目同質(zhì)性、題目區(qū)分度、聚合和區(qū)別效度、構(gòu)念一致性檢驗(yàn)；因子和諧系數(shù)用于檢驗(yàn)不同群體因子負(fù)荷之間的相似程度；單因素方差分析進(jìn)行跨群體均值比較。

內(nèi)容概要

　　2005年的英語(yǔ)專業(yè)八級(jí)考試是根據(jù)2004年新的八級(jí)考試大綱設(shè)計(jì)和施測(cè)的第一次考試，考試的性質(zhì)、構(gòu)念領(lǐng)域、任務(wù)要求、分?jǐn)?shù)權(quán)重等都發(fā)生了較大變化。作為全國(guó)唯一的測(cè)量英語(yǔ)專業(yè)學(xué)生高年級(jí)英語(yǔ)水平的大規(guī)?？荚?，這些變化對(duì)個(gè)人、團(tuán)體和社會(huì)將產(chǎn)生重大影響。測(cè)試界認(rèn)為，越是高風(fēng)險(xiǎn)考試，越要對(duì)考試的技術(shù)和應(yīng)用方面進(jìn)行評(píng)價(jià)，對(duì)考試的效度驗(yàn)證要求越高。因此，運(yùn)用先進(jìn)的效度理念、分析技術(shù)和行業(yè)規(guī)范對(duì)我國(guó)的八級(jí)考試進(jìn)行研究，不僅有理論價(jià)值，也具有現(xiàn)實(shí)意義。在對(duì)測(cè)驗(yàn)的評(píng)價(jià)中，效度是最重要的考慮因素。然而，在過(guò)去近一個(gè)世紀(jì)以來(lái)，效度的概念從多類效度發(fā)展到統(tǒng)一構(gòu)念效度。與效度概念發(fā)展相聯(lián)系，效度驗(yàn)證的范式和方法也產(chǎn)生了變化。因此，全面和準(zhǔn)確地理解效度，具有十分重要的理論意義。而掌握效度驗(yàn)證的科學(xué)方法具有運(yùn)用價(jià)值?！　”疚难芯康哪康挠卸阂皇菍?duì)統(tǒng)一效度概念從本體論、認(rèn)識(shí)論、方法論視角進(jìn)行較全面的評(píng)述，旨在為八級(jí)考試效度驗(yàn)證提供一個(gè)理論和方法框架；二是在統(tǒng)一效度概念下，對(duì)八級(jí)考試的客觀試題從實(shí)證的角度進(jìn)行效度驗(yàn)證。驗(yàn)證的問題包括四個(gè)：（1）八級(jí)考試客觀試題的測(cè)量學(xué)屬性如何？（2）客觀題目實(shí)際測(cè)量的維度與考試設(shè)計(jì)的理念是否一致？（3）客觀試題分?jǐn)?shù)的意義在不同的群體中是否具有類似的解釋？（4）新增加的人文知識(shí)分測(cè)驗(yàn)是否存在考試偏差？　　針對(duì)兩個(gè)目的，采用兩種研究方法。對(duì)構(gòu)念效度的理論和方法討論采用文獻(xiàn)綜述方式，針對(duì)八級(jí)考試客觀題目的效度驗(yàn)證是用定量的方式提供解釋依據(jù)?！　　　〉谌陆榻B了研究的設(shè)計(jì)和采用的分析方法介紹，具體包括研究的具體問題、樣本、研究的工具和統(tǒng)計(jì)方法。后者包括三個(gè)方面的統(tǒng)計(jì)：一是試題所測(cè)構(gòu)念維度的探索方法；二是跨群體構(gòu)念效度比較的方法；三是項(xiàng)目功能差異檢驗(yàn)的方法。　　第四章報(bào)告了本研究的核心發(fā)現(xiàn)。它們包括對(duì)研究具體幾個(gè)問題的結(jié)果：考試的構(gòu)念維度數(shù)、試題難度的跨群體比較、試題題目區(qū)分度的跨群體比較、分測(cè)試信度的跨群體比較、分測(cè)試間相關(guān)系數(shù)的跨群體比較、因子結(jié)構(gòu)的跨群體比較、人文知識(shí)題的項(xiàng)目功能差異檢驗(yàn)?！　〉谖逭率怯懻摵徒Y(jié)論部分?？偨Y(jié)了本研究所得到的發(fā)現(xiàn)及獲得的結(jié)論，對(duì)使用的研究方法和過(guò)程進(jìn)行了評(píng)述，在針對(duì)TEM8（2005）的研究結(jié)果的基礎(chǔ)上，對(duì)TEM 8的設(shè)計(jì)者提出了建議；另外，本部分還指出了本研究對(duì)語(yǔ)言評(píng)價(jià)的貢獻(xiàn)和不足之處，提出了此研究框架下今后研究的方向和思路。

作者簡(jiǎn)介

　　汪順玉，男，1965年出生，重慶酉陽(yáng)縣人，土家族。上海外國(guó)語(yǔ)大學(xué)英語(yǔ)語(yǔ)言文學(xué)博士，重慶郵電大學(xué)外國(guó)語(yǔ)學(xué)院、國(guó)際學(xué)院副院長(zhǎng)，西南大學(xué)外國(guó)語(yǔ)學(xué)碩士導(dǎo)師。主要研究領(lǐng)域?yàn)檎Z(yǔ)言測(cè)試與評(píng)估，已經(jīng)在《外語(yǔ)教學(xué)》《四川外語(yǔ)學(xué)院學(xué)報(bào)》《上?？萍挤g》《重慶大學(xué)學(xué)報(bào)》（社會(huì)科學(xué)版）等核心刊物上發(fā)表語(yǔ)言測(cè)試學(xué)術(shù)論文多篇，翻譯出版了《如何解讀統(tǒng)計(jì)圖表十一研究報(bào)告閱讀指南》，主持省部級(jí)帝宄課題三項(xiàng)，參與國(guó)家級(jí)研究課題兩項(xiàng)。

書籍目錄

第1章 引論1.1.研究背景1.2.問題的闡述1.3.論文的結(jié)構(gòu)1.4.研究背景的總結(jié)第2章 文獻(xiàn)述評(píng)2.1.構(gòu)念和效度的本體論闡釋2.2.構(gòu)念效度的文獻(xiàn)回顧2.3.構(gòu)念效度驗(yàn)證的數(shù)據(jù)分析方法述評(píng)2.4.八級(jí)考試的效度依據(jù)2.5.文獻(xiàn)評(píng)述的總結(jié)第3章 研究設(shè)計(jì)和分析過(guò)程3.1.研究概述3.2.研究設(shè)計(jì)3.3.研究的問題3.4.研究方法3.5.研究方法的總結(jié)第4章 研究發(fā)現(xiàn)4.1.測(cè)驗(yàn)分?jǐn)?shù)的描述統(tǒng)計(jì)結(jié)果4.2.題目的難度和區(qū)分度4.3.分測(cè)驗(yàn)的信度4.4.聚合效度與區(qū)分效度4.5.因子維度的探索4.6.跨群體構(gòu)念一致性檢驗(yàn)4.7.人文知識(shí)分測(cè)驗(yàn)的項(xiàng)目差異功能分析4.8.發(fā)現(xiàn)的總結(jié)第5章 研究的結(jié)論、意義和建議5.1.總結(jié)和結(jié)論5.2.研究的價(jià)值5.3.研究的不足5.4.關(guān)于進(jìn)一步研究的建議附錄附錄A 人文知識(shí)分測(cè)驗(yàn)總分水平的頻度附錄B 主軸法6：因子方案全部客觀題目旋轉(zhuǎn)后因子負(fù)荷附錄C 主軸法3：因子方案全部客觀題目旋轉(zhuǎn)后因子負(fù)荷附錄D 2005年TEM8試題參考文獻(xiàn)

章節(jié)摘錄

　　在技術(shù)規(guī)范方面，美國(guó)教育心理和心理測(cè)量界制定了一系列具體的職業(yè)規(guī)定，其中最著名的規(guī)范有兩個(gè)：一是始于1954，年的教育與心理測(cè)量標(biāo)準(zhǔn)（當(dāng)時(shí)的名稱是《心理測(cè)量和診斷技術(shù)的技術(shù)建議》，Technical Recommendations for PsychologicalTests andDiagnost&Techniques）。這方面的標(biāo)準(zhǔn)已被多次修改，出版了幾個(gè)版本，最近的《標(biāo)準(zhǔn)》是1999年美國(guó)心理協(xié)會(huì)、美國(guó)教育研究協(xié)會(huì)和國(guó)家教育測(cè)量委員會(huì)（英文名縮寫分別為APA／AERA／NCME）共同修訂的。第二個(gè)行業(yè)規(guī)范是“華盛頓特區(qū)考試實(shí)踐共同委員會(huì)”（The Joint Committees on TestingPractices in Washington DC）于1988年制定并頒布并于2005年修訂的《教育領(lǐng)域公正測(cè)試規(guī)范》（.rhe Code of Fair TestingPractices in Education）?？荚嚬涂荚噦惱韱栴}在這兩個(gè)文件中都得到強(qiáng)調(diào)，而《標(biāo)準(zhǔn)》體現(xiàn)了效度研究的最新發(fā)展思想，對(duì)效度概念進(jìn)行了全新的解釋，對(duì)考試偏差源和消除偏差的方面提出了較全面的要求?！　≡趯?shí)踐方面，美國(guó)考試開發(fā)機(jī)構(gòu)，試題出版機(jī)構(gòu)都能較好地執(zhí)行上述文件精神。以美國(guó)最大（也是全球最大）的考試開發(fā)和研究機(jī)構(gòu)——教育考試中心（E丁S）為例，該中心在試題開發(fā)過(guò)程中，執(zhí)行嚴(yán)謹(jǐn)?shù)馁|(zhì)量把關(guān)措施，對(duì)每道試題從計(jì)量學(xué)角度，從可能的民族、性別、文化偏差角度進(jìn)行審視；試題施測(cè)后，對(duì)試題從多方面進(jìn)行研究，形成并公開研究報(bào)告，全球共享?，F(xiàn)在，ETS對(duì)高風(fēng)險(xiǎn)考試的評(píng)價(jià)，在信度、效度和考試公正幾個(gè)方面都要進(jìn)行。由于新的效度理論擴(kuò)展為統(tǒng)一多維度的概念，考試公正包括用復(fù)雜的統(tǒng)計(jì)方法進(jìn)行考試偏差檢驗(yàn)和價(jià)值判斷，對(duì)考試的效度評(píng)價(jià)成為工作中的重中之重。

媒體關(guān)注與評(píng)論

　　作者研究觀點(diǎn)新穎，層次清晰，邏輯嚴(yán)密，理論綜述全面詳實(shí)，論證充分得當(dāng)，充分顯示了作者對(duì)語(yǔ)言測(cè)試評(píng)價(jià)理論及其相關(guān)理論深刻的理解和認(rèn)識(shí)。此外，論文研究方法得當(dāng)，分析手段科學(xué)，也體現(xiàn)了作者扎實(shí)的學(xué)術(shù)基礎(chǔ)和較強(qiáng)的科研能力，尤其是作者在語(yǔ)言測(cè)試?yán)碚摵蛯?shí)踐上的創(chuàng)新和突破，對(duì)外語(yǔ)測(cè)試?yán)碚撛谥袊?guó)的應(yīng)用和發(fā)展都具有很高的參考價(jià)值。論文主題突出、結(jié)構(gòu)嚴(yán)謹(jǐn)，層次分明、概念清晰、分析透徹，語(yǔ)言流暢。　　——上海外國(guó)語(yǔ)大學(xué)博士生導(dǎo)師、上海外語(yǔ)音像出版社社長(zhǎng)、《外語(yǔ)電化教學(xué)》副主編、陳堅(jiān)林教授

圖書封面

圖書標(biāo)簽Tags

無(wú)

評(píng)論、評(píng)分、閱讀與下載

---

    語(yǔ)言測(cè)試構(gòu)念效度研究 PDF格式下載

---