任務(wù)型交際口語測試的信度和效度研究.pdf

1、縱觀語言測試歷史，語言學(xué)的發(fā)展與語言測試的變革總是密切聯(lián)系在一起。在結(jié)構(gòu)主義語言學(xué)遭受社會(huì)語言學(xué)的挑戰(zhàn)時(shí)，測試也從心理測量學(xué)—結(jié)構(gòu)主義語言學(xué)測試向心理語言學(xué)—社會(huì)語言學(xué)測試轉(zhuǎn)變。在七十年代以后，Bachman提出交際能力測試模式后，交際語言測試代表了測試發(fā)展的新趨向。八十年代開始，在交際語言測試的基礎(chǔ)上，基于任務(wù)的語言測試成為研究熱點(diǎn)。交際測試的主要優(yōu)點(diǎn)是考查學(xué)生在語言場景中恰當(dāng)?shù)厥褂谜Z言進(jìn)行交際的能力，任務(wù)型測試的主要優(yōu)點(diǎn)是通過考查學(xué)

2、生完成任務(wù)的過程來測試學(xué)生的語言運(yùn)用能力，任務(wù)型交際測試則把兩者的優(yōu)點(diǎn)結(jié)合起來，以任務(wù)為目的，交際能力為核心，通過考查學(xué)生完成任務(wù)的過程來測試學(xué)生的交際能力。同時(shí)，隨著社會(huì)的發(fā)展，流利的英語口語已成為社會(huì)和國際交往的一項(xiàng)重要技能。因此，為了適應(yīng)當(dāng)前語言測試發(fā)展和社會(huì)的需求，本文以任務(wù)型交際口語測試(TC—SET)為切入點(diǎn)進(jìn)行研究。 信度和效度的高低是衡量語言測試最重要的指標(biāo)，是一切語言測試的基本出發(fā)點(diǎn)，其重要性貫穿考試設(shè)計(jì)和評(píng)價(jià)

3、的整個(gè)過程，而國內(nèi)關(guān)于TC—SET信度和效度的實(shí)證研究還比較欠缺。本文以任務(wù)型交際測試?yán)碚摓榛A(chǔ)，以江蘇大學(xué)81名二年級(jí)非英語專業(yè)學(xué)生為測試對(duì)象，對(duì)TC—SET進(jìn)行信度和效度研究。本研究的信度框架具體集中在分析影u向TC—SET信度的因素、評(píng)估其外部信度和內(nèi)部信度三方面。效度框架具體集中在結(jié)構(gòu)效度、內(nèi)容效度、表面效度和預(yù)測效度四方面。通過對(duì)考生答題情況、考試成績、考試試卷以及考生問卷調(diào)查結(jié)果等分析，檢驗(yàn)TC—SET的信度和效度。所有研究

4、的數(shù)據(jù)都使用統(tǒng)計(jì)軟件SPSS分析。通過定性分析影響信度的因素，判讀TC—SET的信度；通過相關(guān)分析和獨(dú)立樣本T檢驗(yàn)，評(píng)估TC—SET的外部信度；通過克倫巴赫系數(shù)分析，評(píng)估TC—SET的內(nèi)部信度；通過相關(guān)分析，判斷TC—SET的結(jié)構(gòu)效度；通過對(duì)試卷內(nèi)容和功能對(duì)考試大綱所規(guī)定內(nèi)容和功能的覆蓋度分析，分析TC—SET的內(nèi)容效度；通過對(duì)考生和考官的問卷調(diào)查，分析TC—SET的表面效度；通過一元線性回歸分析，判斷TC—SET的預(yù)測效度。

5、數(shù)據(jù)分析及問卷調(diào)查結(jié)果表明，TC—SET具有高信度和高效度。 整體來說，TC—SET的信度比較高。大多數(shù)考生對(duì)TC—SET的樣本大小和難易度比較滿意，有部分考生認(rèn)為TC—SET應(yīng)增加新題型和延長測試時(shí)間，以便能更好的測試其口語交際能力。TC—SET的實(shí)施過程和考官評(píng)分嚴(yán)格按照標(biāo)準(zhǔn)操作，盡量保證其信度。在相關(guān)分析中，兩位考官所評(píng)分?jǐn)?shù)的相關(guān)系數(shù)為0.891，而且獨(dú)立樣本T檢驗(yàn)顯示兩位考官的評(píng)分不具有顯著差異，表明TC—SET的外部信

6、度比較高。通過克倫巴赫系數(shù)計(jì)算TC—SET的內(nèi)部信度分別為0.8434(一月份)和0.8718(六月份)，表明TC—SET的內(nèi)部信度也較高。 TC—SET的結(jié)構(gòu)效度比較高。在相關(guān)分析中，考生在TC—SET五個(gè)任務(wù)的分?jǐn)?shù)基本都有顯著相關(guān)，這意味著每一任務(wù)在考同一個(gè)構(gòu)念時(shí)有其獨(dú)立性。同時(shí)，每一任務(wù)同TC—SET都有顯著相關(guān)。所有這些相關(guān)證據(jù)都表明TC—SET有其內(nèi)部結(jié)構(gòu)效度，即，TC—SET考的是一個(gè)獨(dú)立的構(gòu)念。 結(jié)合近十年

7、的考試試題，分析結(jié)果表明TC—SET在考試內(nèi)容和語言功能上，基本實(shí)現(xiàn)了《考試大綱》的意圖。 對(duì)考生和考官的問卷調(diào)查涉及到了對(duì)TC—SET整體印象調(diào)查，TC—SET對(duì)教學(xué)的反撥作用，對(duì)TC—SET的建議和意見等，結(jié)果表明大多數(shù)考生和考官認(rèn)同這次考試，TC—SET具有較高的表面效度。 TC—SET的預(yù)測效度也比較高。一元線性回歸分析表明一月份的測試成績能夠預(yù)測出69.4％的六月份成績。 據(jù)此，本文提出構(gòu)建小規(guī)模的校內(nèi)