任務(wù)型交際口語測試的信度和效度研究.pdf

1、縱觀語言測試歷史，語言學(xué)的發(fā)展與語言測試的變革總是密切聯(lián)系在一起。在結(jié)構(gòu)主義語言學(xué)遭受社會語言學(xué)的挑戰(zhàn)時，測試也從心理測量學(xué)—結(jié)構(gòu)主義語言學(xué)測試向心理語言學(xué)—社會語言學(xué)測試轉(zhuǎn)變。在七十年代以后，Bachman提出交際能力測試模式后，交際語言測試代表了測試發(fā)展的新趨向。八十年代開始，在交際語言測試的基礎(chǔ)上，基于任務(wù)的語言測試成為研究熱點。交際測試的主要優(yōu)點是考查學(xué)生在語言場景中恰當?shù)厥褂谜Z言進行交際的能力，任務(wù)型測試的主要優(yōu)點是通過考查學(xué)

2、生完成任務(wù)的過程來測試學(xué)生的語言運用能力，任務(wù)型交際測試則把兩者的優(yōu)點結(jié)合起來，以任務(wù)為目的，交際能力為核心，通過考查學(xué)生完成任務(wù)的過程來測試學(xué)生的交際能力。同時，隨著社會的發(fā)展，流利的英語口語已成為社會和國際交往的一項重要技能。因此，為了適應(yīng)當前語言測試發(fā)展和社會的需求，本文以任務(wù)型交際口語測試(TC—SET)為切入點進行研究。 信度和效度的高低是衡量語言測試最重要的指標，是一切語言測試的基本出發(fā)點，其重要性貫穿考試設(shè)計和評價

3、的整個過程，而國內(nèi)關(guān)于TC—SET信度和效度的實證研究還比較欠缺。本文以任務(wù)型交際測試理論為基礎(chǔ)，以江蘇大學(xué)81名二年級非英語專業(yè)學(xué)生為測試對象，對TC—SET進行信度和效度研究。本研究的信度框架具體集中在分析影u向TC—SET信度的因素、評估其外部信度和內(nèi)部信度三方面。效度框架具體集中在結(jié)構(gòu)效度、內(nèi)容效度、表面效度和預(yù)測效度四方面。通過對考生答題情況、考試成績、考試試卷以及考生問卷調(diào)查結(jié)果等分析，檢驗TC—SET的信度和效度。所有研究

4、的數(shù)據(jù)都使用統(tǒng)計軟件SPSS分析。通過定性分析影響信度的因素，判讀TC—SET的信度；通過相關(guān)分析和獨立樣本T檢驗，評估TC—SET的外部信度；通過克倫巴赫系數(shù)分析，評估TC—SET的內(nèi)部信度；通過相關(guān)分析，判斷TC—SET的結(jié)構(gòu)效度；通過對試卷內(nèi)容和功能對考試大綱所規(guī)定內(nèi)容和功能的覆蓋度分析，分析TC—SET的內(nèi)容效度；通過對考生和考官的問卷調(diào)查，分析TC—SET的表面效度；通過一元線性回歸分析，判斷TC—SET的預(yù)測效度。

5、數(shù)據(jù)分析及問卷調(diào)查結(jié)果表明，TC—SET具有高信度和高效度。 整體來說，TC—SET的信度比較高。大多數(shù)考生對TC—SET的樣本大小和難易度比較滿意，有部分考生認為TC—SET應(yīng)增加新題型和延長測試時間，以便能更好的測試其口語交際能力。TC—SET的實施過程和考官評分嚴格按照標準操作，盡量保證其信度。在相關(guān)分析中，兩位考官所評分數(shù)的相關(guān)系數(shù)為0.891，而且獨立樣本T檢驗顯示兩位考官的評分不具有顯著差異，表明TC—SET的外部信

6、度比較高。通過克倫巴赫系數(shù)計算TC—SET的內(nèi)部信度分別為0.8434(一月份)和0.8718(六月份)，表明TC—SET的內(nèi)部信度也較高。 TC—SET的結(jié)構(gòu)效度比較高。在相關(guān)分析中，考生在TC—SET五個任務(wù)的分數(shù)基本都有顯著相關(guān)，這意味著每一任務(wù)在考同一個構(gòu)念時有其獨立性。同時，每一任務(wù)同TC—SET都有顯著相關(guān)。所有這些相關(guān)證據(jù)都表明TC—SET有其內(nèi)部結(jié)構(gòu)效度，即，TC—SET考的是一個獨立的構(gòu)念。 結(jié)合近十年

7、的考試試題，分析結(jié)果表明TC—SET在考試內(nèi)容和語言功能上，基本實現(xiàn)了《考試大綱》的意圖。 對考生和考官的問卷調(diào)查涉及到了對TC—SET整體印象調(diào)查，TC—SET對教學(xué)的反撥作用，對TC—SET的建議和意見等，結(jié)果表明大多數(shù)考生和考官認同這次考試，TC—SET具有較高的表面效度。 TC—SET的預(yù)測效度也比較高。一元線性回歸分析表明一月份的測試成績能夠預(yù)測出69.4％的六月份成績。 據(jù)此，本文提出構(gòu)建小規(guī)模的校內(nèi)