英語口語測試的信度和效度研究

秦明星

（鄭州科技學院，河南鄭州 450064）

英語口語測試是檢測學生口頭交際能力的重要方式，它能最直接地反映一個人的外語基本水平，同時又對教學有很強的反撥作用。因此近年來語言測試日趨注重對口語能力的評價，許多大規(guī)模的英語考試已經(jīng)增加口試，并且口試與筆試分開的時間間隔也越來越短。如托?？谠囋谕懈？荚噷嵤┝?8年后于1981年推出。中國的CET考試在開考13年后于1999年增加CETSET考試。1999年開始實施的PETS考試，在推出時就已包括了口試部分。

英語口語測試是對學生進行英語綜合能力測試中最直接的方式，是檢測學生語言輸出的重要手段。而口語測試的信度與效度的把握則是測試成功與否的關(guān)鍵。因此，對英語口語測試的信度和效度進行分析，保證試題設(shè)計的科學性，判分的可行性與可靠性，有利于使口語測試準確地反映學生的實際口語能力，進而提高其對口語教學的正向反撥作用。

1 測試的信度和效度基本內(nèi)涵

如果我們想闡釋一次特定的考試成績是否正確反映了學生的語言能力，那么在設(shè)計和使用測試時，Bachman［1］（1990）信度和效度是首要關(guān)注的特征。Lado［2］（1961）提出測試必須滿足兩個條件：信度與效度。Bachman［3］（1996）把信度定義為“測試的一致性”。美國心理研究協(xié)會［4］（1985）認為效度是我們根據(jù)測試分數(shù)所作的推斷或結(jié)論如何有意義、恰當以及有效的程度。信度和效度是語言測試的兩大屬性，是評估語言測試最為關(guān)鍵的兩個質(zhì)量指標。信度表示測量結(jié)果的內(nèi)部一致性的程度。考生在同樣能力下的不同測試結(jié)果非常接近，這樣的測試即稱為有信度。信度是繼效度后衡量考試質(zhì)量的另一個重要指標，任何考試只有可靠才能有效。因此，信度是效度的必要前提?？荚囆Ф仁呛饬靠荚囐|(zhì)量最重要的標準，是考試最基本的出發(fā)點。語言測試界對考試效度的傳統(tǒng)定義是“考試是否或多大程度上測試了測試者想要測試的內(nèi)容”。一個測試只有具有要準確測量的內(nèi)容時，才能稱得上有效度。根據(jù)現(xiàn)代語言測試理論，質(zhì)量合格的測試首先測試的信度與測試的效度有著密切的關(guān)系。一般說來，只有信度較高的測試才能稱得上有效度。根據(jù)現(xiàn)代語言測試理論，質(zhì)量合格的測試首先要有效度和信度。

測試的信度與測試的效度有著密切的關(guān)系。一般說來，只有信度較高的測試才能有較高的效度，但信度較高不能保證效度一定較高。測試的信度主要涉及到試題本身的可靠性和評分的可靠性這兩個方面。試題本身是否可靠主要取決于試題的范圍、數(shù)量、試題的區(qū)分度等因素；評分是否可靠則要看評分標準是否客觀、準確，評分過程是否一致。測試效度可通過對學生進行訪談或問卷調(diào)查的方式，了解他們對測試的態(tài)度、反映和感覺，依此修正測試項目，以獲得較高的效度。

2 英語口語測試的信度研究

英語口語測試信度是指口語考試結(jié)果的可靠性和穩(wěn)定性。所謂英語口語考試的信度是指同一個口語測驗（或相等的兩個或多個測驗）對同一組考生施測兩次或多次，其結(jié)果的一致性程度。也就是說，考生多次參加英語口語考試，如果每次得到近乎一樣的分數(shù)，那么可以認為該測驗的信度是高的；如果每次分數(shù)忽高忽低，說明該測驗可靠性不夠、信度低。

例如，我們可以這樣來檢驗測試的信度：使用同樣一份試卷，在兩種不同的場合、環(huán)境中，在較短的時間間隔內(nèi)，施與同樣的學生，如果測試結(jié)果基本吻合，那么證明該測試是有信度的。一份試卷的測試結(jié)果如果缺乏信度，就沒有使用價值，同時也減弱了考試的公正性。當然，要完全消除不一致性也是不可能的，我們能做的是盡量把影響不一致性的不利因素控制在最低程度，以便于提高測試信度。信度主要是看學生的分數(shù)是否穩(wěn)定，如果分數(shù)忽高忽低，就說明信度不高。信度是受許多因素影響的，比如測試的時間、環(huán)境、學生的健康狀況、對題目的理解等等。例如不同的環(huán)境對聽力測試的影響是很大的，那些靠近喧鬧街道教室里的學生是很難將注意力放在聽力材料上去的；再如，炎熱的夏季，把測試放在中午2：00左右就可能使很多學生昏昏欲睡，當然就不能發(fā)揮正常水平了。這些都嚴重影響著測試的信度。但也并非說測試的信度是完全客觀的，教師可采取一些辦法盡可能使題目的覆蓋面大，使其具有代表性；再比如，盡量使試卷的評分客觀一些。評分時至少有兩名以上的評分者，尤其是在口語測試的評分中，更應該盡量公平一些。只有這類不利因素對測試的影響越小，測試的信度才能越高。

3 英語口語測試的效度研究

英語口語測試的效度是指測試是否考查了測試者想要測試的語言方面的內(nèi)容，考生所考的成績是否合理地說明了該考生的語言能力。作為衡量學生英語水平的一種尺度，考試必須具有效度。英語口語測試的有效性研究應該從有效性的各種方面來進行，實際上這些方面也是評估有效性的有效方法。衡量英語口語測試效度包括幾個方面：內(nèi)容效度、結(jié)構(gòu)效度、卷面效度、一致效度、應答效度等。其中內(nèi)容效度和構(gòu)想效度往往是重點考察的方面。

（1）內(nèi)容效度

Henning［5］（1987）認為內(nèi)容效度指“測試內(nèi)容是否充分代表和綜合了測試的有效性”。內(nèi)容效度主要研究試題的內(nèi)容與命題理念的關(guān)系，也就是說，試題的內(nèi)容能在多大程度上測試出考生的口頭表達能力。主要指試題與所要考查的語言知識、技能或語言能力的相關(guān)性、代表性，與考生的合適性。一般來說，一項測試的內(nèi)容效度越高，就越能精確地了解所要測試的內(nèi)容，并產(chǎn)生較好的正面反撥效應。內(nèi)容有效性是由語言學家或者測試專家等“專家”進行判斷的。換句話說，在英語口語試題用于檢測或?qū)I(yè)考試之前，它的有效性必須首先由可信的、權(quán)威的專家來鑒定。他們的判斷基于是否遵循考核大綱以及是否所能客觀反映測量目標。按這種方式，測試設(shè)訓者將為測試的有效性提供內(nèi)容上的證據(jù)。這種有效性的衡量聽起來非常簡單，但需驗證的方面比我們原來設(shè)想的更加不明確，更有爭議，或許更復雜。對于這種困境，在于測試有效性是相對而非絕對的。如果內(nèi)容效度有其自身的問題，那么，測試設(shè)計者需要為測試效度收集其它類型的證據(jù)：結(jié)構(gòu)效度、卷面效度、一致效度、應答效度等。

（2）結(jié)構(gòu)效度

Bachman ＆ Palmer［2］（1996）試卷質(zhì)量的關(guān)鍵，是指我們把一項測試成績作為要測試的能力或結(jié)構(gòu)的指示物對它所能進行解釋的程度。結(jié)構(gòu)效度是一個動態(tài)的過程，根據(jù)測試成績所作的解釋永遠不能說是絕對有效的，它只是一個相對的概念。討論測試效度必須與具體的測試目的相結(jié)合，否則是沒有意義的。對于某些測試理論家，結(jié)構(gòu)效度是測試效度的一種形式，它實質(zhì)上是評定測試在多大程度上有效地基于其基礎(chǔ)理論，即，測試是否成功地應用了理論。1990年，Bachman建議一個包括三個組成部分的語言交流能力的框架結(jié)構(gòu)：語言能力，策略能力和心理——生理學聯(lián)合機制。如果我們將Bachman的框架作為設(shè)計英語口語考試的基礎(chǔ)理論，那么在設(shè)計題型的時候，我們不得不考慮這些組成部分，并且測試之后，我們也不得不證實英語口語測試的內(nèi)容是否滿足CLA框架的要求。

（3）其它效度

卷面效度指測試的表面可信度或公眾接受度。例如，一項測試是測試受試者的發(fā)音能力，但在測試中并沒有讀的測試項目，這項測試則被認為缺少表面效度。一致效度指學生的自我評價與其考試成績存在著一定差距，原因在于一些學生過度自謙而另一些則自信心膨脹。應答效度指測試結(jié)束后，有必要了解考生對選項的反應?？忌荚囘^程中解題的原因是檢測測試的重要指標。因此，目前人們非常有興趣了解考生在英語口語測試中的測試行為和思考過程。

到目前為止，已從內(nèi)容效度、結(jié)構(gòu)效度、卷面效度、一致效度、應答效度等幾個方面對英語口語測試的有效性加以闡明。必須注意的是有效性是一個單一的概念，為容易理解而把它分開到不同的部分中。更理想地是，一個高效的英語口語測試應該在所有方面令人滿意。但是現(xiàn)實中，不是所有方面都能達到有效。英語口語測試的有效性研究是一個永恒的主題，如何改進其有效性是所有測試理論家和專家努力探索的課題。

英語口語測試是為英語教學服務的。英語教學的任務是培養(yǎng)學生實際運用英語的能力，口語測試的任務則是正確評價學生實際運用語言的能力?？谡Z測試作為英語教學過程中的一個重要環(huán)節(jié)，只有保證其信度與效度，才能公正、合理地反映出考生的真實口語水平，對英語教學才能產(chǎn)生積極的促進作用。

1 Bachman，L.F.Fundamental Consideration in Language Testing［M］.Oxford：Oxford UniversityPress.1990.

2 Lado，R.Language Testing［M］.Longman.1971.

3 Bachman，L.F，＆Palmer A.S.Language Testing in Practice［M］.Oxford：OUP.1996.

4 Heaton，J.B.Writing English Language Tests［M］.London：Longman.1988.

5 Henning，G.A.Guide to Language Testing：Development，Evaluation and Research［M］.Beijing：Foreign Language Teaching and Research Press，2001.