【摘要】閱讀能力測試是我國英語測試體系中很重要的一部分,其中閱讀理解這一題型是測量學生閱讀能力的一種最常用方法,因此實現(xiàn)對英語測試中閱讀理解題型的難度控制是確保試題質(zhì)量的關鍵因素。本文從題目因素和文本因素兩個方面來探討其對閱讀理解測試難度的影響,研究了各因素對測試難度發(fā)揮作用的程度和效果,為測試設計、題庫建設及日常教學提供參考。
【關鍵詞】英語閱讀理解測試難度;文本特征;題目特征
【作者簡介】王婉寧,曼徹斯特大學人文學院。
一、研究背景
2018年《中國英語能力等級量表》為國內(nèi)各種英語考試提供了科學的能力測評標準,同時,也對統(tǒng)一我國英語測試的難度標準和建立分級題庫提出了新的要求。而閱讀理解在我國英語測試體系中占有很大一部分比重,因此實現(xiàn)對英語測試中閱讀理解題型的難度控制是穩(wěn)定英語測試整體難度系數(shù)的基礎。鑒于此,充分了解影響閱讀理解測試難度的因素對設計出高信度、高效度和高區(qū)分度的高質(zhì)量試題具有重要的作用,同時也成為學界和測試設計者們普遍關注的課題。
在以往的相關研究中,大多數(shù)都集中在文本難度對閱讀理解測試難度的影響上,也有一部分是探討題目因素對閱讀理解測試結(jié)果有效性產(chǎn)生的影響。閱讀理解測試的構(gòu)成包括本文和題目兩部分,它們分別呈現(xiàn)出不同的文本特征和題目特征。因此,如果只研究某一個方面的特征對閱讀理解測試結(jié)果產(chǎn)生的影響顯然是不夠全面客觀的。因此,在本研究中文本特征和題目特征都將作研究對象,通過實證研究找到兩者與閱讀理解測試整體難度的關系,從而為命題設計及題庫分級建設提出參考性建議。
在測試領域,對英語閱讀理解測試難度的界定標準一直存在不同的聲音。常見的界定標準,特別是一些分級閱讀材料的難度界定是以文本可讀性為標準的,即以篇章長度、句長、詞長、 語篇中的生詞數(shù)量等統(tǒng)計數(shù)據(jù)做量化的評估?,F(xiàn)在比較流行的文本難度測量工具Coh-Metrix以及由中國自主開發(fā)的“英語閱讀分級指難針”平臺都是文本可讀性測算的代表。對閱讀文本本身的難度的來說,“英語閱讀分級指難針”平臺是可靠的,但它卻不能作為整個閱讀測試的難度界定標準。然而,很多學者都提出在觀察閱讀理解測試的過程中,有時候會出現(xiàn)文本難度差別很大的兩篇文章,其試題的難易度指數(shù)卻很可能由于問題設計的原因而彼此接近。由此可見,閱讀測試難度的決定因素關鍵之處可能不僅在于文本難度,閱讀理解問題命制的形式、技巧都可能對題目的難度起決定作用。
二、研究問題
通過調(diào)查國內(nèi)外現(xiàn)有研究發(fā)現(xiàn):隨著各種語料庫統(tǒng)計軟件和語言分析軟件的發(fā)展,以文本難度作為主要變量研究影響英閱讀理解測試難度的文獻有上升趨勢,例如陳愛文探究文本難度對高中生英語閱讀理解影響,而另外一些學者提出了不同的觀點,如馬瑞認為試題難度是在閱讀理解測試中影響難度的決定性因素。閱讀理解測試專家Alderson曾經(jīng)提出:“閱讀理解測試的難度取決于文本和題目兩者間的關系,題目的設置和文本有同樣重要的作用”,文本因素與題目因素是交織在一起密不可分的,單純的探討其中一方的作用都是不可取的,而是應該著力探討兩者之間的交互作用。因此,本文研究的重點在于究竟是哪些因素影響了閱讀測試題的難度,繼而對學生的正確理解設置了障礙?;诖耍狙芯刻岢鲆韵聝蓚€研究問題:
1.文本特征對閱讀理解測試難度有怎樣的影響?
2.題目特征對閱讀理解測試難度有怎樣的影響?
三、研究設計
依據(jù)研究問題,本研究中閱讀理解測試難度的測量采取了因素分析的方法。陳旻曾在2014年曾進行過一項關于英語專業(yè)四級標準化閱讀理解測試難度的研究,提出基于Embretson認知加工模型的閱讀理解問題難度系數(shù),為文本特征和問題特征都進行了賦值量化,進而通過數(shù)據(jù)統(tǒng)計的方式計算出兩者與試題難度之間的相關性。本研究借鑒這一思路,但是對于文本特征和題目特征的難度系數(shù)的量化本研究提出與其不同的方式。
文本特征層面,本研究以2015-2019年高考英語試卷為研究對象,以“英語閱讀分級指難針”為研究工具,測量其閱讀理解文本難度,并利用該平臺的三個核心模塊:詞匯難度、句法難度、文本難度組成分析文本特征影響因素的框架,作為影響閱讀理解測試難度的子因素。題目特征層面,本研究選取Bachman和Palmer構(gòu)建的任務特征框架中的三個方面:閱讀能力、范圍、直接程度,作為影響閱讀理解測試難度的子因素。據(jù)此,本研究制定了一個適合該套試卷閱讀理解單選題型的分析框架。
課題組從“猿題庫”APP中獲取2015-2019年高考英語全國卷的閱讀理解單選題型共計14套試卷,56篇短文以及所對應的210道閱讀題目,將其作為研究對象?!霸愁}庫”APP中通過大數(shù)據(jù)技術(shù)直接提供出學生回答每道題目的正確率,根據(jù)測試難度的定義,本研究直接將獲取到的正確率作為該道題目的測試難度系數(shù),此系數(shù)為題目特征層面上的因變量。根據(jù)本研究制定的2015-2019年高考英語全國卷的閱讀理解單選題型的分析框架,在題目特征層面,閱讀能力、范圍、直接程度作為因變量,是影響閱讀理解測試難度的子因素。由于閱讀能力、范圍、直接程度的確定屬于定性分析,因此,本研究邀請10名5年以上教齡的英語教師,對樣本中210道題目從所考察的閱讀能力高低、定位正確選項需要覆蓋原文的范圍、正確選項與原文之間的直接程度三個層面進行賦值,最后對10名教師的賦值結(jié)果進行統(tǒng)計,每個子因素的賦值結(jié)果依據(jù)超半數(shù)以上教師共同判定的結(jié)果為準。將56篇文本輸入到“英語閱讀分級指難針”平臺中測算每篇文本在詞匯難度、句法難度、文本難度三個維度上的指標,將其作為自變量。每篇文本對應3-4道題目,因此本研究將計算出這3-4道題目的測試難度的平均值,作為文本的測試難度,也就是文本特征層面上的因變量。
題目所考查的閱讀能力高低與正確選項對原文的依賴程度這兩個因素對測試難度的影響極為顯著,而且兩者與測試難度的相關系數(shù)相當,具體表現(xiàn)為考查閱讀高層能力的題目難度更大,正確選項對原文是間接依賴關系的題目難度更大。而定位正確選項需要覆蓋原文的范圍這一因素對測試難度的影響是不顯著的,推測可能由于錯誤選項的干擾等因素造成實驗結(jié)果與預期不符。相比較而言,文本特征對問題的難度影響較小,其中句法難度對測試難度具有顯著的預測作用,句法結(jié)構(gòu)越復雜測試難度就越大。文本難度也對測試難度造成一定的影響,相比較而言,詞匯難度與測試難度的相關性是不顯著的,推遲原因與實驗對象均來自高考英語全國卷有關。
四、研究結(jié)論
根據(jù)閱讀理解測試專家Alderson的觀點:“閱讀理解測試的難度取決于文本和題目兩者間的關系,題目的設置和文本有同樣重要的作用”,文本因素與題目因素是交織在一起密不可分的,單純的探討其中一方的作用都是不可取的,因此,本研究重點探討,在文本難度和題目難度的雙重作用下,哪些子因素對閱讀理解整體測試難度的影響較大。
具體來說,在文本特征層面上的各個子因素中,句法結(jié)構(gòu)的復雜度和文本整體的復雜度對閱讀理解整體的測試難度影響較大,進而對學生正確理解文章的內(nèi)容構(gòu)成了一定障礙。在題目特征層面上,題目考察的閱讀能力高低和正確選項對原文的依賴程度對閱讀理解測試難度發(fā)揮作用的程度和效果較大,因此命題人只有控制好這兩個因素,才能更好地對試題進行設計和改編,這不僅有助于穩(wěn)定英語試卷整體難度系數(shù),更有利于標準化閱讀理解測試分級方法,從而促進題庫建設。
1.在文本特征層面上,句法難度是影響閱讀理解測試難度的主要因素。文本特征的三個變量中,對測試難度影響力由大到小依次是句法難度——文本難度——詞匯難度,前兩者都與測試難度有顯著性相關。具體地說,句法難度對測試難度的影響最為顯著,表現(xiàn)為句法難度越大的文本其測試難度也越大,句法難度越小的文本,其測試難度也越小,兩者呈現(xiàn)正相關關系。文本特征對測試難度的影響也較為顯著,而詞匯難度對測試難度有十分微弱的影響,可以說,測試難度不是受詞匯難度這一單一變量所影響的,而是受詞匯難度、句法難度、文本長度三者之間的交互作用所影響。
2.在題目特征層面上,影響閱讀理解測試難度的主要因素是直接程度。在題目特征的三個變量中,解答正確選項在文本中定位的覆蓋范圍與測試難度是幾乎不具有相關性的,題目所考察閱讀能力的高低和目標答案的直接程度對測試難度的預測作用是顯著的,其中直接程度是最大的影響因素。具體表現(xiàn)在,目標答案對于原文是直接依賴的題目,難度系數(shù)較大,也就是說測試難度較小,而目標答案對于原文是間接依賴關系的題目,難度系數(shù)往往較小,也就是說測試難度較大。
3 .變化文本句法難度和選項直接程度是控制閱讀理解難度的重要途徑。
總體而言,運用SPSS對2015-2019年高考英語全國卷中單選式閱讀理解試題進行的數(shù)據(jù)分析可以為我們研究標準化閱讀理解測試提供控制試題難度的新思路。從題目和文本兩個方面來考慮影響閱讀理解測試難度的因素,控制各因素對測試難度發(fā)揮作用的程度和效果,為測試設計、題庫建設及日常教學提供參考。
參考文獻:
[1]陳愛文.文本難度對高中生英語閱讀理解影響的研究[D].閩南師范大學,2016.
[2]陳旻.英語專業(yè)四級閱讀理解效度研究——基于認知角度的分析[J].外語教育研究,2014(1):45-50.
[3]馬瑞.閱讀理解測試中的難度因素探索[J].英語教師,2012,12(3): 57-61.
[4]Alderson, J. C. Assessing Reading[M]. Cambridge: Cambridge University Press, 2000:113.
[5]Alderson, J. C. & Urquhart, A. H. Introduction: what is reading?[C]. Alderson, J. C. & Urquhart, A. H. Reading in a foreign language. London: Longman, 1984.