法語專業(yè)四級考試動詞的適當(dāng)形式填空內(nèi)容效度歷時研究（2010-2017）

溫煜東

一、引言

全國高等學(xué)校法語專業(yè)四級考試（Test national de fran?ais destiné aux étudiants spécialisés en études fran?aises dans lesétablissements d’enseignement supérieur—Niveau IV，以下簡稱TFS4）自2004年以來每年舉辦一次，至2021年已進(jìn)行16屆（2020年暫停考試）。它與全國高等學(xué)校法語專業(yè)八級考試共同構(gòu)成了完整的法語專業(yè)等級考試體系[1]，其重要性不言而喻。

經(jīng)過十幾年的發(fā)展，目前法語界對TFS4的研究已覆蓋其大部分的題型。余春紅在2014年從任務(wù)類型及評分標(biāo)準(zhǔn)兩方面探究了TFS4聽寫平均分偏低的原因，并提出了聽寫在難度等級上應(yīng)保持連續(xù)性和一致性等建議[2]。同年，王文新對比了TFS4作文的新、舊題型，并介紹了“看圖寫作”這一新題型的編設(shè)緣由、目的和特點[3]。田禾在2016年從寫作成績分析入手，反思了法語寫作教學(xué)中存在的缺乏系統(tǒng)理論指導(dǎo)和教材不足等問題，并提出要科學(xué)安排寫作訓(xùn)練、合理運用寫作教學(xué)策略改變原有教學(xué)模式等建議[4]。2017年，贠冰潔論述了聽力理解部分對考生語言能力、社會語言能力和心理素質(zhì)等方面的要求，并提供了一些捕捉聽力關(guān)鍵詞的策略[5]。2018年，盧曉帆在對TFS4考試的研究和評估中引入了效度分析：以真題為樣本對TFS4閱讀理解語篇的內(nèi)容效度進(jìn)行歷時分析，并認(rèn)為其具有較高的內(nèi)容效度，但仍存在語篇長度不夠穩(wěn)定和文章布局不夠合理等問題[6]。宋玉婷在2019年驗證了銜接理論在TFS4完形填空分析中的適用性，并建議從銜接理論角度切入進(jìn)行解題和教學(xué)[7]。然而在現(xiàn)有研究中，對TFS4第五部分“語法”（II）（以下稱為“動詞的適當(dāng)形式填空”）的研究極少。本文以2010年至2017年TFS4動詞的適當(dāng)形式填空真題為研究對象，結(jié)合《全國高等學(xué)校法語專業(yè)四級考試試題提綱（修訂）》[8]（以下簡稱《提綱》）和《高等學(xué)校法語專業(yè)基礎(chǔ)階段教學(xué)大綱》[9]（以下簡稱《大綱》），對TFS4動詞的適當(dāng)形式填空內(nèi)容效度進(jìn)行歷時分析，以期為后續(xù)命題的改進(jìn)提供參考。

二、研究設(shè)計

1.理論依據(jù)和研究框架

語言測試的評價可以從多角度進(jìn)行。文秋芳和王凌指出，“效度”是評價測試質(zhì)量最重要的標(biāo)準(zhǔn)[10]。而檢驗效度的方法有多種，“內(nèi)容相關(guān)性”是重要的證據(jù)之一。內(nèi)容相關(guān)性可以理解為傳統(tǒng)的“內(nèi)容效度”。根據(jù)Hughes的觀點，內(nèi)容效度越高越能準(zhǔn)確地測到應(yīng)該測到的內(nèi)容[11]。具體到本研究中，就是通過對TFS4動詞的適當(dāng)形式填空部分真題和答案的分析來檢測其與《提綱》和《大綱》中相應(yīng)部分的一致性。

本研究的理論框架參考了Bachman和Palmer的測試任務(wù)特征框架[12]以及李筱菊的考點效度[13]理論。Bachman和Palmer的框架包含五部分：環(huán)境特征、測試規(guī)則特征、輸入特征、期望回答的特征以及輸入和回答之間的關(guān)系。李筱菊認(rèn)為，分析考點效度可以從考點層次和焦點因素切入。由于本文主要從內(nèi)容效度角度進(jìn)行分析，因此筆者結(jié)合TFS4動詞的適當(dāng)形式填空試題特點以及《提綱》和《大綱》中動詞部分的相關(guān)要求，對測試任務(wù)特征框架和考點效度理論進(jìn)行了調(diào)整和融合。改進(jìn)后的研究框架主要包括語篇輸入特征分析和期望回答特征分析。研究語篇輸入特征，本文將從篇章長度和篇章難度入手；研究預(yù)期回答特征，本文將從考點內(nèi)容分布、考點層次以及動詞變位難度等角度切入。據(jù)此，筆者確定了TFS4動詞的適當(dāng)形式填空內(nèi)容效度的五個分析項目：文章長度、文章難度、考點分布、考點層次和動詞變位難度。

2.研究對象和方法

本文以《全國高等學(xué)校法語專業(yè)四級考試指南（2018版）》[14]中提供的2010年至2017年TFS4動詞的適當(dāng)形式填空試題和答案為研究對象，對各分析項目進(jìn)行分類、統(tǒng)計、對比和量化處理，進(jìn)而分析TFS4動詞的適當(dāng)形式填空試題內(nèi)容效度及其變化趨勢。

三、數(shù)據(jù)分析和討論

1.《大綱》中關(guān)于動詞的表述以及《提綱》中相應(yīng)部分的說明

在《大綱》附表七“測試參考方案”中推薦了第二學(xué)年“語法”項目的測試方式：多項選擇、填空、將動詞原形改成適當(dāng)?shù)臅r態(tài)語式、翻譯句子等。檢測的目的是檢查學(xué)生對基礎(chǔ)語法的掌握情況，分值占總分的18%。TFS4對語法的直接考查主要集中在兩個部分：第四部分“語法”（I）（單項選擇）和第五部分“語法”（II）（即本研究討論的“動詞的適當(dāng)形式填空”）。TFS4總分100分，這兩部分分別為20分和10分，共30分，占總分的30%。與《大綱》中要求的18%相比，占比較高。由此可見TFS4較為側(cè)重對學(xué)生基礎(chǔ)語法知識的考查。動詞的適當(dāng)形式填空作為《大綱》推薦的語法知識檢測方式之一，占TFS4語法部分分值的33%，且是TFS4中唯一一個對單一詞類進(jìn)行考查的題型，可見TFS4對動詞相關(guān)知識點的重視。

《大綱》“基礎(chǔ)語法表”中對于法語專業(yè)基礎(chǔ)教學(xué)階段應(yīng)完成的內(nèi)容，涉及動詞的部分（詳見《大綱》第18-21頁）可簡略表述為：種類、變位、形式、語態(tài)、無人稱動詞、語式及時態(tài)。其中，語式及時態(tài)又細(xì)分為24項：直陳式現(xiàn)在時、直陳式最近將來時、直陳式最近過去時、直陳式簡單將來時、直陳式先將來時、直陳式復(fù)合過去時、直陳式愈過去時、直陳式未完成過去時、直陳式簡單過去時、直陳式先過去時、條件式現(xiàn)在時、條件式過去時、虛擬式現(xiàn)在時、虛擬式過去時、虛擬式未完成過去時、虛擬式愈過去時、命令式現(xiàn)在時、用虛擬式表示間接命令、不定式現(xiàn)在時、不定式過去時、過去分詞、復(fù)合過去分詞、現(xiàn)在分詞和副動詞?？傊?，《大綱》中的要求涉及了法語動詞常見的時態(tài)、語式和語態(tài)，對于動詞相關(guān)語法點的要求較為細(xì)致、全面。

而《提綱》中關(guān)于動詞的適當(dāng)形式填空部分的說明則較為籠統(tǒng)，僅用50余字介紹了出題形式：一篇由20余個句子組成的文章，其中有20個空格，每個空格前面的括號內(nèi)是一個動詞原形，要求填上其合適的語式和時態(tài)形式。

2.TFS4動詞的適當(dāng)形式填空分析

（1）文章長度

TFS4動詞的適當(dāng)形式填空試題的載體為語篇，因此語篇長度是試題設(shè)計者需要考慮的問題之一。在《大綱》和《提綱》中都沒有規(guī)定動詞的適當(dāng)形式填空試題的具體語篇長度。但《提綱》中明確了文章應(yīng)由20余個句子組成。

考慮到TFS4動詞的適當(dāng)形式填空語篇中含有20處空格，因此本研究在統(tǒng)計文章長度時將答案填入對應(yīng)空格并刪除題干中提供的動詞原形，以語篇原本的形式統(tǒng)計字?jǐn)?shù)。本研究借助Microsoft Word軟件，對2010年至2017年TFS4動詞的適當(dāng)形式填空的文章長度等信息進(jìn)行了統(tǒng)計，結(jié)果如表1所示：

表1 2010-2017年TFS4動詞的適當(dāng)形式填空文章長度統(tǒng)計表

由表1可知，除2010年（257詞）和2011年（150詞）外，2012年至2017年TFS4動詞的適當(dāng)形式填空文章長度在167-207詞之間浮動，波動幅度較小。從句子數(shù)量角度來看，句數(shù)最多的是2010年（18句），最少的是2015年（6句），八年平均數(shù)為12.8句。每句平均單詞數(shù)波動也較大，最高的為2015年的29詞，最低的為2016年的10.4詞。

由上述數(shù)據(jù)可以看出：（1）動詞的適當(dāng)形式填空文章長度整體上較為穩(wěn)定；（2）八年間（2010年-2017年）句子總數(shù)均低于《提綱》中規(guī)定的“20余個句子”，說明在文章長度基本穩(wěn)定的前提下，句子長度偏長，在一定程度上增加了試題的難度；（3）每句平均單詞數(shù)波動較大，說明平均句長穩(wěn)定性稍差，這會在一定程度上影響不同年份考試的公平性。

（2）文章難度

除語篇長度外，語篇難度也可以作為考察試題內(nèi)容效度的角度之一。評價語篇難度有多種方法，易讀度是常用的指標(biāo)之一，本研究將易讀度作為考量篇章難度的主要指標(biāo)。易讀度即篇章易于閱讀的程度。近一個世紀(jì)以來，許多專家和學(xué)者都提出了計算易讀度的方法，其中應(yīng)用較廣泛的是Flesch易讀度公式、Lorge易讀度公式等。但這些研究主要針對的是英語文本，對法語文本的適應(yīng)性不強，因此本研究借助蒙特利爾Influence Communication公司研發(fā)的法語在線易讀度分析工具Scolarius（https：//www.scolarius.com/）對2010年至2017年TFS4動詞的適當(dāng)形式填空試題的篇章易讀度進(jìn)行分析，量化每篇文章的易讀度數(shù)值。數(shù)值越大，說明文章越難?？紤]到TFS4動詞的適當(dāng)形式填空的試題形式，因此在量化易讀度數(shù)值的過程中，采用了與前文中計算文章長度類似的方法，使用帶入答案后的文章原本形式作為基礎(chǔ)數(shù)據(jù)。經(jīng)過計算，結(jié)果如表2所示：

表2 2010-2017年TFS4動詞的適當(dāng)形式填空語篇易讀度統(tǒng)計表

根據(jù)Scolarius對于易讀度指數(shù)和學(xué)業(yè)水平的劃分，50-89為Primaire（小學(xué)），90-119為Secondaire（初中），120-149為Collégial（高中），150-189為Universitaire（大學(xué)）。鑒于此水平劃分以母語為法語者作為參考，而TFS4的受試為大學(xué)二年級學(xué)生，且大部分學(xué)生學(xué)習(xí)法語的時間不超過兩年，因此本研究中借用此水平劃分只具有相對意義，并不代表絕對水平。

由表2中的數(shù)據(jù)可知，除2014年和2015年外，其他六年的文章易讀度數(shù)值均落在primaire區(qū)間內(nèi)。據(jù)此可以認(rèn)為，2010年至2017年TFS4動詞的適當(dāng)形式填空整體上語篇難度適中，比較穩(wěn)定。

（3）考點分布

《大綱》“基礎(chǔ)語法表”中雖然詳盡列舉了基礎(chǔ)階段動詞相關(guān)的教學(xué)內(nèi)容，卻沒有明確規(guī)定教學(xué)的重點和難點。但是仔細(xì)閱讀后不難發(fā)現(xiàn)，《大綱》對未完成過去時和直陳式現(xiàn)在時的要求最為詳細(xì)：兩者均涉及六項用法。對于未完成過去時，《大綱》還特意制定了“未完成過去時與復(fù)合過去時的區(qū)別”這項教學(xué)內(nèi)容，這也是“基礎(chǔ)語法表”中唯一正面提及的時態(tài)區(qū)分。由此可見未完成過去時、直陳式現(xiàn)在時和復(fù)合過去時在《大綱》中的重要地位。

本研究將2010年至2017年TFS4動詞的適當(dāng)形式填空題涉及的時態(tài)、語式和語態(tài)考點按照考查次數(shù)由高到低整理如下：直陳式未完成過去時（imp）、直陳式復(fù)合過去時（pc）、直陳式現(xiàn)在時（pré）、不定式現(xiàn)在時（inf）、直陳式簡單過去時（ps）、直陳式愈過去時（pqp）、過去分詞（p.passé）、直陳式簡單將來時（fs）、直陳式過去將來時（fp）、被動語態(tài)（vp）、虛擬式現(xiàn)在時（subj）、現(xiàn)在分詞（p.pré）、條件式過去時（cond.passé）、命令式現(xiàn)在時（impé）、不定式過去時（inf.passé）、直陳式先過去時（pa）、虛擬式未完成過去時（subj.imp）、副動詞（gér）和復(fù)合過去分詞（ppc）。其具體的考查次數(shù)如表3所示：

表3 2010-2017年TFS4動詞的適當(dāng)形式填空時態(tài)、語式和語態(tài)統(tǒng)計表

由表3數(shù)據(jù)可知，考查最多的是直陳式未完成過去時（53次）、直陳式復(fù)合過去時（32次）和直陳式現(xiàn)在時（12次）。這說明TFS4試題對《大綱》中核心語法知識點的考查力度較大，能夠有效檢測學(xué)生對重要語法知識的掌握情況。

通過逐條對比表3中涉及的時態(tài)、語式和語態(tài)①由于直陳式過去將來時的構(gòu)成方式與條件式現(xiàn)在時完全相同，且條件式現(xiàn)在時可用于表示過去時間里的將來時［15］，因此本研究將試題和答案中出現(xiàn)的直陳式過去將來時視為對條件式現(xiàn)在時的側(cè)面考查。（19項）和《大綱》中的動詞相關(guān)知識點（24項時態(tài)語式+被動語態(tài)）可以發(fā)現(xiàn)，TFS中的考點覆蓋了《大綱》規(guī)定內(nèi)容的76%，考點覆蓋面較廣。但同時《大綱》中規(guī)定的直陳式最近將來時、直陳式最近過去時、直陳式先將來時、虛擬式過去時、虛擬式愈過去時和用虛擬式表示間接命令這幾項在2010年至2017年TFS4動詞的適當(dāng)形式填空中均未被正面設(shè)題，建議后續(xù)試題可適當(dāng)加大對它們的考查力度。

綜上所述可以認(rèn)為：（1）TFS4的考查重點與《大綱》核心知識點一致；（2）TFS4的考點設(shè)置緊密圍繞《大綱》要求，考點覆蓋面較全，但試題對個別時態(tài)和語式的考查尚顯不足。

（4）考點層次

李筱菊（1997）認(rèn)為，動詞的適當(dāng)形式填空是完形填空的一種變體題型，而研究完形填空試題的效度可以從考點層次切入?？键c層次由低到高依次為單詞層次（W）、詞組層次（P）、句子層次（S）和語篇層次（D）。簡單地說，單詞層次的填空只看單詞本身就能判定答案；詞組層次的填空則需要考慮所填詞與其前后詞的搭配關(guān)系；句子層次的填空需閱讀整句才能解題；而語篇層次的空缺需通過上下文信息推斷。她認(rèn)為命題者應(yīng)當(dāng)著力使考點層次盡可能地高?？键c層次越高，試題的效度越高。本研究從考點層次角度切入，將2010年至2017年TFS4動詞的適當(dāng)形式填空考點層次統(tǒng)計如表4：

表4 2010-2017年TFS4動詞的適當(dāng)形式填空考點層次統(tǒng)計表

由表4數(shù)據(jù)可知，2010年至2017年TFS4動詞的適當(dāng)形式填空試題考點層次主要集中在語篇層次和句子層次。本研究涉及的八年試題中，最高的考點層次（語篇層次）占比一直較高且穩(wěn)定（在70%-90%之間波動，平均占比76.9%），且沒有出現(xiàn)較低層次的考點，這說明2010年至2017年TFS4動詞的適當(dāng)形式填空試題考點層次分布合理，試題效度較高。

（5）動詞變位難度

實際教學(xué)中發(fā)現(xiàn)，對于動詞的適當(dāng)形式填空試題，法語學(xué)習(xí)者即使判斷出空缺動詞所需的時態(tài)、語式和語態(tài)，也不一定能夠正確填空。造成這種情況較為常見的原因是未能正確地動詞變位。鑒于法語動詞變位的特點和復(fù)雜性，第一組動詞和第二組動詞變位規(guī)律，而第三組動詞變位特殊需要逐個記憶，因此試題中出現(xiàn)較高比例的第三組動詞會增加變位的難度。本研究將動詞變位難度作為研究切入角度之一，并對2010年至2017年TFS4動詞的適當(dāng)形式填空中的動詞組別進(jìn)行統(tǒng)計，結(jié)果如表5所示：

表5 2010-2017年TFS4動詞的適當(dāng)形式填空動詞組別統(tǒng)計表

觀察表5中的數(shù)據(jù)可知：在2010年至2017年TFS4動詞的適當(dāng)形式填空試題中，對第三組特殊動詞的考查平均占比為53.1%，且八年間有七年在50%±10%范圍內(nèi)小幅度波動，據(jù)此可以認(rèn)為試題的動詞變位難度適中。此外第一組、第二組、第三組動詞占比均相對穩(wěn)定，可以認(rèn)為試題的動詞變位難度穩(wěn)定。然而還需要注意的是，在2011、2013、2014、2016和2017年沒有出現(xiàn)第二組動詞，說明這些年份的試題缺乏對第二組動詞變位的正面考查，建議今后適當(dāng)增加第二組動詞在該部分試題中的出現(xiàn)次數(shù)。

四、結(jié)論和建議

通過對2010年至2017年TFS4動詞的適當(dāng)形式填空的實證研究，本文得出以下結(jié)論：

1.2010年至2017年TFS4動詞的適當(dāng)形式填空試題長度、難易程度適中，考查知識點較為全面，基本符合《大綱》的要求?？键c層次較高，對動詞變位的考查難度適中且穩(wěn)定?？傊?，整體上來說具有較高的內(nèi)容效度。

2.TFS4動詞的適當(dāng)形式填空在命題方面仍存在一些不足，如語篇句子總數(shù)偏少、句子長度偏長、對個別時態(tài)和語式的考查尚顯不足等。

根據(jù)以上結(jié)論，為進(jìn)一步優(yōu)化TFS4動詞的適當(dāng)形式填空命題質(zhì)量，筆者嘗試提出以下建議：

1.盡快更新并完善《提綱》中的相應(yīng)部分。目前使用的《提綱》內(nèi)容相對簡單，對試題篇章長度、難易程度及考查的時態(tài)、語式和語態(tài)范圍等方面均未作出具體規(guī)定。

2.調(diào)控句子數(shù)量和長度，避免過多的長句。

3.增加對個別時態(tài)和語態(tài)的考查。

為確保研究的準(zhǔn)確性，本文以教育部高等學(xué)校外語專業(yè)教學(xué)指導(dǎo)委員會法語分委會公布的真題和答案為基礎(chǔ)數(shù)據(jù)。截至目前，其公布的最新試題為2017年真題。因此，本研究暫未涉及2018年和2019年數(shù)據(jù)。后續(xù)研究者可利用之后更新的試題進(jìn)行更為全面的分析。