認(rèn)知效度研究綜述

聶建中　賈櫻

【摘 要】認(rèn)知效度，前身為理論效度，相比于其他效度（內(nèi)容效度、預(yù)測效度、表面效度、后果效度等），是語言評(píng)價(jià)領(lǐng)域研究相對(duì)較少的一種。自Weir 2005年提出社會(huì)——認(rèn)知效驗(yàn)框架后逐漸受到關(guān)注，盡管國內(nèi)研究較少，但其重要性不可忽視。本文簡要介紹了認(rèn)知效度的概念意義、研究方法及所涉及的語言技能的一般認(rèn)知過程。

【關(guān)鍵詞】認(rèn)知效度 概念 意義 研究方法 認(rèn)知過程

一、概念及意義

效度是對(duì)語言測試的根本要求之一，基于其基礎(chǔ)性，對(duì)于效度的研究自其提出以來得到不斷發(fā)展。并不是說一項(xiàng)測試有或沒有效度，而是指根據(jù)測試分?jǐn)?shù)做出的推論在多大程度上可以反映出受試者的語言能力及水平。認(rèn)知效度是效度研究中較少談?wù)摰囊环N，但其具有綱領(lǐng)性意義。

認(rèn)知效度在教育測量領(lǐng)域產(chǎn)生了巨大影響。它可用于測量科學(xué)、邏輯思維推理，測量其他形式的高級(jí)推理；可以用于評(píng)價(jià)概念圖示或者是作為一種評(píng)價(jià)自我報(bào)告的工具來評(píng)價(jià)課堂內(nèi)容的精熟度。也有研究者探究醫(yī)療診斷測試時(shí)的認(rèn)知過程，及其對(duì)做決定的幫助。Snow， Corno， Jackson在1996年建立了其在能力測試方面的效驗(yàn)框架。

作為Weir2005年社會(huì)——認(rèn)知效驗(yàn)框架的一部分，認(rèn)知效度最初以理論效度之名被引入中國。

隨著社會(huì)——認(rèn)知效驗(yàn)框架的不斷改進(jìn)，認(rèn)知效度逐漸取代了理論效度。作為結(jié)構(gòu)效度的一個(gè)方面，它關(guān)注測試的認(rèn)知要求在多大程度上可以體現(xiàn)目標(biāo)語境的認(rèn)知要求，一般可以從兩方面收集認(rèn)知效度的證據(jù)：一是測試前；二是測試后的數(shù)據(jù)收集。Weir指出，過去的研究幾乎忽略了認(rèn)知效度非數(shù)據(jù)方面的證據(jù)，大多是在測試后收集數(shù)據(jù)，通過數(shù)據(jù)分析的方法，以一種因果顛倒的順序進(jìn)行效度驗(yàn)證的，例如通過因子分析法分析測試分?jǐn)?shù)，建立所測量構(gòu)念的本質(zhì)。他對(duì)此法提出質(zhì)疑：懷疑所分析的數(shù)據(jù)是否有可能受到測試形式、內(nèi)容及設(shè)計(jì)測試時(shí)假設(shè)的影響，認(rèn)為僅僅依靠測試結(jié)果來追溯導(dǎo)致這個(gè)結(jié)果的過程的方式有一定的危險(xiǎn)性。對(duì)此，他認(rèn)為有必要在測試設(shè)計(jì)前，將理論聯(lián)系到具體測試中，作為一個(gè)補(bǔ)充方法來效驗(yàn)關(guān)于所要評(píng)價(jià)的構(gòu)念本質(zhì)的外部經(jīng)驗(yàn)性證據(jù)。也就是說，測試設(shè)計(jì)前要清楚地明白將要測量什么（即所要測量的構(gòu)念）。

認(rèn)知效度在語言測試領(lǐng)域主要關(guān)注以下幾方面：在學(xué)習(xí)方面，根據(jù)測試分?jǐn)?shù)預(yù)測受試者是否適合大學(xué)階段、研究生階段及更高階段的學(xué)習(xí)研究，例如雅思學(xué)術(shù)類考試；在工作方面，預(yù)測受試者能否完成所在領(lǐng)域，例如商務(wù)、醫(yī)藥衛(wèi)生、教育教學(xué)、旅游業(yè)等的工作任務(wù)；在生活方面，它會(huì)影響到移民計(jì)劃，例如雅思培訓(xùn)類考試。起初，諸如此類的測試主要在語言技能方面對(duì)考生提出不同要求，而語言技能通常以一種表象呈現(xiàn)時(shí)并不足以全面展示受試者在語言知識(shí)方面是否達(dá)到標(biāo)準(zhǔn)水平，只有思維維度的認(rèn)知過程可以普遍反映言語行為是否達(dá)到目標(biāo)語境的要求。如果測試所引起的認(rèn)知過程與真實(shí)語境所需要的認(rèn)知過程存在較大差異，那么測試的預(yù)測力就應(yīng)受到質(zhì)疑。

二、研究方法

目前對(duì)于認(rèn)知效度有兩個(gè)衡量標(biāo)準(zhǔn)：一方面是以預(yù)測效度為標(biāo)準(zhǔn)，對(duì)比受試者（即非本族語者）在測試及非測試環(huán)境下完成某個(gè)任務(wù)的認(rèn)知過程，考查測試任務(wù)是否可以預(yù)測其真實(shí)語言能力；另一方面是以本族語者的認(rèn)知過程為標(biāo)準(zhǔn)，經(jīng)過長期的經(jīng)驗(yàn)性調(diào)查模式化本族語者的認(rèn)知過程，將受試者（非本族語者）在測試環(huán)境下完成某個(gè)任務(wù)的認(rèn)知過程與本族語者在真實(shí)環(huán)境中的認(rèn)知過程做對(duì)比。

根據(jù)衡量標(biāo)準(zhǔn)的不同，有兩種方法可以探究認(rèn)知效度。（一）模型化技能本身，即學(xué)習(xí)者通過學(xué)習(xí)所要達(dá)到的目標(biāo)行為。這就需要了解目標(biāo)行為所要求的認(rèn)知過程。通常來講，語言的接受性技能大致有五個(gè)認(rèn)知階段：輸入解碼——詞匯搜尋——語法解析——意義構(gòu)建——語篇構(gòu)建。產(chǎn)出性技能的認(rèn)知階段有：概念化——組織——語法編碼——詞匯編碼——音系/圖像編碼——執(zhí)行——監(jiān)控。（二）研究受試者的行為，比如通過口頭匯報(bào)，可以具體了解受試者的行為與真實(shí)語境中行為的相似度，包括其在考試時(shí)的思維、行為情況，即做了什么，怎樣做的。

認(rèn)知過程調(diào)查問卷可以幫助獲取受試者的口頭報(bào)告，此類問卷大多根據(jù)不同技能的認(rèn)知過程具體設(shè)計(jì)。受試者及環(huán)境兩變量都會(huì)影響到同一認(rèn)知過程的精細(xì)度，進(jìn)而影響到認(rèn)知效度。

三、四種技能的認(rèn)知過程

語言測試中認(rèn)知效度的研究，必然涉及聽、說、讀、寫四種技能的認(rèn)知過程，而認(rèn)知過程又與對(duì)技能本身的本質(zhì)認(rèn)識(shí)密切相關(guān)。對(duì)此，不同學(xué)者各有其獨(dú)到認(rèn)識(shí)。這些過程在具體實(shí)施中或多或少會(huì)受到測試步驟、測試方法、測試題型等的影響，也會(huì)有許多的循環(huán)往復(fù)，故并非是單向的線性過程，但同一種技能的主要過程大體還是一致的。

聽力的認(rèn)知過程大體包括：目標(biāo)設(shè)定（評(píng)估相應(yīng)的語言任務(wù)情況，包括在任務(wù)開始前評(píng)估自己的知識(shí)水平、內(nèi)外部可及資源及當(dāng)時(shí)條件的限制）——視/聽覺輸入——解碼/詞匯搜尋（搜尋合適的詞匯，并與相應(yīng)的聲學(xué)信號(hào)相匹配，成功后相應(yīng)的聲學(xué)信號(hào)會(huì)轉(zhuǎn)化成意義單位；不成功時(shí)相應(yīng)的聲學(xué)信號(hào)會(huì)以一種類似回聲的聲音回蕩在聽者腦中與轉(zhuǎn)化成的意義單位一起等待進(jìn)一步處理）——形式合成（應(yīng)用語法知識(shí)拼湊上一步中等待處理的聲音及意義單位，結(jié)合語言語篇、社會(huì)文化等各方面的知識(shí)構(gòu)建更大的意義單位，或者在大腦中形成相關(guān)內(nèi)容的畫面形象）——監(jiān)控（聽者在任務(wù)中需要不斷核查自己的行為表現(xiàn)的有效性）。（Weir，2005）

閱讀涉及的認(rèn)知過程有：目標(biāo)設(shè)定（確定閱讀目的，選擇達(dá)到此目標(biāo)的最合適的閱讀方法，例如精讀或泛讀，默讀或朗讀等）——視覺輸入（目標(biāo)文本）——詞匯識(shí)別（將視覺輸入的詞匯與頭腦內(nèi)已存儲(chǔ)的拼寫形式進(jìn)行匹配、關(guān)聯(lián)）——詞匯提取/詞匯通達(dá)（按照事物類別等關(guān)聯(lián)、排列、檢索對(duì)應(yīng)單詞）——句子結(jié)構(gòu)解析（依照語法知識(shí)解析句子成分）——確立命題意義（理解字面意思）——推斷（推測所要表達(dá)的觀點(diǎn)）——構(gòu)建心智模型（結(jié)合新、舊信息，已有情景語境，豐富正在處理的命題的意義）——內(nèi)部構(gòu)建文本結(jié)構(gòu)（閱讀者自己內(nèi)部簡要構(gòu)建有條理的文本意義結(jié)構(gòu)）。

說的認(rèn)知過程大致有： 概念化（利用相關(guān)知識(shí)，包括發(fā)言的具體情景語境、背景知識(shí)、已談?wù)搩?nèi)容等確立表達(dá)意圖，遴選可實(shí)現(xiàn)此意圖的相關(guān)信息，并將所要表達(dá)的信息排序）——言語生成（包括兩部分：語法編碼及音系編碼。語法編碼旨在利用句法結(jié)構(gòu)及相關(guān)詞匯構(gòu)建句法上有意義的、可被理解的句子；音系編碼是指將之前的抽象輸出以音位的形式體現(xiàn)）——語音預(yù)演（即內(nèi)部言語，說話者本身內(nèi)部模擬，預(yù)想言辭怎樣發(fā)音）——發(fā)聲（即通過發(fā)聲器官執(zhí)行上一步的語音計(jì)劃）——自我監(jiān)控（說話者在表達(dá)前后都需留心表達(dá)信息的準(zhǔn)確性、流暢性、適切性及邏輯性）。

寫作的認(rèn)知過程是：目標(biāo)設(shè)定（確定寫作目的）——主題及體裁確定（文章主要關(guān)于什么，以何種體裁呈現(xiàn)）——整體規(guī)劃（收集觀點(diǎn)，了解在體裁、讀者群等方面的要求及限制）——組織（將觀點(diǎn)分類，并安排以適當(dāng)順序呈現(xiàn)；判斷所列觀點(diǎn)間的關(guān)系，如并列、遞進(jìn)、因果等）——微觀規(guī)劃（主要關(guān)注即將著筆的部分要寫什么、寫作目的、怎樣寫）——翻譯（將設(shè)想命題轉(zhuǎn)化成通順、連貫的語言）——監(jiān)察（時(shí)常留心檢查所寫內(nèi)容的拼寫、發(fā)音、句法等）——評(píng)估與修正（聯(lián)系上下文，修改不滿意、不合適的地方）。

四、結(jié)語

認(rèn)知過程作為認(rèn)知效度的主要研究對(duì)象，是很難直接測量的，而引出認(rèn)知過程的媒介，例如調(diào)查問卷、口頭匯報(bào)等又并非面面俱到地覆蓋所有的細(xì)節(jié)過程，而且后期收集、轉(zhuǎn)寫、整理也較為耗時(shí)、耗力。此外，由于研究對(duì)象的不同，也沒有統(tǒng)一的調(diào)查、匯報(bào)模式，所以得到的結(jié)論通常是歸納性而非結(jié)論性的。

而我們國內(nèi)對(duì)于認(rèn)知效度的研究尚未普遍展開，研究隊(duì)伍有待壯大，方向及具體研究課題也有待加深。但鑒于其對(duì)于語言測試設(shè)計(jì)方面的重要意義，未來研究者可以考慮利用更科學(xué)的方式，例如認(rèn)知語言學(xué)及大腦科學(xué)方面的知識(shí)，提供更為客觀的證據(jù)，來開發(fā)新的研究路徑。

【參考文獻(xiàn)】

[1]Snow， R.E.， Corno， L. & Jackson， D.， Individual differences in affective and conative functions [M]， in D.C. Berliner & R.C. Calfee， eds. Handbook of Educational Psychology. New York： Simon & Schuster Macmillan，1996：243–310.

[2]Weir， C. J.， Language Testing and Validation[M].北京：外語教學(xué)與研究出版社，2005.

[3]修旭東.英語寫作測試中“理論效度”的理論依據(jù)模式[J].外語與外語教學(xué)， 2002（11）.