周菊民
摘 要:本研究采用波特(2002)的通用編碼框架——“內(nèi)容×認(rèn)知”水平矩陣,來(lái)對(duì)義務(wù)教育生物學(xué)課程標(biāo)準(zhǔn)和初中生物學(xué)結(jié)業(yè)會(huì)考試卷進(jìn)行一致性研究。進(jìn)行了一致性的比較、重點(diǎn)分布的比較、內(nèi)容主題分布的比較、認(rèn)知水平分布的比較。結(jié)果表明,作為本研究樣本的課程標(biāo)準(zhǔn)與五份試卷之間沒(méi)有統(tǒng)計(jì)學(xué)上的顯著一致性。課程標(biāo)準(zhǔn)與會(huì)考試題一致性水平在“內(nèi)容維度”上較好,在“認(rèn)知維度”上一般。
關(guān)鍵詞:一致性;初中生物學(xué);會(huì)考試卷;課程標(biāo)準(zhǔn)
初中生物學(xué)課程標(biāo)準(zhǔn)的實(shí)施已進(jìn)行了十多年。研制新的課程標(biāo)準(zhǔn)取代舊的教學(xué)大綱是課程改革的核心工作?!痘A(chǔ)教育課程改革綱要(試行)》明確指出:“國(guó)家課程標(biāo)準(zhǔn)是教材編寫(xiě)、教學(xué)、評(píng)估和考試命題的依據(jù),是國(guó)家管理和評(píng)價(jià)課程的基礎(chǔ)?!盵1]因此,初中生物學(xué)會(huì)考的考試內(nèi)容及認(rèn)知要求與義務(wù)教育生物學(xué)課程標(biāo)準(zhǔn)理應(yīng)保持一致,或者出于選拔的功能在認(rèn)知的要求上略高于課程標(biāo)準(zhǔn)的基本要求。實(shí)際情況又怎么樣呢?目前而言,在國(guó)內(nèi)還未見(jiàn)這方面的研究報(bào)告。
本文嘗試通過(guò)量化分析的方法,分析歷年初中生物學(xué)會(huì)考試卷與義務(wù)教育生物學(xué)課程標(biāo)準(zhǔn)之間的一致性特征,提供相關(guān)研究的分析數(shù)據(jù),為發(fā)展基于課程標(biāo)準(zhǔn)的課堂教學(xué)與學(xué)業(yè)評(píng)價(jià)的工作與決策提供相應(yīng)的實(shí)證研究證據(jù)。
一、 研究方法
(一) 一致性的測(cè)量方法
本研究采用波特(2002)的通用編碼框架——“內(nèi)容×認(rèn)知”水平矩陣,來(lái)對(duì)課程標(biāo)準(zhǔn)和會(huì)考試卷進(jìn)行一致性研究。安德魯·波特等研究出了不同的一致性指數(shù)方法并加以驗(yàn)證,其中得到同行們認(rèn)可并且確實(shí)有效的一致性指數(shù)計(jì)算公式是:p=1-∑i=1|(Xi-Yi)|2。[2]
(二) 研究樣本
本研究需要分析的樣本為《義務(wù)教育生物學(xué)課程標(biāo)準(zhǔn)(2011年版)》和2012~2016年蘇州市初中生物學(xué)結(jié)業(yè)會(huì)考試卷,涉及的初中生物學(xué)教材為江蘇科學(xué)技術(shù)出版社出版。
(三) 研究流程
1. 內(nèi)容與認(rèn)知水平的分類(lèi)
采用波特(2002)的通用編碼框架——“內(nèi)容×認(rèn)知”水平矩陣來(lái)對(duì)課程標(biāo)準(zhǔn)和會(huì)考試卷進(jìn)行編碼。編碼前,先對(duì)內(nèi)容主題和認(rèn)知水平進(jìn)行分類(lèi)。本研究采用的內(nèi)容分類(lèi)以課程標(biāo)準(zhǔn)的第三部分課程內(nèi)容中的十大主題為準(zhǔn),比較適合義務(wù)教育階段生物學(xué)內(nèi)容的分析,包括科學(xué)探究,生物體的結(jié)構(gòu)層次,生物與環(huán)境,生物圈中的綠色植物,生物圈中的人,動(dòng)物的運(yùn)動(dòng)和行為,生物的生殖、發(fā)育與遺傳,生物的多樣性,生物技術(shù)和健康地生活。[3]認(rèn)知水平的分類(lèi)依據(jù)布盧姆教育目標(biāo)分類(lèi)學(xué)修訂版,將認(rèn)知分為記憶、理解、應(yīng)用、分析、評(píng)價(jià)和創(chuàng)造六級(jí)水平。[4]對(duì)每個(gè)水平的細(xì)分類(lèi)目及經(jīng)常用到的關(guān)鍵詞如下:
認(rèn)知維度類(lèi)別同義詞
1. 記憶/回憶
識(shí)別辨認(rèn)
回憶提取
2. 理解
解釋澄清、釋義、描述、轉(zhuǎn)化
舉例示例、實(shí)例化
分類(lèi)歸類(lèi)、歸入
總結(jié)概括、歸納
推斷斷定、外推、內(nèi)推、預(yù)測(cè)
比較對(duì)比、對(duì)應(yīng)、配對(duì)
說(shuō)明建模
3. 應(yīng)用
執(zhí)行實(shí)行
實(shí)施使用、運(yùn)用
4. 分析
區(qū)別辨別、區(qū)分、聚焦、選擇
組織發(fā)現(xiàn)連貫性、整合、概述、分解、構(gòu)成
歸因解構(gòu)
5. 評(píng)價(jià)
檢查協(xié)調(diào)、查明、監(jiān)控、檢驗(yàn)
評(píng)論判斷
6. 創(chuàng)造
產(chǎn)生假設(shè)
計(jì)劃設(shè)計(jì)
生成建構(gòu)
2. 內(nèi)容與認(rèn)知水平的編碼
(1) 對(duì)課程標(biāo)準(zhǔn)的編碼
編碼者為生物學(xué)教育碩士、博士和碩士,三人對(duì)課程標(biāo)準(zhǔn)獨(dú)立進(jìn)行編碼,編碼以課程標(biāo)準(zhǔn)中的條款數(shù)目為計(jì)量單位對(duì)內(nèi)容認(rèn)知水平的矩陣的每個(gè)單元格進(jìn)行賦值,用SPSS軟件處理得到的數(shù)據(jù),兩兩之間計(jì)算出斯皮爾曼相關(guān)系數(shù),結(jié)果見(jiàn)表1。
根據(jù)表1,該相關(guān)系數(shù)表明三位編碼者獨(dú)立編碼的結(jié)果具有很好的可靠性。然后,三人對(duì)存在異議之處進(jìn)行商討,從而得到表2。
數(shù)據(jù)標(biāo)準(zhǔn)化,是指要按照模糊矩陣的要求,將數(shù)據(jù)標(biāo)準(zhǔn)化壓縮到區(qū)間[0,1]上。對(duì)表2進(jìn)行標(biāo)準(zhǔn)化處理得到表3。
(2) 會(huì)考試卷的編碼
首先對(duì)2012~2016年試卷分別編號(hào)為1、2、3、4、5號(hào)試卷。編碼者為生物學(xué)教育碩士、博士和碩士,三人對(duì)歷年初中生物學(xué)結(jié)業(yè)會(huì)考試卷獨(dú)立進(jìn)行編碼,用SPSS軟件處理得到的數(shù)據(jù),兩兩之間計(jì)算出斯皮爾曼相關(guān)系數(shù),結(jié)果見(jiàn)表4。
該相關(guān)系數(shù)表明三位編碼者獨(dú)立編碼的結(jié)果具有很好的可靠性。然后,三人對(duì)存在異議之處進(jìn)行商討,從而得到最終的編碼數(shù)據(jù),即試卷考分分布表,然后對(duì)此表數(shù)據(jù)進(jìn)行標(biāo)準(zhǔn)化處理得到試卷考點(diǎn)分?jǐn)?shù)比例。(表5~表14)
對(duì)表7進(jìn)行標(biāo)準(zhǔn)化處理,得到表8。
對(duì)表9進(jìn)行標(biāo)準(zhǔn)化處理,得到表10。
對(duì)表11進(jìn)行標(biāo)準(zhǔn)化處理,得到表12。
對(duì)表13進(jìn)行標(biāo)準(zhǔn)化處理,得到表14。
3. 顯著性P值
要確定會(huì)考試卷與課程標(biāo)準(zhǔn)之間是否具有統(tǒng)計(jì)學(xué)顯著的一致性,需要將計(jì)算得到的一致性系數(shù)與相應(yīng)的臨界值進(jìn)行比較,才能得出結(jié)論。根據(jù)美國(guó)學(xué)者福歐莫(Fulmer,Gavin William)新近的研究表明,對(duì)于10×6的矩陣,若是雙側(cè)檢驗(yàn),為了使在0.05水平上達(dá)到顯著性一致,與100個(gè)“標(biāo)準(zhǔn)點(diǎn)”對(duì)應(yīng)的一致性系數(shù)的臨界值為0.7803。[5]
4. 計(jì)算波特一致性系數(shù)
將課程標(biāo)準(zhǔn)的編碼數(shù)據(jù)表與會(huì)考試卷的編碼數(shù)據(jù)表代入一致性指數(shù)計(jì)算公式p=1-∑i=1|(Xi-Yi)|2中,得到相關(guān)的一致性指數(shù)。endprint
5. 繪制柱狀圖和曲面圖,進(jìn)一步比較分析
由于波特系數(shù)僅使用了總標(biāo)準(zhǔn)差,將每個(gè)矩陣的數(shù)據(jù)信息轉(zhuǎn)換成曲面圖和柱狀圖,有利于進(jìn)一步的分析比較,在圖中,可清楚顯示研究對(duì)象哪些內(nèi)容主題上相對(duì)側(cè)重,以及哪種水平的認(rèn)知相對(duì)集中。
二、 研究結(jié)果與數(shù)據(jù)分析
本研究主要從一致性、重點(diǎn)分布、內(nèi)容主題和認(rèn)知水平這四個(gè)方面,來(lái)分析五份試卷與課程標(biāo)準(zhǔn)之間的一致性。為了進(jìn)行更細(xì)致地比較分析,把一致性比較的數(shù)據(jù)轉(zhuǎn)換成曲面圖和柱狀圖,使之表現(xiàn)得更直觀清楚。圖1~圖6分別展示了課程標(biāo)準(zhǔn)與五份試卷的內(nèi)容重點(diǎn)及認(rèn)知要求的具體分布情況。
基于同樣的著色方案,圖1是依據(jù)表3的數(shù)據(jù)作出的圖像,圖2是依據(jù)表6的數(shù)據(jù)作出的圖像,圖3是依據(jù)表8的數(shù)據(jù)作出的圖像,圖4是依據(jù)表10的數(shù)據(jù)作出的圖像,圖5是依據(jù)表12的數(shù)據(jù)作出的圖像,圖6是依據(jù)表14的數(shù)據(jù)作出的圖像。
(一) 一致性比較
為了確認(rèn)課程標(biāo)準(zhǔn)與五份試卷間的一致性P值是否具有統(tǒng)計(jì)學(xué)上的顯著性,將課程標(biāo)準(zhǔn)與五份試卷間的波特一致性系數(shù)與表中95%水平的參考值進(jìn)行比較,得到結(jié)果如下(表15)。
通過(guò)比較,發(fā)現(xiàn)課程標(biāo)準(zhǔn)與五份試卷之間的波特一致性系數(shù)全都明顯低于95%水平的P值。這些數(shù)據(jù)表明,作為本研究樣本的課程標(biāo)準(zhǔn)與五份試卷間沒(méi)有統(tǒng)計(jì)學(xué)上顯著的一致性。
(二) 曲面圖分析
將每個(gè)矩陣的數(shù)據(jù)信息轉(zhuǎn)換成曲面圖,有利于進(jìn)一步的分析比較,在圖1~圖6中,可清楚顯示研究對(duì)象哪些內(nèi)容主題上相對(duì)側(cè)重,以及哪種水平的認(rèn)知相對(duì)集中。
綜上,通過(guò)比較課程標(biāo)準(zhǔn)與五份試卷的重點(diǎn)分布情況,可以得出,課程標(biāo)準(zhǔn)的重點(diǎn)分布內(nèi)容比例排到第一的是生物圈中的人,且集中在理解水平上。在五份試卷中,在初中生物學(xué)教學(xué)內(nèi)容中所占比例最大的內(nèi)容是生物圈中的人,且集中在理解水平上(占4/5,只有一份是生物的生殖、發(fā)育與遺傳和理解)。兩者的匹配度很高。課程標(biāo)準(zhǔn)的重點(diǎn)分布內(nèi)容比例排到第二的是生物圈中的綠色植物,且集中在理解水平上;生物的生殖、發(fā)育與遺傳,且集中在理解水平上。在五份試卷中,在初中生物學(xué)教學(xué)內(nèi)容中所占比例排到第二的內(nèi)容是生物的多樣性(占5/5),且集中在理解水平上(占4/5);生物的生殖、發(fā)育與遺傳,且集中在理解水平上(占1/5);生物的多樣性,且集中在記憶水平上(占1/5)。兩者的匹配度不高。
(三) 內(nèi)容主題分布的比較
將課程標(biāo)準(zhǔn)和五份試卷的內(nèi)容主題數(shù)據(jù)匯總,得到下表。
將上面表格的數(shù)據(jù)轉(zhuǎn)換成柱狀圖,詳見(jiàn)圖7。
在內(nèi)容維度上對(duì)課程標(biāo)準(zhǔn)和五份試卷的均值進(jìn)行的比較如圖7所示。觀察圖7,可以發(fā)現(xiàn)課程標(biāo)準(zhǔn)的重點(diǎn)主題是生物圈中的人和生物的生殖、發(fā)育與遺傳,次重點(diǎn)主題是生物體的結(jié)構(gòu)層次、生物圈中的綠色植物和健康地生活。從圖中可看出,五份試卷都是在重點(diǎn)考查學(xué)生對(duì)生物圈中的人、生物的多樣性和生物的生殖、發(fā)育與遺傳的內(nèi)容主題的掌握情況,其次是生物體的結(jié)構(gòu)層次和健康地生活等。據(jù)此可以表明,這五份試卷的均值在內(nèi)容維度的分布總體上與課程標(biāo)準(zhǔn)的要求相當(dāng),說(shuō)明試題編制在內(nèi)容維度的把握上比較到位。
(四) 認(rèn)知水平分布的比較
將課程標(biāo)準(zhǔn)和五份試卷的認(rèn)知水平數(shù)據(jù)匯總,得到下表。
將上面表格的數(shù)據(jù)轉(zhuǎn)換成柱狀圖,詳見(jiàn)圖8。
在認(rèn)知水平維度上對(duì)課程標(biāo)準(zhǔn)和五份試卷的均值進(jìn)行比較。觀察圖8,可以看出,課程標(biāo)準(zhǔn)的認(rèn)知要求主要集中在理解和分析水平,其次是記憶。五份試卷都著重考查了學(xué)生的理解水平,其次是記憶,同時(shí)還兼顧考查了學(xué)生的分析水平。除此以外,幾份試卷還都涉及了評(píng)價(jià)和創(chuàng)造的認(rèn)知水平的試題。據(jù)此可以表明,這五份試卷對(duì)學(xué)生的認(rèn)知能力要求總體上是高于課程標(biāo)準(zhǔn)的要求,這也符合課程標(biāo)準(zhǔn)只是設(shè)定了最低的教學(xué)要求,在教學(xué)實(shí)踐中,可結(jié)合當(dāng)?shù)貙?shí)際情況適當(dāng)提高教學(xué)要求,促進(jìn)師生共同發(fā)展與完善。
三、 結(jié)論與討論
(一) 結(jié)論
本研究通過(guò)對(duì)課程標(biāo)準(zhǔn)和會(huì)考試題的一致性分析發(fā)現(xiàn),兩者的一致性水平總體情況一般,但年份之間一致性水平有所差異。把課程標(biāo)準(zhǔn)與五份試卷之間的波特一致性系數(shù)與表中95%水平的參考值作比較,發(fā)現(xiàn)其全都明顯低于95%水平的P值參考值。上述數(shù)據(jù)分析的結(jié)果說(shuō)明,作為本研究樣本的課程標(biāo)準(zhǔn)與五份試卷之間沒(méi)有統(tǒng)計(jì)學(xué)上的顯著一致性。課程標(biāo)準(zhǔn)與會(huì)考試題一致性水平在“內(nèi)容維度”上較好,在“認(rèn)知維度”上一般。
(二) 討論
從總體看,課程標(biāo)準(zhǔn)與“理解”認(rèn)知水平試題的一致性始終有較大差異,說(shuō)明結(jié)業(yè)會(huì)考對(duì)“理解”認(rèn)知水平的試題不斷提出更高要求,正是出于對(duì)“理解”認(rèn)知能力的重視。并且,試卷考查要求有時(shí)高于課程標(biāo)準(zhǔn),體現(xiàn)出課程標(biāo)準(zhǔn)只是規(guī)定了教學(xué)的最低要求。在教學(xué)實(shí)踐中應(yīng)根據(jù)實(shí)際情況適當(dāng)提高教學(xué)要求,在抓牢基礎(chǔ)的前提下,采用多種策略重點(diǎn)關(guān)注提高學(xué)生的理解認(rèn)知水平,促進(jìn)師生共同發(fā)展。
在內(nèi)容維度上對(duì)課程標(biāo)準(zhǔn)和五份試卷進(jìn)行比較,發(fā)現(xiàn)這五份試卷在內(nèi)容維度的分布總體上與課程標(biāo)準(zhǔn)的要求相當(dāng),說(shuō)明試題編制在內(nèi)容維度的把握上比較到位。五份試卷只是在主題“生物圈中的人”、“生物的多樣性”與課程標(biāo)準(zhǔn)一致性水平不夠理想,還需要進(jìn)一步提高兩者的一致性。
在認(rèn)知維度上對(duì)課程標(biāo)準(zhǔn)和五份試卷進(jìn)行比較,從中可以發(fā)現(xiàn),五份試卷在認(rèn)知水平的分布總體上與課程標(biāo)準(zhǔn)的一致性水平一般。五份試卷在認(rèn)知水平“理解”“分析”上與課程標(biāo)準(zhǔn)一致性水平較差,還需要進(jìn)一步改善兩者的一致性。
通過(guò)深刻理解課程標(biāo)準(zhǔn)的理念,并將課程標(biāo)準(zhǔn)的要求運(yùn)用于教學(xué)評(píng)價(jià),教師可以準(zhǔn)確把握內(nèi)容維度和認(rèn)知水平在課程標(biāo)準(zhǔn)中的要求,并將其運(yùn)用于教學(xué)實(shí)踐,使學(xué)生更好地達(dá)到甚至超過(guò)課程標(biāo)準(zhǔn)的要求。在教學(xué)過(guò)程中,教師可以專(zhuān)注于課程標(biāo)準(zhǔn)、教學(xué)目標(biāo)、教學(xué)與評(píng)價(jià)活動(dòng)之間的一致性,不斷總結(jié)反思,努力提高相互間的一致性,從而提高教學(xué)效果。
本文對(duì)該研究主題的知識(shí)以及認(rèn)知維度的分類(lèi)方法是根據(jù)文獻(xiàn)研究,并且結(jié)合自己觀點(diǎn)建立的,還缺乏實(shí)證研究的證據(jù)支持。因此,該分類(lèi)方法還有待進(jìn)一步完善。
參考文獻(xiàn):
[1] 中華人民共和國(guó)教育部.基礎(chǔ)教育課程改革綱要(試行)[Z].教基[2001]17號(hào),2001.
[2] A.C.Porter.How SEC Measures Alignment[J].Education Researcher,1997,(5):5-8.
[3] 中華人民共和國(guó)教育部.義務(wù)教育生物學(xué)課程標(biāo)準(zhǔn)(2011年版)[S].北京:北京師范大學(xué)出版社,2012.
[4] 安德森(Anderson,L.W.)等,蔣小平等譯.布盧姆教育目標(biāo)分類(lèi)學(xué):分類(lèi)學(xué)視野下的學(xué)與教及其測(cè)評(píng)(完整版)[M].北京:外語(yǔ)教學(xué)與研究出版社,2009.
[5] G.W.Fulmer.Estimating critical values for strength of alignment among curriculum,assessments,and instruction[J].Journal of Educational and Behavioral Statistics,2011,36(6):396.endprint