摘 要:對(duì)高職院校學(xué)生學(xué)習(xí)性參與度調(diào)查問(wèn)卷開(kāi)發(fā)過(guò)程進(jìn)行闡釋的基礎(chǔ)上,對(duì)試測(cè)數(shù)據(jù)進(jìn)行了信效度檢驗(yàn)。研究表明,對(duì)美國(guó)“高職院校學(xué)生學(xué)習(xí)性參與度調(diào)查工具”(CCSSE)修訂后的調(diào)查問(wèn)卷(CCSSE-China)具有良好的信度和效度,適合對(duì)我國(guó)高職院校開(kāi)展學(xué)生學(xué)習(xí)性參與度調(diào)查使用。
關(guān)鍵詞:高職院校學(xué)生學(xué)習(xí)性參與度問(wèn)卷;信度;效度
中圖分類(lèi)號(hào):G712 文獻(xiàn)標(biāo)志碼:A 文章編號(hào):1002-2589(2014)17-0224-03
近年來(lái),高等職業(yè)教育規(guī)??焖侔l(fā)展,辦學(xué)主體日益多元,教育部2013年9月公布的數(shù)據(jù)顯示,我國(guó)高等職業(yè)(專(zhuān)科)院校達(dá)到1 297所,占普通高等學(xué)??倲?shù)的53.1%[1]。中國(guó)共產(chǎn)黨第十八次全國(guó)代表大會(huì)報(bào)告提出:加快發(fā)展現(xiàn)代職業(yè)教育,推動(dòng)高等教育內(nèi)涵式發(fā)展,努力辦好人民滿(mǎn)意的教育,高職教育發(fā)展從又快又好轉(zhuǎn)向又好又快發(fā)展時(shí)期。因此,客觀、科學(xué)、全面地評(píng)價(jià)高職教育發(fā)展現(xiàn)狀,促進(jìn)高職院校教育教學(xué)水平與人才培養(yǎng)質(zhì)量提升成為職業(yè)教育發(fā)展中的重要的研究課題。但目前國(guó)內(nèi)開(kāi)展的以教育資源投入為主導(dǎo)的評(píng)價(jià)模式和標(biāo)準(zhǔn),使高職院校把工作重心更多地放在獲取外在資源,以滿(mǎn)足各種評(píng)價(jià)指標(biāo)的條件與標(biāo)準(zhǔn)上,忽視了對(duì)人才培養(yǎng)對(duì)象——學(xué)生的學(xué)習(xí)、成長(zhǎng)與發(fā)展情況的關(guān)注。本研究引入了美國(guó)高職院校學(xué)生學(xué)習(xí)性參與度調(diào)查工具——CCSSE,啟動(dòng)了對(duì)CCSSE的研究工作(對(duì)CCSSE調(diào)查工具在美國(guó)產(chǎn)生的背景、調(diào)查體系及應(yīng)用等內(nèi)容詳見(jiàn)筆者另一篇文章[2][3])。本文將對(duì)CCSSE工具的文化適應(yīng)及信效度研究工作進(jìn)行闡述。
一、CCSSE工具的文化適應(yīng)
CCSSE工具的開(kāi)發(fā)理念是關(guān)注人才培養(yǎng)對(duì)象——學(xué)生的學(xué)習(xí)、成長(zhǎng)與發(fā)展情況,重視學(xué)生的“學(xué)”,強(qiáng)調(diào)學(xué)生的主體地位,關(guān)注學(xué)習(xí)過(guò)程,以如何促進(jìn)“學(xué)”來(lái)引導(dǎo)“教”。工具以師生互動(dòng)質(zhì)量、學(xué)生學(xué)業(yè)挑戰(zhàn)程度、主動(dòng)合作學(xué)習(xí)水平、學(xué)生的努力程度和教育環(huán)境支持度五項(xiàng)基準(zhǔn)為進(jìn)行跨院校比較的重要指標(biāo),通過(guò)調(diào)查學(xué)生個(gè)人信息、學(xué)業(yè)情況和滿(mǎn)意度等信息進(jìn)行綜合分析。高職院校是社會(huì)系統(tǒng)的重要組成部分,與各國(guó)社會(huì)文化、政治、經(jīng)濟(jì)及歷史息息相關(guān),因此,在對(duì)來(lái)自美國(guó)本土的高職院校評(píng)價(jià)工具CCSSE使用之前進(jìn)行文化適應(yīng)工作是研究的起點(diǎn)。
(一)翻譯工作
研究項(xiàng)目組分兩組同時(shí)進(jìn)行翻譯工作。研究者在對(duì)CCSSE工具產(chǎn)生背景、體系構(gòu)成及使用情況進(jìn)行全面了解的基礎(chǔ)上,首先將工具英文版逐題翻譯成中文,并將兩組翻譯后的題項(xiàng)逐題核查,以避免翻譯過(guò)程中出現(xiàn)信息偏差。之后請(qǐng)相關(guān)專(zhuān)家進(jìn)行審查修改,問(wèn)卷盡可能做到了既忠實(shí)于原文又使被調(diào)查者容易理解。
(二)文化適應(yīng)調(diào)整
在完成翻譯工作的基礎(chǔ)上,研究者依據(jù)高職院校實(shí)際、文化與價(jià)值觀差異等原則,對(duì)一些題目和變量進(jìn)行了文化適應(yīng)方面的調(diào)整。首先,根據(jù)我國(guó)高職院校實(shí)際情況對(duì)部分題項(xiàng)進(jìn)行了調(diào)整。如CCSSE工具在調(diào)查學(xué)生人際關(guān)系時(shí),分為生生、生師及學(xué)生與教學(xué)管理人員關(guān)系三個(gè)方面,但在我國(guó)高職院校,除了這三種關(guān)系之外,學(xué)生與輔導(dǎo)員、班主任等思想政治及生活指導(dǎo)教師間關(guān)系密切,文化適應(yīng)后的調(diào)查工具增加了此方面內(nèi)容;CCSSE工具調(diào)查了學(xué)生學(xué)習(xí)本科學(xué)位課程的情況,而我國(guó)高職院校學(xué)生除參加本科自學(xué)考試課程學(xué)習(xí)外,還有部分學(xué)生參加專(zhuān)升本考試,研究者增加了相關(guān)內(nèi)容。其次,結(jié)合學(xué)生實(shí)際情況進(jìn)行了題項(xiàng)修訂。如CCSSE工具中調(diào)查了學(xué)生婚姻狀況及是否有子女一起生活,在我國(guó),兒童一般6歲入學(xué),18歲進(jìn)入高職校園,未達(dá)到《婚姻法》規(guī)定的結(jié)婚年齡,同時(shí),國(guó)家大力倡導(dǎo)晚婚晚育政策,高職院校學(xué)生普遍未婚,更未出現(xiàn)與子女共同生活的情況,因此,本問(wèn)卷刪除了相關(guān)題項(xiàng)。
文化適應(yīng)調(diào)整完成之后,研究者又采用訪談的方式對(duì)修訂后的問(wèn)卷進(jìn)行了進(jìn)一步核查。訪談主要關(guān)注被試回答問(wèn)題時(shí)的理解、感受,尤其關(guān)注題干是否清晰、題目是否困難、理解是否到位、選項(xiàng)設(shè)計(jì)是否合理等問(wèn)題,同時(shí)也注意了解被試在答題時(shí)的誤解、困惑等感受。經(jīng)過(guò)對(duì)不同專(zhuān)業(yè)的30名學(xué)生的訪談,我們對(duì)問(wèn)卷的表述進(jìn)行了進(jìn)一步調(diào)整修訂。修訂后的問(wèn)卷經(jīng)比較教育學(xué)、教育技術(shù)學(xué)、社會(huì)學(xué)等方面專(zhuān)家審核,文化適應(yīng)后的調(diào)查工具效果理想。
文化適應(yīng)后的調(diào)查工具對(duì)CCSSE工具121個(gè)題項(xiàng)中的36個(gè)題項(xiàng)進(jìn)行了修訂。另外,在問(wèn)卷版面設(shè)計(jì)方面,研究者也根據(jù)訪談學(xué)生對(duì)問(wèn)卷版式、題目順序等問(wèn)題的意見(jiàn)建議,確定將問(wèn)卷分為4頁(yè),正反面印在一張A3紙上,被試完成時(shí)間大約在20分鐘左右,題目順序、語(yǔ)言等也比較符合一般思維習(xí)慣。
二、工具信效度研究
(一)研究對(duì)象與方法
在對(duì)CCSSE工具文化適應(yīng)調(diào)整后,項(xiàng)目組進(jìn)行了問(wèn)卷信效度測(cè)試工作,采用隨機(jī)抽樣的方法,對(duì)來(lái)自北京市公立、民辦四所高職院校不同專(zhuān)業(yè)、不同年級(jí)的200名學(xué)生進(jìn)行了測(cè)試,并收集調(diào)查數(shù)據(jù),使用SPSS18.0軟件,通過(guò)信度分析、因素分析等方法,檢驗(yàn)問(wèn)卷核心題項(xiàng)的信度和效度。共發(fā)放問(wèn)卷200份,剔除數(shù)據(jù)不完整及有明顯反應(yīng)傾向的問(wèn)卷后,實(shí)際回收有效問(wèn)卷192份,有效樣本96%。
(二)信度檢驗(yàn)
信度是指問(wèn)卷測(cè)試結(jié)果的一致性和穩(wěn)定性,一份問(wèn)卷的調(diào)查結(jié)果不會(huì)因調(diào)查者和調(diào)查時(shí)間不同而產(chǎn)生顯著誤差,則其調(diào)查結(jié)果就是穩(wěn)定的和可靠的。同質(zhì)信度是指問(wèn)卷項(xiàng)目之間的同質(zhì)性或內(nèi)部一致性。本研究采用克隆巴赫系數(shù)(Cronbach Alpha)進(jìn)行同質(zhì)性信度檢驗(yàn),在社會(huì)科學(xué)研究領(lǐng)域中,一般認(rèn)為,分量表(層面)信度系數(shù)在0.70至0.80之間信度高,如果信度系數(shù)在0.80以上,信度很高;如果整個(gè)問(wèn)卷(量表)信度系數(shù)在0.8以上,表明信度高[4]。本研究修訂的學(xué)習(xí)性參與問(wèn)卷的信度檢驗(yàn)效果見(jiàn)表1。
檢驗(yàn)表明,經(jīng)過(guò)文化適應(yīng)調(diào)整后的問(wèn)卷整體上的克隆巴赫系數(shù)達(dá)到0.881,信度佳;各維度克隆巴赫系數(shù)均在0.71以上,具有很好的信度。而學(xué)者曼德利諾和麥特(Mandarino and Mattern)的研究表明,CCSSE工具克隆巴赫系數(shù)僅有一個(gè)維度達(dá)到0.80,其他維度在0.56-0.76之間[5]。由此可見(jiàn),除調(diào)查工具調(diào)整后信度有顯著提高。
(三)效度檢驗(yàn)
問(wèn)卷的效度主要包括內(nèi)容效度和結(jié)構(gòu)效度等方面。內(nèi)容效度又稱(chēng)為邏輯效度,是指量表內(nèi)容或題目的適切性與代表性,即測(cè)驗(yàn)內(nèi)容能否反應(yīng)所要測(cè)量的心理特質(zhì),能否達(dá)到調(diào)查的目的[6]。本研究問(wèn)卷各題目和維度的調(diào)整綜合考慮了已有的研究和文獻(xiàn)基礎(chǔ)、訪談資料等,在修訂前后多次請(qǐng)教育學(xué)、社會(huì)學(xué)專(zhuān)家等進(jìn)行討論修改,保證了問(wèn)卷能夠涵蓋參與性學(xué)習(xí)的各個(gè)方面,邏輯上比較清楚、完整。
問(wèn)卷結(jié)構(gòu)效度是問(wèn)卷實(shí)際測(cè)到所要測(cè)量的理論結(jié)構(gòu)和特質(zhì)的程度,亦即測(cè)量分?jǐn)?shù)能夠解釋假設(shè)理論的某種結(jié)構(gòu)或特質(zhì)的程度。本研究通過(guò)因素分析對(duì)問(wèn)卷進(jìn)行效度檢驗(yàn)。主要檢驗(yàn)結(jié)果如下。
如表2所示,通過(guò)SPSS軟件測(cè)算KMO值和Bartlett球形檢驗(yàn),量表中五個(gè)維度的總體KMO值為0.898,表明問(wèn)卷變量間具有共同因素存在,調(diào)查所抽取的樣本具有很好地適切性。(KMO檢驗(yàn)的取值范圍在0到1之間,統(tǒng)計(jì)結(jié)果越接近1說(shuō)明取樣的適切性也越好。)Bartlett球形檢驗(yàn)是考察量表是否適合進(jìn)行結(jié)構(gòu)效度檢驗(yàn)的測(cè)量,其顯著性p值小于0.05時(shí)說(shuō)明數(shù)據(jù)呈現(xiàn)不是單元矩陣的假設(shè),適合進(jìn)行結(jié)構(gòu)效度的檢驗(yàn)。從上表可以看出,不論是五個(gè)維度本身還是量表總體,其顯著性結(jié)果均小于0.05,說(shuō)明量表非常適合進(jìn)行結(jié)構(gòu)效度檢驗(yàn)。
備注:提取方法為主軸因子分解。旋轉(zhuǎn)法:具有Kaiser 標(biāo)準(zhǔn)化的斜交旋轉(zhuǎn)法。
從表3來(lái)看,每一維度與其他維度若至少有一項(xiàng)絕對(duì)值高于0.50的積差相關(guān)系數(shù),表明此兩維度具有很好地密切性。若某一維度與其他維度存在至少一項(xiàng)絕對(duì)值高于0.20的積差相關(guān)系數(shù),則表明此兩維度的密切程度一般。(1與4的積差相關(guān)系數(shù)為0.5,則所有題目皆適合進(jìn)行探索性因素分析。1與4積差相關(guān)系數(shù)絕對(duì)值為0.50,密切程度較好;2與3積差相關(guān)系數(shù)絕對(duì)值為-0.228,1與5積差相關(guān)系數(shù)絕對(duì)值為-0.375,4與5積差相關(guān)系數(shù)絕對(duì)值為-0.263,均大于0.20,密切程度一般。)總體上來(lái)說(shuō),問(wèn)卷效度較好。這與學(xué)者安吉爾(Angell)采用“主軸因子分析法”與“斜交旋轉(zhuǎn)法”研究CCSSE工具結(jié)構(gòu)效度取得的結(jié)果一致,表明CCSSE工具及文化適應(yīng)調(diào)整后的工具對(duì)學(xué)生學(xué)習(xí)參與度的測(cè)量及學(xué)業(yè)成就的測(cè)量等具有實(shí)際意義[6]。
三、結(jié)論與討論
(一)結(jié)論
從數(shù)據(jù)檢驗(yàn)結(jié)果來(lái)看,CCSSE工具經(jīng)修訂后五大維度指標(biāo)信度和效度較好,符合研究要求,可以使用CCSSE-China工具對(duì)我國(guó)高職院校學(xué)生開(kāi)展學(xué)習(xí)性參與度調(diào)查研究。同時(shí),與原版CCSSE工具相比,調(diào)整后的工具五大維度指標(biāo)總體信度有一定幅度的提高,結(jié)構(gòu)效度與原工具一致,因此,可以在中美高職院校相關(guān)研究間進(jìn)行比較分析。
(二)討論
高職院校學(xué)生學(xué)習(xí)性參與度調(diào)查問(wèn)卷(CCSSE-China)是在對(duì)美國(guó)原版CCSSE工具漢化后形成的,盡管試測(cè)后檢驗(yàn)有較好的信度和效度,但仍存在一定的不足,如部分維度結(jié)構(gòu)效度不高,密切程度一般,建議未來(lái)研究中根據(jù)需要和條件,進(jìn)一步完善相關(guān)指標(biāo),使調(diào)查工具更趨完善。
參考文獻(xiàn):
[1]2012年教育統(tǒng)計(jì)數(shù)據(jù)[EB/OL].http://www.moe.gov.cn/publ cfiles/business/ htmlfiles/moe/s7567/list.html.
[2]李蘭巧,肖毅.美國(guó)“高職院校學(xué)生學(xué)習(xí)性參與調(diào)查”解析[J].職業(yè)技術(shù)教育,2011(29).
[3]肖毅. 高職院校學(xué)生學(xué)習(xí)性參與度研究現(xiàn)狀與啟示[J].職業(yè)教育,2013(5).
[4]吳明隆.問(wèn)卷統(tǒng)計(jì)分析實(shí)務(wù)[M].重慶:重慶大學(xué)出版社,2010.
[5]Mandarino, C., Mattern, M.Y. Assessing the Validity of CCSSE in an Ontario Colleg [EB/OL].[2014-04-03].http://www.heqco.ca/SiteCollectionDocuments/CCSSE_ENG.pdf.
[6]Angell,L.Construct Validity of the Community College Survey of Student Engagement[J].Community College Journal of Research and Practice, 2009(33).