新建本科院校校級教學(xué)效果評價(jià)體系的實(shí)證研究

陶 靜

（南京森林警察學(xué)院，江蘇南京 210023）

新建本科院校校級教學(xué)效果評價(jià)體系的實(shí)證研究

陶 靜

（南京森林警察學(xué)院，江蘇南京 210023）

通過運(yùn)用調(diào)查問卷工具和因子分析的方法，探究出一套符合新建本科院校校級層面的教學(xué)效果評價(jià)、監(jiān)測的指標(biāo)體系。文章建議建立學(xué)生增值服務(wù)檔案，樹立教學(xué)評價(jià)體系的全局觀念，并通過確立科學(xué)的評價(jià)指標(biāo)體系來全面提升教育教學(xué)質(zhì)量。

新建本科院校；教學(xué)效果；評價(jià)指標(biāo)體系

0引言

對新建本科院校而言，重視校級教育教學(xué)效果，是重視人才培養(yǎng)質(zhì)量的體現(xiàn)，亦是對培養(yǎng)應(yīng)用型專業(yè)人才定位的準(zhǔn)確把握。隨著新一輪本科教學(xué)評估的開展，評估的指導(dǎo)思想已從硬件建設(shè)轉(zhuǎn)向內(nèi)涵挖掘，教學(xué)研究改革、教學(xué)質(zhì)量提升和教學(xué)效果監(jiān)控等也逐漸加強(qiáng)了定量和定性相結(jié)合的分析方法。當(dāng)前新建本科院校的教學(xué)基本狀態(tài)數(shù)據(jù)項(xiàng)仍處于改革和探究階段，探討并完善有關(guān)教學(xué)效果的內(nèi)涵、外延及其評價(jià)指標(biāo)體系是掌握有效教學(xué)信息的結(jié)構(gòu)基礎(chǔ)，既能夠提高高校利用校級教學(xué)數(shù)據(jù)庫的效率，也是推動高校實(shí)施常態(tài)監(jiān)控、自我診斷和規(guī)范管理的必要舉措。

1教學(xué)效果的內(nèi)涵及其文獻(xiàn)綜述

當(dāng)前關(guān)于教學(xué)效果的內(nèi)涵界定主要是在教學(xué)活動閾限中。姚利民在《有效教學(xué)研究》中指出，教學(xué)效果是教學(xué)活動所呈現(xiàn)出的好的結(jié)果，重點(diǎn)考察的是學(xué)生的學(xué)習(xí)進(jìn)步與發(fā)展。James.L. Mursell著的《成功的教學(xué)》一書中提出，教學(xué)效果就是達(dá)成一種有效學(xué)習(xí)的教學(xué)活動，在這種教學(xué)活動中能促使學(xué)生們在知識、能力、興趣等各方面的全面的提升?？梢娊虒W(xué)效果主要注重描述學(xué)生在學(xué)習(xí)活動后的成長。

教育部高教評估中心組織填報(bào)的新建本科院校教學(xué)基本狀態(tài)數(shù)據(jù)庫（2011—2013版）中對教學(xué)效果的統(tǒng)計(jì)指標(biāo)項(xiàng)包括：就業(yè)率、畢業(yè)生中獲得學(xué)位的比例、學(xué)生體質(zhì)合格率、招生報(bào)到率、畢業(yè)生中黨員的比例、學(xué)生獲獎情況和“學(xué)生發(fā)表論文、作品和獲準(zhǔn)專利情況”，這些指標(biāo)雖然包括了教師教學(xué)成果、學(xué)生學(xué)業(yè)成果和學(xué)校綜合結(jié)果評價(jià)，但缺乏一定的結(jié)構(gòu)性和指向性。綜合校級視角和教育教學(xué)活動帶來增長變化的概念內(nèi)涵，本研究將教學(xué)效果界定為高校、師生在教育教學(xué)中取得的成果和提升。因而衡量教學(xué)有沒有效果既要考評學(xué)生有沒有取得進(jìn)步，還要考核教師是否完成了教學(xué)目標(biāo)，以及學(xué)校是否取得了相應(yīng)的教學(xué)成果。

2研究過程設(shè)計(jì)

1）研究樣本。本研究的樣本主要有兩個(gè)部分，一部分來自江蘇、安徽、海南、上海、廣西等地新建本科院校的教學(xué)評估機(jī)構(gòu)中的負(fù)責(zé)人及相關(guān)教師，并在由高教評估中心組織的教師交流群中通過電子郵件的形式發(fā)放、回收調(diào)查問卷。另一部分來自南京市高校的教師，包括南京師范大學(xué)、南京中醫(yī)藥大學(xué)、南京森林警察學(xué)院等，總計(jì)回收到273份有效數(shù)據(jù)。樣本描述性統(tǒng)計(jì)表明，性別為男性占48.3%，女性占51.7%；學(xué)位為博士的占23.5%，碩士占62.9%，學(xué)士及以下占13.6%；教齡小于10年的占47.6%，10年至20年之間的是35.2%，大于等于20年占17.2%［1］。

2）研究指標(biāo)。問卷中涉及的參考指標(biāo)來自全國新建本科院校教學(xué)基本狀態(tài)數(shù)據(jù)中的指標(biāo)項(xiàng)目和對專家、教師進(jìn)行訪談?wù){(diào)研收集的參考指標(biāo)。在綜合已有的研究觀點(diǎn)、整理采納專家建議，并在分析我校近三年的教學(xué)效果數(shù)據(jù)的基礎(chǔ)上，本文列出了關(guān)于新建本科院校的教學(xué)效果評價(jià)指標(biāo)體系的相關(guān)測量項(xiàng)目，包括新生認(rèn)可度（新生入學(xué)成績、招生報(bào)到率）、畢業(yè)生認(rèn)可度（就業(yè)率，就業(yè)質(zhì)量、就業(yè)穩(wěn)定性）、畢業(yè)生素質(zhì)（畢業(yè)生中黨員比例、畢業(yè)生獲得學(xué)位證書比例）、畢業(yè)生數(shù)量、在校生學(xué)業(yè)成果（學(xué)生發(fā)表的論文、作品以及獲得專利的數(shù)量，學(xué)生獲得學(xué)科、專業(yè)等獎勵數(shù)量）、在校生文體競賽獲獎、在校生體質(zhì)合格率、重點(diǎn)專業(yè)建設(shè)、精品課程數(shù)量以及師資水平等。

3）研究工具及方法。本研究通過調(diào)查問卷的形式收集了一線教師對教學(xué)效果及其評價(jià)體系的看法。為了確保問卷的信度和效度能夠滿足研究的需求，研究組對問卷采用的指標(biāo)和問題陳述進(jìn)行了多輪測試和改進(jìn)。通過軟件進(jìn)行相關(guān)性分析，刪除相關(guān)系數(shù)低、區(qū)分度不高或者操作性定義不明確的問題條目，最終形成了包涵招生報(bào)到率、畢業(yè)生就業(yè)率、在校生學(xué)業(yè)成果等17個(gè)測量指標(biāo)的新建本科院校教學(xué)效果評價(jià)指標(biāo)的調(diào)查問卷。問卷主要采用李克特量表來收集調(diào)查對象的觀點(diǎn)，通過對所有題目采用完全不同意、不太同意、一般（無所謂）、比較同意、完全同意5個(gè)級別表示，并按照1?5不同分?jǐn)?shù)進(jìn)行對應(yīng)。

3實(shí)證分析

1）本研究運(yùn)用SPSS17.0軟件進(jìn)行了統(tǒng)計(jì)分析。首先針對收集的問卷信息進(jìn)行信度檢驗(yàn)，在可靠性分析中參與分析的273組數(shù)值為有效觀察量，不含缺失值。量表的Cronbach's Alpha值大于0.7，表示整體上具有良好的信度，如表1。

表1 可靠性統(tǒng)計(jì)量

2）為了確保能夠運(yùn)用SPSS對問卷信息進(jìn)行因子分析，筆者對樣本數(shù)據(jù)在先期進(jìn)行了KMO和Bartlett's球體檢驗(yàn)，以確定樣本數(shù)據(jù)是否適合采用因子分析方法。經(jīng)過數(shù)據(jù)導(dǎo)入和運(yùn)算，本次問卷調(diào)查收集到的評價(jià)指標(biāo)的KMO檢驗(yàn)值為0.638（大于0.6），Bartlett的球形度檢驗(yàn)中Sig.（顯著性概率）值為0.000，如表2，表明量表數(shù)據(jù)能夠用來進(jìn)行因子分析［2］。

表2 KMO和Bartlett的檢驗(yàn)取樣足夠度的Kaiser?Meyer?O1kin度量

3）通過主成份分析法將17個(gè)具體測量指標(biāo)項(xiàng)目進(jìn)行統(tǒng)計(jì)，研究組并得出了解釋的總方差表（限于篇幅，省略）。從結(jié)果來看，大于1的特征值一共有6個(gè)，它們的方差累計(jì)貢獻(xiàn)率達(dá)到76.296%，因此在研究時(shí)提取6個(gè)因子即可代表并解釋本次問卷調(diào)查反映的數(shù)據(jù)關(guān)聯(lián)性和反映出的主體信息。經(jīng)過多次旋轉(zhuǎn)得到成份矩陣的信息如表3所示［3］。

根據(jù)最終的因子載荷矩陣表，從對變量的貢獻(xiàn)率大小來看，對主成份F1影響較大的指標(biāo)項(xiàng)目分別包括畢業(yè)初就業(yè)率、畢業(yè)半年就業(yè)率、畢業(yè)生數(shù)量、在校生數(shù)量和新生入學(xué)成績，其載荷分別為0.834、0.799、0.674、0.562、0.607［4］。這些指標(biāo)反映的是學(xué)校教學(xué)過程中關(guān)鍵的輸入和產(chǎn)出的質(zhì)量指標(biāo)。根據(jù)CIPP評價(jià)模式，對學(xué)校生源和輸出人才質(zhì)量的衡量也是一所高校教育水平、教學(xué)效果的集中展現(xiàn)，同時(shí)也符合當(dāng)前教學(xué)質(zhì)量評價(jià)理論中的增值創(chuàng)新概念，即關(guān)注學(xué)生在校期間的成長和增值的效果。

對F2影響較大的是新生報(bào)到率、在校生滿意度、社會捐贈數(shù)額和學(xué)校網(wǎng)站訪問量四個(gè)指標(biāo)項(xiàng)目，其載荷分別為0.697、0.610、0.574、0.510。這些指標(biāo)反映的是學(xué)校教育教學(xué)成果得到的社會各界認(rèn)可度，從主客觀方面體現(xiàn)出一所高校教學(xué)水平得到的支持度、關(guān)注度，以及其教學(xué)效果的影響度。并且相對于教育經(jīng)費(fèi)撥款等指標(biāo)，這些指標(biāo)較少受到教育行政力量影響，更加能真實(shí)顯現(xiàn)出高校整體教學(xué)水平的社會聲譽(yù)和知名度。

對F3影響較大的是在校生學(xué)業(yè)成果（發(fā)表論文、作品及獲得專利數(shù)量）、在校生課外成績（科技、文化及文體獎勵數(shù)量）和體質(zhì)合格率，其載荷分別為0.513、0.540、0.653。這些指標(biāo)主要反映的是在校生的德育、智育、美育、體育等方面的成果，展示的是學(xué)校場域內(nèi)學(xué)生學(xué)業(yè)成績的競爭力和人才培養(yǎng)質(zhì)量。

對F4影響較大的是精品課程數(shù)量和重點(diǎn)專業(yè)數(shù)量兩個(gè)指標(biāo)項(xiàng)目，其載荷分別為0.557、0.574，這兩個(gè)指標(biāo)項(xiàng)目主要關(guān)注的是學(xué)校教學(xué)平臺的資源力量，它們與教學(xué)效果有著相輔相成的作用，既是高校良好教學(xué)效果的展示，也是有力的構(gòu)成要素。

對F5影響較大的是教師獎項(xiàng)（教育教學(xué)改革獎勵），其載荷為0.596，這類指標(biāo)是優(yōu)秀師資力量的綜合展示，同樣是高校具有較高教育教學(xué)水平的形成因子。對F6影響較大的是畢業(yè)生黨員比例和畢業(yè)生獲學(xué)位比例兩個(gè)指標(biāo)項(xiàng)目，其載荷分別為0.648、0.685，通常評價(jià)高校整體教學(xué)效果都會考量這兩個(gè)指標(biāo)量。

表3 成份矩陣a成份

4）根據(jù)因子得分的系數(shù)矩陣，利用公式Fj＝bj1V1＋bj2V2＋…＋bjpVp，j＝1，2，…，m，可以得出最終的因子得分，并在SPSS軟件的Data Editor窗口中可以查看到FAC1＿1、FAC2＿1…FAC6＿1的因子得分?jǐn)?shù)。同時(shí)依據(jù)因子權(quán)重的計(jì)算公式Hn＝因子方差貢獻(xiàn)率／總累計(jì)方差貢獻(xiàn)率×100%，結(jié)合最終的因子載荷矩陣表，可以得出6個(gè)因子的權(quán)重分別為31.56%、19.54%、15.64%、13.73%、10.35%、9.18%［3］。

4結(jié)論及建議

4.1初步結(jié)論

本文在教學(xué)基本狀態(tài)數(shù)據(jù)關(guān)于高校教學(xué)效果的相關(guān)研究基礎(chǔ)上，結(jié)合文獻(xiàn)綜述分析、評估專家調(diào)查訪談等方式，對新建本科院校的教學(xué)效果評價(jià)指標(biāo)的構(gòu)成體系進(jìn)行了要素提煉，構(gòu)建了當(dāng)前的評價(jià)指標(biāo)體系模型，這個(gè)模型的一級維度包括生源和畢業(yè)質(zhì)量、社會聲譽(yù)、在校生綜合素質(zhì)、學(xué)校教學(xué)平臺、師資力量和優(yōu)秀學(xué)生比例。

通過主成分分析后的指標(biāo)貢獻(xiàn)率大小來看，學(xué)校學(xué)生生源和畢業(yè)生質(zhì)量具有較大的影響（影響權(quán)重為31.56%），其次為學(xué)校的社會聲譽(yù)、在校生的綜合素質(zhì)，分別占19.54%和15.64%的比重；學(xué)校的教學(xué)平臺、師資力量以及優(yōu)秀學(xué)生比例這些指標(biāo)量分別占13.73%、10.35%和9.18%的比例。

根據(jù)F1至F6共6個(gè)FAC因子得分?jǐn)?shù)的降序排列，結(jié)合問卷中調(diào)查對象的層次分類，我們還可以得到以下結(jié)論。在權(quán)衡學(xué)生生源和畢業(yè)生質(zhì)量的指標(biāo)時(shí)，教齡在10年以下的講師（以及助教）排在前列的比例較高，表明年輕教師在衡量高校的教學(xué)效果時(shí)更加看重學(xué)生的入學(xué)資質(zhì)和畢業(yè)質(zhì)量，即他們對教學(xué)活動中輸入和輸出兩個(gè)環(huán)節(jié)的緊密度更加關(guān)注（打分較高）［5］。在權(quán)衡學(xué)校社會聲譽(yù)的因子得分排序中，具有研究生學(xué)歷的教授、副教授的打分相對較高，表明具有教授、副教授職稱的教師們在衡量高校的教學(xué)質(zhì)量效果時(shí)，更注重外部評價(jià)，并以學(xué)校在社會上的認(rèn)可度來評價(jià)高校培養(yǎng)專業(yè)人才的質(zhì)量和水平。

4.2建議

注重增值服務(wù)，建設(shè)富含“進(jìn)取文化”的人才培養(yǎng)模式。當(dāng)前，隨著高等教育規(guī)模的擴(kuò)張、畢業(yè)生數(shù)量的攀升和人力資源市場的競爭加劇，就業(yè)相關(guān)指標(biāo)成為各個(gè)高校教育水平評價(jià)的紅線，并促成了十分火熱的就業(yè)培訓(xùn)市場。除了研究在市場機(jī)制下靈活性和針對性的如何取得優(yōu)勢之外，高校如何提高人才培養(yǎng)質(zhì)量才是真正需要叩問的。本文第一類指標(biāo)“生源和畢業(yè)質(zhì)量”反映出人才培養(yǎng)的指導(dǎo)思想需要轉(zhuǎn)變成為學(xué)生提供增值服務(wù)的理念上。也就是說，高校不僅需要為學(xué)生提供認(rèn)知、成才服務(wù)，而且要真正以生為本，建立學(xué)生入校、離校區(qū)間的“增值檔案”。學(xué)校要在教育教學(xué)中以進(jìn)取、提升為目標(biāo)，營造“進(jìn)取性文化”，而不僅僅局限于就業(yè)的紅線。這樣學(xué)生在校期間的成長路徑才是學(xué)校教育質(zhì)量、教學(xué)效果的真正表征，而且通過進(jìn)取型文化的滲透，能夠真正提升學(xué)生的就業(yè)技能和職業(yè)認(rèn)知，避免學(xué)生在學(xué)習(xí)中一切指向就業(yè)的功利化訴求及其帶來的弊端。

重視優(yōu)質(zhì)指標(biāo)，提升學(xué)校的品牌效應(yīng)。近幾年在各級教育主管部門的統(tǒng)計(jì)指標(biāo)中，例如畢業(yè)生黨員比例、畢業(yè)生獲學(xué)位比例等高校優(yōu)秀畢業(yè)生的比例統(tǒng)計(jì)經(jīng)常出現(xiàn)，并作為衡量高校畢業(yè)生的素質(zhì)水平的考核要求之一。但在本次針對多個(gè)高校教學(xué)評估專家和教師的調(diào)查統(tǒng)計(jì)中，則出現(xiàn)了這些硬指標(biāo)“遇冷”的情況?？梢钥闯觯趯?shí)際評價(jià)高校教育教學(xué)效果時(shí)，相對于在校生的證書獲得情況和政治覺悟度，評價(jià)者更看中用人單位的接受度，以及在校的學(xué)業(yè)成果和綜合素質(zhì)表現(xiàn)。另外，在高校教學(xué)評價(jià)體系中，學(xué)校網(wǎng)站點(diǎn)擊量、新生報(bào)到率等測量指標(biāo)是高校整體教育教學(xué)水平的綜合實(shí)力體現(xiàn)的附屬價(jià)值指標(biāo)?？梢姼咝＝虒W(xué)效果的“外部經(jīng)濟(jì)”效應(yīng)也是不容忽略的。所以，高校須立足自身，并積極實(shí)施品牌戰(zhàn)略，在提升社會聲譽(yù)和認(rèn)同度的同時(shí)打造高層次教學(xué)平臺。

［1］何霞，劉文明.高職院校教師激勵模型的驗(yàn)證性因素分析——基于28所高職院校的抽樣調(diào)查［J］.中國高教研究，2014（3）：95?99.

［2］顏煉鋼.高職院校教育經(jīng)費(fèi)投入績效評價(jià)實(shí)證研究［J］.中國高教研究，2014（2）：90?93.

［3］杜強(qiáng)，賈麗艷.SPSS統(tǒng)計(jì)分析［M］.中國郵電出版社，2009（3）：273?282.

［4］劉彥文，管玲芳.案例教學(xué)效果評價(jià)指標(biāo)體系的實(shí)證研究［J］.管理案例研究與評論，2008（4）：69?74.

［5］魏紅，等.科研成果與大學(xué)教師教學(xué)效果的關(guān)系研究［J］.心理發(fā)展與教育，2006（2）：85?88.

［責(zé)任編輯：張 超］

G647

A

1671?6876（2014）03?0251?04

2014?07?20

2014年度中央高?；究蒲袠I(yè)務(wù)費(fèi)專項(xiàng)資金項(xiàng)目（RWYB201406）

陶靜（1987?），女，江蘇南京人，助教，碩士，主要從事高等教育學(xué)研究。E?mail：694162449＠qq.com