工程管理專業(yè)教學(xué)效果滿意度評(píng)價(jià)的實(shí)證分析

陸菊春 左小芳

(武漢大學(xué)經(jīng)濟(jì)與管理學(xué)院,湖北武漢430072)

工程管理專業(yè)教學(xué)效果滿意度評(píng)價(jià)的實(shí)證分析

陸菊春 左小芳

(武漢大學(xué)經(jīng)濟(jì)與管理學(xué)院,湖北武漢430072)

本文以某高校工程管理專業(yè)畢業(yè)生為研究對(duì)象,以問卷調(diào)查的方式對(duì)教學(xué)效果滿意度進(jìn)行了實(shí)證分析,應(yīng)用統(tǒng)計(jì)分析方法對(duì)調(diào)查結(jié)果進(jìn)行信度和效度分析,運(yùn)用驗(yàn)證性因子分析得出影響教學(xué)效果滿意度的主要因素,由此提出提高教學(xué)效果滿意度的對(duì)策建議,并提出了未來教學(xué)效果滿意度的研究展望。

教學(xué)效果;滿意度;影響因素;實(shí)證分析

一、引言

隨著高等教育體制改革的不斷發(fā)展,我國的高等教育事業(yè)有了很大的發(fā)展,如何確保教學(xué)質(zhì)量的同步提高,是高等學(xué)校迫切需要重視的問題之一。進(jìn)行教學(xué)效果滿意度評(píng)價(jià),有利于進(jìn)—步深化高校教學(xué)改革,提高教學(xué)水平和教學(xué)質(zhì)量。學(xué)生是學(xué)習(xí)的主體,通過對(duì)學(xué)生教學(xué)效果滿意度的調(diào)查,才能對(duì)教學(xué)改革的結(jié)果做出客觀的判斷,根據(jù)評(píng)價(jià)所獲取的有關(guān)信息,發(fā)現(xiàn)問題,找到差距,充分調(diào)動(dòng)教師、教學(xué)管理人員和學(xué)生的積極性和主動(dòng)性,不斷改進(jìn)教學(xué)工作,優(yōu)化教學(xué)活動(dòng)全過程,從而促進(jìn)教學(xué)水平和教學(xué)質(zhì)量的逐步提高。

由于畢業(yè)生經(jīng)歷了整個(gè)本科教學(xué)過程,對(duì)教學(xué)效果有比較完整的感受,本文即以某高校工程管理專業(yè)畢業(yè)生為調(diào)查對(duì)象,以問卷調(diào)查的方式對(duì)教學(xué)效果滿意度進(jìn)行調(diào)查評(píng)價(jià),應(yīng)用統(tǒng)計(jì)分析方法對(duì)調(diào)查結(jié)果進(jìn)行信度和效度分析,并對(duì)問卷進(jìn)行了一定的調(diào)整,得到了各題項(xiàng)因子載荷與公共因子方差解釋貢獻(xiàn)率,得出影響教學(xué)效果滿意度的主要影響因素,由此提出提高教學(xué)效果滿意度的對(duì)策建議,并提出了未來教學(xué)效果滿意度的研究展望。

二、教學(xué)效果滿意度調(diào)查問卷表的設(shè)計(jì)

指標(biāo)的—般含義是“計(jì)劃中規(guī)定達(dá)到的目標(biāo)”①。評(píng)價(jià)指標(biāo)是由—系列因素組成的,是一種具體的、可測(cè)量的、行為化的評(píng)價(jià)準(zhǔn)則,是根據(jù)可測(cè)或可觀察的要求而確定的評(píng)價(jià)內(nèi)容,具有較強(qiáng)的目的性、可操作性和可測(cè)性。任何評(píng)價(jià)活動(dòng)都要按照特定的目標(biāo)和依據(jù)進(jìn)行。教學(xué)工作評(píng)價(jià)的目標(biāo)就是發(fā)現(xiàn)問題,提高教學(xué)質(zhì)量,最終促進(jìn)教育事業(yè)發(fā)展。要實(shí)現(xiàn)這一目標(biāo)就需要建立完善的評(píng)價(jià)指標(biāo)體系,為評(píng)價(jià)活動(dòng)奠定基礎(chǔ)。評(píng)價(jià)工作的順利進(jìn)行及其有效性在很大程度上取決于評(píng)價(jià)指標(biāo)的建立。

對(duì)于學(xué)校的教學(xué)工作評(píng)價(jià)可從兩個(gè)層面來理解:一是包括學(xué)校教學(xué)管理在內(nèi)的教學(xué)工作評(píng)價(jià);二是教師教學(xué)(主要是課堂教學(xué))的評(píng)價(jià)②。本文的教學(xué)工作評(píng)價(jià)的主要范疇是第一種,即包括學(xué)校教學(xué)管理在內(nèi)的教學(xué)工作評(píng)價(jià)。教學(xué)工作評(píng)價(jià)指標(biāo)是根據(jù)特定的教育目標(biāo),對(duì)教育過程中的計(jì)劃、組織、環(huán)境、教學(xué)等方面影響因素進(jìn)行匯總細(xì)分所得到的評(píng)價(jià)標(biāo)準(zhǔn),是教學(xué)工作各方面的具體體現(xiàn)。教學(xué)評(píng)價(jià)指標(biāo)除了一般指標(biāo)應(yīng)具有的目的性、可操作性和可測(cè)性外,還應(yīng)具備較強(qiáng)的教學(xué)導(dǎo)向性、實(shí)施針對(duì)性和規(guī)范約束性。教學(xué)效果滿意度評(píng)價(jià)的目標(biāo)就是發(fā)現(xiàn)問題、提高教學(xué)質(zhì)量,要實(shí)現(xiàn)這一目標(biāo)就需要建立完善的教學(xué)滿意度評(píng)價(jià)指標(biāo)體系,為評(píng)價(jià)活動(dòng)奠定基礎(chǔ)。因此教學(xué)效果滿意度調(diào)查問卷主要包括以下方面:

第一,總體評(píng)價(jià)A?？傮w是由部分組成,但不等同簡單的部分相加。因此,對(duì)教學(xué)工作的各環(huán)節(jié)進(jìn)行評(píng)價(jià)并不能代替總體效果的評(píng)價(jià)。教學(xué)工作的總體滿意度評(píng)價(jià)是學(xué)生對(duì)教學(xué)工作的整體效果的感知,例如對(duì)整個(gè)本科階段的學(xué)習(xí)滿意度、科研能力的提高、創(chuàng)新能力的提高、知識(shí)結(jié)構(gòu)的優(yōu)化等,因此對(duì)總體滿意度評(píng)價(jià)主要從綜合能力、科研能力、創(chuàng)新能力、知識(shí)結(jié)構(gòu)優(yōu)化、計(jì)算機(jī)能力、外語能力提高程度以及工作和所學(xué)專業(yè)關(guān)聯(lián)度進(jìn)行考慮。

第二,課程體系評(píng)價(jià)B。課程體系的設(shè)置是本科專業(yè)教學(xué)質(zhì)量的根本。考察學(xué)生對(duì)課程體系滿意度的評(píng)價(jià)主要從四年課程總體設(shè)置合理性、基礎(chǔ)課時(shí)間與強(qiáng)度合理性、專業(yè)課時(shí)間與強(qiáng)度合理性、使用教材合理性、主輔學(xué)位制、雙學(xué)位制等方面考慮。

第三,課堂教學(xué)評(píng)價(jià)C。課堂教學(xué)是向?qū)W生傳授知識(shí)、進(jìn)行能力和素質(zhì)培養(yǎng)的主渠道,是實(shí)現(xiàn)教育目標(biāo)的主要途徑。學(xué)生對(duì)課堂教學(xué)的評(píng)價(jià)信息是教學(xué)工作評(píng)價(jià)必不可少的部分,學(xué)生對(duì)課堂教學(xué)的評(píng)價(jià)側(cè)重于教學(xué)態(tài)度、教學(xué)方法、教學(xué)效果、學(xué)生的感受等方面③。

第四,實(shí)踐環(huán)節(jié)評(píng)價(jià)D。實(shí)踐教學(xué)在鍛煉工程管理專業(yè)學(xué)生的實(shí)際操作能力,培養(yǎng)學(xué)生綜合運(yùn)用所學(xué)知識(shí)、解決實(shí)際問題的能力以及創(chuàng)新意識(shí),在實(shí)際中鞏固加強(qiáng)所學(xué)知識(shí)方面起著非常重要的作用。根據(jù)實(shí)踐環(huán)節(jié)的特點(diǎn),從實(shí)踐時(shí)間、地點(diǎn)、內(nèi)容、效果等方面進(jìn)行評(píng)價(jià)。

三、實(shí)證分析

(一)調(diào)查對(duì)象與統(tǒng)計(jì)分析方法

本文以某高校2005—2009年畢業(yè)的畢業(yè)生為調(diào)查對(duì)象,由于畢業(yè)生所在地比較分散,在調(diào)查過程中主要采用網(wǎng)絡(luò)問卷形式,共發(fā)出問卷180份,回收問卷153份,有效問卷141份,問卷回收率為85%,有效率為78%。

問卷的評(píng)價(jià)選項(xiàng)分為非常不滿意、不滿意、有點(diǎn)不滿意、不知道、有點(diǎn)滿意、滿意、非常滿意七類,在進(jìn)行統(tǒng)計(jì)分析時(shí),分別賦予1-7的數(shù)值,即:1-非常不滿意,2-不滿意,3-有點(diǎn)不滿意,4-不知道,5-有點(diǎn)滿意,6-滿意,7-非常滿意。應(yīng)用SPSS17.0進(jìn)行信度分析、探索性因子分析和描述統(tǒng)計(jì),應(yīng)用Lisrel8.7進(jìn)行驗(yàn)證性因素分析。

(二)調(diào)查結(jié)果描述統(tǒng)計(jì)

根據(jù)問卷的調(diào)查結(jié)果對(duì)其進(jìn)行描述統(tǒng)計(jì)分析,得到以下結(jié)果:

畢業(yè)生對(duì)以下幾個(gè)方面的平均態(tài)度為同意(均值在5—6之間):A1綜合能力的提高、A4知識(shí)結(jié)構(gòu)的優(yōu)化、A5計(jì)算機(jī)能力的提高、C12老師做到了教書育人、C2老師的教學(xué)態(tài)度都很積極、C9教學(xué)的軟硬件設(shè)施良好。

畢業(yè)生對(duì)以下幾個(gè)方面的平均態(tài)度為基本不同意(均值在3—4之間):D5實(shí)踐效果良好、D4實(shí)踐內(nèi)容安排合理、B5專業(yè)課安排的強(qiáng)度合理性、B4專業(yè)課安排的時(shí)間合理性、B1四年課程安排的總體合理性、C4課堂氣氛活躍。

畢業(yè)生對(duì)B8科研活動(dòng)的參與(均值為2.95)平均態(tài)度為不同意;畢業(yè)生對(duì)教學(xué)態(tài)度的其他方面態(tài)度的均值都在4—5之間,即有點(diǎn)同意;總的來說,各題項(xiàng)平均均值的范圍為2.95-5.58,總體偏低,即工程管理專業(yè)教學(xué)水平各方面都有待提高。

(三)信度與效度分析

信度分析是一種度量綜合評(píng)價(jià)體系是否具有一定穩(wěn)定性和可靠性的有效分析方法④。本調(diào)查中采用運(yùn)用SPSS17.0軟件用Cronbach'sα系數(shù)法進(jìn)行信度分析,結(jié)果見表1所示。

表1 信度分析結(jié)果

由表1可知各子維度的格朗巴哈系數(shù),除了總體評(píng)價(jià)部分在0.60—0.80之間,算是可以接受的范圍外,其他各子維度的Cronbach's系數(shù)都大于0.80,說明各子維度的可信度良好?？傮w評(píng)價(jià)部分的格朗巴哈系數(shù)為0.754,可信度可以接受;課程體系評(píng)價(jià)部分的格朗巴哈系數(shù)為0.830,教學(xué)方法評(píng)價(jià)部分的格朗巴哈系數(shù)為0.898,實(shí)踐環(huán)節(jié)評(píng)價(jià)部分的格朗巴哈系數(shù)為0.886,表明這些評(píng)價(jià)部分總體可信度良好。

效度是指測(cè)量工具或手段能夠準(zhǔn)確測(cè)出所需測(cè)量的事物的程度⑤。有的學(xué)者認(rèn)為,效度分析最理想的方法是利用因子分析(即因素分析)測(cè)量量表或整個(gè)問卷的結(jié)構(gòu)效度。因素分析即利用一組測(cè)量同一個(gè)構(gòu)念的觀察變量來估計(jì)背后的潛在變量⑥。在本研究中,采用探索性因子分析(EFA)和驗(yàn)證性因子分析(CFA)驗(yàn)證問卷數(shù)據(jù)的有效性,運(yùn)用Bartlett球形檢驗(yàn)進(jìn)行探索性因子分析的條件檢驗(yàn)。

1.探索性因子分析

探索性因子分析的條件檢驗(yàn)。收集的數(shù)據(jù)是否適合做因子分析,首先需要進(jìn)行KMO和Bartlett球形檢驗(yàn)。統(tǒng)計(jì)顯示KMO的值為0.527,說明樣本偏小,但由于該調(diào)查本身的樣本總量有限,故認(rèn)為其基本達(dá)到要求;同時(shí)Bartlett球形檢驗(yàn)給出的相伴概率為0.000,小于0.001,認(rèn)為本問卷及其各因子組成項(xiàng)目的構(gòu)建效度良好,適合做因子分析⑦。

探索性因子抽取結(jié)果。使用正交旋轉(zhuǎn)法進(jìn)行因子旋轉(zhuǎn)后得到10個(gè)公共因子和各題項(xiàng)的因子載荷值。10個(gè)公共因子解釋的總方差為82.427%。一般而言,絕對(duì)值大于0.3的因子負(fù)荷就是顯著的⑧,項(xiàng)目在因子中的負(fù)荷越大,在解釋因子時(shí)越重要,本文以因子載荷大于或等于0.5為題項(xiàng)顯著影響公共因子的判定標(biāo)準(zhǔn)。

2.驗(yàn)證性因子分析

一般來說,使用者可以根據(jù)自己的偏好與分析軟件所提供的指數(shù)類型評(píng)估理論假設(shè)模型的擬合度。目前最常見到的擬合評(píng)估策略除了卡方值與卡方顯著性、卡方自由度比兩種傳統(tǒng)方式外,還有CFI、RMSEA、NNFI、GFI、SRMR等。在該調(diào)查分析中,我們就應(yīng)用這些評(píng)鑒指標(biāo)進(jìn)行檢驗(yàn)。應(yīng)用LISREL軟件的驗(yàn)證性因子分析模型的各項(xiàng)指標(biāo)如下表2所示,擬合度良好,問卷調(diào)查結(jié)果是有效的。

表2 擬合度指標(biāo)分析結(jié)果

(四)問卷修正與主要影響因素

由表2可知各項(xiàng)擬合度都可接受,即該問卷是具有有效性的。但各項(xiàng)指標(biāo)的擬合度還可以提高,故我們對(duì)由探索性因子分析得到的10因子模型進(jìn)行修正。即在抽取因子的過程中,把特征值大于1作為選取因子的原則,并利用方差最大正交旋轉(zhuǎn)法,刪除因子載荷絕對(duì)值小于0.5的項(xiàng)目;此外如果一個(gè)題項(xiàng)形成一個(gè)因子,在本研究中也予以剔除。根據(jù)上述原則,經(jīng)過兩次篩選,問卷調(diào)查各個(gè)題項(xiàng)在因子上的載荷值以及方差解釋貢獻(xiàn)率見圖1。

從上述的探索性因子分析的結(jié)果可以看出,調(diào)整前10因子結(jié)構(gòu)解釋的總方差為82.427%,而8個(gè)因子結(jié)構(gòu)解釋了總方差的80.714%,以較少的公共因子基本達(dá)到了相同的解釋能力;題項(xiàng)因子最高載荷為0.900,最低載荷為0.526,因子結(jié)構(gòu)比較清晰,故把教學(xué)滿意度評(píng)價(jià)看成8因子結(jié)構(gòu)結(jié)果更加合理。前三個(gè)公共因子的方差貢獻(xiàn)率分別為29.977、14.023、11.475,根據(jù)各題項(xiàng)內(nèi)容,可將這前三個(gè)公共因子分別命名為教學(xué)因素、實(shí)踐因素、教師因素。因此,影響畢業(yè)生對(duì)工程管理專業(yè)教學(xué)滿意度評(píng)價(jià)的主要因素為教學(xué)因素、實(shí)踐因素、教師因素。綜上,可得到影響畢業(yè)生對(duì)工程管理專業(yè)教學(xué)水平滿意度的主要因素如表3所示。

表3 工程管理專業(yè)教學(xué)滿意度主要影響因素

四、對(duì)策建議及研究展望

根據(jù)以上實(shí)證研究的結(jié)論,關(guān)于提高教學(xué)水平和質(zhì)量,提出以下建議:在科研活動(dòng)參與性方面,加強(qiáng)老師與學(xué)生的聯(lián)系,使學(xué)生對(duì)老師的科研方向及內(nèi)容有所了解,使學(xué)生能夠有機(jī)會(huì)參與到科研活動(dòng)之中;在實(shí)踐教學(xué)方面,增加實(shí)踐教學(xué)經(jīng)費(fèi),合理安排實(shí)踐教學(xué)的時(shí)間、地點(diǎn)和內(nèi)容,制定有效的實(shí)踐教學(xué)結(jié)果評(píng)定方法;在課程安排方面,參照相關(guān)專業(yè)課程安排和未來就業(yè)的能力需求,合理安排專業(yè)課程的教學(xué)時(shí)間和內(nèi)容;在課堂教學(xué)方面,一方面建議老師豐富教學(xué)內(nèi)容,采用更加互動(dòng)的教學(xué)方式,并且適當(dāng)擴(kuò)展一些學(xué)生有興趣的課外內(nèi)容,另一方面學(xué)?？梢约訌?qiáng)學(xué)風(fēng)建設(shè),營造良好的學(xué)習(xí)氛圍,從而提高學(xué)生的學(xué)習(xí)積極性。

圖1 各題項(xiàng)因子載荷與公共因子方差解釋貢獻(xiàn)率

本研究是基于武漢市某高校的一個(gè)專業(yè)進(jìn)行的,在具有針對(duì)性特點(diǎn)的同時(shí),也注定存在一定的局限性。另外,由于畢業(yè)生總樣本量的限制和所在地比較分散,調(diào)查的樣本容量無法足夠大,對(duì)研究所得到的結(jié)果產(chǎn)生了一定的影響,其穩(wěn)定性還需進(jìn)一步驗(yàn)證。其次,教學(xué)工作評(píng)價(jià)指標(biāo)體系的建立還需在未來的研究中進(jìn)一步完善,還可以將學(xué)生自身對(duì)評(píng)價(jià)結(jié)果有影響的特性納入到評(píng)價(jià)指標(biāo)體系中,使得教學(xué)工作評(píng)價(jià)結(jié)果更加合理。

注釋

①《現(xiàn)代漢語辭典》,北京:商務(wù)印書館,1983年,第1488頁。

②陳玉琨:《教育評(píng)價(jià)學(xué)》,北京:人民教育出版社,1999年,第18頁。

③陳想平、劉紹平:《校內(nèi)本科教學(xué)工作評(píng)價(jià)體系研究》,《江漢石油學(xué)院學(xué)報(bào)(社科版)》2000年第6期。

④⑤劉大海、李寧:《SPSS15.0統(tǒng)計(jì)分析從入門到精通》,北京:清華大學(xué)出版社,2008年,第348-349頁。

⑥邱皓政、林碧芳:《結(jié)構(gòu)方程模型的原理與應(yīng)用》,北京:中國輕工業(yè)出版社,2009年,第1-3頁。

⑦Kaiser,H.F.The Application of Electronic Computer to Factor Analysis.Educational Psychology Measurements.1960(20):141-151.

⑧陳灝珠:《實(shí)用內(nèi)科學(xué)》,北京:人民衛(wèi)生出版社,2005年,第20頁。

責(zé)任編輯 文音

2010-05-01

本文受工程管理專業(yè)實(shí)習(xí)環(huán)節(jié)教學(xué)質(zhì)量保障體系構(gòu)建與創(chuàng)新人才培養(yǎng)研究項(xiàng)目資助