數(shù)學(xué)課授課情況調(diào)查問卷的信度和效度分析
——以三亞航空旅游職業(yè)學(xué)院為例

李苑輝， 劉 夏

(三亞航空旅游職業(yè)學(xué)院 人文社科學(xué)院，海南 三亞 572000)

課堂授課作為高職院校最基礎(chǔ)同時(shí)也是最重要的教學(xué)組織形式，是實(shí)現(xiàn)人才培養(yǎng)目標(biāo)、保證教學(xué)質(zhì)量的重要環(huán)節(jié).以學(xué)生為參與主體的教師課堂授課情況調(diào)查是教學(xué)質(zhì)量評(píng)估的重要組成部分.完善和改進(jìn)以學(xué)生為主體的課堂教學(xué)質(zhì)量評(píng)價(jià)制度，建立一套科學(xué)、完善的課堂教學(xué)質(zhì)量評(píng)價(jià)指標(biāo)體系，對(duì)于診斷和改進(jìn)課堂教學(xué)質(zhì)量，促進(jìn)師資建設(shè)，強(qiáng)化教學(xué)工作的中心地位具有重要的理論價(jià)值和實(shí)踐意義.在此過程中，研究者較為關(guān)心的是教師教學(xué)質(zhì)量評(píng)估的科學(xué)性和可行性問題，即學(xué)生對(duì)教師教學(xué)質(zhì)量的評(píng)價(jià)是否可靠和有效.問卷是調(diào)查的主要形式，通過問卷調(diào)查能夠獲得第一手資料，而問卷的信度和效度是衡量問卷質(zhì)量的一項(xiàng)重要標(biāo)準(zhǔn).本文利用所設(shè)計(jì)的數(shù)學(xué)授課情況調(diào)查問卷，對(duì)三亞航空旅游職業(yè)學(xué)院(以下簡稱“學(xué)院”)數(shù)學(xué)課授課情況進(jìn)行了調(diào)查，并通過SPSS軟件來分析、研究調(diào)查問卷的信度和效度.

1 研究的基本情況

1.1 研究對(duì)象

選取學(xué)院學(xué)習(xí)“高等數(shù)學(xué)”或“經(jīng)濟(jì)應(yīng)用數(shù)學(xué)”課程的學(xué)生為本次調(diào)查的目標(biāo)人群.

1.2 問卷內(nèi)容

在設(shè)計(jì)高職數(shù)學(xué)課授課情況問卷時(shí)，構(gòu)建了相關(guān)的指標(biāo)體系，主要從學(xué)生對(duì)教師業(yè)務(wù)能力的評(píng)估、學(xué)生對(duì)學(xué)習(xí)數(shù)學(xué)的興趣兩方面來綜合考慮，從而使各項(xiàng)指標(biāo)之間能夠相互印證、相互檢測、相互解釋和說明.通過分析教師業(yè)務(wù)能力與學(xué)生對(duì)數(shù)學(xué)的興趣之間的關(guān)系,研究它們的關(guān)聯(lián)度，為以后制定或修改教學(xué)大綱、教學(xué)計(jì)劃提供參考.

該調(diào)查問卷共包括身份甄別、評(píng)價(jià)任課教師、對(duì)數(shù)學(xué)的興趣三部分.身份甄別部分要篩選出合格的受訪者.評(píng)價(jià)任課教師部分共11個(gè)問項(xiàng)，內(nèi)容分為各方面評(píng)價(jià)項(xiàng)和總體評(píng)價(jià)項(xiàng)兩部分，這11個(gè)問項(xiàng)均設(shè)置了“非常滿意、滿意、一般、不滿意、非常不滿意” 5個(gè)選項(xiàng).對(duì)數(shù)學(xué)的興趣部分包括學(xué)生對(duì)與數(shù)學(xué)相關(guān)的競賽、選修課、課外知識(shí)、課后習(xí)題等方面的態(tài)度.

1.3 數(shù)據(jù)采集

為確保調(diào)查的代表性與廣泛性，要求每個(gè)班級(jí)參與問卷調(diào)查的學(xué)生人數(shù)不少于班級(jí)總?cè)藬?shù)的2/3. 在進(jìn)行調(diào)查時(shí)，讓學(xué)生掃描二維碼，在線作答，由計(jì)算機(jī)后臺(tái)自動(dòng)采集并得到相關(guān)數(shù)據(jù).此次調(diào)查共獲得920份答卷，因預(yù)先對(duì)計(jì)算機(jī)調(diào)查軟件進(jìn)行了當(dāng)有部分條目缺失時(shí)問卷將無法提交的設(shè)置，故后臺(tái)統(tǒng)計(jì)時(shí)已經(jīng)剔除缺失值，統(tǒng)計(jì)的有效樣本量為920例.

2 統(tǒng)計(jì)結(jié)果處理

2.1 信度評(píng)價(jià)

信度(Reliability)是指對(duì)問卷進(jìn)行重復(fù)測量，產(chǎn)生一致性結(jié)果的程度[1].調(diào)查結(jié)果的一致性是指對(duì)于同樣一個(gè)調(diào)查問卷中的問項(xiàng)，得出結(jié)果的一致水平[1].如果問卷調(diào)查結(jié)果的一致性比較高，表明同一被調(diào)查對(duì)象接受相同問項(xiàng)的不同問卷測試時(shí)，所得出的各調(diào)查結(jié)果之間的正相關(guān)關(guān)系非常強(qiáng).

按照不同的測量方法，信度可以分為重測信度、復(fù)本信度和內(nèi)部一致性信度[2].重測信度(Test-retest Reliability)指用同一份調(diào)查問卷，用相同的測量方法，在不同時(shí)間對(duì)同一對(duì)象進(jìn)行兩次檢查，計(jì)算相關(guān)系數(shù)[2].復(fù)本信度(Alternative-forms Reliability)是指制作兩份等價(jià)的問卷，在不同的時(shí)段讓同樣的被調(diào)查者接受原卷和復(fù)本的測量，對(duì)原卷和復(fù)本的兩個(gè)測量結(jié)果計(jì)算其相關(guān)系數(shù)，該系數(shù)稱之為復(fù)本信度[2].內(nèi)部一致性信度(Internal Consistency Reliability)用來評(píng)價(jià)一份問卷的各個(gè)問題之間的一致性水平[2]，主要反映調(diào)查問卷內(nèi)部的一組問題的信度關(guān)系，即問卷的不同問項(xiàng)是否測量了同一個(gè)概念.在實(shí)際應(yīng)用中，重測信度和復(fù)本信度由于受實(shí)施條件、時(shí)間、成本等現(xiàn)實(shí)因素的制約而很少使用,因此，內(nèi)部一致性信度為評(píng)價(jià)信度的主要方式.

本次研究采用Cronbach’sα系數(shù)指標(biāo)作為信度指標(biāo).調(diào)查問卷分為兩個(gè)維度：一是學(xué)生對(duì)教師業(yè)務(wù)能力的評(píng)估；二是學(xué)生學(xué)習(xí)數(shù)學(xué)的興趣.使用統(tǒng)計(jì)軟件SPSS對(duì)該問卷的數(shù)據(jù)進(jìn)行分析得到的信度水平見表1.

表1 問卷信度的計(jì)算結(jié)果

由表1知，問卷總體的Cronbach’sα系數(shù)值為0.944，基于標(biāo)準(zhǔn)化項(xiàng)的Cronbach’sα系數(shù)值為0.950，代表該問卷的總體信度極好.教師業(yè)務(wù)能力維度的信度也處于極好水平.但是學(xué)生對(duì)數(shù)學(xué)的興趣維度的信度系數(shù)只有0.555，處于偏小水平，需要對(duì)此維度中的各項(xiàng)問題的內(nèi)容或表述進(jìn)行修改，可增加一些問項(xiàng)，完善各問題之間的相關(guān)性，再分別對(duì)兩個(gè)維度的信度描述統(tǒng)計(jì)量進(jìn)行分析.兩個(gè)維度的總分均值、方差、標(biāo)準(zhǔn)偏差見表2.

對(duì)每個(gè)問題的分析結(jié)果見表3.

表2 問卷信度統(tǒng)計(jì)量

表3 問卷各項(xiàng)的總計(jì)統(tǒng)計(jì)量

表3顯示，評(píng)估教師業(yè)務(wù)能力維度中各項(xiàng)的相關(guān)系數(shù)均在0.7以上，且多數(shù)在0.9以上，表示信度處于良好乃至優(yōu)秀水平.學(xué)生學(xué)習(xí)數(shù)學(xué)的興趣維度中，問項(xiàng)Q12和問項(xiàng)Q15的相關(guān)系數(shù)較低，顯示這兩個(gè)問題與總分的關(guān)聯(lián)性較小，說明這些問題設(shè)計(jì)得不好，未能區(qū)分出學(xué)生對(duì)數(shù)學(xué)的喜惡(如是否因?yàn)榛A(chǔ)不好而不愿意參加、不愿意學(xué)習(xí)等).如果刪除這兩項(xiàng)，則可以提高本維度的信度，但是這兩項(xiàng)對(duì)于反映學(xué)習(xí)數(shù)學(xué)的興趣又非常重要，不能刪除，只能重新設(shè)計(jì)或者添加變量(問項(xiàng)).因此，對(duì)學(xué)生學(xué)習(xí)數(shù)學(xué)的興趣維度的設(shè)計(jì)有一定的缺陷，需要修改后再對(duì)問卷的信度進(jìn)行分析.

2.2 效度評(píng)價(jià)

效度(Validity)是指被調(diào)查對(duì)象的測量值的差異所能反映的真實(shí)值的差異程度，即反映問卷的有效性.效度是表征研究對(duì)象測量值和真實(shí)值距離的指標(biāo)，它能表征問卷準(zhǔn)確描述被研究對(duì)象的程度；反映調(diào)查人員的初衷是否能夠被受測對(duì)象理解,受測對(duì)象的行為或想法是否能有效地被問卷測量出來及問卷的各個(gè)題目刻畫相應(yīng)概念的準(zhǔn)確程度.問卷測量結(jié)果的準(zhǔn)確性能反映出其對(duì)系統(tǒng)誤差的控制度.

在研究中，一般會(huì)檢驗(yàn)內(nèi)容效度、區(qū)分效度和結(jié)構(gòu)效度.內(nèi)容效度是指問卷測量的內(nèi)容與研究目標(biāo)的一致程度；區(qū)分效度是指問卷測量結(jié)果與效度標(biāo)準(zhǔn)之間的一致程度；結(jié)構(gòu)效度是評(píng)價(jià)可觀測變量之間的相關(guān)關(guān)系是否與理論預(yù)測一致的一個(gè)指標(biāo).通常認(rèn)為，結(jié)構(gòu)效度是最強(qiáng)有力的效度評(píng)價(jià)指標(biāo)[4]，而檢驗(yàn)結(jié)構(gòu)效度常用的統(tǒng)計(jì)方法是因子分析.用因子分析法檢驗(yàn)結(jié)構(gòu)效度時(shí),主要依據(jù)3個(gè)指標(biāo)：共同度、累積貢獻(xiàn)率和因子負(fù)荷.其分析流程如下：

(1)判斷是否適合做因子分析

KMO(Kaiser-Meyer-Olkin)和Bartlett(檢驗(yàn)各個(gè)變量是否各自獨(dú)立)的檢驗(yàn)量表中，KMO統(tǒng)計(jì)量的取值x≥0.9，表示非常適合做因子分析，0.8≤x<0.9表示適合，0.7≤x<0.8表示一般，0.6≤x<0.7表示不太適合，0.6以下說明變量間的相關(guān)性不強(qiáng)，應(yīng)該重新選擇變量.問卷的KMO和Bartlett檢驗(yàn)結(jié)果見表4.

表4中KMO的值為0.967，Bartlett球形檢驗(yàn)卡方值為16 064.649，自由度為105，p值為0，表明這些問項(xiàng)間存在共同因素，非常適合做因子分析.

表4 問卷的KMO和Bartlett檢驗(yàn)

(2)統(tǒng)計(jì)變量共同度

統(tǒng)計(jì)變量的共同度與旋轉(zhuǎn)成分矩陣見表5.表5中因子1、因子2、因子3俱為公共因子，其第i行、第j列(i=1，2，3，…，14，15；j=1，2，3)的值為第i個(gè)變量與第j個(gè)公共因子的相關(guān)系數(shù)(載荷即權(quán)重).從表5可以看出，除了變量Q15的提取值低于0.4，其余變量的提取值都比較高，說明因子分析的整體效果比較好.

(3)統(tǒng)計(jì)因子的累計(jì)貢獻(xiàn)率

因子的累計(jì)貢獻(xiàn)率在因子分析中用來確定因子的個(gè)數(shù).當(dāng)累計(jì)貢獻(xiàn)率大于80%時(shí)，即損失的信息量少于20%時(shí)，可認(rèn)為因子個(gè)數(shù)足夠.問卷總的方差解釋情況見表6.從表6可以看出，前三個(gè)因子的累積貢獻(xiàn)率達(dá)81.165%，滿足因子個(gè)數(shù)對(duì)累積貢獻(xiàn)率的要求.因此，可以選擇這3個(gè)因子作載荷矩陣.

表5 變量共同度與旋轉(zhuǎn)成分矩陣

表6 總的方差解釋

(4)作出旋轉(zhuǎn)以后的因子載荷矩陣

從表5可以看出，在因子1上，載荷較大的變量是前11項(xiàng)，說明這11個(gè)變量具有共同的特征；與因子1密切相關(guān)的變量恰好都屬于評(píng)估教師業(yè)務(wù)能力的維度.在因子2上，載荷較大的變量分別是對(duì)數(shù)學(xué)競賽、數(shù)學(xué)選修課、數(shù)學(xué)知識(shí)的態(tài)度，這都與對(duì)數(shù)學(xué)的興趣密切相關(guān).在因子3上，載荷較大的變量是“‘經(jīng)濟(jì)應(yīng)用數(shù)學(xué)’課后習(xí)題二維碼是否有幫助”，說明該變量與其余變量的相關(guān)性較弱，需要修改、完善.

3 結(jié)語

研究表明，學(xué)院目前的數(shù)學(xué)課授課情況評(píng)價(jià)體系總體具有良好的信度和效度，但如果對(duì)學(xué)生學(xué)習(xí)數(shù)學(xué)的興趣維度的個(gè)別問項(xiàng)進(jìn)行補(bǔ)充、完善亦可改善評(píng)價(jià)結(jié)果的有效性和可靠性.采用因子分析法的過程中，發(fā)現(xiàn)了影響課堂教學(xué)質(zhì)量的3個(gè)潛在因子，根據(jù)因子指標(biāo)間的相關(guān)系數(shù)，可將其大致歸為教師的業(yè)務(wù)能力、學(xué)生的學(xué)習(xí)興趣、學(xué)生的課后表現(xiàn)3方面.每個(gè)潛在因子的方差貢獻(xiàn)率就是其影響課堂教學(xué)質(zhì)量測評(píng)結(jié)果的權(quán)重系數(shù)，根據(jù)它可以確定評(píng)價(jià)指標(biāo)體系中各模塊的權(quán)重，以減少實(shí)際工作中的盲目性和隨意性[4].

高職教育側(cè)重于培養(yǎng)高素質(zhì)技能型人才，將數(shù)學(xué)定位為為專業(yè)課服務(wù)的基礎(chǔ)課程，讓學(xué)生能夠應(yīng)用數(shù)學(xué)知識(shí)解決工作實(shí)踐中可能遇到的問題，因此，數(shù)學(xué)課具有應(yīng)用型和工具性的特征.此調(diào)查問卷側(cè)重于“評(píng)估教師的業(yè)務(wù)能力”，對(duì)其他方面展開得還不夠.在后續(xù)修改問卷時(shí)，可針對(duì)不同專業(yè)的學(xué)生，在問卷中加入諸如感興趣的數(shù)學(xué)知識(shí)、專業(yè)課中的數(shù)學(xué)難點(diǎn)、考證中的數(shù)學(xué)重點(diǎn)、專升本的數(shù)學(xué)難題等問項(xiàng)，并將調(diào)查結(jié)果應(yīng)用于教學(xué)中，為各專業(yè)的數(shù)學(xué)課程建設(shè)及教學(xué)改革提供數(shù)據(jù)支持和決策依據(jù).