醫(yī)學生PBL自評量表的編制及量表評分與考試分值相關性研究

楊喜媚 麥英杰 朱慶棠 王 波

（中山大學醫(yī)學院 廣東廣州 510080）

復習型PBL是以問題為復習切入點，以學生為教學中心的教學模式，在學生學習完相關的基礎內容后進行PBL學習。PBL應用廣泛，復習型PBL的應用不及教學型PBL，教學效果被證實有效。當今，PBL為何有效仍然不知，而且由于PBL是開放性學習，PBL教學效果也不能由基于課本知識的閉卷考試來衡量。當今國內PBL多以學生自我評價量表作為評價學生學習情況的依據，其中只有少數(shù)通過信效度檢驗。此外，通過信效度檢驗的自評量表忽略了部分影響學生學習效果的因素，也沒有試圖驗證自評量表的得分與PBL學習范圍內的傳統(tǒng)閉卷考試成績是否有相關性。因此，本研究旨在編制一個更完善的PBL自評量表，并探索PBL自評量表的得分與PBL學習內容有關的傳統(tǒng)閉卷考試的成績的相關性。

一、對象和方法

(一)對象

2019年10月，對5個教學班中自愿拓展細胞生物學課程外知識的中山大學中山醫(yī)學院一年級臨床專業(yè)的165名本科生進行預實驗并確定暫行版PBL自評量表，2019年11月用同樣方法選取152名中山醫(yī)學院臨床醫(yī)學專業(yè)的一年級本科生進行實驗。預實驗與正式實驗的研究對象入選標準為：了解PBL且知道如何進行PBL學習，自愿參加本實驗，且正在學習細胞生物學課程的本科生。

(二)方法

1. PBL自評量表的構建

PBL自評量表參考量表法評價法的制作，將可能的PBL學習過程按時間順序認為劃分成7個維度，即早期的知識探索、團隊合作、中期的問題完成度、思維方式、成果展示和后期的學習效果和主觀感受。PBL自評量表包括標題、學生基本信息、相關注意事項說明、指導語、條目、選項和主觀學習時長統(tǒng)計，選項使用Likert5級計分法，按問題設置從完全同意到完全不同意分別計為1-5或5-1。

2.PBL自評量表條目的確定，形成初期版PBL自評量表

按照PBL病例學習的全過程時間順序，以及該過程中可能出現(xiàn)的問題，預設可能用于量表的條目，并且結合國內外相關文獻進行參考、收集條目，接著對條目進行整理、分析、篩選，將重復和意義相同以及對此研究意義不大的條目進行刪減、合并和舍棄。隨后兩位第三方專家審批量表，再對表達有誤或表達不清的地方進行修改，最終形成初期版量表的條目共37條。

3.預實驗，形成暫定版PBL自評量表

2019年10月，選取中山大學中山醫(yī)學院5個教學班中自愿拓展細胞生物學課程外知識的一年級臨床專業(yè)的152名本科生進行預實驗，發(fā)放量表和測試題，共回收152份量表和143份測試題（回收率分別為100%和94.08%）。然后，通過預實驗收集的數(shù)據結果，咨詢統(tǒng)計學專家，征集專家建議，并對該數(shù)據進行詳細的統(tǒng)計學分析，對初期版量表中的部分條目進行修改和篩選，并確定含有35個條目的暫行版PBL自評量表。

4.正式實驗，形成最終版PBL自評量表

2019年11月用相同的方法選取中山大學中山醫(yī)學院臨床醫(yī)學專業(yè)的152名本科一年級本科生進行正式實驗，使用暫行版PBL自評量表。正式實驗共發(fā)放量表152份，回收115份，回收率為75.66%。

表1 高分組和低分組區(qū)分度檢驗

題號 t P 15 -4.977 ＜0.001 16 -6.360 ＜0.001 17 -2.924 0.005 18 -4.140 ＜0.001 19 -5.777 ＜0.001 20 -4.219 ＜0.001 21 -5.412 ＜0.001 22 -5.490 ＜0.001 23 -7.675 ＜0.001 24 -8.114 ＜0.001 25 -8.788 ＜0.001 26 -10.337 ＜0.001 27 -6.291 ＜0.001 28 -8.925 ＜0.001 29 -6.085 ＜0.001 30 -8.402 ＜0.001 31 2.232 0.030 32 -6.566 ＜0.001 33 -2.952 0.004 34 -.459 ＜0.001 35 -2.230 0.030

5.統(tǒng)計學方法

使用SPSS 25.0軟件進行統(tǒng)計分析，首先對量表進行計量心理學考核，包括計算克拉巴哈系數(shù)檢驗內部一致性，分別計算折半信度、重測信度和肯德爾W系數(shù)進行信度檢驗，以及使用因子分析和區(qū)分度檢驗進行效度考核。其次是使用Mann-Whitney U檢驗對成績進行分析。

先通過計算量表結果和重測量表結果的正態(tài)性驗證兩次量表結果是否一致。

對試驗結果計算克朗巴哈系數(shù)后，將評價量表按照題目的奇偶分為二份，分別計算兩部分的克朗巴哈系數(shù)，進而得出該量表的折半信度等長spearman-Brown系數(shù)以驗證其信度。

計算KMO系數(shù)和Bartlett’s Test和因子分析和區(qū)分度檢驗來驗證其效度。

將PBL自評量表得分取前27%和后27%的臨界點上的得分作為高低分組的臨界點，將每題前27%和后27%的數(shù)據分成高分組和低分組，對高分組和低分組進行區(qū)分度檢驗。

計算PBL量表與測試成績的相關性。

二、結果

(一)預測試條目篩選

預測試問卷的克朗巴哈系數(shù)為0.746，分半信度測試測得Spearman-Brown系數(shù)為0.683，旋轉成分矩陣各成分得分在0.554～0.800之間。

(二)重測信度

由于得分為連續(xù)型變量，對兩次量表得分進行正態(tài)性檢驗。

第一次量表得分的正態(tài)性檢驗p=0.853（＞0.05），第二次量表得分的正態(tài)性檢驗p=0.288（＞0.05）。

Pearson相關系數(shù)為0.879，大于0.7（p＜0.001）。

肯德爾協(xié)同系數(shù)為0.276（p＜0.05）。

(三)SSPBL信度檢驗

計算各題項之和的均值，方差，項間協(xié)方差和項間相關性的均值，極值，極差和方差，沒有發(fā)現(xiàn)比較極端的項目

對第一次得分進行效度檢驗，計算第一次得分的克朗巴哈系數(shù)為0.871（p＞0.8）。然后計算折半信度，得等長spearman-Brown系數(shù)為0.834。

(四)SSPBL效度檢驗

計 算KMO系 數(shù) 得，KMO系 數(shù) 為0.783＞0.7，且Bartlett’s Test結果p＜0.01。進行效度檢驗，見圖1。

圖1 總方差的解釋

圖1中，基于特征值大于1時累計百分比為64.703%＞60%。

從旋轉后的成分矩陣表可得，第14題、第31題、第19題和第6題沒有分值。

(五)SSPBL區(qū)分

見表1，區(qū)分度檢驗中，除了第四題，所有題目的高分組和低分組差異p值都小于0.05。

(六)SSPBL成績與測試成績的相關性檢驗

由于有9位同學沒有考試成績，故用考試成績均值50.54分進行填補。

對問卷總得分按均值劃分為平均分74分為界限的兩組，見表2。

表2 SSPBL得分劃分組的成績（分）

由于成績是離散分布，不屬于正態(tài)分布，采用非參數(shù)檢驗對比兩組數(shù)據，發(fā)現(xiàn)Mann-Whitney U統(tǒng)計量為1 351，P為0.451，大于0.05。

三、討論

(一)重測信度

計算重測信度得：Pearson相關系數(shù)小于0.001，肯德爾協(xié)同系數(shù)小于0.05，認為重測信度良好，表明測試分數(shù)的穩(wěn)定性較好，各評分者的一致性較高，說明量表結果的穩(wěn)定程度高，量表測出的結果是不會隨時間而改變的，誤差變異小。

(二)信度檢驗

由于重測信度良好，故只對第一次量表的得分進行信效度檢驗。

克朗巴哈系數(shù)為0.871（0.8～0.9），說明量表信度非常好，內部一致性較高，則可計算其折半信度。

計算各題項和的統(tǒng)計量，沒有發(fā)現(xiàn)比較極端的項目，說明數(shù)據沒有極端值或者異常值，比如說有人是不認真甚至惡意填寫這個量表的，就容易出現(xiàn)極端值，需要進行數(shù)據處理后再次進行分析，剔除這個影響。

計算折半信度得，等長spearman-Brown系數(shù)為0.834，說明量表內部具有一致性。

(三)效度檢驗

見圖1，基于特征值大于1的時候累計百分比為64.703%，大于60%，說明現(xiàn)在探索出來的8個維度能較好地代表整個數(shù)據，能準確反映需要考察的內容。

從經旋轉后的成分矩陣可得，橫向看，第14題，第31題，第19題和第6題不屬于任何一個維度，所以屬于無效題項，應當刪除?？v向看，刪除以上4題后，維度7只有第5題一題，所以這個維度和題目也是無效的。綜上，刪除第5題，第6題，第14題，第19題和第31題。刪除后可劃分為7個維度，分別是維度1（第25-30題和第32題）維度2（第12，16，18，23和24題），維度3（第7，21和22題），維度4（第11，15，17和35題），維度5（第8，9和13題），維度6（第4，20和33題）和維度7（第10和34題）。

綜上，第14題，第31題，第19題和第6題建議結合專業(yè)知識來判斷是否需要刪除。

(四)區(qū)分度檢驗

除了第四題的高分組和低分組得分比較P為0.795大于0.05外，其他均小于0.05，差異有統(tǒng)計學意義，說明高分組和低分組在每一道題上都有非常好的區(qū)分性。除第4題以外，所有題目都通過了區(qū)分度檢驗，說明每一道題都可以與其他題目相區(qū)分，沒有重復測量的內容。

(五)相關性檢驗

由于成績是離散型分布，所以用非參數(shù)檢驗對比兩組成績，發(fā)現(xiàn)Mann-Whitney U統(tǒng)計量為1 351，P為0.451，大于0.05，說明差異不具有統(tǒng)計學意義，尚不能認為兩組成績有相關性。

兩組成績沒有相關性的可能原因如下：1. 小測題目數(shù)目較少，成績不呈正態(tài)性；2. 學生的積極性下降；3. 樣本量不足；4.本科生暫無足夠知識和充足時間深入挖掘病例；5. 半數(shù)以上小組采取分工合作的方式，將問題分配給不同組員回答，事后僅生搬硬湊，沒有進行組內知識共享和消化；6.SSPBL包含與成績相關與不相關的內容，考試題目也包含僅靠自主學習就能掌握的基礎知識和與PBL復習內容有關的拓展問題，SSPBL總得分與考試總得分無相關性的原因可能源于此。

四、結束語

本研究所建立的量表信度效度良好，可作為評估本科醫(yī)學PBL教學效果的工具。但是量表結果與應試測試成績沒有關聯(lián)，不能由該量表預測應試成績，但可作為階段性學習的自我學習效果的評價。