動態(tài)綜合評價在《衛(wèi)生統(tǒng)計學(xué)》課堂教學(xué)評價中的應(yīng)用*

王一任 曾小敏Δ 祝繼明 孫振球Δ

對同一個對象評價，隨著時間的推移與數(shù)據(jù)的積累，人們擁有大量的按時間順序排列的二維平面數(shù)據(jù)集序列，稱為“時序立體數(shù)據(jù)集”。傳統(tǒng)的綜合評價方法，如TOPSIS法、AHP法、RSR法等都屬于靜態(tài)評價法，適用于只含有“評價對象”和“評價指標”的二維平面數(shù)據(jù)集。而對于像課堂教學(xué)質(zhì)量這樣隨著時間的發(fā)展而變化的“時序立體數(shù)據(jù)”資料，采用靜態(tài)評價不能反映其發(fā)展變化趨勢，無法評價整個動態(tài)的教學(xué)質(zhì)量〔1〕。本文擬介紹能夠綜合考慮“過去情況”、“現(xiàn)在狀況”及“未來發(fā)展趨勢”的動態(tài)綜合評價法，并給出其在《衛(wèi)生統(tǒng)計學(xué)》課堂教學(xué)評價中的應(yīng)用實例，通過比較不同教師(或教改方案)在不同時點的整體發(fā)展水平，來動態(tài)評價教學(xué)質(zhì)量，擇優(yōu)教改方案。

基本原理

1.動態(tài)綜合評價數(shù)據(jù)集描述

設(shè)有n個被評價對象Si(i=1，2，…，n)，每個Si有m個評價指標Gj(j=1，2，…，m)，xijk表示第 i個評價對象的第j個指標在時點tk(k=1，2，…，q)處經(jīng)過同趨勢化處理的值。這些值組合成了動態(tài)綜合評價數(shù)據(jù)集。

2.指標的無量綱化

無量綱化的目的是消除不同指標在單位、量級上的差異(信息)。動態(tài)綜合評價的無量鋼化處理要將同一指標在q時點的數(shù)據(jù)集中到一塊，統(tǒng)一進行無量綱化。“功效系數(shù)法”的無量綱化的計算:

3.時間權(quán)向量的設(shè)置

時間權(quán)向量wk反映對不同時刻的重視程度，時間權(quán)向量熵I與時間度λ的定義〔2〕:

時間權(quán)向量的熵反映了樣本集結(jié)過程中權(quán)重包含信息的程度。時間度λ體現(xiàn)對時序的重視程度，λ在［0，1］之間，其值越小，表明評價者越注重距評價時刻較近的數(shù)據(jù);反之，越注重距評價時刻較遠的數(shù)據(jù)。

4．求解時間權(quán)向量的兩種方法:

(1)熵值法 在“時間度”λ給定的情況下，以盡可能地挖掘樣本的信息和兼顧被評價對象在時序上的差異信息為標準來尋找適合該樣本集結(jié)的時間權(quán)向量〔3〕。

λ的取值征求專家意見決定，求解以上非線性規(guī)劃問題，得到時間權(quán)向量wk。

(2)方差法 在λ給定情況下，以盡可能地尋找一組最穩(wěn)定的時間權(quán)重系數(shù)來集結(jié)樣本值，即尋找一組時間權(quán)重系數(shù)使其波動最小〔4〕。，方差法確定的時間權(quán)重中存在0分量，選擇此法時要慎重。

5.根據(jù)對結(jié)果的需求選擇動態(tài)綜合評價方式

(1)先評價后綜合方式

該方式首先對每個時點橫截面上的數(shù)據(jù)采用靜態(tài)的綜合評價方法進行綜合評價，得到不同時間截面上的靜態(tài)綜合評價值。再將時間因素與靜態(tài)綜合評價值按照一定的原則(如“厚今薄古”的思想)加權(quán)綜合，得

λ的取值征求專家意見決定，求解以上非線性規(guī)劃問題，得到時間權(quán)向量 wk。當λ?到最終的動態(tài)評價值。對靜態(tài)綜合評價值進行“時間維”綜合的方法主要有:TOWA(time order weight averaging operator)法〔5〕(式(6))和 TOWGA(time order weighted geometric averaging operator)法(式(7))。

其中，hi為最終的動態(tài)綜合評價值;w=(w1，w2，…，wk)T是時間權(quán)向量;Gik是 tk(k=1，2，…，q)時刻第i個評價對象靜態(tài)綜合評價值。

(2)先綜合后評價

首先對不同的時間截面賦予不同的權(quán)數(shù)(即對各時點賦權(quán))，再把各個不同時間截面上的數(shù)據(jù)進行“時間維”綜合。這樣就把時間序列數(shù)據(jù)轉(zhuǎn)化成了一個橫截面數(shù)據(jù)，然后再用靜態(tài)綜合評價法進行綜合評價得最終評價結(jié)果。對數(shù)據(jù)進行時間維綜合的方法有:

TOWA法(式(8))和TOWGA法(式(9))。

其中，yij為綜合“時間維”后的指標值;w=(w1，w2，…，wk)T是時間權(quán)向量;aijk是 tk(k=1，2，…，q)時刻第i個評價對象第j個指標經(jīng)同趨勢及無量綱化處理后的指標值。

實證研究

選取了5個時點(2012年2月、3月、4月、5月、6月)對某校公共衛(wèi)生學(xué)院講授同專業(yè)同年級《衛(wèi)生(醫(yī)學(xué))統(tǒng)計學(xué)》的四名青年教師的課堂教學(xué)質(zhì)量進行測評。由于我們既需要全面考查靜態(tài)評價值的大小和動態(tài)增長變化兩方面因素，同時考慮到教師和教學(xué)管理者需要及時掌握每個時點的教學(xué)情況，所以采用先靜態(tài)評價后綜合時間的方式進行動態(tài)綜合評價。以我校現(xiàn)有的評價指標為基礎(chǔ)，在各時點采用AHP法(層次分析法)求得督導(dǎo)、學(xué)生、教學(xué)管理者、同行及教師自評GIi(tk)的加權(quán)綜合得分見表1。

1.時間權(quán)向量的確定

征求專家意見，確定時間度λ取值0.1適合該動態(tài)評價。由熵值法(式(4))求得時間權(quán)向量 w=(0.0051，0.0175，0.0602，0.2068，0.7105)T。為了比較λ取不同值時的結(jié)果，我們也同時求出了λ=0.2時的時間權(quán)向量 wλ=0.2=(0.0290，0.0599，0.1240，0.2564，0.5307)。

表1 四名教師5個月份的綜合得分

2.評價結(jié)果排序

用式(6)對各時點AHP法的靜態(tài)綜合評價值進行“時間維”綜合求得最終動態(tài)綜合評價值hi，hi值越大，排序越靠前。

表2 四名教師5個月份教學(xué)質(zhì)量的動態(tài)綜合評價結(jié)果

可以看出，當時間度λ取值在［0.1，0.2］范圍時，動態(tài)綜合評價的結(jié)果完全一致，并且與按平均GI值排序結(jié)果完全不同，即與λ=5時(對各個時間段數(shù)據(jù)的重視程度相同時)的排序結(jié)果完全不同。

教師A的教學(xué)效果穩(wěn)步上升(表1)，我們了解到教師A很認真，每次課后都會及時總結(jié)教學(xué)得失，及時調(diào)整教改措施。教師C一直保持好的教學(xué)效果，波動幅度不大。雖然教師C的平均分高于教師A，但動態(tài)綜合評價考慮了連續(xù)時間點上的評價值隨著時間的增加其影響程度遞增這方面因素，所以最終的動態(tài)排序教師A優(yōu)于教師C。教師D五個時點的平均分高于教師B，但教師D的教學(xué)效果不穩(wěn)定，波動幅度大;而教師B在前兩個時點教學(xué)效果不太好，且在第二個時點出現(xiàn)少許下降，但在更接近現(xiàn)在的后3個時點一直處于穩(wěn)步上升狀態(tài)，則對現(xiàn)在甚至將來的影響更大，因此動態(tài)評價值更看重后者，教師B的排名反而在教師D的前面。教師B進行了教學(xué)改革，采用了PBL、覓食式等教學(xué)，但在改革初期，由于學(xué)生不適應(yīng)及改革方案不成熟等原因，教師B的初期教學(xué)效果不佳。如果只采用靜態(tài)綜合評價，在第1、2時點靜態(tài)評價教學(xué)效果，則會打擊教師B的教改積極性。

討 論

1.動態(tài)綜合評價是綜合評價領(lǐng)域的一個重要分支。目前對于像醫(yī)院醫(yī)療質(zhì)量〔6〕、醫(yī)療效果〔7〕、教師業(yè)績〔8〕、醫(yī)學(xué)教育質(zhì)量〔1〕等動態(tài)發(fā)展資料，大都采用靜態(tài)綜合評價法，但對時序立體數(shù)據(jù)的評價而言，動態(tài)法比靜態(tài)法更實用，評價結(jié)果更合理、優(yōu)越〔9〕。

2.不管采用何種動態(tài)綜合評價法，都需把不同時間的指標值或評價結(jié)果值根據(jù)時間權(quán)數(shù)綜合為一個數(shù)據(jù)，但是目前還沒有給出一個科學(xué)合理的時間權(quán)數(shù)設(shè)置方法，如時間度的取值，到底取什么值能夠比較真實客觀地反映指標值大小和指標增長程度的重要性，這個問題還有待進一步研究。

1．王一任，吳志泉，王姿歡，等．醫(yī)學(xué)課程課堂教學(xué)質(zhì)量評價的若干問題與對策探析．實用預(yù)防醫(yī)學(xué)，2012，19(1):149-150．

2．Yager R R．On ordered weight averaging aggregation operators in multicriteria decision making．IEEE Trans on Systems，Man，and Cybernetics，1988，18(1):183-190．

3．郭亞軍，姚遠，易平濤．一種動態(tài)綜合評價方法及應(yīng)用．系統(tǒng)工程理論與踐，2007，27(10):154-158．

4．郭亞軍，唐海勇，曲道鋼．基于最小方差的動態(tài)綜合評價方法及應(yīng)用．系統(tǒng)工程與電子技術(shù)，2010，32(6):1225-1228．

5．Fuller R，Majlender P．On obtaining minimal variability OWA operator weights．Fuzzy Sets and Systems，2003，136(2):203-215．

6．鞏斌．TOPSIS方法在醫(yī)療質(zhì)量綜合評價中的應(yīng)用．中國衛(wèi)生統(tǒng)計，2010，27(2):191-193．

7．于蓓．TOPSIS法與RSR法相結(jié)合評價某院單病種醫(yī)療質(zhì)量．中國衛(wèi)生統(tǒng)計，2011，28(3):307-311．

8．李建華，李曉毅．高校教師科研業(yè)績的定量分析．中國衛(wèi)生統(tǒng)計，2006，23(2):161-162．

9．王一任，任力峰，孫振球．一種新的動態(tài)TOPSIS法在醫(yī)療質(zhì)量評價中的應(yīng)用．中南大學(xué)學(xué)報:醫(yī)學(xué)版，2012，37(10):1071 －1076．