軍隊院校教學工作評價的“元評價”初探

齊德廣，秦銀河，王云貴，陳俊國

（1.第三軍醫(yī)大學新橋醫(yī)院醫(yī)教部，重慶400037；2.解放軍總后勤部，北京100842；3.第三軍醫(yī)大學，重慶400038）

軍隊院校教學工作評價的“元評價”初探

齊德廣1，秦銀河2，王云貴3，陳俊國3

（1.第三軍醫(yī)大學新橋醫(yī)院醫(yī)教部，重慶400037；2.解放軍總后勤部，北京100842；3.第三軍醫(yī)大學，重慶400038）

1 元評價的概念

“元”，英文為 meta，原意為“在…之后，超越”，后引申為一種更高的邏輯形式。例如meta－science為元科學，是科學的科學，即對科學自身的分析、批判或總結(jié)；meta－evaluation為元評價，就是指對評價的再評價［1］。元評價有兩個重要作用：（1）正確有效地引導評價；（2）明確指出評價方案的優(yōu)劣所在。

2 元評價量表及其改進

國外學者從上世紀90年代開始，一直致力于對元評價量表的研究。其研究公布的元評價量表由實用性、可行性、合理性和準確性4個維度組成，共30條標準［2］，其中，實用性包括了評價者的可靠性、報告的清晰性等7項內(nèi)容；可行性包括評價程序、預防偏差以及成本控制的合理性3項內(nèi)容；合理性包括確定評價主體、保護公眾正當權益、報告的公開性等8項內(nèi)容；準確性包括了評價支撐材料的認定、背景分析的充分性、信息的準確性等12項內(nèi)容。

為了使該量表更加符合軍隊院校的實際，更加易懂，本研究對該量表進行了“本土化”詮釋，邀請了20名教學經(jīng)驗豐富的專家教授和5名教學管理人員對量表進行了咨詢和修訂，然后使用修訂完善后的量表，對第三軍醫(yī)大學剛剛通過的軍隊院校教學工作評價迎評建設及評價過程等情況進行了再評價。

3 元評價結(jié)果

使用改良后的元評價量表，選取臨床教學專家56名、教學管理人員8名、教學督導專家6名，共發(fā)放調(diào)查問卷70份，收回68份。根據(jù)68份有效調(diào)查表，對表中30項評價內(nèi)容的咨詢結(jié)果進行統(tǒng)計，求出每個單項的累計得分，再計算出各單項的算術平均數(shù)，作為單項得分，公式為30項評價內(nèi)容的單項平均得分見表1～4。

表1 評價項目的實用性咨詢結(jié)果

表2 評價方案的可行性咨詢結(jié)果

表3 評價過程的合理性咨詢結(jié)果

表4 評價結(jié)果的準確性咨詢結(jié)果

4 元評價結(jié)果的判讀

4.1 評價項目的實用性 從表1可以看出，對于軍隊院校教學工作評價的實用性，咨詢專家普遍表示出肯定的態(tài)度，這一特點在U7方面體現(xiàn)尤為突出。但是，在開展教學工作評價的過程中，在評價標準的可靠性和評價依據(jù)的充分性、評價結(jié)果的社會公開性、評價結(jié)果能否被受評院校利用的可能性等方面，評價活動需要進一步改進和完善［3］。

4.2 評價方案的可行性 軍隊院校教學工作評價在F8、F9方面，有比較突出的表現(xiàn)，這既充分反映了軍隊院校教學工作評價過程的實際情況，也體現(xiàn)了軍隊院校管理體制的特點。但是，咨詢專家對“評價方案實施的預期效益與投入成本之間的正相關程度”方面，表現(xiàn)出一定的擔憂情緒，這恰恰印證了軍隊院校教學工作評價過程在一定程度上存在著“運動式評價模式”的缺陷，反映了軍隊院校接受評價的被動性特點。不少院校為了得到好的評價結(jié)果，超常規(guī)投入資金、人力物力及超常規(guī)辦理迎評建設事宜的現(xiàn)象客觀存在。

4.3 評價過程的合理性 專家認為，院校教學工作評價活動管理規(guī)章制度明確、過程規(guī)定詳細嚴謹，過程設計科學合理，部署安排恰當，評價過程的設計充分考慮了受評院校的權利和義務，對評價結(jié)果的反饋客觀坦率。在這一方面，咨詢專家給予了高度認可。

4.4 評價結(jié)果的準確性 咨詢結(jié)果表明，軍隊院校教學工作評價過程中，對受評院校建校和發(fā)展背景分析透徹清楚，受評院校對評價的目的和程序了解清楚，評價過程中各類數(shù)據(jù)的定量和定性分析充分、可靠、準確，評價結(jié)果比較客觀公正，專家普遍比較認可通過元評價的方式，對教學評價活動本身進行質(zhì)量控制的做法。但是，從表4可以看出，專家們對軍隊院校教學工作評價過程中，不同基礎和類型軍隊院校未能實施更加細化的分類指導、分類評價，表現(xiàn)出一定的失望情緒；同時，對評價結(jié)論與預期評價目標之間的一致性以及評價結(jié)果的信度和效度等，專家認可率不高。

5 進一步完善軍隊院校教學工作評價方案的建議

5.1 進一步推動評價主體的專業(yè)化和多樣化 隨著高等教育體制改革的不斷深入，現(xiàn)行的評價體制已不太適應新形勢下軍隊院校建設發(fā)展的需要，因此，應進一步解放思想、更新觀念，推動評價主體的專業(yè)化和多樣化。應鼓勵專業(yè)評價中介機構(gòu)的建設并開展評價活動，教育行政管理部門在評價活動中只承擔統(tǒng)籌規(guī)劃、宏觀管理、制定政策，以及對評價活動的監(jiān)督、檢查和指導等角色。

5.2 進一步規(guī)范評價活動 加強制度建設，推動評價活動的制度化和規(guī)范化，是保證評價工作有效開展的重要舉措。（1）要建立相應的法律制度，以法律形式明確規(guī)定評價的目的、原則、類型、對象、范圍等，使評價活動有法可依；（2）要建立信息發(fā)布與管理制度，及時向社會、公眾公布評價結(jié)果，形成良好的信息反饋機制；（3）要建立評價監(jiān)督制度，對評價程序、工作人員、評價數(shù)據(jù)等實施監(jiān)督；（4）要建立評價激勵制度，促使高校不僅注重外在投入，更要重視內(nèi)涵建設。

5.3 制定多元指標體系 目前，我國共有普通本科院校720所（不含民辦的370所），既有重點院校，也有一般院校；既有研究型院校，也有教學型院校。對不同類型、不同層次的高校，其辦學定位及質(zhì)量標準都不盡相同，所以，在開展評價時，應分類型、分層次制訂個性化的評價標準，實現(xiàn)分類評價、分類指導。

5.4 更加重視元評價的開展 在我國，元評價活動才剛剛起步，可以設立專門的元評價機構(gòu)，或在各級評價機構(gòu)中設立元評價研究員，對評價指標體系的信度、效度以及評價結(jié)果的公正性等進行研究和再評價。

5.5 推動教學評價工作的常態(tài)化 教育教學質(zhì)量是高等院校建設發(fā)展的永恒主題，要引導高等院校在迎接外部評價的同時，建立自身的內(nèi)部質(zhì)量控制體系，經(jīng)常性開展內(nèi)部教學質(zhì)量評價活動，形成評價、整改、提高、再評價的良性循環(huán)。

5.6 推動教學評價手段的現(xiàn)代化 新的《軍隊院校教育條例》中，明確軍隊院校要實現(xiàn)教學評價常態(tài)化的要求，要想做到軍隊院校辦學基礎非保密數(shù)據(jù)的定期采集、公開，保密信息的實時監(jiān)控，教學質(zhì)量核心指標的常態(tài)化監(jiān)管，應著力研究開發(fā)相應的評價信息管理系統(tǒng)，逐步實現(xiàn)教學評價手段的現(xiàn)代化。

［1］ 高潔.美國教育評價的元評價及其啟示［J］.教育研究，2007（6）：21－24.

［2］ 王云峰.基于元評估理論的學科評估應用研究［J］.科研管理，2009，30（1）：143－148.

［3］ 向德全.軍隊院校教學評價回顧及新一輪評價思考［J］.中國高等教育評估，2010（3）：25－28.

10.3969/j.issn.1671－8348.2011.31.044

B

1671－8348（2011）31－3217－02

2011－04－02

2011－06－13）