碩士學(xué)位論文評閱制度改革實踐與探討

陳新超,連鑄淡,洪 霞

(福建醫(yī)科大學(xué)研究生處,福建 福州 350108)

1981年5月國務(wù)院批準(zhǔn)實施《中華人民共和國學(xué)位條例暫行實施辦法》之后的二十余年間,國內(nèi)研究生培養(yǎng)單位大多實行公開評審制度。大部分高校的碩士論文評閱通過率接近100%,實行評分制的平均分也都處于高位,這顯然與學(xué)位論文質(zhì)量的實際情況不符。綜合來看,普遍認(rèn)可的原因為:一是沒有客觀的、操作性強(qiáng)的量化評價指標(biāo)體系;二是論文評審專家由導(dǎo)師指定,使論文評閱流于形式。這使得學(xué)位論文質(zhì)量的監(jiān)督機(jī)制不能有效建立,學(xué)位論文質(zhì)量難以得到保障[1]。隨著我國碩士研究生規(guī)模不斷擴(kuò)大,原有碩士學(xué)位論文評閱制度已經(jīng)不適應(yīng)教育發(fā)展需要,近年來學(xué)位授予單位開始嘗試改革碩士學(xué)位論文評閱制度[2]。本文通過對福建醫(yī)科大學(xué)碩士學(xué)位論文評閱制度改革近3年來1243人次的2863份碩士學(xué)位論文評閱結(jié)果進(jìn)行全面統(tǒng)計,從信度、效度以及改革效果三個方面進(jìn)行系統(tǒng)分析,以期評價碩士學(xué)位論文評閱制度改革的成效,并從細(xì)化優(yōu)化論文評價標(biāo)準(zhǔn)、創(chuàng)新評閱辦法等方面對進(jìn)一步改進(jìn)評閱制度提出建議。

一、碩士學(xué)位論文評閱制度的改革實踐

福建醫(yī)科大學(xué)近年開始對本校碩士學(xué)位論文評閱制度進(jìn)行了改革并逐步完善,主要包括創(chuàng)新評閱方式、細(xì)化評閱標(biāo)準(zhǔn)、合理處理評閱結(jié)果等。

(一)創(chuàng)新評閱方式。

原有論文評閱方式是公開評閱,即學(xué)位論文作者、導(dǎo)師等信息對評閱人是公開的,本文稱之為“明評”。近年來,各學(xué)位授予單位普遍采用“盲評”評閱方式,主要是“雙盲”(學(xué)位論文的作者及相關(guān)個人信息、評審專家信息互相保密)方式,由管理部門選擇評閱人。這種辦法不但可以避免論文作者和導(dǎo)師請評閱人放松要求,也使得評閱人因為不知道論文作者而沒有壓力,有利于評閱人排除干擾,公正地評價論文。

我校采用的評閱方式是明評和盲評(雙盲)結(jié)合進(jìn)行。導(dǎo)師首屆碩士畢業(yè)生的論文、論文被評為“C”或者“D”者導(dǎo)師的下一屆畢業(yè)生論文、論文涉及學(xué)術(shù)不端行為者導(dǎo)師下一屆畢業(yè)生論文等必須參加盲評,再對其余論文隨機(jī)抽取5%參加盲評,其余論文使用明評。

(二)細(xì)化評閱標(biāo)準(zhǔn)。

目前我國并沒有對論文評閱標(biāo)準(zhǔn)進(jìn)行細(xì)化的規(guī)定,我校原有評閱標(biāo)準(zhǔn)僅有主觀綜合表述和定性評價。改革采用定量評價指標(biāo)體系與定性評價結(jié)果相結(jié)合,制作了評分表,細(xì)化了選題與綜述、基礎(chǔ)理論與專門知識、研究手段設(shè)計能力和創(chuàng)新性、寫作能力與工作量等評價指標(biāo),評閱人對每項指標(biāo)給出百分制成績,總評分根據(jù)設(shè)定好的權(quán)重公式進(jìn)行計算,并給予綜合評語,最后為學(xué)位授予單位提出定性的結(jié)論和明確的建議,即:A.該論文達(dá)到規(guī)定的要求和水平,同意參加論文答辯;B.該論文基本達(dá)到規(guī)定的要求和水平,同意修改后參加論文答辯;C.建議修改后再送審,合格者方可參加論文答辯;D.該論文未達(dá)到規(guī)定的要求和水平,不同意參加論文答辯。

(三)合理處理評閱結(jié)果。

公正的評價論文水平并提交答辯的定性評閱結(jié)果對學(xué)位論文的重要性不言而喻。原處理方式為一票否決制,改革將論文送審份數(shù)固定為3份,評閱意見的認(rèn)定如下:3份評閱意見中有2個A者,可參加論文答辯;有2個B或1個A和1個B者,須按專家意見進(jìn)行修改,方可參加論文答辯。凡未達(dá)到上述評閱意見結(jié)果的碩士學(xué)位論文,須重新修改或撰寫并推遲至次年同期參加學(xué)位論文評閱。這種做法在尊重每一位評閱專家意見的同時也避免了由于某一專家的評閱結(jié)果影響論文作者答辯。

二、碩士學(xué)位論文評閱制度改革分析

分析2008年至2010年期間,1243人次的2863份碩士學(xué)位論文評閱結(jié)果(其中,明評1746份,盲評1117份),將其進(jìn)行各方面的數(shù)據(jù)統(tǒng)計,對改革的信度、效度及效果等進(jìn)行分析,可以對此次改革進(jìn)行再評估。

(一)評閱制度改革的信度分析。

信度系指結(jié)果的一致性、穩(wěn)定性及可靠性,評價盲評這種評閱方式是否可靠可信,則必須檢驗聘請的盲評專家及其評閱結(jié)果的信度。

1.評閱專家指導(dǎo)資格。評閱專家是否為碩導(dǎo)是很重要的一個評價指標(biāo)。親自指導(dǎo)過研究生撰寫論文的評閱專家對碩士論文的合格標(biāo)準(zhǔn)較為了解,對評價標(biāo)準(zhǔn)把握得更為準(zhǔn)確,在評閱時也就更有針對性。

3年來明評的評閱人中導(dǎo)師比例分別為85.27%、91.77%、84.92%,都會低于盲評的相應(yīng)比例 97.18%、98.88%、93.49%?？傮w來看,明評的評閱人中研究生導(dǎo)師占比87.27%,而盲評為96.44%,盲評中導(dǎo)師比例明顯高于明評。這是由于碩士論文評閱人資格要求為副高級職稱或以上,至少一名研究生導(dǎo)師。所以,明評的論文并不以是否是導(dǎo)師為惟一參考標(biāo)準(zhǔn);而盲評評閱人是由評閱單位來確定,除了學(xué)科對口外,還會盡量選擇導(dǎo)師。

2.評閱專家對論文研究內(nèi)容熟悉程度。新的評閱要求中,要求評閱人按照很熟悉、熟悉、一般的3類標(biāo)準(zhǔn)來選擇注明自己對學(xué)位論文的熟悉程度。盲評專家是由盲評單位來選取,具有一定的盲目性;而明評專家是由導(dǎo)師推薦的,往往會根據(jù)對論文內(nèi)容熟悉程度或評閱專家在該領(lǐng)域的地位而選擇評閱人。3年數(shù)據(jù)統(tǒng)計表明,明評專家中選擇“很熟悉”和“熟悉”者,分別占35.23%和61.36%,都高于盲評專家中33.23%和59.57%的相應(yīng)占比,明評專家比盲評專家更熟悉論文內(nèi)容。

(二)評閱制度改革的效度分析。

效度即有效性,它是指測量工具或手段能夠準(zhǔn)確測出所需測量的事物的程度,評價此次改革的效度就是看盲評是否真實反映了學(xué)位論文的水平。

1.評閱平均分比較。改革三年來,明評的成績平均值(分別為89.62、89.06、89.36)都高于盲評的成績平均值(分別為85.86、86.02、86.16),明評的三年總平均分為 89.34,而盲評的這一數(shù)字是86.02,明評的平均分高于盲評平均分達(dá)3.32分。

2.評分離散度比較。標(biāo)準(zhǔn)差,通過計算標(biāo)準(zhǔn)差來對評閱結(jié)果的離散度進(jìn)行分析,可以比較評閱專家對同一篇論文的評價差異。把明評結(jié)果和盲評結(jié)果分成兩組分別進(jìn)行統(tǒng)計和計算。使用SPSS16.0軟件,調(diào)用Descriptives過程,計算每一年度的盲評和明評分?jǐn)?shù)的平均值和標(biāo)準(zhǔn)差。以此計算明評和盲評3年的評閱結(jié)果的標(biāo)準(zhǔn)差如附圖所示(該圖對數(shù)據(jù)進(jìn)行2倍標(biāo)準(zhǔn)差的描述,用于觀察數(shù)據(jù)的離散程度。圓圈是均數(shù),長度的范圍表示離散程度)。

盲評專家總評分的標(biāo)準(zhǔn)差為5.889分,大于明評專家的3.704分。而且三年來盲評評閱結(jié)果每一年度的標(biāo)準(zhǔn)差(分別是6.425、5.062、5.937)都大于相應(yīng)年度明評評閱結(jié)果的標(biāo)準(zhǔn)差(分別是3.768、3.965、3.379)。結(jié)果表明盲評評閱結(jié)果的離散程度較大,說明盲評專家對同一篇碩士學(xué)位論文的水平評價的差異較大,盲評專家評閱結(jié)果與本人的主觀判斷更為貼近。而明評專家普遍給出較高分?jǐn)?shù)且成績更為趨同。

3.對論文水平總體評價比較。對評閱人對于論文的定性結(jié)論進(jìn)行比較。按照碩士學(xué)位論文評閱書的分類標(biāo)準(zhǔn),對論文水平的總體評價可以分為A-D共4類。

結(jié)果顯示明評專家給出A的比例為98.85%,高出盲評專家84.24%的比例超過15%。而在1746份明評專家的評閱意見中,給出C和D評價結(jié)果的全部為零,對于3年1746份的全部明評結(jié)果這足夠大的樣本量來說,全部為零的原因正是明評專家過不了“人情關(guān)”所致。而每年都有盲評專家給出了C(1.07%)或者D(0.27%)的結(jié)果。盲評評閱人給出的結(jié)論則更加趨于正態(tài)分布,顯得更加合理。

附圖 不同評閱方式評閱結(jié)果標(biāo)準(zhǔn)差示意圖

(三)評閱制度改革的效果分析。

1.高分?jǐn)?shù)段比例增加。設(shè)定80分以上的評閱得分為高分,則三年來兩種評閱方式的評閱專家給出高分總的趨勢都是有所增加的,其中盲評專家給出高分的比例提高了5.21%,他們評定得高分的論文比例增長更快。當(dāng)然這其中也有明評的高分比例已經(jīng)很高(三年分別是 98.7%、98.06%、99.04%),增長空間有限的原因。

2.盲評的平均分逐年提高。盲評評閱的平均分在逐年提高,(3年分別為85.87、86.04和 86.16);明評的平均分基本穩(wěn)定(3年分別是89.62%、89.06%和89.36%)。盲評專家基本是基于論文本身給出評價,給出的平均分的增長較能反映學(xué)位論文整體水平的提高。

三、碩士學(xué)位論文評閱制度改革成效

以上分析表明,此次改革是取得一定成效的:新的評閱標(biāo)準(zhǔn)更加合理,將定量評價與定性評價相結(jié)合,客觀評分和主觀表述相結(jié)合,取長補(bǔ)短、相得益彰;評閱流程更加規(guī)范,盲評有效杜絕了原有評閱方式難過“人情關(guān)”、流于形式的弊端,保證了評閱真實準(zhǔn)確的反映了論文水平;評閱結(jié)果更加客觀,無論從定量的評價分?jǐn)?shù)還是定性的評價結(jié)論看,盲評結(jié)果都更符合實際水平;論文整體水平得到一定程度的提高,這從三年來兩種評閱方式得到高分的趨勢都有所增加,且盲評的平均分亦在穩(wěn)步提高等方面得到證明,其原因是評閱制度改革給碩士生和導(dǎo)師帶來了質(zhì)量上的壓力。

四、碩士學(xué)位論文評閱制度改革的思考及建議

通過前述數(shù)據(jù)比較與分析,可以看出此次改革卓有成效,但依然需要辯證的看待盲評評閱方式,評閱制度的改革還有很多方面需要進(jìn)一步深化。

(一)盲評評閱方式仍有待改進(jìn)。

盲評方式能夠避免明評方式中評閱人講情面、敷衍了事的弊端,保證了學(xué)位論文評閱的嚴(yán)肅性和評價結(jié)論的權(quán)威性,但其也需改進(jìn)。

1.推廣網(wǎng)上評閱形式,降低成本,縮短盲評周期。抽選論文和盲評單位、結(jié)算費(fèi)用、處理結(jié)果等新流程帶來的事務(wù)性工作,使管理部門新增了很多工作量[2]。由于流程處理繁雜,且省外遞送需時較長,使得本來就較為緊迫的論文寫作時間更加捉襟見肘。針對這些情況,主要應(yīng)對策略是推廣節(jié)省大量人力、經(jīng)濟(jì)和時間成本的網(wǎng)上評閱形式;還可以讓作者在論文首頁列出論文的創(chuàng)新點等以便于專家評判,節(jié)約評閱時間。

2.建立專家信息庫,避免盲評評審專家選取的隨意性。嘗試建立評審專家信息庫,使得盲評專家的選取更有針對性。專家?guī)斓慕?yīng)根據(jù)研究方向細(xì)分,而對于評閱結(jié)論過于泛泛者、多次給出的評閱結(jié)果與論文真實水平差距過大者、受到干擾而改變評閱結(jié)果者都列入“黑名單”,不再予以選取?？傊?專家?guī)斐藢W(xué)術(shù)水平,還應(yīng)在師德、誠信和學(xué)術(shù)態(tài)度等聲譽(yù)方面都制定要求,實行動態(tài)管理,避免論文評閱人選定的隨意性。

(二)繼續(xù)優(yōu)化和細(xì)化碩士學(xué)位論文評閱標(biāo)準(zhǔn)。

目前所有學(xué)科論文的評閱意見書是統(tǒng)一的,實行同一的評價指標(biāo)體系和標(biāo)準(zhǔn),無法體現(xiàn)不同學(xué)科門類的特點,缺乏針對性,使得評閱專家給分的標(biāo)準(zhǔn)還是帶有一定程度的主觀性。應(yīng)該按照不同學(xué)科甚至不同的研究方向制定不同的個性化的細(xì)化指標(biāo)體系,以便于專家更準(zhǔn)確的掌握評價尺度[3]。在指標(biāo)體系的構(gòu)建中,還可單獨設(shè)置一票否決指標(biāo),只要一項不符合則論文不予通過,例如存在嚴(yán)重剽竊行為;有明顯原則性問題;無創(chuàng)新點;所用的主要方法不當(dāng);主要數(shù)據(jù)不真實等[4]。

(三)建立碩士學(xué)位論文評閱的監(jiān)督和反饋機(jī)制。

目前評閱制度缺乏信息的反饋,如能建立相應(yīng)的監(jiān)督和反饋機(jī)制,可在一定程度上對評閱人進(jìn)行監(jiān)督和控制。這些機(jī)制其一是內(nèi)部途徑,將論文評閱結(jié)果網(wǎng)上公示,增加評審結(jié)果的透明度,使得論文作者的學(xué)術(shù)水平、導(dǎo)師的指導(dǎo)水平甚至評閱專家的評審水平都接受監(jiān)督,使論文評閱結(jié)果更加公正、準(zhǔn)確;其二是引入社會機(jī)制進(jìn)行監(jiān)督,比如把論文裝訂成冊公開出版,附上評閱者和答辯委員會成員姓名,接受全社會的監(jiān)督。

學(xué)位論文是檢驗研究生理論基礎(chǔ)、專業(yè)知識、科研能力、創(chuàng)新能力、學(xué)術(shù)水平的重要手段,是研究生培養(yǎng)質(zhì)量的重要標(biāo)志[5],繼續(xù)推進(jìn)和深化碩士學(xué)位論文評閱制度改革才能確保研究生培養(yǎng)質(zhì)量。當(dāng)然,沒有任何一種評閱方式是完美無缺的,我們要在實踐中總結(jié),不斷嘗試和改革,權(quán)衡利弊,尋找最有利于學(xué)位論文水平提高,有利于節(jié)省教育資源的評閱方式。

[1]陳新超.嚴(yán)把學(xué)位論文質(zhì)量關(guān)切實提高研究生培養(yǎng)質(zhì)量[J].福建醫(yī)科大學(xué)學(xué)報:社會科學(xué)版,2006,7(2):74-76.

[2]張宇航.博士學(xué)位論文評閱制度改革研究與實踐——以國防科技大學(xué)為例[D].2006.

[3]高坤華,劉 銘,陳亞濱.學(xué)位論文評審及答辯方式改革的探索與實踐[J].學(xué)位與研究生教育,2007(2):31-33.

[4]吳太山.匿名批量和國際化評審學(xué)位論文探析[J].科技進(jìn)步與對策,2003,20(10):123-125.

[5]周紅康.研究生學(xué)位論文答辯制度的治理[J].煤炭高等教育.2006,24(4):89-91.