面向產(chǎn)出的內(nèi)部評(píng)價(jià)機(jī)制研究與應(yīng)用
——以機(jī)械設(shè)計(jì)制造及其自動(dòng)化專業(yè)為例

杜 勁，衣明東，宋 明

（1.齊魯工業(yè)大學(xué)〔山東省科學(xué)院〕機(jī)械工程學(xué)院，山東 濟(jì)南 250353；2.山東省機(jī)械設(shè)計(jì)研究院，山東 濟(jì)南 250031）

2016年，中國成為第十八個(gè)《華盛頓協(xié)議》正式成員，這標(biāo)志著我國工程教育質(zhì)量得到了國際認(rèn)可［1］。開展工程教育專業(yè)認(rèn)證可用于構(gòu)建我國工程教育的質(zhì)量監(jiān)控體系，推進(jìn)工程教育改革，提高工程教育質(zhì)量，提高人才培養(yǎng)水平?！爱a(chǎn)出導(dǎo)向、學(xué)生中心、持續(xù)改進(jìn)”是工程教育認(rèn)證的核心理念，也被稱為面向產(chǎn)出的教育（Outcome-based Education,OBE）理念［2］。在參與工程教育認(rèn)證的專業(yè)建設(shè)工作中，對(duì)于參加認(rèn)證中期審核的專業(yè)，在中期審核報(bào)告中必須說明面向產(chǎn)出的內(nèi)部評(píng)價(jià)機(jī)制的完善與運(yùn)行情況。

本文基于工程教育專業(yè)認(rèn)證的OBE理念，以齊魯工業(yè)大學(xué)機(jī)械設(shè)計(jì)制造及其自動(dòng)化專業(yè)為例，結(jié)合認(rèn)證標(biāo)準(zhǔn)和中期審核要求，從內(nèi)部評(píng)價(jià)機(jī)制的持續(xù)改進(jìn)到課程目標(biāo)和畢業(yè)要求評(píng)價(jià)機(jī)制持續(xù)改進(jìn)與具體落實(shí)進(jìn)行了闡述與分析。

一、面向產(chǎn)出的內(nèi)部評(píng)價(jià)機(jī)制的建立

機(jī)械設(shè)計(jì)制造及其自動(dòng)化專業(yè)于2019年6月正式通過工程教育專業(yè)認(rèn)證，有效期為6年?，F(xiàn)場(chǎng)考察專家組也對(duì)本專業(yè)培養(yǎng)目標(biāo)、畢業(yè)要求、教學(xué)過程和師資隊(duì)伍等各環(huán)節(jié)的持續(xù)改進(jìn)提出了針對(duì)性的建議。面向產(chǎn)出是工程認(rèn)證專業(yè)建設(shè)的重要導(dǎo)向［3-4］，本專業(yè)以由企業(yè)、行業(yè)、外部專家、畢業(yè)學(xué)生等為主體的外部評(píng)價(jià)結(jié)果綜合分析為依據(jù)和達(dá)成目標(biāo)，構(gòu)建了教學(xué)質(zhì)量管理機(jī)制和構(gòu)架、課程目標(biāo)達(dá)成度評(píng)價(jià)和畢業(yè)要求達(dá)成度評(píng)價(jià)等內(nèi)部評(píng)價(jià)機(jī)制，并按照機(jī)制設(shè)計(jì)要求運(yùn)行，取得了較好的效果。

（一）本專業(yè)教學(xué)管理機(jī)制架構(gòu)

專業(yè)實(shí)行校、院、系三級(jí)教學(xué)管理體制，形成了學(xué)校層面：分管校長領(lǐng)導(dǎo)、教學(xué)指導(dǎo)委員會(huì)指導(dǎo)、教務(wù)處具體負(fù)責(zé)、各職能部門協(xié)調(diào)配合的校級(jí)管理體系；學(xué)院層面：學(xué)院教學(xué)指導(dǎo)委員會(huì)指導(dǎo)、分管教學(xué)副院長全面負(fù)責(zé)；專業(yè)層面：專業(yè)負(fù)責(zé)人和教研室主任分工負(fù)責(zé)、教學(xué)秘書服務(wù)支持、全體教師共同參與的教學(xué)管理體系。2019年以來，為了全面落實(shí)面向產(chǎn)出認(rèn)證理念，構(gòu)建了以學(xué)生為中心、全員參與的人才培養(yǎng)機(jī)制，進(jìn)一步明確專業(yè)負(fù)責(zé)人的頂層設(shè)計(jì)責(zé)任和管理實(shí)施責(zé)任，同時(shí)設(shè)置專業(yè)事務(wù)專員輔助專業(yè)負(fù)責(zé)人開展專業(yè)學(xué)生培養(yǎng)和教學(xué)管理工作，全面落實(shí)專業(yè)高素質(zhì)應(yīng)用型人才培養(yǎng)目標(biāo)。

此外，在學(xué)院和專業(yè)層面建立學(xué)生教學(xué)信息員機(jī)制，每個(gè)自然班遴選1名學(xué)生教學(xué)信息員，充分發(fā)揮學(xué)生參與教學(xué)的作用，定期準(zhǔn)確收集、了解教學(xué)運(yùn)行過程和學(xué)生工程師培養(yǎng)的自我訴求等重要信息，及時(shí)總結(jié)教與學(xué)狀況，為人才培養(yǎng)的持續(xù)改進(jìn)提供依據(jù)。校、院和專業(yè)在認(rèn)證通過后在管理構(gòu)架上的補(bǔ)充完善在圖中用星號(hào)表示，如圖1所示。

圖1 認(rèn)證之后專業(yè)教學(xué)質(zhì)量管理機(jī)制架構(gòu)

（二）面向產(chǎn)出的人才培養(yǎng)質(zhì)量要求與評(píng)價(jià)制度

本專業(yè)認(rèn)證以來，學(xué)校出臺(tái)了《關(guān)于實(shí)施教師本科教學(xué)質(zhì)量評(píng)價(jià)的指導(dǎo)意見》《本科教學(xué)督導(dǎo)工作細(xì)則》等文件，從質(zhì)量標(biāo)準(zhǔn)層面進(jìn)行體制機(jī)制完善，確保政策落實(shí)可操作。其中，學(xué)校于2020年制定了《人才培養(yǎng)質(zhì)量達(dá)成情況評(píng)價(jià)管理辦法（試行）》，從制度上確保了工程教育認(rèn)證專業(yè)建設(shè)的規(guī)范性，明確了建設(shè)實(shí)施的主體與責(zé)任，規(guī)定了面向產(chǎn)出的學(xué)生培養(yǎng)質(zhì)量內(nèi)部評(píng)價(jià)規(guī)范和評(píng)價(jià)方法。2021年，學(xué)院制定和完善了基于面向產(chǎn)出的《課程目標(biāo)評(píng)價(jià)及畢業(yè)要求達(dá)成度評(píng)價(jià)工作實(shí)施辦法》《關(guān)于進(jìn)一步落實(shí)OBE理念的課程改革指導(dǎo)意見》與《關(guān)于深化OBE理念的工作方案》等機(jī)制文件，進(jìn)一步完善了面向產(chǎn)出的人才培養(yǎng)及內(nèi)部評(píng)價(jià)機(jī)制。

（三）面向產(chǎn)出的本科教學(xué)內(nèi)部評(píng)價(jià)機(jī)制

專業(yè)的內(nèi)部評(píng)價(jià)主要包含“課程目標(biāo)達(dá)成情況評(píng)價(jià)”和“畢業(yè)要求達(dá)成情況評(píng)價(jià)”兩個(gè)部分。本專業(yè)面向產(chǎn)出的內(nèi)部評(píng)價(jià)的目的是以課程目標(biāo)和畢業(yè)要求為指標(biāo)，以可測(cè)量的人才培養(yǎng)產(chǎn)出成果為評(píng)價(jià)依據(jù)，評(píng)價(jià)課程目標(biāo)達(dá)成情況，并以此對(duì)學(xué)生畢業(yè)要求達(dá)成情況進(jìn)行評(píng)價(jià)并最終對(duì)人才培養(yǎng)情況是否達(dá)成面向產(chǎn)出的設(shè)計(jì)要求進(jìn)行衡量。綜合分析利用兩種內(nèi)部評(píng)價(jià)結(jié)果，對(duì)課程教學(xué)、學(xué)生培養(yǎng)、畢業(yè)要求、培養(yǎng)目標(biāo)等進(jìn)行評(píng)估，評(píng)估結(jié)果作為提出相應(yīng)改進(jìn)措施的依據(jù)。

本專業(yè)的內(nèi)部評(píng)價(jià)主要由內(nèi)部評(píng)價(jià)小組主持開展，該評(píng)價(jià)小組的職責(zé)為：負(fù)責(zé)討論并制定適用于學(xué)院已通過工程教育專業(yè)認(rèn)證專業(yè)及計(jì)劃申請(qǐng)工程教育專業(yè)認(rèn)證專業(yè)的面向產(chǎn)出內(nèi)部評(píng)價(jià)機(jī)制；按照內(nèi)部評(píng)價(jià)機(jī)制要求，組織開展“課程目標(biāo)達(dá)成度評(píng)價(jià)”和“畢業(yè)要求達(dá)成度評(píng)價(jià)”；針對(duì)內(nèi)部評(píng)價(jià)的結(jié)果，提出面向產(chǎn)出持續(xù)改進(jìn)的相關(guān)意見和建議并監(jiān)督執(zhí)行。

二、課程目標(biāo)達(dá)成情況評(píng)價(jià)機(jī)制建立與運(yùn)行

（一）課程目標(biāo)達(dá)成情況評(píng)價(jià)機(jī)制的建立

課程目標(biāo)達(dá)成評(píng)價(jià)主要采取成績法考核，主要數(shù)據(jù)源自考核課程的考核成績?？己顺煽円罁?jù)為平時(shí)作業(yè)、課堂測(cè)試、討論環(huán)節(jié)、實(shí)踐環(huán)節(jié)、期中和期末測(cè)試環(huán)節(jié)?？己素?zé)任人為課程負(fù)責(zé)人和任課教師。根據(jù)學(xué)校相關(guān)文件要求，任課教師嚴(yán)格執(zhí)行命題制卷、成績?cè)u(píng)定、閱卷規(guī)范、試卷裝訂歸檔和成績錄入的流程及規(guī)范要求。

具體的“課程目標(biāo)達(dá)成評(píng)價(jià)”流程包括：（1）課程負(fù)責(zé)人組織平時(shí)評(píng)價(jià)和期末考核內(nèi)容，并收集相關(guān)評(píng)價(jià)資料；（2）課程負(fù)責(zé)人匯總考核數(shù)據(jù)，計(jì)算課程目標(biāo)達(dá)成度評(píng)價(jià)值并進(jìn)行分析與總結(jié)；（3）課程負(fù)責(zé)人提出切實(shí)可行的持續(xù)改進(jìn)措施；（4）專業(yè)事務(wù)專員匯總分析各課程評(píng)估數(shù)據(jù)，整理專業(yè)所有課程目標(biāo)達(dá)成情況評(píng)價(jià)結(jié)果；（5）專業(yè)負(fù)責(zé)人審核課程目標(biāo)達(dá)成度情況分析。對(duì)于審核通過的課程，要求課程負(fù)責(zé)人在下一輪教學(xué)中按照持續(xù)改進(jìn)措施開展教學(xué)活動(dòng)。

針對(duì)某些課程目標(biāo)達(dá)成度不理想的課程，學(xué)院組織課程團(tuán)隊(duì)及學(xué)院督導(dǎo)組對(duì)相關(guān)課程進(jìn)行督導(dǎo)，切實(shí)履行持續(xù)改進(jìn)措施，幫助教師改善教學(xué)方式方法，加強(qiáng)教學(xué)質(zhì)量，實(shí)現(xiàn)課程目標(biāo)達(dá)成度達(dá)到預(yù)期效果。具體的流程：（1）各課程團(tuán)隊(duì)將課程目標(biāo)達(dá)成度低于0.65的課程檢出，并通知課程負(fù)責(zé)人，認(rèn)真分析原因，提出改進(jìn)措施。（2）各課程團(tuán)隊(duì)根據(jù)課程負(fù)責(zé)人提出的改進(jìn)措施，進(jìn)行團(tuán)隊(duì)研討并將修改后的課程改進(jìn)措施提交學(xué)院教學(xué)督導(dǎo)組審核。（3）學(xué)院教學(xué)督導(dǎo)組根據(jù)提交的課程改進(jìn)措施文檔，召開會(huì)議進(jìn)行評(píng)審，并提出修改意見。（4）課程負(fù)責(zé)人根據(jù)教學(xué)督導(dǎo)組修改意見，優(yōu)化課程改進(jìn)措施，并將相關(guān)措施在后續(xù)教學(xué)中嚴(yán)格執(zhí)行。（5）教學(xué)督導(dǎo)組在教學(xué)過程中督導(dǎo)課程負(fù)責(zé)人嚴(yán)格執(zhí)行改進(jìn)措施，并將督導(dǎo)結(jié)果反饋課程負(fù)責(zé)人。

（二）課程目標(biāo)達(dá)成情況評(píng)價(jià)機(jī)制的運(yùn)行

本專業(yè)于2021年9月對(duì)2019—2020學(xué)年及2020—2021學(xué)年的所有核心課程和主要實(shí)踐類課程進(jìn)行了課程目標(biāo)達(dá)成度評(píng)價(jià)。對(duì)于所評(píng)價(jià)的專業(yè)核心課程和主要實(shí)踐課程而言，課程目標(biāo)達(dá)成評(píng)價(jià)值大部分超過了目標(biāo)值0.7，即實(shí)現(xiàn)了預(yù)期課程目標(biāo)的達(dá)成要求。

在課程目標(biāo)達(dá)成度評(píng)價(jià)運(yùn)行的過程中，專業(yè)按照相關(guān)機(jī)制的要求，以課程目標(biāo)達(dá)成度數(shù)據(jù)為依據(jù)，針對(duì)課程存在問題和不足進(jìn)行了分析，并提出改進(jìn)措施。例如，2018級(jí)“材料力學(xué)”課程負(fù)責(zé)人對(duì)課程目標(biāo)達(dá)成情況進(jìn)行了分析，總結(jié)了存在的問題：學(xué)生對(duì)以組合變形為代表的復(fù)雜問題的分析能力不足。課程負(fù)責(zé)人提出了改進(jìn)措施：（1）課程中適度增加復(fù)雜問題比例；（2）嘗試部分開展混合式教學(xué)實(shí)驗(yàn)。學(xué)院督導(dǎo)組對(duì)提交的課程改進(jìn)措施文檔行進(jìn)審核并提出修改意見：注意開展混合式教學(xué)時(shí)的課程資源建設(shè)工作。學(xué)院督導(dǎo)組審核文檔并提出修改意見：改善學(xué)生對(duì)混合式教學(xué)的適應(yīng)性，精細(xì)設(shè)計(jì)教學(xué)流程，完善線下課教學(xué)項(xiàng)目。課程負(fù)責(zé)人根據(jù)學(xué)院教學(xué)督導(dǎo)組修改意見，將相關(guān)措施在2020級(jí)學(xué)生教學(xué)中嚴(yán)格執(zhí)行。

三、畢業(yè)要求達(dá)成情況評(píng)價(jià)機(jī)制的建立和運(yùn)行

（一）畢業(yè)要求達(dá)成情況評(píng)價(jià)機(jī)制的建立

為實(shí)現(xiàn)專業(yè)培養(yǎng)目標(biāo)，本專業(yè)制定了12條畢業(yè)要求，又進(jìn)一步細(xì)分為33項(xiàng)指標(biāo)點(diǎn)。每門理論課程或每項(xiàng)實(shí)踐教學(xué)環(huán)節(jié)都分別對(duì)畢業(yè)要求指標(biāo)點(diǎn)中的1項(xiàng)或者多項(xiàng)進(jìn)行支撐。根據(jù)課程目標(biāo)達(dá)成情況評(píng)價(jià)結(jié)果，具體的“畢業(yè)要求達(dá)成評(píng)價(jià)”流程包括：（1）根據(jù)畢業(yè)要求與課程能力對(duì)應(yīng)矩陣，收集整理課程目標(biāo)達(dá)成數(shù)據(jù)；（2）抽取數(shù)據(jù)樣本，根據(jù)畢業(yè)要求達(dá)成計(jì)算方法，計(jì)算畢業(yè)要求達(dá)成度；（3）以年級(jí)為單位形成學(xué)生“畢業(yè)要求達(dá)成內(nèi)部評(píng)價(jià)”分析報(bào)告。

“畢業(yè)要求達(dá)成內(nèi)部評(píng)價(jià)”周期為兩年，即每隔兩年對(duì)近兩年畢業(yè)生的畢業(yè)能力進(jìn)行一次內(nèi)部評(píng)價(jià)。對(duì)“畢業(yè)要求達(dá)成”情況進(jìn)行分析的基礎(chǔ)上，形成分析報(bào)告，并對(duì)教學(xué)各環(huán)節(jié)進(jìn)行反思，持續(xù)改進(jìn)。

（二）畢業(yè)要求達(dá)成情況評(píng)價(jià)機(jī)制的運(yùn)行

基于“課程教學(xué)目標(biāo)達(dá)成度評(píng)價(jià)表”的評(píng)價(jià)結(jié)果，計(jì)算課程所支撐指標(biāo)點(diǎn)的實(shí)際達(dá)成度，進(jìn)而對(duì)本專業(yè)2019屆和2020屆畢業(yè)生進(jìn)行了12項(xiàng)畢業(yè)要求達(dá)成度的分析和評(píng)價(jià)工作。經(jīng)過統(tǒng)計(jì)分析，評(píng)價(jià)結(jié)果分別為0.72和0.73，基本持平，穩(wěn)中有升。該結(jié)果說明，2020屆畢業(yè)生的許多專業(yè)課程、生產(chǎn)實(shí)習(xí)和畢業(yè)設(shè)計(jì)等環(huán)節(jié)保持了穩(wěn)中有升的良好趨勢(shì)，可見本專業(yè)面向產(chǎn)出的內(nèi)部評(píng)價(jià)機(jī)制完善對(duì)該專業(yè)人才培養(yǎng)質(zhì)量的穩(wěn)定性和可靠性發(fā)揮了較好的作用。

通過對(duì)比發(fā)現(xiàn)2020屆畢業(yè)生的畢業(yè)要求3：設(shè)計(jì)或開發(fā)解決方案；畢業(yè)要求9：個(gè)人和團(tuán)隊(duì)；畢業(yè)要求11：項(xiàng)目管理。這3項(xiàng)畢業(yè)要求達(dá)成度提高均超過5%，分別為9.1%、7.7%、8.3%。該結(jié)果主要由于相關(guān)課程負(fù)責(zé)人按照工程教育認(rèn)證的理念推行教學(xué)內(nèi)容、教學(xué)手段和考核環(huán)節(jié)等方面的教學(xué)改革，有效提升了學(xué)生設(shè)計(jì)、開發(fā)解決方案的能力，通過扎實(shí)的課程訓(xùn)練，有效提升了學(xué)生的團(tuán)隊(duì)意識(shí)和項(xiàng)目管理經(jīng)驗(yàn)。

但是，2020屆畢業(yè)生的畢業(yè)要求5：使用現(xiàn)代工具（能夠針對(duì)機(jī)電產(chǎn)品和輕工裝備設(shè)計(jì)、制造中復(fù)雜工程問題，選擇與使用現(xiàn)代計(jì)算、設(shè)計(jì)、測(cè)試、制造和仿真分析等軟硬件工具）的分析評(píng)定結(jié)果出現(xiàn)下降。經(jīng)過專家組針對(duì)該畢業(yè)要求相關(guān)的課程達(dá)成度進(jìn)行分析，認(rèn)為下降是由于支撐畢業(yè)要求5的“大學(xué)計(jì)算機(jī)基礎(chǔ)”等課程能力指標(biāo)點(diǎn)的達(dá)成情況不理想造成的。課程負(fù)責(zé)人對(duì)該課程目標(biāo)的達(dá)成情況進(jìn)行了分析，認(rèn)為學(xué)生對(duì)課程知識(shí)的掌握和運(yùn)用能力偏弱，大班教學(xué)師生互動(dòng)相對(duì)較少，學(xué)生聽課效果較差。后期將針對(duì)該問題加強(qiáng)線上學(xué)習(xí)、討論和交流環(huán)節(jié)。同時(shí)增加一些綜合題和工程應(yīng)用題，彌補(bǔ)課堂教學(xué)學(xué)時(shí)短和師生互動(dòng)條件的不足。學(xué)院督導(dǎo)組認(rèn)為上述改進(jìn)措施切實(shí)可行，督促將在后續(xù)教學(xué)中嚴(yán)格執(zhí)行改進(jìn)措施，提高學(xué)生使用現(xiàn)代工具的能力。

結(jié)語

面向產(chǎn)出的內(nèi)部評(píng)價(jià)機(jī)制的持續(xù)改進(jìn)是工程教育專業(yè)認(rèn)證工作的核心和建設(shè)難點(diǎn)之一，更是專業(yè)建設(shè)的重點(diǎn)工作，是確保人才培養(yǎng)質(zhì)量不斷提升的關(guān)鍵。本文以齊魯工業(yè)大學(xué)機(jī)械設(shè)計(jì)制造及其自動(dòng)化專業(yè)為例，結(jié)合認(rèn)證標(biāo)準(zhǔn)和中期審核要求，從內(nèi)部評(píng)價(jià)機(jī)制的持續(xù)改進(jìn)到課程目標(biāo)和畢業(yè)要求評(píng)價(jià)機(jī)制持續(xù)改進(jìn)與具體落實(shí)進(jìn)行了闡述與分析，提供了具體的評(píng)價(jià)流程，對(duì)工科專業(yè)的工程教育認(rèn)證工作或?qū)I(yè)建設(shè)具有較好的指導(dǎo)作用。