曹海濤 魏勤
[摘? ? ? ? ? ?要]? 以AACSB國際認(rèn)證中的AOL標(biāo)準(zhǔn)為基準(zhǔn),設(shè)計經(jīng)管學(xué)院研究生學(xué)習(xí)效果的評量機制。同時,以管理經(jīng)濟學(xué)課程為例,具體說明此學(xué)習(xí)效果的評量機制如何實施。
[關(guān)? ? 鍵? ?詞]? AOL;學(xué)習(xí)效果;評量機制
[中圖分類號]? G642? ? ? ? ? ? ? ? ? ? [文獻(xiàn)標(biāo)志碼]? A? ? ? ? ? ? ? ? ? [文章編號]? 2096-0603(2023)15-0109-04
一、AACSB認(rèn)證中的AOL評估標(biāo)準(zhǔn)簡介
商管學(xué)院的教育目標(biāo)是為社會培養(yǎng)合格的經(jīng)營管理人才。學(xué)生的學(xué)習(xí)成效是評估商管教育是否符合社會需求的重要環(huán)節(jié)之一。國際商學(xué)院促進(jìn)協(xié)會(The Association to Advance Collegiate Schools of Business,簡稱AACSB)是著名的提供商管學(xué)科教育評估的國際認(rèn)證機構(gòu)之一,其評估準(zhǔn)則現(xiàn)已成為眾多國家商管課程學(xué)習(xí)成效評估的主要參照。AACSB的評估強調(diào)商管學(xué)院在參與、創(chuàng)新與影響力(Engagement,Innovation and Impact)等方面的表現(xiàn)。即借由評估過程,提高商管教育的質(zhì)量,強化學(xué)校、師生和產(chǎn)業(yè)之間的互動,促進(jìn)教育、學(xué)術(shù)或?qū)I(yè)的創(chuàng)新,從而使學(xué)院對社會有所貢獻(xiàn)。
本文主要目的就是以AACSB的第8項評估標(biāo)準(zhǔn)——學(xué)習(xí)確保(Assurance of Learning,AOL)為基準(zhǔn),討論經(jīng)管學(xué)院研究生學(xué)習(xí)成效評估機制的設(shè)計;同時,以管理經(jīng)濟學(xué)課程為例,就具體課程學(xué)習(xí)成效評估的實施進(jìn)行討論。
二、以AOL設(shè)計學(xué)習(xí)評量機制
AACSB的評估標(biāo)準(zhǔn)共計15條(2013年修訂版),其中第8條主要關(guān)注學(xué)生學(xué)習(xí)成效衡量,其內(nèi)容如下:學(xué)院利用健全的文書制度與系統(tǒng)化的程序,制定或修改各學(xué)位學(xué)程的學(xué)習(xí)目標(biāo);協(xié)助學(xué)位學(xué)程建立課程設(shè)計、教學(xué)方法與課程改進(jìn)的機制來實現(xiàn)學(xué)習(xí)目標(biāo),并應(yīng)體現(xiàn)學(xué)位學(xué)程的學(xué)習(xí)目標(biāo)達(dá)成之效果。
此項評估標(biāo)準(zhǔn)強調(diào)課程管理(Curricula Manage-ment)和學(xué)生學(xué)習(xí)成效的保證(Assurance Of Learning)。首先,培養(yǎng)方案要能反映社會對學(xué)員的需求;其次,制訂學(xué)習(xí)目標(biāo);最后,衡量學(xué)習(xí)結(jié)果是否達(dá)到學(xué)習(xí)目標(biāo),進(jìn)而修訂課程設(shè)計與教學(xué)內(nèi)容。所以,AOL的評估過程就是衡量學(xué)生在參與課程學(xué)習(xí)中是否達(dá)到預(yù)期學(xué)習(xí)目標(biāo)的過程。值得注意的是,AACSB關(guān)注的學(xué)習(xí)目標(biāo)是整個學(xué)位學(xué)程層次的目標(biāo),而不是單一課程所設(shè)定的細(xì)節(jié)目標(biāo)。借由衡量學(xué)習(xí)成效的過程,學(xué)院得以確認(rèn)學(xué)習(xí)目標(biāo)的達(dá)成情況,提供回饋和改善的指引,協(xié)助教師改善課程設(shè)計和教學(xué)內(nèi)容。
借鑒AOL的評估準(zhǔn)則,我們可嘗試建構(gòu)經(jīng)管學(xué)院研究生學(xué)習(xí)成效的評估機制。這一機制主要由以下部分組成:
(一)設(shè)定學(xué)習(xí)目標(biāo)(learning goals)
設(shè)立學(xué)習(xí)目標(biāo)和/或子目標(biāo)(learning objectives),制訂學(xué)習(xí)目標(biāo)和子目標(biāo)的主要內(nèi)涵。
(二)建立學(xué)習(xí)成果評估指標(biāo)體系(rubrics)
此指標(biāo)體系包括考察學(xué)習(xí)結(jié)果的不同維度(dime-nsions),以及針對每一維度制訂的評量標(biāo)準(zhǔn)(criteria)。
(三)施測結(jié)果分析與討論
每門課程的教師根據(jù)施測結(jié)果進(jìn)行分析,并做成分析報告,交由各級教學(xué)主管部門討論。
(四)反饋與改善
施測結(jié)果討論后的改善意見,即成為各門課程后續(xù)教學(xué)中的改進(jìn)措施,由此形成教學(xué)精進(jìn)與學(xué)習(xí)成果評量的有效循環(huán)(loop)。
三、設(shè)立評量標(biāo)準(zhǔn)
根據(jù)前文的討論,我們把經(jīng)管學(xué)院研究生學(xué)習(xí)成效評估機制的具體操作步驟總結(jié)如下圖:
(一)建立學(xué)習(xí)目標(biāo)
以經(jīng)管學(xué)院研究生教育為例,根據(jù)多年的教學(xué)實踐以及借鑒國內(nèi)外商管學(xué)院的經(jīng)驗,我們將學(xué)習(xí)目標(biāo)總結(jié)為以下五項:
1.專業(yè)能力(Professional skills),指基本的實務(wù)知識與技能。
2.溝通能力(Communication skills),指口頭溝通/演講、書面溝通/寫作。
3.分析與問題解決能力(Analysis and problem-solv-ing skills),指具有基本的分析思維與問題解決技能。
4.道德觀(Code of ethics),指倫理認(rèn)知與社會責(zé)任。
5.國際視野(Global perspectives),對國內(nèi)外政治、經(jīng)濟、商業(yè)發(fā)展有基本的認(rèn)識。
(二)學(xué)習(xí)子目標(biāo)
每一個學(xué)習(xí)目標(biāo)可發(fā)展出能具體衡量的學(xué)習(xí)子目標(biāo)或?qū)W習(xí)目的。如專業(yè)能力的學(xué)習(xí)目標(biāo)可以繼續(xù)發(fā)展出兩個子目標(biāo),包括:(1)本科生應(yīng)能描述其專業(yè)領(lǐng)域之初級或中級專業(yè)知識與技能,以有助于其職業(yè)及(或)進(jìn)階的持續(xù)學(xué)習(xí)。(2)本科生應(yīng)能展現(xiàn)其基本的能力,以一般及專業(yè)之管理技能與知識來處理問題。
(三)發(fā)展評量標(biāo)尺
依據(jù)學(xué)習(xí)目標(biāo)發(fā)展出多個學(xué)習(xí)成果維度的評量標(biāo)準(zhǔn)之評量標(biāo)尺。例如,衡量專業(yè)能力這一學(xué)習(xí)目標(biāo)的維度可設(shè)為:D1.具備本學(xué)科基礎(chǔ)專業(yè)知識;D2.初步具備整合跨學(xué)科專業(yè)知識的基本能力;D3.具備本學(xué)科相關(guān)領(lǐng)域時事議題的基本創(chuàng)新思辨能力;D4.初步具備運用專業(yè)知識定義問題并進(jìn)行決策的能力;D5.初步具備運用各種資源進(jìn)行自主學(xué)習(xí)的能力;D6.初步具備判斷不同情境案例中需要有效領(lǐng)導(dǎo)方式的能力。同時,每一個維度可分成三個等級的評量標(biāo)準(zhǔn),例如:1=弱,2=中,3=強。每一維度對應(yīng)的評量標(biāo)準(zhǔn)都應(yīng)提供相應(yīng)的情況描述,例如:D4-3(強),可描述為“能夠較充分應(yīng)用專業(yè)知識、證據(jù)和所有相關(guān)情境因素,洞悉問題所在,并針對問題做出的決策能基本滿足或符合不同層面需求”。
(四)執(zhí)行評量作業(yè)
由授課教師于學(xué)期初始、學(xué)期中或?qū)W期末執(zhí)行學(xué)習(xí)成效評量。使用的測量工具可以包括報告、簡報、期中考、期末考、小考等多種測量工具或評量設(shè)計,但授課教師必須確認(rèn)各測量工具或其中的某個特定部分是衡量評量標(biāo)尺中的哪一個維度。例如:“管理經(jīng)濟學(xué)”課程期中考和期末考的紙筆測驗,授課教師必須確認(rèn)考題中的哪些題目是測量“分析與問題解決能力”的第一個維度,哪些題目分別測量第二和第三個維度。
(五)資料分析并依分析結(jié)果提供改進(jìn)建議
根據(jù)評量標(biāo)尺上的不同評量維度,授課教師對每位學(xué)生的表現(xiàn)評分。事后,教師統(tǒng)計修課學(xué)生分?jǐn)?shù),計算出各維度的達(dá)成比率及總達(dá)成比率是否高于當(dāng)初設(shè)定的“目標(biāo)達(dá)標(biāo)率”。施測完畢后,依施測所得到的結(jié)果填寫“討論與建議”,包括重要的發(fā)現(xiàn)、改善方法、評量標(biāo)尺或“目標(biāo)達(dá)標(biāo)率”的總結(jié)。最后,針對各項資料加以分析,就各項統(tǒng)計數(shù)據(jù)說明并提供改善建議,做成學(xué)習(xí)成效報告。例如“管理經(jīng)濟學(xué)”課程的學(xué)習(xí)成效在“專業(yè)能力”各維度皆有通過“目標(biāo)達(dá)標(biāo)率”80%,顯示學(xué)生對管理經(jīng)濟學(xué)主要理論模型和基本的國際經(jīng)濟問題有較深入的理解,從而可以提出說明和建議,如可以適度提高達(dá)標(biāo)率標(biāo)準(zhǔn);同時,也可增加評量問題的深度、廣度,以得到較高的鑒別度。
(六)召開各級會議討論學(xué)習(xí)成效報告和審查改善建議
利用各項會議,如教研室會議、院系會議等討論改善建議。會議完成后,評量結(jié)果必須有系統(tǒng)地收集、分析與傳閱給教學(xué)主管部門和相關(guān)授課教師等,并依據(jù)改善建議和時程執(zhí)行改進(jìn)措施。例如管理經(jīng)濟學(xué)課程在“專業(yè)能力”學(xué)習(xí)目標(biāo)的“目標(biāo)達(dá)標(biāo)率”完成80%的情況下,下一次授課時可將達(dá)標(biāo)率提高至82.5%,或維持“目標(biāo)達(dá)標(biāo)率”80%,但增加評量問題中較困難題目的比例。
(七)學(xué)習(xí)成效評量的持續(xù)改善
本次課程學(xué)習(xí)評量后,應(yīng)在下次課程教學(xué)中執(zhí)行改善建議,并重新評量學(xué)生表現(xiàn),檢視是否確實改善。針對本次施測結(jié)果,檢查學(xué)生尚未達(dá)成教學(xué)目標(biāo)之處,教學(xué)單位要努力改進(jìn)缺失,提出改進(jìn)措施的執(zhí)行方法與時間表,在下回執(zhí)行學(xué)習(xí)成效評估后進(jìn)行比較,由此完成一次循環(huán)(close the loop)。
四、管理經(jīng)濟學(xué)課程評量機制的具體運作
本節(jié)我們以管理經(jīng)濟學(xué)課程為例,詳細(xì)說明某一具體課程如何根據(jù)學(xué)院設(shè)定的學(xué)習(xí)成效評估機制進(jìn)行學(xué)習(xí)成效的評量。
(一)管理經(jīng)濟學(xué)課程評量與施測
假設(shè)管理經(jīng)濟學(xué)課程的學(xué)習(xí)目標(biāo)是培養(yǎng)學(xué)生的專業(yè)能力和國際觀,而專業(yè)能力中我們選擇三個維度D1、D2、D4進(jìn)行評量,國際觀(假設(shè)共有六個維度)中我們也選擇三個維度D1、D2、D5進(jìn)行評量,對這兩項學(xué)習(xí)目標(biāo)評量和施測的操作如文末表1和表2所示。
(二)管理經(jīng)濟學(xué)課程評量的檢討
根據(jù)課程施測結(jié)果進(jìn)行檢討,具體情形可以包括:
1.以評量標(biāo)尺說明學(xué)生學(xué)習(xí)成效評估情形
(1)專業(yè)能力
管理經(jīng)濟學(xué)課程的專業(yè)能力評估結(jié)果中,三個維度平均通過率為79.7%,基本達(dá)到80%的目標(biāo)通過率,顯示學(xué)生已經(jīng)具備管理經(jīng)濟學(xué)的專業(yè)知識能力。其中,表現(xiàn)較弱的維度是D4以本學(xué)科基本模型分析相關(guān)時事議題的基本能力,學(xué)生對時事議題的認(rèn)知較為薄弱,學(xué)理的運用能力還可加強。
(2)國際觀
管理經(jīng)濟學(xué)課程國際觀的評估結(jié)果,三個維度平均通過率為67%,低于80%的目標(biāo)通過率,可見學(xué)生對管理經(jīng)濟學(xué)中的國際觀內(nèi)容較弱。教學(xué)中,教師對全球化意識、管理經(jīng)濟學(xué)發(fā)展以及對產(chǎn)業(yè)的影響這些方面的知識可以多加補充介紹。
2.依據(jù)表格數(shù)據(jù)說明未來課程改善的對應(yīng)方法
(1)專業(yè)能力
專業(yè)能力D4平均未達(dá)成目標(biāo)通過率的改善方法:學(xué)生對把剛掌握的管理經(jīng)濟學(xué)模型應(yīng)用到具體事例的分析能力還有所欠缺,教師可透過課堂討論或習(xí)題演練等方式提高學(xué)生這方面的能力。
(2)國際觀
D1、D2、D5全球管理經(jīng)濟學(xué)認(rèn)知較弱的改善方法:全球化及世界經(jīng)濟的認(rèn)知,可透過教師課堂上多討論國際性案例和重大經(jīng)濟事件來補充增進(jìn),或是改以國際版之教科書教學(xué)。
3.舉行會議進(jìn)行討論
舉行課程教學(xué)會議討論評估結(jié)果和改進(jìn)措施。討論內(nèi)容可以包括在下次執(zhí)行學(xué)習(xí)成效評估時是否有針對評量標(biāo)尺或教學(xué)方法進(jìn)行修正,以得到較好的評估結(jié)果。同時制成評估結(jié)果報告,分別送到課程委員會、各院系和教研室主管、相關(guān)授課教師參閱。最后,執(zhí)行改善建議及設(shè)定時程,在本課程會議(由共同科目教學(xué)教師組成)上討論并擬訂改善措施,并于下一學(xué)年度執(zhí)行改善。
五、結(jié)語
經(jīng)管學(xué)院或商學(xué)院的研究生教育,目的是為社會培養(yǎng)合格的經(jīng)營管理人才。如何衡量研究生的學(xué)習(xí)成果是否符合社會需求、如何持續(xù)改進(jìn)和完善研究生教育,成為研究生教育評估的重要環(huán)節(jié)之一。本文以AACSB國際認(rèn)證中的AOL標(biāo)準(zhǔn)為基準(zhǔn),設(shè)計經(jīng)管學(xué)院研究生學(xué)習(xí)效果的評量機制。同時,根據(jù)我們多年的教學(xué)經(jīng)驗,以管理經(jīng)濟學(xué)課程為例,具體說明此學(xué)習(xí)效果的評量機制如何實施。
AOL的學(xué)習(xí)成效評估機制,是希望通過學(xué)習(xí)目標(biāo)確立、教學(xué)過程管理、施測結(jié)果的檢討,使學(xué)生對課程有深入領(lǐng)悟,使教師對教學(xué)能持續(xù)改進(jìn)。
參考文獻(xiàn):
楊宜,陳建斌.城市型、應(yīng)用型大學(xué)商科教育質(zhì)量提升的探索與實踐:基于AACSB國際認(rèn)證的視角[M].北京:經(jīng)濟科學(xué)出版社,2018.