基于CIPP模式和AHP的高職院校第二課堂成績單評價體系構(gòu)建

黃梨錦 龐漢彬 石月皎

（廣西機電職業(yè)技術(shù)學(xué)院,廣西 南寧 530000）

2020年9月，教育部等九部門印發(fā)的《職業(yè)教育提質(zhì)培優(yōu)行動計劃（2020—2023年）》提出，“要落實全員全過程全方位育人，引導(dǎo)職業(yè)學(xué)校全面統(tǒng)籌各領(lǐng)域、各環(huán)節(jié)、各方面的育人資源和育人力量，教育引導(dǎo)青年學(xué)生增強愛黨愛國意識，聽黨話、跟黨走[1]?！?021年4月全國職業(yè)教育大會上，習(xí)近平總書記強調(diào)“在全面建設(shè)社會主義現(xiàn)代化國家新征程中，職業(yè)教育前途廣闊、大有可為，要堅持立德樹人[2]。”

第二課堂成績單是高校貫徹黨的教育方針，落實立德樹人根本任務(wù)的重要渠道。第二課堂作為高職教育教學(xué)的補充，其質(zhì)量好壞將直接影響到高職整體人才培養(yǎng)教育的質(zhì)量。要發(fā)揮第二課堂的作用，建立科學(xué)的評價體系是必然要求。而第二課堂成績單制度自2016年12月試行，2018年全面鋪開以來，高職院校第二課堂活動數(shù)量大大增加，參加活動的學(xué)生數(shù)量也有了很大的改觀，但是在第二課堂成績單評價方面，目前仍然是以活動數(shù)量、參與人數(shù)等作為評價標準進行簡單評價，難以取得系統(tǒng)、客觀、科學(xué)的評價成效。有鑒于此，建立一套針對第二課堂活動的評價體系很有必要。

1 高職院校第二課堂成績單評價體系構(gòu)建思路

1.1 第二課堂成績單評價體系的模式選擇

通過文獻資料的收集與整理，我們發(fā)現(xiàn)第二課程成績單評價方面目前還沒有學(xué)者運用相關(guān)的評價模式進行評價?，F(xiàn)有的教學(xué)質(zhì)量評價體系的構(gòu)建集中在以CIPP 評價模式和PDCA 模式為理論基礎(chǔ)，且使用CIPP評價模式的學(xué)者占大部分。借鑒已有經(jīng)驗得出，CIPP 評價模式與教學(xué)評價具有較高的契合度，而且當前學(xué)者對該理論的研究也比較成熟。故本文選用CIPP評價模式構(gòu)建第二課堂成績單評價體系。

CIPP模式，又稱決策導(dǎo)向模式，是美國教育評價專家Stufflebeam D.L 于1967年提出的評價模式，其主要觀點是“評價最重要的目的不是證明，而是改進”。這種模式通過背景（Context）評價、輸入（Input）評價、過程（Process）評價和成果（Product）評價四部分對評價對象進行系統(tǒng)評價，從而實現(xiàn)對評價對象的多維度監(jiān)控判斷、診斷反饋、改進。在CIPP評價體系中，背景評價重點關(guān)注方案實施特定環(huán)境下的需要及問題；輸入評價重點關(guān)注方案所需且可能獲取的資源、工具、方法；過程評價重點關(guān)注方案的實施過程，如評價對象實施的內(nèi)容、方式、管理手段；成果評價重點關(guān)注目標達成度，通過對比、評估、分析目標的達成度，為改進方案提供依據(jù)。

選擇 CIPP 理論框架作為高職院校第二課堂成績單評價體系的評價模式，可以定位指標體系的結(jié)構(gòu)維度。CIPP評價模式是目前國際國內(nèi)影響力較大、適用性廣泛的評價理論框架，以其作為理論基礎(chǔ)構(gòu)建評價體系有助于反映高職院校第二課堂成績單評價的政策導(dǎo)向、資源供給、實施過程和成果成效。

1.2 第二課堂成績單評價體系設(shè)計原則

1.2.1 科學(xué)性原則

科學(xué)性是指評價模型中評價指標的選取、確立和權(quán)重的計算都要避免主觀因素帶來的影響。第二課堂成績單評價指標體系的選擇要遵循以下標準：一是選取的指標特征要明顯，能夠反映目前第二課堂成績單綜合特征且具有普遍適用性；二是定義指標內(nèi)容要規(guī)范清晰，各個指標之間不能重復(fù)、互相矛盾，更不能模棱兩可；三是指標體系的設(shè)計要有層次性，要結(jié)構(gòu)合理、層層遞進。

1.2.2 系統(tǒng)性原則

系統(tǒng)性是指將評價體系看成是一個完整的系統(tǒng)，能夠?qū)崿F(xiàn)對評價對象全方位評價的目標。第二課堂成績單評價體系的建立要厘清各指標之間的邏輯關(guān)系、層次關(guān)系，將關(guān)于第二課堂成績單的評價指標放在一個系統(tǒng)內(nèi)，保證指標排列層級分明，防止指標之間互相交叉或出現(xiàn)冗亂的情況。

1.2.3 可行性原則

可行性是指評價體系的每一個指標都要能有效評價評價對象，客觀反映評價對象并能真正用于實際操作中。第二課堂成績單評價體系的構(gòu)建是為了科學(xué)評價當前第二課堂活動開展情況并在實際中應(yīng)用。這就要求我們在設(shè)計第二課堂成績單評價體系時，要做到指標數(shù)量合理、權(quán)重符合實際、體系簡單明了易操作，確保在實際操作中能有效對第二課堂成績單的具體活動做出評價。

2 第二課堂成績單評價指標的選擇與設(shè)計

2.1 評價指標體系初步設(shè)計

2.1.1 從相關(guān)文獻中選取指標

通過《中國知網(wǎng)》搜索跟第二課堂成績單、CIPP評價模式相關(guān)且建立了評價指標體系的核心期刊、引用率高的期刊和博碩士論文，發(fā)現(xiàn)第二課堂成績單評價體系的研究主要集中在評價體系存在的問題、評價體系構(gòu)建原則和評價方法等方面，關(guān)于評價體系的具體構(gòu)建研究非常少。曹慧秋（2019）提出第二課堂成績單記錄評價體系主要從文化基礎(chǔ)、自主發(fā)展、社會參與三個方面去構(gòu)建[3]；黃佳瑜（2018）提出第二課堂成績單下學(xué)生社團評價指標應(yīng)從組織管理、社團活動、活動成效、創(chuàng)新創(chuàng)業(yè)四個方面去構(gòu)建[4]；王靜（2019）從事前控制、事中控制、事后控制三方面構(gòu)建第二課堂成績單評價體系框架[5]；陳晨子（2020）基于OBE理念對第二課堂人才培養(yǎng)目標設(shè)置的合理性、課程體系與人才培養(yǎng)目標的契合度及第二課堂人才綜合素質(zhì)培養(yǎng)的有效性進行分析[6]。而第一課堂教學(xué)質(zhì)量評價體系的研究相對豐富，為了獲得更多科學(xué)有效的指標，筆者也對第一課堂的教學(xué)質(zhì)量評價體系進行梳理并參考。

2.1.2 從政策中選擇指標

指標的選擇必須要結(jié)合第二課堂成績單育人目標和構(gòu)建原則，才能更科學(xué)。本文通過選取近年來與高職院校第二課堂、人才培養(yǎng)、教學(xué)管理等相關(guān)的文件，對指標進行初步規(guī)劃。查找的相關(guān)的文件有《共青團中央、教育部關(guān)于加強和改進新形勢下高校共青團思想政治工作的意見》《共青團中央、教育部關(guān)于在高校實施共青團“第二課堂成績單”制度的意見》《教育部關(guān)于職業(yè)院校專業(yè)人才培養(yǎng)方案制訂與實施工作的指導(dǎo)意見》《教育部辦公廳關(guān)于做好擴招后高職教育教學(xué)管理工作的指導(dǎo)意見》《教育部等九部門關(guān)于印發(fā)〈職業(yè)教育提質(zhì)培優(yōu)行動計劃（2020—2023年）〉的通知》。

2.2 評價指標的確定

通過匯總整理文獻研究選取的指標、政策研究選取的指標，以 CIPP 評價模式中的四大評價要素為指標基礎(chǔ)框架形成初步框架，然后經(jīng)過兩輪專家意見征詢，將代表性不強的指標刪除，將概念相近的指標合并提煉，最終形成高職院校第二課堂成績單評價體系。具體為背景評價C、輸入評價I、過程評價P1、效果評價P2四個一級指標；人才培養(yǎng)目標對應(yīng)度、文化自信的體現(xiàn)度、活動的適用度、實踐創(chuàng)新程度等16個二級指標（見表1）。

表1 第二課堂成績單評價體系

3 第二課堂成績單評價體系權(quán)重確立

本文將采用層次分析法對指標權(quán)重進行計算。層次分析法（AHP）是計算權(quán)重的有效方法，是指將一個復(fù)雜的目標分解成為多個子目標，每個子目標再細分為不同級別的指標。然后對各個級別指標進行賦分，通過構(gòu)建判斷矩陣，進行層次單排序和層次總排，并進行一次性檢驗，最后算出各層級指標權(quán)重值。

3.1 建立層次分析結(jié)構(gòu)模型

在確定了評價指標體系后，以此為基礎(chǔ)建立起一個完整的層次結(jié)構(gòu)模型，把復(fù)雜的第二課堂成績單的評價轉(zhuǎn)化為一個簡單的過程（見圖1）。

圖1 第二課堂成績單評價體系層次圖

3.2 構(gòu)造對比矩陣

本研究對廣西四所高職院校長期從事第二課程成績單的專家進行問卷調(diào)查，通過其評價指標重要性的問卷結(jié)果，對打分情況進行匯總。然后通過指標的加權(quán)平均值對同一層級每個指標進行兩兩比較，構(gòu)造第二課堂成績單評價體系各層指標的判斷矩陣，重要成程度用Stanty的1-9標度方法給出。對4個一級指標、16個二級指標構(gòu)建起同一層級判斷矩陣。這里以一級指標權(quán)重計算為例，經(jīng)專家打分后整理的矩陣如表2所示。

表2 一級指標判斷矩陣

3.3 指標權(quán)重的計算

通過構(gòu)建判斷矩陣，形成了指標間直觀的比重關(guān)系。接下來則需要計算各指標相對于戰(zhàn)略目標即第二課堂成績單評級體系相對重要性，本文使用幾何平均法計算指標權(quán)重。

首先，計算判斷矩陣每一行元素的乘積并對每行的乘積進行開方根處理，計算公式為：

其次，對向量進行按列歸一化處理并計算出權(quán)重系數(shù)，計算公式為：

最后，對構(gòu)建的判斷矩陣進行一次性檢驗，計算判斷矩陣的最大特征根λmax，一致性指標CI，查找隨機一致性指標R.I.的取值（見表3），計算出判斷一致性的指標為C.R。

表3 隨機一致性指標R.I.的取值表

計算公式如下:

判斷：當C.R.＜0.1時，判斷矩陣的一致性較好，可以通過；當C.R.＞0.1時，修改矩陣各項取值，使之符合要求。同樣以一級指標權(quán)重為例，計算結(jié)果如表4所示：

表4 一級指標權(quán)重計算表

經(jīng)計算，λmax=4.000 52，CI=0.000 17，CR=0.000 20＜0.1，矩陣通過一致性檢驗。

3.4 評價指標權(quán)重值的最終確定

經(jīng)過各項指標一致性檢驗，整體指標權(quán)重如表5所示。

表5 整體指標權(quán)重表

由第二課堂成績單評價體系中的各個指標權(quán)重大小及組合，可知各級指標及要素相對重要程度。一級指標中過程評價 P1（0.375 2）＞效果評價P2（0.291 6）＞背景評價C（0.208 5）＞輸入評價I（0.124 7），過程評價占比權(quán)重最大其次為效果評價和背景評價，輸入評價相對影響較弱。比重大小說明學(xué)生對第二課堂的參與度、活動的反響情況等較重要，在組織第二課堂活動過程中，要對活動精心策劃，采取符合現(xiàn)代大學(xué)生喜聞樂見的活動形式，真正調(diào)動學(xué)生參與的積極性，從而達到參加第二課堂活動的目的。

4 第二課堂成績單評價體系實施策略

本文通過CIPP模式構(gòu)建了高職院校第二課堂成績單評價體系的內(nèi)容，并運用層次分析法（AHP）計算出了各項評價指標的權(quán)重，最終形成了一套科學(xué)、規(guī)范的高職院校第二課堂成績單評價體系。其應(yīng)用價值得到了驗證，但是推廣應(yīng)用評價體系時，需要做到因地制宜。

4.1 強調(diào)背景評價C的引導(dǎo)作用

第二課堂教育要體現(xiàn)立德樹人的育人目標，評價指標要體現(xiàn)第二課堂活動設(shè)計是否符合人才培養(yǎng)目標和學(xué)生身心發(fā)展及成長成才的規(guī)律，活動形式是否為學(xué)生喜聞樂見的形式等。因此，第二課活動及評價要立足人才培養(yǎng)目標、學(xué)校、專業(yè)、年級和學(xué)科特點，制定第二課堂人才培養(yǎng)方案，要與學(xué)生的專業(yè)技能、興趣愛好、人才培養(yǎng)與社會需求等相適應(yīng)，務(wù)必體現(xiàn)出其科學(xué)性。

4.2 發(fā)揮輸入評價I的設(shè)計作用

第二課堂活動要根據(jù)第二課堂的人才培養(yǎng)方案及目標，制定具體的活動實施方案，做到有組織、有計劃，避免出現(xiàn)在活動組織和實施過程中比較隨意的現(xiàn)象發(fā)生，活動類型要偏向思想成長、文體活動、志愿公益類。而那些難度較大、專業(yè)性比較強的活動發(fā)起率低，不利于培養(yǎng)學(xué)生的綜合素質(zhì)和技能。同時，活動方案要具有可操作性，有專門的活動場地，并根據(jù)活動的模塊類型安排專門的教師進行指導(dǎo)，提升活動的質(zhì)量。

4.3 突出過程評價P1的帶動作用

第二課堂成績單評價要重視過程評價，評價指標要從學(xué)生的參與度、活動的反響、活動的組織和安排等設(shè)計，做好第二課堂活動過程監(jiān)控和實時監(jiān)考，引導(dǎo)和鼓勵學(xué)生積極主動參與，突出學(xué)生的主體作用，尊重學(xué)生合理的、個性化需求。根據(jù)活動開展場次、級別、參與人次、互動頻次、活動反響、學(xué)生認同度等評價，掌握學(xué)生在參與過程中的參與度及體驗和收獲。避免僅以學(xué)生參與活動的次數(shù)、時長或者結(jié)果作為評定標準，而忽視活動開展的質(zhì)量以及學(xué)生素質(zhì)能力提升程度，這樣會導(dǎo)致學(xué)生為了拿學(xué)分而參加，重結(jié)果輕過程，出現(xiàn)“湊次數(shù)、拼個數(shù)、刷時長，唯分數(shù)”的功利化現(xiàn)象。

4.4 重視效果評價P2的反饋作用

第二課堂成績單評價體系的構(gòu)建，不僅僅是為了評價第二課堂活動的質(zhì)量，更重要的是通過評價改進第二課堂成績單制度，更好地服務(wù)立德樹人這個根本任務(wù)。所以，必須及時準確地將根據(jù)CIPP模式得出的第二課堂成績單的評價結(jié)果進行反饋，用以持續(xù)推進第二課堂成績單的改進，從而優(yōu)化第二課堂成績單評價體系，形成推動學(xué)生能力發(fā)展的長效機制。例如，針對目標達成度評價，要分析其是否達到既定目標，如未達到目標則對各個階段進行反思，查找深層原因，進而反思完善第二課堂成績單評價體系。在具體操作中，對于分數(shù)低于80分的活動，應(yīng)該視為不達標，要求重新設(shè)計開展活動，只有超過80分以上的活動，才能獲得相應(yīng)的第二課堂成績單積分。

5 結(jié)語

構(gòu)建第二課堂成績單評價體系的過程不是一個靜止的過程，評價指標體系的構(gòu)建也應(yīng)該根據(jù)不同學(xué)校在第二課堂活動不同時期的工作目標對評價指標及其所占權(quán)重值進行修正，并根據(jù)第二課堂成績單活動開展過程進行不斷驗證，使其不斷得以優(yōu)化。