基于“柯氏模型”的混合式教學(xué)效果評(píng)估體系構(gòu)建

熊素娟

基于“柯氏模型”的混合式教學(xué)效果評(píng)估體系構(gòu)建

熊素娟

20世紀(jì)90年代以來(lái)，信息技術(shù)在教育領(lǐng)域得到快速的應(yīng)用和發(fā)展。近年來(lái)，各高校都通過(guò)信息化手段來(lái)提高教學(xué)有效性，增加學(xué)生的學(xué)習(xí)能動(dòng)性和教師教學(xué)的創(chuàng)造性。將傳統(tǒng)學(xué)習(xí)方式(面對(duì)面的課堂授課形式)和遠(yuǎn)程教育手段(數(shù)字化或網(wǎng)絡(luò)化學(xué)習(xí))相融合的混合式學(xué)習(xí)模式便是信息技術(shù)在教育領(lǐng)域快速發(fā)展和應(yīng)用的產(chǎn)物。從何克抗教授2003年引入該理念以來(lái)[1]，其應(yīng)用實(shí)踐涵蓋不同的教學(xué)層次、各類(lèi)學(xué)科。但是該種教學(xué)模式的教學(xué)有效性如何，也是廣大教育者思考的問(wèn)題?；诮K結(jié)性的書(shū)面測(cè)試為主的傳統(tǒng)的教學(xué)評(píng)價(jià)體系已無(wú)法全面評(píng)估學(xué)生在課堂學(xué)習(xí)和網(wǎng)絡(luò)自主學(xué)習(xí)兩方面的學(xué)習(xí)情況，不能客觀地反映學(xué)生在學(xué)習(xí)過(guò)程中的行為變化、態(tài)度及知識(shí)的遷移能力。鑒于此，本文擬借鑒Kirkpatrick評(píng)估模式的成熟經(jīng)驗(yàn)，結(jié)合混合式學(xué)習(xí)的特點(diǎn)，提出適合混合式學(xué)習(xí)的教學(xué)評(píng)價(jià)模式。

1 柯氏評(píng)估模型簡(jiǎn)介

柯氏四層次評(píng)估模型是現(xiàn)今世界上運(yùn)用最廣泛的培訓(xùn)效果評(píng)估模型。該模型是 1959 年由柯克帕特里克(Kirkpatrick) 提出的，因而常簡(jiǎn)稱為“柯氏評(píng)估模型”。1994 年為了使模型更適應(yīng)時(shí)代的要求，Kirkpatrick做了進(jìn)一步完善。

柯氏評(píng)估模型包括四個(gè)層級(jí)：反應(yīng)層、學(xué)習(xí)層、行為層及結(jié)果層。其中，反應(yīng)層(Reaction)主要評(píng)估學(xué)員對(duì)培訓(xùn)的反應(yīng)和感受，了解學(xué)員對(duì)培訓(xùn)的滿意程度，如學(xué)員對(duì)課程內(nèi)容、授課時(shí)間及場(chǎng)所、教師教學(xué)技巧、教學(xué)方法等方面的印象；學(xué)習(xí)層(Learning)主要評(píng)估學(xué)員學(xué)習(xí)效果，即學(xué)員在培訓(xùn)結(jié)束時(shí)，是否在知識(shí)、技能、態(tài)度等方面得到了提高；行為層(Behavior)主要評(píng)估學(xué)員對(duì)學(xué)習(xí)內(nèi)容的應(yīng)用及熟練程度，即學(xué)員通過(guò)培訓(xùn)之后在行為上所發(fā)生的改變(學(xué)習(xí)提升行為及學(xué)習(xí)習(xí)慣的改變)，是否能自覺(jué)地運(yùn)用培訓(xùn)中所學(xué)的知識(shí)和技能；結(jié)果層(Result)主要評(píng)估學(xué)員通過(guò)培訓(xùn)所產(chǎn)生的個(gè)人績(jī)效效果，即了解由于培訓(xùn)而帶來(lái)的部門(mén)或組織上的改變效果[2-4]。

柯氏評(píng)估模型對(duì)評(píng)估的深度和難度逐層遞增，基于多元化的評(píng)估方法，綜合采用問(wèn)卷調(diào)查、訪談、觀察、角色扮演等多種方式針對(duì)不同層次開(kāi)展評(píng)估活動(dòng)。評(píng)估過(guò)程動(dòng)態(tài)化，注重培訓(xùn)前后參訓(xùn)者的變化。

2 基于柯氏評(píng)估模型的混合式教學(xué)模式評(píng)價(jià)體系的構(gòu)建

對(duì)課程教學(xué)模式進(jìn)行有效的評(píng)估是確保課程質(zhì)量的重要保證。筆者參考柯氏評(píng)估模式，充分結(jié)合混合式學(xué)習(xí)的特點(diǎn)，從宏觀角度設(shè)計(jì)混合式學(xué)習(xí)模式下的評(píng)價(jià)體系[5]。科學(xué)構(gòu)建課程效果評(píng)估框架，形成以下主要觀點(diǎn)：圍繞柯氏評(píng)估模型反應(yīng)層、學(xué)習(xí)層、行為層、結(jié)果層等四個(gè)層級(jí)的內(nèi)涵，系統(tǒng)設(shè)計(jì)評(píng)估框架。

2.1 反映層評(píng)估

該層主要評(píng)估師生對(duì)于混合式教學(xué)模式的情緒、興趣及滿意度。師生持積極態(tài)度熱情投入到學(xué)習(xí)項(xiàng)目，建立良好的學(xué)習(xí)氛圍，能在很大程度上提高教學(xué)效果。學(xué)生評(píng)估主要從師資評(píng)價(jià)、課程內(nèi)容和形式、教學(xué)環(huán)境三個(gè)維度，每個(gè)維度細(xì)化為多個(gè)觀測(cè)點(diǎn)。評(píng)估主要采用問(wèn)卷調(diào)查的方式收集主要信息，同時(shí)采用訪談、觀察、座談的形式對(duì)混合式教學(xué)模式的開(kāi)展情況進(jìn)行評(píng)估。評(píng)估時(shí)間可選擇在學(xué)期中和學(xué)期末進(jìn)行。

(1)師資。教師是教學(xué)活動(dòng)的實(shí)施者。無(wú)論是傳統(tǒng)的課堂教學(xué)模式，還是新型的混合式教學(xué)模式下，教師的主導(dǎo)作用都是不可或缺的。學(xué)生的學(xué)習(xí)情緒和學(xué)習(xí)興趣也會(huì)受到教師個(gè)人的影響?；旌鲜浇虒W(xué)模式下，教師要對(duì)學(xué)生及其學(xué)習(xí)的整個(gè)過(guò)程進(jìn)行指導(dǎo)，教師既是教學(xué)過(guò)程的組織者，也是學(xué)生意義構(gòu)建的促進(jìn)者。因此教師的良好教學(xué)態(tài)度影響著學(xué)生的學(xué)習(xí)積極性和主動(dòng)性。教師的個(gè)人魅力、語(yǔ)言情感的態(tài)度決定著教學(xué)效果。此部分的觀測(cè)點(diǎn)主要是教師教學(xué)態(tài)度以及學(xué)生對(duì)于教師教學(xué)的整體滿意度。

(2)課程內(nèi)容和形式。觀測(cè)點(diǎn)主要是學(xué)生對(duì)課程內(nèi)容、課程授課模式、課程安排等情況的滿意度。混合式教學(xué)模式融課堂教學(xué)與網(wǎng)絡(luò)在線自主學(xué)習(xí)為一體。該觀測(cè)點(diǎn)主要觀測(cè)學(xué)生對(duì)于課堂教學(xué)、網(wǎng)絡(luò)在線學(xué)習(xí)內(nèi)容的分割、授課模式的改變是否適應(yīng)，對(duì)于呈現(xiàn)在數(shù)字化網(wǎng)絡(luò)平臺(tái)相應(yīng)的板塊課程的學(xué)習(xí)資料是否有利于學(xué)習(xí)，教師引導(dǎo)學(xué)生進(jìn)行各個(gè)階段和各種內(nèi)容的自主學(xué)習(xí)和課堂學(xué)習(xí)是否得當(dāng)?shù)龋n時(shí)分配是否能滿足學(xué)生學(xué)習(xí)需要。

(3)教學(xué)環(huán)境。該觀測(cè)點(diǎn)主要觀測(cè)混合式教學(xué)實(shí)施過(guò)程中學(xué)生對(duì)于網(wǎng)絡(luò)學(xué)習(xí)中的軟件(數(shù)字化學(xué)習(xí)網(wǎng)絡(luò)平臺(tái))、硬件(上網(wǎng)設(shè)備、學(xué)習(xí)場(chǎng)所)設(shè)備使用情況。混合式學(xué)習(xí)開(kāi)展的重要保障就是要有便捷的數(shù)字化學(xué)習(xí)網(wǎng)絡(luò)平臺(tái)，以方便師生進(jìn)行網(wǎng)絡(luò)在線互動(dòng)。

2.2 學(xué)習(xí)層評(píng)估

學(xué)習(xí)層評(píng)估是對(duì)學(xué)生在以面對(duì)面講授和在線學(xué)習(xí)模式下所取得的學(xué)習(xí)效果進(jìn)行檢測(cè)和評(píng)估。此環(huán)節(jié)是對(duì)混合式教學(xué)模式教學(xué)評(píng)估中至關(guān)重要的一個(gè)環(huán)節(jié)，能有效地反應(yīng)該種教學(xué)模式的實(shí)施情況。混合式學(xué)習(xí)模式是將傳統(tǒng)的學(xué)習(xí)方式的優(yōu)勢(shì)和數(shù)字化網(wǎng)絡(luò)化學(xué)習(xí)的優(yōu)勢(shì)有效結(jié)合，在進(jìn)行學(xué)校效果評(píng)價(jià)過(guò)程中要綜合考慮學(xué)習(xí)理念、專業(yè)知識(shí)掌握情況、學(xué)習(xí)風(fēng)格等各項(xiàng)觀測(cè)指標(biāo)。

(1)自主學(xué)習(xí)、合作學(xué)習(xí)的能力。該指標(biāo)主要反映學(xué)生在通過(guò)“線上+線下”相結(jié)合的混合式學(xué)習(xí)過(guò)程中，自主學(xué)習(xí)習(xí)慣的養(yǎng)成情況?；旌鲜浇虒W(xué)中，教師通過(guò)課前布置預(yù)習(xí)任務(wù)，要求學(xué)生通過(guò)網(wǎng)絡(luò)學(xué)習(xí)平臺(tái)完成自主學(xué)習(xí)內(nèi)容。該指標(biāo)主要觀測(cè)學(xué)生是否具備網(wǎng)絡(luò)學(xué)習(xí)環(huán)境下的自主學(xué)習(xí)、合作學(xué)習(xí)能力。

(2)專業(yè)知識(shí)的掌握情況。該指標(biāo)主要反映學(xué)生采用混合式學(xué)習(xí)模式學(xué)習(xí)之后在知識(shí)量上的增量變化情況，包括學(xué)科的基礎(chǔ)知識(shí)和拓展性知識(shí)的習(xí)得。教師可以在線下課堂授課過(guò)程中采用基于基礎(chǔ)知識(shí)和課前自主學(xué)習(xí)任務(wù)為依托的“課堂小測(cè)試”，采用口頭或者書(shū)面考試的方式來(lái)檢測(cè)學(xué)生知識(shí)的變化，并將學(xué)生的學(xué)習(xí)情況進(jìn)行記錄。

(3)專業(yè)技能。該指標(biāo)主要評(píng)價(jià)學(xué)生在學(xué)習(xí)基礎(chǔ)知識(shí)之后在技能應(yīng)用上的變化情況。專業(yè)技能可以為語(yǔ)言表達(dá)技能、邏輯分析技能、閱讀技能、文獻(xiàn)資料查找搜索技能、計(jì)算機(jī)操作技能等。通過(guò)采用混合式學(xué)習(xí)模式，大量的基礎(chǔ)知識(shí)的學(xué)習(xí)前移到課前的自主學(xué)習(xí)階段，教師可以充分利用課堂授課時(shí)間來(lái)對(duì)學(xué)生進(jìn)行專業(yè)技能的訓(xùn)練和指導(dǎo)。觀測(cè)學(xué)生專業(yè)技能是否提高的評(píng)價(jià)方式主要可以采用情景模擬、案例操作、角色扮演、項(xiàng)目任務(wù)展示分享等方式。教師可以采用影像的方式記錄學(xué)生技能展示的過(guò)程，進(jìn)行有效評(píng)價(jià)；同時(shí)，教師可以鼓勵(lì)學(xué)生做技能展示準(zhǔn)備過(guò)程、展示過(guò)程的反思日志，通過(guò)反思日志來(lái)觀測(cè)學(xué)生專業(yè)技能能力的提高情況。

2.3 行為層評(píng)估

該層評(píng)估主要反映混合式學(xué)習(xí)模式對(duì)于學(xué)生行為變化的情況，即新型的教學(xué)活動(dòng)引起學(xué)生行為上的變化。該層的觀測(cè)點(diǎn)主要有行為變化、態(tài)度變化和理念變化。評(píng)估方法主要是通過(guò)觀察法記錄參加教學(xué)模式改革的學(xué)生的行為變化。在評(píng)估時(shí)間上，該層評(píng)估由于是關(guān)系到行為習(xí)得和改變，所以是一個(gè)動(dòng)態(tài)的長(zhǎng)期過(guò)程，學(xué)生的行為變化不會(huì)立即顯現(xiàn)，評(píng)估者可以在教學(xué)模式改革結(jié)束后的三個(gè)月對(duì)學(xué)生的學(xué)習(xí)行為進(jìn)行追蹤評(píng)估，對(duì)結(jié)果的分析要注重學(xué)生參加改革前后的行為比較。

(1)行為變化。該指標(biāo)主要評(píng)價(jià)學(xué)生混合式學(xué)習(xí)模式下學(xué)習(xí)方式和方法的轉(zhuǎn)變、學(xué)習(xí)創(chuàng)新能力、知識(shí)應(yīng)用能力的改變。在互聯(lián)網(wǎng)時(shí)代，混合式學(xué)習(xí)需要有效整合碎片化的時(shí)間和信息、學(xué)習(xí)手段、學(xué)習(xí)者的注意力，使學(xué)習(xí)成為一種自我持續(xù)性的行為。

(2)態(tài)度變化。無(wú)論采取何種教學(xué)方式，學(xué)生的學(xué)習(xí)態(tài)度都終將影響著學(xué)習(xí)效果?；旌鲜浇虒W(xué)模式將大量基礎(chǔ)知識(shí)的學(xué)習(xí)前移到課堂教學(xué)前，這就需要學(xué)生具備良好的學(xué)習(xí)態(tài)度，樹(shù)立積極的學(xué)習(xí)心態(tài)，能主動(dòng)地攻克學(xué)習(xí)中所遇到的困難。該觀測(cè)點(diǎn)主要評(píng)價(jià)學(xué)生是否能主動(dòng)地進(jìn)行學(xué)習(xí)，從而產(chǎn)生主動(dòng)有意識(shí)的行為，溝通能力、學(xué)習(xí)態(tài)度有所轉(zhuǎn)變。該指標(biāo)的衡量可以采用觀察法和問(wèn)卷法進(jìn)行數(shù)據(jù)收集，進(jìn)行評(píng)價(jià)。

(3)理念變化。混合式教學(xué)模式顛覆了傳統(tǒng)教學(xué)的授課模式，教師和學(xué)生角色進(jìn)行了重構(gòu)，教師導(dǎo)學(xué)，需要學(xué)生積極地建構(gòu)知識(shí)。對(duì)學(xué)生來(lái)說(shuō)，混合式學(xué)習(xí)需要學(xué)生具備網(wǎng)絡(luò)學(xué)習(xí)的學(xué)習(xí)能力，自我管理、激勵(lì)能力。開(kāi)展混合式學(xué)習(xí)模式后學(xué)生是否認(rèn)可該種學(xué)習(xí)的觀念、方法、實(shí)施措施，能否適應(yīng)通過(guò)網(wǎng)絡(luò)學(xué)習(xí)平臺(tái)上的互動(dòng)版塊進(jìn)行學(xué)習(xí)交流和資源共享是該層評(píng)估的主要觀測(cè)點(diǎn)。

2.4 結(jié)果層評(píng)估

該層主要體現(xiàn)采用混合式學(xué)習(xí)模式后學(xué)生的學(xué)習(xí)成果，即學(xué)習(xí)成績(jī)及后續(xù)發(fā)展的跟蹤和評(píng)估。最為常見(jiàn)的評(píng)估方式為進(jìn)行標(biāo)準(zhǔn)化考試，通過(guò)學(xué)生學(xué)習(xí)成績(jī)來(lái)衡量其有效性，也可通過(guò)學(xué)生參加競(jìng)賽獲獎(jiǎng)情況、考取相關(guān)的證書(shū)情況來(lái)反映。通過(guò)體驗(yàn)新型的學(xué)習(xí)模式，學(xué)生將所學(xué)到的知識(shí)、技能、學(xué)習(xí)方法熟練地運(yùn)用到其他課程的學(xué)習(xí)上，產(chǎn)生效果，而這一過(guò)程需要一定的時(shí)間。因此，評(píng)估的時(shí)間方面建議改成在實(shí)施混合式教學(xué)模式結(jié)束半年到一年的時(shí)間內(nèi)進(jìn)行。同時(shí)，對(duì)這一層次的結(jié)果進(jìn)行量化或衡量也有一定的困難，有些內(nèi)容是無(wú)法進(jìn)行量化。為了取得準(zhǔn)確的評(píng)價(jià)信息，結(jié)果層的評(píng)價(jià)要充分注意評(píng)估的針對(duì)性和時(shí)效性。

為使基于柯氏評(píng)估模型的混合式教學(xué)模式評(píng)價(jià)體系更易于理解和認(rèn)知，將基本框架總結(jié)如表1所示。

3 實(shí)施基于“柯氏模型”的混合式教學(xué)效果評(píng)估要注意的問(wèn)題

基于“柯氏模型”的混合式教學(xué)效果評(píng)估體系從評(píng)估對(duì)象、內(nèi)容、方法、時(shí)間上構(gòu)建了一個(gè)初步的評(píng)估框架。在具體的課程教學(xué)評(píng)價(jià)過(guò)程實(shí)施中，要在可操作性方面做出進(jìn)一步的考慮[6]。

3.1 構(gòu)建可操作性的指標(biāo)體系

觀測(cè)點(diǎn)和評(píng)價(jià)體系的構(gòu)建過(guò)程中要充分考慮指標(biāo)是否易于獲取，評(píng)價(jià)者應(yīng)該明白如何針對(duì)基礎(chǔ)指標(biāo)和觀測(cè)點(diǎn)去判斷，給出評(píng)價(jià)意見(jiàn)。建立評(píng)價(jià)指標(biāo)體系要全面反映混合式教學(xué)效果的各個(gè)維度，依據(jù)各專業(yè)培養(yǎng)目標(biāo)和人才培養(yǎng)需求，盡可能全面找出能反映混合式教學(xué)效果的主要指標(biāo)和觀測(cè)點(diǎn)，選取的指標(biāo)和觀測(cè)點(diǎn)能很好地反映出分目標(biāo)，代表性強(qiáng)、綜合性強(qiáng)，評(píng)價(jià)指標(biāo)全面、完整、系統(tǒng)。

3.2 充分注重評(píng)估的時(shí)效性

大部分“混合式”效果評(píng)估都是在實(shí)施后進(jìn)行，雖然評(píng)估能了解到學(xué)生對(duì)于該模式的感受，但是無(wú)法觀測(cè)到學(xué)生在實(shí)施該模式前后的更深層次的變化。因此，筆者建議在混合式教學(xué)模式前，針對(duì)參與混合式教學(xué)的師生進(jìn)行問(wèn)卷、訪談，了解其在改革實(shí)施前的學(xué)習(xí)風(fēng)格、學(xué)習(xí)期待、學(xué)習(xí)態(tài)度等，為后期的評(píng)估提供對(duì)照樣本。同時(shí)，針對(duì)反應(yīng)層、學(xué)習(xí)層、行為層、結(jié)果層自身的評(píng)估特征，選取合理有效的時(shí)間對(duì)評(píng)估對(duì)象及時(shí)地做出評(píng)估，保證評(píng)估結(jié)果有效、真實(shí)。

表1 基于柯氏評(píng)估模型的混合式教學(xué)模式評(píng)價(jià)體系基本框架

3.3 加強(qiáng)評(píng)估主體的多元化

要強(qiáng)調(diào)評(píng)估參與者多元化，學(xué)生、教師、用人單位等都應(yīng)參與教學(xué)質(zhì)量的評(píng)價(jià)過(guò)程[7]。多元化的評(píng)價(jià)主體可以有效避免評(píng)價(jià)的片面性和偏見(jiàn)，提高評(píng)價(jià)結(jié)論的真實(shí)性和有效性。混合式教學(xué)效果的評(píng)價(jià)主體除了學(xué)生自身、同伴、教師、教務(wù)管理人員(信息化教學(xué)輔助人員)等群體外，還應(yīng)包含學(xué)生家長(zhǎng)、用人單位等利益相關(guān)者。

[1] 何克抗.從Blending Learning看教育技術(shù)理論的新發(fā)展[J].國(guó)家教育行政學(xué)院學(xué)報(bào)， 2005(9)：38-48.

[2] 時(shí)廣軍.“柯氏模式”在教學(xué)評(píng)價(jià)中的運(yùn)用[J].廣州職業(yè)教育論壇，2014(3)：15-20.

[3] 劉建銀，黃露. “國(guó)培計(jì)劃”項(xiàng)目評(píng)估的五層次模型:基于柯氏評(píng)估模型的分析建構(gòu)[J].當(dāng)代教師教育，2013(2)：74-79.

[4] 董洪學(xué)．培訓(xùn)項(xiàng)目的評(píng)估方法：評(píng) Kirkpatrick“四層評(píng)估法”[J]．燕山大學(xué)學(xué)報(bào)，2003(2)：76-78.

[5] 戴錫瑩，孫躍東，李巖．基于Kirkpatrick評(píng)估模式的網(wǎng)絡(luò)學(xué)習(xí)績(jī)效評(píng)價(jià)模式設(shè)計(jì)[J]．中國(guó)遠(yuǎn)程教育，2009(1)：46-47.

[6] 章義.基于柯氏評(píng)估模型的高職教學(xué)質(zhì)量評(píng)價(jià)模式的新探索[J]．當(dāng)代繼續(xù)教育，2015(5):88-91.

[7] 高園.“柯氏模型”在高校課堂教學(xué)質(zhì)量評(píng)估中的應(yīng)用[J].雞西大學(xué)學(xué)報(bào)(綜合版)，2014(10):24-26.

責(zé)任編輯 俞 林

(寧波城市職業(yè)技術(shù)學(xué)院 外國(guó)語(yǔ)學(xué)院,浙江 寧波 315100)

對(duì)混合式教學(xué)效果進(jìn)行評(píng)估是探索混合式教學(xué)改革實(shí)踐的一個(gè)重要環(huán)節(jié)。在借鑒美國(guó)學(xué)者柯克帕特里克的四層次評(píng)估模型的基礎(chǔ)上，構(gòu)建出適合混合式教學(xué)模式評(píng)價(jià)體系基本框架，并指出評(píng)估中要注意的問(wèn)題。

柯克帕特里克四層次評(píng)估模型； 混合式教學(xué)模式； 評(píng)價(jià)基本框架

The Construction of Evaluation Mode for Blended Teaching Based on the Kirkpatrick’s Model

XIONGSujuan

(School of Foreign Language, Ningbo City College of Vocational Technology, Ningbo 315100， China)

Effective evaluation is an important part in the blended teaching. Based on the four-level evaluation mode of Kirkpatrick’s model, a systematic evaluation framework has been constructed. Additionally, the paper argues the issues which should be paid attention to during the evaluation process.

Kirkpatrick's four-level evaluating model; blended learning; systematic evaluation framework

10.13750/j.cnki.issn.1671-7880.2017.01.007

2016-10-30

浙江省2015年度高等教育課堂教學(xué)改革項(xiàng)目“多模態(tài)視角下的高職英語(yǔ)聽(tīng)力課堂教學(xué)改革”(kg2015883)；寧波市2016年教育科學(xué)規(guī)劃研究課題“基于Kirkpatrick模式的混合式教學(xué)效果評(píng)估體系構(gòu)建”(2016YGH117)；寧波城市職業(yè)技術(shù)學(xué)院2015年教育教學(xué)改革重點(diǎn)項(xiàng)目“基于柯氏模型的混合式教學(xué)效果評(píng)估體系構(gòu)建與應(yīng)用研究”(xjzd1504)

熊素娟(1979— )，女，山西大同人，講師，碩士，研究方向：英語(yǔ)課程與教學(xué)論、職教師資發(fā)展。

G 642

A

1671-7880(2017)01-0024-04