0 引言
在加快建設(shè)教育強(qiáng)國的路上,信息技術(shù)扮演著重要的角色?!秶抑虚L期教育改革和發(fā)展規(guī)劃綱要(2010—2020年)》指出,信息技術(shù)對教育發(fā)展具有革命性影響,必須予以高度重視。充分發(fā)揮現(xiàn)代信息技術(shù)作用,促進(jìn)優(yōu)質(zhì)教學(xué)資源共享[1]。教育部出臺的《教育信息化2.0行動計(jì)劃》強(qiáng)調(diào),沒有信息化就沒有現(xiàn)代化,教育信息化是教育現(xiàn)代化的基本內(nèi)涵和顯著特征,是“教育現(xiàn)代化2035”的重點(diǎn)內(nèi)容和重要標(biāo)志[2]。信息技術(shù)與課程教學(xué)的深度融合是課程高質(zhì)量發(fā)展的必然路徑。通用技術(shù)課程作為高中課程改革的新增科目,強(qiáng)調(diào)培養(yǎng)具有技術(shù)素養(yǎng)和創(chuàng)新精神的新時代人才,越來越受到人們重視[3]。如何充分利用信息技術(shù)賦能高中通用技術(shù)課程教學(xué)成為當(dāng)下研究的重點(diǎn)。而要做到這一點(diǎn),首先需要對兩者融合存在的困境進(jìn)行分析,以便調(diào)整相應(yīng)的政策,提出提高兩者融合程度的對策。
1信息技術(shù)與高中通用技術(shù)課程教學(xué)融合面臨的困境
隨著時代的發(fā)展,人們已意識到在通用技術(shù)課程教學(xué)中融合信息技術(shù)的重要性,但在應(yīng)用信息技術(shù)的過程中不可避免地出現(xiàn)了各種問題,亟須解決。具體而言,這些問題包括:學(xué)校兩極分化嚴(yán)重、教師教學(xué)創(chuàng)新能力不足、課程教學(xué)評價路徑依賴。
1.1 融合存在馬太效應(yīng):學(xué)校兩極分化嚴(yán)重
馬太效應(yīng)作為一種社會學(xué)和經(jīng)濟(jì)學(xué)術(shù)語,反映的是一種兩極分化現(xiàn)象,即強(qiáng)者愈強(qiáng),弱者愈弱。現(xiàn)階段,城市高中與農(nóng)村高中、重點(diǎn)高中和一般高中之間均存在馬太效應(yīng)。城市高中和重點(diǎn)高中往往能夠得到較多的經(jīng)費(fèi)用于建設(shè)通用技術(shù)實(shí)驗(yàn)室和更換信息技術(shù)設(shè)備,如3D打印機(jī)、激光切割機(jī)、耗材等。在教學(xué)方面,城市高中和重點(diǎn)高中的教師能夠得到高校和科研機(jī)構(gòu)近距離的信息技術(shù)應(yīng)用指導(dǎo),如在課程中融入虛擬現(xiàn)實(shí)技術(shù)以激發(fā)學(xué)生的學(xué)習(xí)興趣。在評價方面,城市高中和重點(diǎn)高中的教師可以利用物聯(lián)網(wǎng)和大數(shù)據(jù)平臺對學(xué)生的學(xué)習(xí)狀態(tài)進(jìn)行分析,并給予即時的教學(xué)反饋,根據(jù)反饋改進(jìn)自己的教學(xué)。在學(xué)生層面,城市高中和重點(diǎn)高中的學(xué)生能夠做到人手一臺平板和高性能計(jì)算機(jī),用于三維制圖和創(chuàng)意設(shè)計(jì)。智慧教室和科創(chuàng)教室也為學(xué)生開展小組合作創(chuàng)造了良好的條件,這有利于培養(yǎng)學(xué)生的合作意識和問題解決能力。
在課題組所調(diào)查的學(xué)校中,中國人民大學(xué)附屬中學(xué)在信息技術(shù)與高中通用技術(shù)課程教學(xué)融合深度上可以說位列第一梯隊(duì)。該校背靠中國人民大學(xué),有著強(qiáng)大的師資隊(duì)伍和資源整合能力,設(shè)計(jì)和開發(fā)了FTC機(jī)器人技術(shù)、3D打印技術(shù)、智能車輛控制技術(shù)、虛擬現(xiàn)實(shí)技術(shù)、智能家居設(shè)計(jì)、數(shù)字化設(shè)計(jì)與制造、數(shù)字圖形圖像處理、少年創(chuàng)客等通用技術(shù)課程,利用信息技術(shù)輔助教師進(jìn)行精細(xì)化教學(xué)設(shè)計(jì)、記錄學(xué)生學(xué)習(xí)過程、創(chuàng)設(shè)學(xué)生可以感知的多樣化學(xué)習(xí)情境,支持自主、合作、探究等學(xué)習(xí)方式,在信息技術(shù)環(huán)境中進(jìn)行體驗(yàn)、設(shè)計(jì)、制作、試驗(yàn)等技術(shù)實(shí)踐活動,促進(jìn)學(xué)生學(xué)科核心素養(yǎng)的發(fā)展。該校的“校園漢堡機(jī)的設(shè)計(jì)制作”項(xiàng)目給課題組留下了深刻的印象,該項(xiàng)目要解決的真實(shí)問題是在校園里自動售賣漢堡,緩解餐廳就餐壓力,指向的是學(xué)生物化能力、創(chuàng)新設(shè)計(jì)和工程思維等學(xué)科核心素養(yǎng)。學(xué)生通過編寫相應(yīng)程序,讓漢堡機(jī)實(shí)現(xiàn)自動售賣,既不用增加人力成本,也達(dá)到了緩解就餐壓力的目標(biāo),可謂一舉兩得。信息技術(shù)在項(xiàng)目中的應(yīng)用使得物化過程變得更加智能化。
但如前所述,大多數(shù)高中信息技術(shù)與通用技術(shù)課程教學(xué)的融合水平不夠,仍然需要大力提升。何為水平不夠,就是能夠明顯地感覺到信息技術(shù)與通用技術(shù)課程教學(xué)的融合僅僅是簡單的疊加和關(guān)聯(lián)組合,例如,僅利用信息技術(shù)展示教學(xué)內(nèi)容。事實(shí)上,信息技術(shù)在改善高中通用技術(shù)課程教學(xué)環(huán)境、重塑教學(xué)模式和改變評價方式方面有很大的潛在應(yīng)用價值。融合的終極形態(tài)應(yīng)該是改變通用技術(shù)課程教學(xué)整體的建構(gòu)、序化過程,即改變教學(xué)生態(tài)結(jié)構(gòu)[4]
1.2融合羊群效應(yīng)明顯:教師教學(xué)創(chuàng)新能力不足
在實(shí)際調(diào)研中發(fā)現(xiàn),一些通用技術(shù)教師在教學(xué)中融合信息技術(shù)的時候,表現(xiàn)出一定的盲目性。例如,開發(fā)通用技術(shù)教學(xué)平臺、設(shè)計(jì)教學(xué)方案、使用數(shù)字化教學(xué)資源、開展教學(xué)評價的時候照搬照抄而不顧及本學(xué)校的實(shí)際情況,造成可能的教學(xué)風(fēng)險。當(dāng)然,對于很多一線通用技術(shù)教師而言,要想在信息化教學(xué)方面做出成績,模仿是必要的,尤其是對于新手教師而言。只是在參考他人經(jīng)驗(yàn)時,教師需要深入思考:這種做法適合本校嗎?能夠常態(tài)化開展下去嗎?會不會造成適得其反的教學(xué)效果?即便是教師個人開發(fā)的通用技術(shù)教學(xué)平臺和課程,也需要基于實(shí)際情況不斷改進(jìn)迭代,而非一成不變。
例如,有些信息化應(yīng)用示范校實(shí)現(xiàn)了Wi-Fi全覆蓋,學(xué)生人手一臺平板,而本校沒有這種條件,教師在模仿示范校的做法時就需要結(jié)合本校的實(shí)際情況有的放矢,根據(jù)教學(xué)的需求進(jìn)行創(chuàng)新,而不是面面俱到。再比如,為了追求所謂的科技時髦,制造一些噱頭,將虛擬現(xiàn)實(shí)技術(shù)(VR)和增強(qiáng)現(xiàn)實(shí)技術(shù)(AR)盲目地引入本校的通用技術(shù)教學(xué),但還是采用傳統(tǒng)的教學(xué)方法,這樣的做法只會增加教學(xué)成本,無法給通用技術(shù)課程教學(xué)帶來實(shí)質(zhì)性的改變。
從這些例子可以看出,在融合過程中起決定作用的是教師的教學(xué)創(chuàng)新能力。再高端的信息技術(shù),如果通用技術(shù)教師無法吸收消化,就無法轉(zhuǎn)化成教學(xué)效能;再一般的信息技術(shù),只要教師應(yīng)用得當(dāng),也會取得非常好的教學(xué)效果。信息技術(shù)與通用技術(shù)課程教學(xué)的融合,并不強(qiáng)調(diào)技術(shù)的高級程度,而是要突出技術(shù)環(huán)境下的教學(xué)內(nèi)容、教學(xué)法和教學(xué)知識的靈活應(yīng)用。也就是說,通用技術(shù)課程教學(xué)要突出人的重要地位,忽略了人的主體作用,單純地依靠信息技術(shù)可能會適得其反[5]
1.3融合落入短板效應(yīng):課程教學(xué)評價路徑依賴
短板理論指出,一只木桶的盛水量不取決于最長的木板,而是由最短的那塊木板決定。系統(tǒng)或團(tuán)隊(duì)的整體效能往往受到其最薄弱環(huán)節(jié)的限制,而不是最強(qiáng)部分的支撐。因此,只有提升最薄弱的環(huán)節(jié),才能真正提高整體的效能和表現(xiàn)。這一理論表明,在各類工作和實(shí)踐中,不能只關(guān)注優(yōu)勢和強(qiáng)項(xiàng),而應(yīng)當(dāng)重視并彌補(bǔ)短板,以達(dá)到最佳的整體效果。
教學(xué)評價具備的診斷、反饋、激勵和修正的功能對于通用技術(shù)教師而言,就如同干涸大地渴望的雨水一樣。在融合信息技術(shù)的過程中,如果在教學(xué)評價方面出現(xiàn)了短板,通用技術(shù)教師將面臨內(nèi)生動力不足和原創(chuàng)精神缺乏的窘境。對于學(xué)生而言,信息技術(shù)環(huán)境下的學(xué)習(xí)行為如果得不到精準(zhǔn)診斷和反饋,那就失去了技術(shù)的最大競爭力一個性化學(xué)習(xí)的基礎(chǔ)。如果教學(xué)評價不能促成學(xué)生的個性化學(xué)習(xí),那么教師和學(xué)生可以拒絕技術(shù)的介入,因?yàn)檫@就變得和傳統(tǒng)課堂并無二致??茖W(xué)而準(zhǔn)確的教學(xué)評價本應(yīng)是信息技術(shù)環(huán)境下通用技術(shù)課程教學(xué)最大的優(yōu)勢,現(xiàn)在卻還是短板,這一現(xiàn)象值得深思。
究其原因,有客觀和主觀兩個方面的原因??陀^上,信息技術(shù)與通用技術(shù)課程教學(xué)融合的理論研究還遠(yuǎn)遠(yuǎn)落后于實(shí)踐,目前也缺乏較為成熟的評價指標(biāo)體系,而這恰恰是評價的基礎(chǔ)[6];主觀上,通用技術(shù)課程教學(xué)評價已經(jīng)形成了路徑依賴,很難改變。與其他系統(tǒng)類似,思維與理念總是具有一定的目的性,并朝著特定的方向發(fā)展。由于這種定向性,思維和理念往往會受到既定內(nèi)容的影響,逐漸趨向于原有的穩(wěn)態(tài)和平衡。這種定向性在某種程度上反映了認(rèn)識的有序性和結(jié)構(gòu)化,是認(rèn)識主體在實(shí)踐過程中所構(gòu)建的概念網(wǎng)絡(luò)的體現(xiàn)。然而,這種思維定向不僅是理性的,它還包含了情感因素和價值判斷,這些非理性的元素在某些情況下可能會影響思維的流動和發(fā)展方向[7]。調(diào)查研究的結(jié)果顯示,通用技術(shù)教師大多是從其他學(xué)科諸如物理、勞動技術(shù)、美術(shù)等轉(zhuǎn)崗而來[8],其評價思維和理念已經(jīng)趨于原有的穩(wěn)態(tài),一旦判定信息技術(shù)環(huán)境下的評價方式給自己帶來麻煩時,他們便會回到原有傳統(tǒng)的評價思路上,而忽視新的評價方式的先進(jìn)性。
2信息技術(shù)與高中通用技術(shù)課程教學(xué)融合的破困之策
信息技術(shù)與高中通用技術(shù)課程教學(xué)的融合盡管存在上述問題,但也有對應(yīng)的破困之策。具體而言,應(yīng)該增進(jìn)校級交流、加強(qiáng)教師TPACK能力培養(yǎng)、積極推廣教育行動研究,為信息技術(shù)與高中通用技術(shù)課程教學(xué)有機(jī)融合掃除障礙。
2.1從分化到相對均衡:增進(jìn)校級交流
信息技術(shù)與高中通用技術(shù)課程教學(xué)融合需要增進(jìn)校級交流,使學(xué)校從兩極分化到相對均衡。近二十年來,我國現(xiàn)有普通高中在教育技術(shù)裝備上已達(dá)到合格線,基本解決了從無到有的問題。由于各地區(qū)的經(jīng)濟(jì)水平和發(fā)展步伐不一,要做到絕對均衡也不太可能,能做到的是相對均衡。但是這并不意味著城市高中和重點(diǎn)高中就長期保持“霸主”地位,農(nóng)村高中和一般高中也能發(fā)揮各自的優(yōu)勢。
為此,應(yīng)建立相互學(xué)習(xí)的制度,增進(jìn)學(xué)校之間的交流,縮小差距。具體而言,首先需要對各級各類學(xué)校進(jìn)行摸底,了解哪些學(xué)校處于信息技術(shù)融合的低層次狀態(tài)并且一直沒有改善,這些學(xué)校就是學(xué)習(xí)交流的重點(diǎn)對象。其次,高水平學(xué)校和低水平學(xué)校結(jié)成對子,訂立文本契約,將雙方交流學(xué)習(xí)的關(guān)系確定下來。前期低水平學(xué)校的教師需要進(jìn)高水平學(xué)校進(jìn)修,進(jìn)修的主要內(nèi)容應(yīng)包括了解對方通用技術(shù)實(shí)驗(yàn)室的設(shè)計(jì)思路、信息化教學(xué)的具體路徑、教學(xué)評價的方式方法等;中期主要是高水平學(xué)校的教師進(jìn)低水平學(xué)校指導(dǎo),包括通用技術(shù)實(shí)驗(yàn)室建設(shè)、信息化教學(xué)資源共享、課程信息化設(shè)計(jì)與實(shí)施;后期低水平學(xué)校的教師根據(jù)前期進(jìn)修成果、中期指導(dǎo)意見,結(jié)合本校實(shí)際情況,進(jìn)行本土化的通用技術(shù)課程信息化教學(xué)實(shí)踐,實(shí)踐效果要進(jìn)行考核評估,對于評估結(jié)果較好的要給予物質(zhì)和精神上的獎勵。
通過增進(jìn)學(xué)校之間的交流,信息技術(shù)與通用技術(shù)課程教學(xué)融合水平較低的學(xué)校將迅速發(fā)展起來,并且會形成一定的輻射效應(yīng),帶動地區(qū)通用技術(shù)課程信息化水平建設(shè),提高地方高中辦學(xué)水平,這樣做也有助于促進(jìn)教育公平。
2.2從模仿到自主創(chuàng)新:加強(qiáng)教師TPACK能力培養(yǎng)
所謂TPACK,是指整合技術(shù)的學(xué)科教學(xué)知識(Technological Pedagogical and ContentKnowledge),它明確了信息時代教師知識結(jié)構(gòu)的構(gòu)成與知識類別之間的組織邏輯,使得不同類別知識之間實(shí)現(xiàn)了有機(jī)融合,共同為教師教學(xué)助力[9]。加強(qiáng)教師TPACK能力培養(yǎng)有助于解決通用技術(shù)教師模仿過度、創(chuàng)新不足的問題。
首先,提升教師TPACK能力有助于教師更好地理解信息技術(shù)的本質(zhì)及其作用。很多通用技術(shù)教師無法創(chuàng)新的一個根本原因就是技術(shù)崇拜,過于關(guān)注技術(shù),迷失在技術(shù)的新穎性中。在信息技術(shù)與通用技術(shù)課程教學(xué)融合過程中,要特別突出人的主體地位和調(diào)動人的主觀能動性,因?yàn)槿耸鞘褂眉夹g(shù)的主體,如果人沒有使用信息技術(shù)的行為意向,就會陷入簡單模仿的怪圈。
其次,提高教師的TPACK能力有助于提高通用技術(shù)教師的信息化教學(xué)意愿。相關(guān)研究表明,教師在認(rèn)知層面的技術(shù)知識、整合技術(shù)的教學(xué)法知識以及整合技術(shù)的學(xué)科教學(xué)知識,都會顯著影響他們對數(shù)字化教學(xué)的態(tài)度和行為意向。當(dāng)教師能夠熟練掌握這些知識并靈活應(yīng)用時,他們不僅更有信心應(yīng)用信息技術(shù)進(jìn)行教學(xué),還能更有效地將技術(shù)與教學(xué)內(nèi)容結(jié)合,提升課堂教學(xué)的質(zhì)量和學(xué)生的學(xué)習(xí)體驗(yàn)[10]。因此,提升教師 TPACK 能力水平,不僅是推動信息化教學(xué)的關(guān)鍵,也有助于調(diào)動教師對信息技術(shù)融入教學(xué)的積極性。
最后,提升教師TPACK能力有助于提升教師知識的完整性。技術(shù)知識相對于其他更容易掌握,因此,更為重要的是整合技術(shù)的教學(xué)法知識和整合技術(shù)的學(xué)科教學(xué)知識。NIESS[11]認(rèn)為,技術(shù)與教學(xué)法知識和學(xué)科教學(xué)知識的有機(jī)融合可以提高信息技術(shù)與課程教學(xué)融合的效果。應(yīng)注重對教師整合技術(shù)的教學(xué)法知識的培訓(xùn),可以采取基于真實(shí)情境的項(xiàng)目培訓(xùn)策略,讓教師直接感受基于某一情境的整合技術(shù)的教學(xué)活動設(shè)計(jì)。整合技術(shù)的學(xué)科教學(xué)知識是指教師掌握如何運(yùn)用恰當(dāng)?shù)男畔⒓夹g(shù)、教學(xué)方法和策略,促進(jìn)學(xué)生在特定學(xué)科領(lǐng)域的學(xué)習(xí)。這種能力在當(dāng)前的通用技術(shù)教學(xué)中尤為重要,但也是許多教師相對缺乏的。為了彌補(bǔ)這一不足,建議定期舉辦工作坊,專門針對某個學(xué)科的具體知識點(diǎn),研究如何將教學(xué)法與技術(shù)工具最有效地融合。在這樣的工作坊中,教師不僅能學(xué)習(xí)如何更好地將技術(shù)應(yīng)用于教學(xué),還能夠探討不同教學(xué)策略和技術(shù)手段的優(yōu)缺點(diǎn),從而提升其教學(xué)的整體效果。
2.3從短板到完善:積極推廣教育行動研究
針對信息技術(shù)環(huán)境下通用技術(shù)課程教學(xué)評價存在短板的問題,課題組建議在中小學(xué)積極推廣教育行動研究。教育行動研究是指教師在教學(xué)實(shí)踐中對其教學(xué)對象、教學(xué)理念、方法與效果進(jìn)行深度的反思。這種研究旨在促使教師重新審視自身的教學(xué)觀念,探索改進(jìn)教學(xué)的方法,從而在不斷優(yōu)化中逐步提升教學(xué)成效。通過一系列反思和調(diào)整,教師能夠更加清晰地理解教學(xué)中的關(guān)鍵環(huán)節(jié),推動教學(xué)效果的持續(xù)改進(jìn)[12]
信息化環(huán)境的創(chuàng)設(shè)、數(shù)字化資源的開發(fā)、數(shù)字平臺的改造與升級、信息化教學(xué)的管理等都是一個不斷積累經(jīng)驗(yàn)、不斷探索完善的過程,尤其是通用技術(shù)課程教學(xué)研究數(shù)據(jù)本來就較為缺乏,可參考的案例屈指可數(shù),因此更需要教師對已經(jīng)積累的經(jīng)驗(yàn)進(jìn)行反思,這其實(shí)就是一個自我評價的過程。
教育行動研究是一種將行動與研究緊密結(jié)合的探索方式,其核心是為行動而研究、在行動中研究,并由行動者親自開展研究。這種方法有效地將教育研究從理論的高空帶到實(shí)際的地面,使一線通用技術(shù)教師看到了教育研究與自身實(shí)踐結(jié)合的可能性。在教學(xué)行動中開展觀察和反思的過程實(shí)際上就是一種研究活動,使教師能夠在真實(shí)的教學(xué)情境中不斷優(yōu)化自己的教學(xué)實(shí)踐。通過這種方式,教師不僅能夠親身參與教育研究,還可以通過自我反思推動教學(xué)質(zhì)量的提升[13]。客觀上,通用技術(shù)教師確實(shí)面臨不少困難,但辯證來看,這種困難恰恰為他們帶來了研究的契機(jī)一一潛在的規(guī)律等待著被發(fā)現(xiàn)。
教育行動研究將彌補(bǔ)通用技術(shù)教師課程教學(xué)評價的短板,助力教師開展高質(zhì)量的信息化教學(xué)。應(yīng)該指出的是,在評價學(xué)生通用技術(shù)核心素養(yǎng)上沒有捷徑可走。教師通過教育行動研究開展信息化教學(xué),增強(qiáng)面向核心素養(yǎng)評價的內(nèi)生動力和原創(chuàng)精神,避免路徑依賴,這將打開通用技術(shù)課程教學(xué)評價的一片新天地。
3 參考文獻(xiàn)
[1]國家中長期教育改革和發(fā)展規(guī)劃綱要(2010—2020年)[A/OL].(2010-07-29)[2024-09-21].http://www.moe.gov.cn/jyb_xwfb/s6052/moe_838/201008/t20100802_93704.html.
[2]教育部關(guān)于印發(fā)《教育信息化2.0行動計(jì)劃》的通知[EB/OL]. (2018-04-16)[2024-09-27]. https://laws.ict.edu.cn/laws/new/n20180416_49471_4.shtml.
[3]陳向陽.學(xué)科核心素養(yǎng):重構(gòu)高中通用技術(shù)課程新圖景[J].教育理論與實(shí)踐,2018,38(23):6-9.
[4]羅洪.指向深度學(xué)習(xí)的高中通用技術(shù)課程教學(xué)設(shè)計(jì)創(chuàng)新[J].人民教育,2022(23):75.
[5]徐金雷,顧建軍.普通高中通用技術(shù)課程的設(shè)計(jì)與實(shí)施:基于課程標(biāo)準(zhǔn)修訂的思考[J].課程·教材·教法,2020,40(8):123-129.
[6]為未來社會培養(yǎng)具有技術(shù)素養(yǎng)的人:訪普通高中通用技術(shù)課程標(biāo)準(zhǔn)修訂組負(fù)責(zé)人顧建軍[J].基礎(chǔ)教育課程,2018(增刊1):65-69.
[7]包霄林.思維的模式[M.杭州:浙江大學(xué)出版社,2011:99.
[8]顧建軍.十年來我國普通高中技術(shù)課程實(shí)驗(yàn)的成就分析與問題反思[J].教育研究與實(shí)驗(yàn),2015(2):29-36.
[9]黃慶雙.中小學(xué)教師TPACK轉(zhuǎn)化為數(shù)字素養(yǎng)的作用機(jī)制研究:一個鏈?zhǔn)街薪槟P蚚J].現(xiàn)代遠(yuǎn)距離教育,2023(6):43-52.
[10]白雪梅,顧小清.什么導(dǎo)致技術(shù)在課堂難盡其用?:基于認(rèn)知與情感視角的教師信息化教學(xué)行為意向影響因素研究[J].開放教育研究,2020,26(4):86-94.
[11]NIESS ML. Preparing teachers to teach science andmathematics withtechnology:Developinga technologypedagogical content knowledge[J].Teaching andTeacher Education,2005,21(5) :509-523.
[12]楊修平.行動研究:高質(zhì)量發(fā)展背景下職業(yè)教育教師科研素養(yǎng)提升的實(shí)然選擇[J].職業(yè)技術(shù)教育,2023,44(32) :48-53.
[13]鄭蘊(yùn)錚,鄭金洲.教育行動研究:成效、問題與改進(jìn)[J].教育發(fā)展研究,2020,40(4):18-23.