“教學評價”研究熱點與主題可視化分析
2018-02-26 20:00張俊飛畢志升吳小玲
中國教育信息化·高教職教 2018年1期
張俊飛+畢志升+吳小玲
摘 要：教學評價作為現(xiàn)代教育科學研究三大領域之一，對其研究熱點和主題分析十分必要。文章以中國知網(wǎng)數(shù)據(jù)庫2014-2016年核心期刊、CSSCI期刊收錄的840篇教學評價研究相關的學術論文為研究對象，利用可視化技術，結(jié)合詞篇矩陣、共現(xiàn)矩陣、聚類分析、多尺度分析、社會網(wǎng)絡化分析等技術探究我國教學評價領域近3年研究現(xiàn)狀和發(fā)展趨勢。結(jié)果顯示，教學評價研究主要圍繞九個主題展開研究，當前研究主要集中在教學模式改革、教學過程和要素、評價方式等；未來需要關注教學模式改革效果評價、有意義學習等領域。
關鍵詞：詞篇矩陣；共現(xiàn)矩陣；聚類分析；知識圖譜；社會網(wǎng)絡化分析
中圖分類號：G434 文獻標志碼：A 文章編號：1673-8454（2018）01-0017-05
引言
《國家中長期教育改革和發(fā)展規(guī)劃綱要（2010-2020年）》明確提出了“改革考試評價制度和學?？己宿k法，建立科學的教育質(zhì)量評價體系，改進教育教學評價”的總體發(fā)展目標。教學評價被譽為現(xiàn)代教育科學研究的三大領域之一，其意義不言而喻。教育評價思想開始于我國古代教育，早在西周時代已經(jīng)形成比較完備的考試選拔制度，在歷代的封建王朝時代，“分科舉人”、“開科納士”等考試制度，正是教育評價思想的淵源。
本研究利用社會網(wǎng)絡化分析、多維尺度分析和聚類分析等多元分析方法，將“教學評價”領域內(nèi)的重要關鍵詞進行提取、分類、關系分析操作，從而總結(jié)歸納出該領域研究的熱點和主題，以進一步掌握“教學評價”研究路線以及未來研究方向，為后續(xù)科研提供參考。
本研究同樣秉承可視化分析的思路，結(jié)合多元分析方法?？梢暬治鍪侵笇⒂嬎銠C進行科學計算的中間數(shù)據(jù)和結(jié)果數(shù)據(jù)，以某種容易理解的視覺方式展示出來的方法。[1]可視化分析利用計算機數(shù)據(jù)表示、處理技術實現(xiàn)數(shù)據(jù)可視化，[2]使數(shù)據(jù)用圖表、曲線顯示，并能對數(shù)據(jù)的相互關系和模式進行分類、組合、可視化呈現(xiàn)。在大數(shù)據(jù)時代，數(shù)據(jù)可視化已經(jīng)逐漸成為主流。
一、數(shù)據(jù)來源與處理
1.數(shù)據(jù)來源
本研究以中國知網(wǎng)CNKI為搜索引擎，采用高級檢索功能，檢索2014-2016年在核心期刊、CSSCI期刊中發(fā)表的包含“教學評價”主題的文章，共847篇，過濾掉與主題無關的7篇文獻，共得到840篇樣本文獻，并以NoteFirst格式導出。
2.提取高頻關鍵詞
利用BICOMB2.0書目共現(xiàn)分析軟件，創(chuàng)建項目，選擇“cnki..
3.構建詞篇矩陣、共現(xiàn)矩陣與相異矩陣
采用Ucinet6和SPSS22軟件對66個高頻關鍵詞做矩陣分析，首當其沖的是準備分析數(shù)據(jù)——高頻關鍵詞的詞篇矩陣（見表2）、高頻關鍵詞的相異矩陣（見表3）、高頻關鍵詞的共現(xiàn)矩陣（見表4）。首先在BICOMB2.0軟件中設置閾值條件為5≤頻次≤148，生成詞篇矩陣和共現(xiàn)矩陣；利用SPSS22軟件對詞篇矩陣進行相似矩陣距離分析處理，設置度量標準為二分類Ochiai系數(shù)，生成相似矩陣。為了消除由于關鍵詞共現(xiàn)次數(shù)差異所帶來的影響，相異矩陣由相似矩陣導出到Excel中，并利用數(shù)字“1”與相似矩陣中的相似值相減生成。[5]
二、研究熱點及其關系
為了獲取教學評價研究熱點及其關系，需要將先前統(tǒng)計出的高頻關鍵詞共現(xiàn)矩陣導入到Ucinet6軟件中，生成二維社會網(wǎng)絡關系圖譜。將共現(xiàn)矩陣導入到Ucinet6軟件中，對高頻關鍵詞進行節(jié)點中間度分析，如表5所示，并生成可視化高頻關鍵詞社會網(wǎng)絡關系圖譜，在圖譜的基礎上進行中間中心度（Betweenness）操作和K-cores分析操作，得圖1。
通過Ucinet6菜單項“網(wǎng)絡-中心度-Freeman中間度-節(jié)點中間度”操作統(tǒng)計節(jié)點中間度。從表5中可以看出，教學評價主要圍繞評價體系、教學模式、教學改革、實踐教學、課堂教學、教學質(zhì)量等主題展開研究的。在社會網(wǎng)路關系圖譜中可以看出，通過中間中心度和K-cores分析，各個節(jié)點在網(wǎng)絡中作用大小有不同大小顯示和顏色變化。節(jié)點正方形大小標識占據(jù)網(wǎng)絡核心位置，紅色表示該領域的研究熱點，其他研究基本都是圍繞這些熱點主題展開的。在社會網(wǎng)絡關系圖譜中，除了可以看出研究的熱點，還可以通過熱點間連線的粗細和緊密程度，說明熱點研究的成熟度。除了核心關鍵詞外，其他節(jié)點聯(lián)系較為松散，說明沒有形成明顯的研究主題。
三、主流研究領域結(jié)構及其關系
1.高頻關鍵詞聚類分析
關鍵詞聚類分析的原理是以關鍵詞兩兩在同一篇文章中出現(xiàn)的頻率（共詞）為分析對象，利用聚類的統(tǒng)計學方法，把關聯(lián)密切的關鍵詞聚集在一起形成類團。[6]在SPSS22中，把詞篇矩陣導入，進行系統(tǒng)聚類分析，聚類方法采用組之間的鏈接，以二分類Ochiai系數(shù)為測量標準，得到圖2所示的主題譜系圖。聚類結(jié)果顯示，教學評價領域的研究熱點主要集中在九類主題——教學評價指標、教學評價方式、教學模式改革、教學評價體系、學生評價、教學評價的意義、課程評價、教師評價、教學過程與要素。
種類一涉及教學評價指標的設計。高校開設科目眾多，課程性質(zhì)多樣，如實驗課、雙語課、討論課、體育課、見習課等，不能采用單一教師評價指標全面覆蓋所有教師。另外評價對象除了教師以外，還有學生和課程等教學過程要素，應該針對學生和課程根據(jù)不同的標準提出不同的評價指標。只有建立多維度的教學評價指標體系才能符合教學情況，才能更具有針對性。魏翼飛[7]等通過研究大學生評教心理因素，設計了分階段的教學質(zhì)量評價指標，提出多元評價方式和以教學質(zhì)量綜合指數(shù)為標準的評教手段。
種類二是評價方式。隨著信息化的發(fā)展，教學評價方式呈現(xiàn)多樣化趨勢。韋文榮[8]等結(jié)合移動學習的特征對思政課進行教學改革，構建基于移動學習的評價方式。徐鎮(zhèn)凱[9]等綜合應用大數(shù)據(jù)多層變權云計算方法優(yōu)化教學質(zhì)量評價體系機制。信息化評價軟件的出現(xiàn)促進了評價方式的革新，學生群體作為教學評價的主體，從自身實踐經(jīng)驗出發(fā)帶有很強的主觀性，因此需要信息化技術應用到評價中對數(shù)據(jù)清洗，剔除無效數(shù)據(jù)。
種類三是教學模式改革。信息化的發(fā)展，促進了網(wǎng)絡課程的開設，“微課”、“慕課”、“CDIO”、“移動學習”等教學新名詞井噴出現(xiàn)。王冠軍[10]等基于翻轉(zhuǎn)課堂與MOOC的嵌入式軟件工程實踐教學促進了學生對理論知識的掌握與理解。
種類四是評價體系。教學評價體系研究近年來日益豐富。從總體上分析，主要研究內(nèi)容包括兩部分：①多視角研究教學體系的結(jié)構，包括教學課程設置、教學模式、人才培養(yǎng)等；②教學質(zhì)量監(jiān)控與評價體系，包括相關軟硬件的設計、開發(fā)與使用，師資保障以及制度建設。這些對高校教學發(fā)展、人才培養(yǎng)等都有重要指導和促進作用。
種類五是學生評價。建構主義學習觀認為：學習是學習者利用已有知識經(jīng)驗了解構建新知識的過程。當前，對學生的評價主要是改善學生的學習和甄別學生學習水平。通過學生評價數(shù)據(jù)，教師可以了解教學得失從而改進教學方法，同時也可以及時了解學生學習和身心發(fā)展狀況，方便給予引導和幫助。
種類六是教學評價意義。教學評價作為一個獨立的研究領域始于20世紀初，其發(fā)展經(jīng)歷了四個時期，由最初的測量、測驗評價階段，到是否達到教學目標描述時期，再到確定評價是價值判斷、具有過程性的判斷時期，直到最終認為評價是共同建構的成熟期。教學評價反饋被視為評價者和被評價者“協(xié)商”進行的共同心理建設過程。學生評價，是授課教師對學生學習的一個反饋，讓學生獲得自己的學習水平層次，知曉在學習中取得的進步和存在的不足，有益于學生學習及成長。教師評價的兩大基本目的，就是保證教學質(zhì)量和推動教師的專業(yè)發(fā)展，[11]使教師在完成業(yè)績目標的同時也成為實現(xiàn)自我發(fā)展及完善的過程。[12]課程評價的主體是學生，真實地反映課程開設情況，及時反映給教學管理者，為教學管理者的科學決策及工作方針的制訂提供依據(jù)。簡言之，教學評價反饋具有教學診斷、激勵、調(diào)控功能。
種類七是課程評價。課程評價是事實與價值判斷的合體，是課程價值的發(fā)現(xiàn)和創(chuàng)造。[13]課程的發(fā)展是伴隨著時代的要求，對課程的評價更能體現(xiàn)課程是否符合現(xiàn)實，是否促進學生對科學文化的掌握。楊燁[14]依據(jù)美國“概念體育”課程理論，構建了基于體育生活方式的學校體育課程，使學生形成科學、健康的體育生活方式，掌握熟練的運動技能和知識。
種類八是教師評價。教育大計，教師為本，《關于深化教育改革全面推進素質(zhì)教育的決定》要求教師評價機制作為一項全面推進素質(zhì)教育的重要措施。教師評價研究是建立教師管理制度的重要方面和首要環(huán)節(jié)，教師對自身的教育活動進行自我評價，實際上是一個反思、修正的過程，可以促進教師的專業(yè)成長。
種類九是教學過程與要素。教學過程是學生認知身心發(fā)展的過程，在教學過程中，教師按照教學計劃引導學生進行有意義的認知活動，學生自覺調(diào)整自己的認知結(jié)構，提高自己的智力、體力、品德等方面。對教學過程的研究是對教學本質(zhì)的研究、對教學更深入的認識。教學基本要素有多種研究說法，如三要素說、四要素說、五要素說、六要素說、七要素說和三三構成說等。無論是哪種說法教學要素就是在教學過程中對教學產(chǎn)生影響的因子，對因子的研究有助于教學的順利開展。
2.高頻關鍵詞知識圖譜分析
知識圖譜主要用于科學文獻中知識發(fā)現(xiàn)，用以揭示領域知識結(jié)構和領域的研究重點。[15]多維尺度分析生成的知識圖譜是一個二維坐標圖，其中橫坐標表示某個研究領域的向心度，描述了該領域在整個領域中的地位，值越大說明該研究領域越重要；縱坐標表示某個領域研究的密度，衡量該領域中內(nèi)部知識研究的聯(lián)系強度，值越大表示該領域研究的框架結(jié)構越完整，該領域研究現(xiàn)狀很成熟前景良好。圖中的圓點代表高頻關鍵詞在知識圖譜中所處的位置。各個領域的不同位置在知識圖譜中表示不同的含義。第一象限包含的高頻詞組具有較高的向心度和緊密的密度，說明這些詞組代表的研究領域是整個領域的核心地位，并且研究的層次結(jié)構完善。第二象限關鍵詞組的向心度低但密度緊密，這說明其代表的研究領域雖然不占據(jù)整個領域的重要地位，但是其具有較完整的框架結(jié)構、系統(tǒng)的體系。第三象限關鍵詞組具有較低的向心度和密度，這說明其代表的研究領域在整個領域的邊緣，且之間關聯(lián)疏松，結(jié)構不完整、不系統(tǒng)。第四象限關鍵詞組的向心度高但是密度低，這說明其代表的研究領域在整個領域中還很重要，但是內(nèi)部研究不系統(tǒng)，結(jié)構松散。
知識圖譜由SPSS22ALSCAL多維尺度分析生成。將先前準備的高頻關鍵詞相異矩陣輸入到SPSS22軟件中，以區(qū)間為測量級別并設置Eudidean距離為度量模型，輸出數(shù)據(jù)矩陣，得到熱點知識圖譜如圖3所示。
第一象限呈現(xiàn)大部分種類一、三、九高頻關鍵詞，這說明在教學評價領域評價指標、教學模式、教學過程與要素在該領域中處于研究重要地位，并且研究趨于完整成熟。但是，在第四象限還有部分種類三、九部分高頻關鍵詞，如“翻轉(zhuǎn)課堂”、“學習過程”等，這說明種類三、九還有些領域雖然具有研究價值，但是還沒有形成完整體系。第二象限呈現(xiàn)大部分種類二、四、六、八高頻關鍵詞，這說明教學評價方式、評價體系、評價意義、教師評價，雖然研究得比較系統(tǒng)化，研究的層次很完善，但是研究的熱度處于該領域的邊緣。第三象限呈現(xiàn)大部分種類五、七高頻關鍵詞，這說明學生評價、課程評價兩個領域研究熱度不夠、處于該領域邊緣，并且研究的框架結(jié)構也不完善，是個比較薄弱的環(huán)節(jié)。endprint
四、結(jié)論與反思
教學評價作為學校教育活動體系中不可缺少的組成部分，對優(yōu)化教育管理、提高教育質(zhì)量等具有重要的作用。教學評價是教學活動的重要因素之一，是修改和完善教學的基礎。在教學活動實施過程中，評價活動也始終貫穿其中。本研究對我國教學評價的未來發(fā)展提出以下幾個意見，供其他學者參考。
1.評價主體、客體要全
只對一個或者幾個教學要素進行評價，必將導致評價指向偏離，評價結(jié)果價值降低。評價主體必須包含如下方面：①教學督導、領導。一般由在職的資深教授組成，旨在利用他們豐富的教學經(jīng)驗，發(fā)現(xiàn)課堂教學中的問題，規(guī)范教學秩序，監(jiān)督教學行為，并對授課教師提供必要的建議和引導，提升他們的教學能力。②學生。依據(jù)自身的聽課感受及其認知進行主觀價值判斷。③教師。教師參與評價的形式應是教師在日常工作中對自身工作持續(xù)不斷的反思、改進的記錄。
弗·鮑良克[16]認為：“教師、學生、教學內(nèi)容是教學的三個基本要素，它被稱為教學論的三角形?！眲⒖颂m[17]認為：“教學過程是教師的教和學生的學以教材為中介的共同活動過程?！北狙芯繄猿纸虒W過程三要素觀點，教學評價應該圍繞對學生評價、對教師評價、對課程評價三個維度，來詮釋教學質(zhì)量評價。然現(xiàn)代教學評價對象更多的是教師，僅從教師角度去評價教學無疑管中窺豹。學生、教師、課程作為教學活動三要素，對教學效果都有著重要的影響，都應成為被評價的客體。
2.多種評價方式
形成性評價強調(diào)教學過程，使教學成為一個自我糾正系統(tǒng)；總結(jié)性評價強調(diào)績效責任，檢驗教學目標達標程度；發(fā)展性評價實現(xiàn)評價者和評價對象共同商定發(fā)展目標，以促進被評價者不斷地發(fā)展。當前，教學模式的多種化、教學方法的多樣化都需要多種評價方式并存，更好地對教學過程、效果進行評估與監(jiān)控。
3.評價指標要具有信度和效度
信度和效度是教育評價指標體系實施的前提條件，是衡量教育評價指標體系構建質(zhì)量的重要尺度。信度是指評價指標要貼合實際、能評出真實情況；效度指評價指標的準確性和代表性。針對不同的評價對象，要設計不同的評價指標體系，體現(xiàn)評價指標的多維化特性。如對教師的評價指標可以按照課程性質(zhì)，設置不同的評價標準。
4.評價數(shù)據(jù)處理要具有科學性
按照數(shù)據(jù)類型，評價數(shù)據(jù)可以分為量化數(shù)據(jù)和質(zhì)性數(shù)據(jù)。針對兩種類型數(shù)據(jù)可采取兩種方法：①教育評價信息的定量分析評判法，如加權平均法、模糊綜合評判法、集體綜合評價法等。②教育評價信息的定性分析描述法，如等級評價法、評語鑒定法、寫實分析法等。隨著信息化技術的發(fā)展，數(shù)據(jù)可視化也逐漸成為一種成熟的科學處理方法，增強了數(shù)據(jù)的可讀性。
參考文獻：
[1]張家華，鄒琴，祝智庭.國內(nèi)近五年學習分析研究現(xiàn)狀的可視化綜述[J].浙江師范大學學報（社會科學版），2017（1）：117-124.
[2]高玥.大數(shù)據(jù)時代背景下的數(shù)據(jù)可視化概念研究[J].電子技術與軟件工程，2014（19）：216.
[3]王佑鎂，陳慧斌.近十年我國電子書包研究熱點與發(fā)展趨勢——基于共詞矩陣的知識圖譜分析[J].中國電化教育，2014（5）：4-10.
[4]梁樂明，曹俏俏，張寶輝.微課程設計模式研究——基于國內(nèi)外微課程的對比分析[J].開放教育研究，2013（1）：65-73.
[5]郭文斌，方俊明.關鍵詞共詞分析法：高等教育研究的新方法[J].高教探索，2015（9）：15-21，26.
[6]王敏，郭文斌.我國近十年情緒調(diào)節(jié)研究熱點知識圖譜[J].心理研究，2011（5）：56-59.
[7]魏翼飛，王鐵軍.教學質(zhì)量評價心理因素研究與評價體系設計[J].北京郵電大學學報（社會科學版），2016（6）：103-110.
[8]韋文榮，黃振宣.基于移動學習的思政課學習效果評價體系[J].教育與職業(yè)，2016（24）：101-103.
[9]徐鎮(zhèn)凱，溫勇兵，魏博文，谷明晗.基于大數(shù)據(jù)多層變權云計算的高校工科教師授課質(zhì)量綜合評價[J].現(xiàn)代教育管理，2016（9）：93-96.
[10]王冠軍，周勇，江海峰，趙瑩，李向群.基于翻轉(zhuǎn)課堂與MOOC的嵌入式軟件工程實踐教學研究[J].實驗技術與管理，2016（4）：176-178，185.
[11]唐善梅，裴育.美國教師評價研究對我國高校教師評價制度的啟示[J].繼續(xù)教育，2010（6）：127-129.
[12]朱志良.建立發(fā)展性教師評價體系芻議[J].高等工程教育研究，2005（6）：38-41.
[13]蔣雅俊.課程評價：課程價值的創(chuàng)造與實現(xiàn)[J].華南師范大學學報（社會科學版）， 2014（3）：63-68，162.
[14]楊燁.基于體育生活方式的學校體育課程評價標準[J].上海體育學院學報，2014（2）： 74-77.
[15]任紅娟，張志強.基于文獻計量的科學知識圖譜發(fā)展研究[J].情報雜志，2009（12）：86-90.
[16]Bacic， B..Computer at the university： opportunities for tailoring automated marking and digital feedback， F，2003[C].IEEE.
[17]劉克蘭.現(xiàn)代教學論[M].重慶：西南師范大學出版社，1998：41-44.
（編輯：王天鵬）endprint
猜你喜歡
