大數(shù)據(jù)視野下校外合作單位辦學(xué)質(zhì)量評估的困境與變革

劉婷 王應(yīng)密

【摘?要】大數(shù)據(jù)為高等教育改革與創(chuàng)新提供了前所未有的機(jī)遇，應(yīng)用教育數(shù)據(jù)挖掘和學(xué)習(xí)分析的技術(shù)可以全面及時地掌握高校成人教育校外合作單位的辦學(xué)狀況，提升質(zhì)量評估工作的科學(xué)性和有效性。要達(dá)到這個目的，高校需要建設(shè)網(wǎng)絡(luò)教育綜合服務(wù)平臺;研究制定科學(xué)的評估指標(biāo);構(gòu)建在線評估與現(xiàn)場督導(dǎo)相結(jié)合、實時抽查與階段性評估互補(bǔ)、內(nèi)外部評估并行的辦學(xué)質(zhì)量評估保障體系。

【關(guān)鍵詞】成人網(wǎng)絡(luò)教育;校外合作單位;辦學(xué)質(zhì)量評估

【中圖分類號】G72;G434

【文獻(xiàn)標(biāo)識碼】A

【文章編號】1001-8794（2019）04-0076-05

大數(shù)據(jù)時代的到來給高等教育改革與創(chuàng)新提供了前所未有的大好機(jī)遇，大數(shù)據(jù)的思維和理念可以為優(yōu)化教育管理、創(chuàng)新教學(xué)模式、提升教育測量與評價水平提供依據(jù)和支撐。近年來，成人網(wǎng)絡(luò)教育在辦學(xué)過程中積累了大量的數(shù)據(jù)，如何對這些數(shù)據(jù)進(jìn)行深度挖掘和分析，從而進(jìn)一步優(yōu)化成人網(wǎng)絡(luò)教育校外合作單位（以下簡稱校外合作單位）的辦學(xué)質(zhì)量評估工作，這是一個值得深入探討的議題。

一、校外合作單位辦學(xué)質(zhì)量評估所面臨的困境

為了強(qiáng)化規(guī)范管理，高校繼續(xù)教育部門一般都會建立一套專門的校外合作單位辦學(xué)質(zhì)量評估體系。這套評估體系一般包括準(zhǔn)入考核、教學(xué)過程監(jiān)督以及綜合性辦學(xué)質(zhì)量評估三個組成部分。

準(zhǔn)入考核主要是設(shè)點評估。由高校繼續(xù)教育管理部門根據(jù)設(shè)立的評估指標(biāo)體系組織專人到現(xiàn)場對校外合作單位進(jìn)行評估，主要是對辦學(xué)資質(zhì)，辦學(xué)軟、硬件條件，尤其是擬設(shè)專業(yè)所需的師資條件、教學(xué)條件、實習(xí)條件等重點考察。

教學(xué)過程監(jiān)督一般分三種形式：教學(xué)督導(dǎo)員對校外合作單位進(jìn)行日常的教學(xué)督導(dǎo)工作，重點對面授課程進(jìn)行日常檢查;采用校外合作單位自查與檢查小組現(xiàn)場檢查相結(jié)合的方式，對校外合作單位辦學(xué)質(zhì)量進(jìn)行階段性評估，一般在期中進(jìn)行;對校外合作單位整個學(xué)期的教學(xué)管理完成情況進(jìn)行總結(jié)性評估。

綜合性辦學(xué)質(zhì)量評估是對校外合作單位辦學(xué)質(zhì)量的一次綜合性評定，一般2—3年為一個評估周期。

評估機(jī)制是校外合作單位規(guī)范辦學(xué)的有力保障，也是主辦高校履行指導(dǎo)和監(jiān)督責(zé)任的有效途徑。但當(dāng)前的校外合作單位辦學(xué)質(zhì)量評估卻存在諸多問題：

（一）評估指標(biāo)主要集中在辦學(xué)基本條件，對教學(xué)過程關(guān)注不夠

當(dāng)前，合作單位辦學(xué)質(zhì)量評估工作的一個突出特點就是過于注重對辦學(xué)的軟硬件條件進(jìn)行考察，尤其集中在辦學(xué)場地、人員配置、師資隊伍等方面（參見表1）。這些辦學(xué)基本條件固然是開展教學(xué)的物質(zhì)基礎(chǔ)，但對于整個成人網(wǎng)絡(luò)教育而言，它們也只是提供了開展教學(xué)的基本條件，而教學(xué)工作開展?fàn)顩r如何，這些物質(zhì)條件在教學(xué)中應(yīng)用的情況怎樣，這些直接決定著辦學(xué)質(zhì)量的關(guān)鍵性因素，卻都未能在評估指標(biāo)體系中得到充分體現(xiàn)。盡管在日常教學(xué)督導(dǎo)中，督導(dǎo)員會對教學(xué)過程進(jìn)行考察，但一方面合作單位數(shù)量較多，分布零散，少量的督導(dǎo)員很難及時跟蹤教學(xué)過程;另一方面，督導(dǎo)員對教學(xué)過程的評價具有較大的主觀性和隨意性，而且僅憑一兩次的課堂檢查也很難對整個教學(xué)工作給出相對客觀的評估。

（二）只注重學(xué)生整體狀況的評估，忽視了個性化發(fā)展需求

無論日常教學(xué)過程監(jiān)督還是階段性綜合辦學(xué)質(zhì)量評估，所考察的重點都是合作單位發(fā)展的整體狀況，包括對課堂教學(xué)實施、教學(xué)效果、學(xué)生學(xué)習(xí)成效等方面評價都是如此。這與當(dāng)前高等教育領(lǐng)域中一再強(qiáng)調(diào)的“以生為本”的人才培養(yǎng)理念明顯不符。這種評價方式消弭了學(xué)生個體之間學(xué)習(xí)能力與學(xué)習(xí)興趣的差異，難以促進(jìn)有效學(xué)習(xí)的發(fā)生，更不利于個性化自適應(yīng)學(xué)習(xí)方式的推行。再加上現(xiàn)行網(wǎng)絡(luò)教育學(xué)習(xí)平臺智能化程度低、數(shù)據(jù)挖掘“表層化”等問題，使傳統(tǒng)的辦學(xué)質(zhì)量評估方式很難滿足學(xué)生個性化發(fā)展目標(biāo)的實現(xiàn)，這也導(dǎo)致“因材施教”“個性化教學(xué)”等先進(jìn)的教學(xué)理念難以在合作單位得到落實。

（三）評估對日常教學(xué)缺乏有效的引導(dǎo)作用

眾所周知，校外合作單位辦學(xué)質(zhì)量評估的目的是為了保證校外合作單位的辦學(xué)水平，提升其人才培養(yǎng)質(zhì)量，這顯然離不開對日常教學(xué)工作的關(guān)注。但是，當(dāng)前的辦學(xué)質(zhì)量評估指標(biāo)體系卻很少把教學(xué)過程納入考核范圍，而且，在評估實踐過程中，評估人員也很少深入教學(xué)過程中對教師教的行為和學(xué)生學(xué)的行為進(jìn)行專門的分析和評價，日常的教學(xué)督導(dǎo)也不過是檢查一下教學(xué)秩序和基本的授課情況而已。這樣一來，評估結(jié)果對日常教學(xué)的影響就可想而知了。這顯然違背了對校外合作單位辦學(xué)質(zhì)量開展評估的初衷。

（四）評估手段單一

目前，各省市所開展的校外合作單位抽檢以及主辦高校自行組織的校外合作單位評估，基本都是采取聽取自檢匯報、實地察看辦學(xué)場所和設(shè)備設(shè)施、查閱文檔資料、召開座談會、專家組集中評議等方式。這些評估方式有它的優(yōu)點，如時間集中，評估內(nèi)容較為全面，能短時間內(nèi)了解辦學(xué)單位的詳細(xì)情況。但其不足也非常明顯，如：辦學(xué)是一個動態(tài)變化的過程，在某一個確定的較短時間里全面綜合考察辦學(xué)單位近幾年的辦學(xué)情況，難度很大;工作量較大，主辦高校往往有幾十個甚至上百個校外合作單位，組織專家逐個進(jìn)行實地考察、查閱資料、召開座談會、聽取匯報，要花費很多的人力物力;對辦學(xué)單位而言，要在短時間內(nèi)集中組織迎評工作，一方面會影響正常的教學(xué)秩序，另一方面，臨時拼湊材料、應(yīng)付評估的情況屢見不鮮。

二、大數(shù)據(jù)分析技術(shù)與校外合作單位辦學(xué)質(zhì)量評估

大數(shù)據(jù)與傳統(tǒng)數(shù)據(jù)相比，具有非結(jié)構(gòu)化、分布式、數(shù)量巨大、數(shù)據(jù)分析由專家層轉(zhuǎn)變?yōu)橛脩魧?、大量采用可視化展示等特點，而這些特點恰好適應(yīng)了當(dāng)前學(xué)習(xí)方式逐漸向個性化和人性化轉(zhuǎn)變的需要。當(dāng)前，大數(shù)據(jù)在教育管理中的應(yīng)用主要有兩大領(lǐng)域：教育數(shù)據(jù)挖掘（Educational Data Mining，簡稱EDM）和學(xué)習(xí)分析技術(shù)（Learning Analytics，簡稱LA）。[1]

（一）教育數(shù)據(jù)挖掘

教育數(shù)據(jù)挖掘的內(nèi)涵是要對學(xué)習(xí)行為和學(xué)習(xí)過程進(jìn)行量化、分析和建模，其目的是利用統(tǒng)計學(xué)、機(jī)器學(xué)習(xí)和數(shù)據(jù)挖掘等方法來分析教與學(xué)過程中所產(chǎn)生的大量數(shù)據(jù)。[2]其基本工作原理可以用。??由流程圖可以發(fā)現(xiàn)，教育數(shù)據(jù)挖掘主要包含四個主要環(huán)節(jié)：目標(biāo)設(shè)定、數(shù)據(jù)處理、建立模型、模型修正。

1.目標(biāo)設(shè)定

要開展教育數(shù)據(jù)挖掘，就必然有一定的目標(biāo)，這是開展教育數(shù)據(jù)挖掘的前提，設(shè)定明確的數(shù)據(jù)挖掘目標(biāo)，才能更好地依據(jù)特定目標(biāo)選擇和準(zhǔn)備數(shù)據(jù)，建立分析模型。

2.數(shù)據(jù)處理

這是整個教育數(shù)據(jù)挖掘的核心環(huán)節(jié)，其目的是通過對數(shù)據(jù)實施過濾、篩選、聚類等技術(shù)操作，實現(xiàn)原始數(shù)據(jù)與輸入標(biāo)準(zhǔn)的一致性，它包含四個緊密聯(lián)系的環(huán)節(jié)：

（1）數(shù)據(jù)過濾，從雜亂的數(shù)據(jù)源中篩選出符合教育分析的數(shù)據(jù);

（2）數(shù)據(jù)集成，把來自各子數(shù)據(jù)庫（教師管理數(shù)據(jù)庫、教學(xué)數(shù)據(jù)庫、學(xué)生學(xué)習(xí)數(shù)據(jù)庫、教學(xué)管理數(shù)據(jù)庫等）的數(shù)據(jù)集成、合并到單一的某一教育主題數(shù)據(jù)庫，并進(jìn)行數(shù)據(jù)差異調(diào)節(jié)，確保原始數(shù)據(jù)與輸入標(biāo)準(zhǔn)一致;

（3）數(shù)據(jù)分析，對整理后的數(shù)據(jù)開展初步分析，篩選出對數(shù)據(jù)輸出結(jié)果影響較大的關(guān)鍵字段（數(shù)據(jù)類別），根據(jù)影響作用大小排序;

（4）數(shù)據(jù)準(zhǔn)備，明確模型變量，轉(zhuǎn)換變量，完成數(shù)據(jù)的篩選與析出。

3.建立模型

根據(jù)設(shè)定的教育分析目標(biāo)，在多個可供選擇的模型中找出最佳模型，這個過程可能需要反復(fù)多次才能完成，中間可以根據(jù)最終信息呈現(xiàn)的需要調(diào)整數(shù)據(jù)過濾與篩選的標(biāo)準(zhǔn)。

4.模型修正

對數(shù)據(jù)挖掘的質(zhì)量進(jìn)行評定，好的模型在隨機(jī)數(shù)據(jù)的條件下就能得到比較理想的結(jié)果，反之，則需要修正原有模型。

（二）學(xué)習(xí)分析技術(shù)

學(xué)習(xí)分析技術(shù)是指利用已有的模型來認(rèn)識、理解新的學(xué)習(xí)行為和過程，也就是西蒙（Siemens）教授所說的“關(guān)于學(xué)習(xí)者以及他們的學(xué)習(xí)環(huán)境的數(shù)據(jù)測量、收集、分析和匯總呈現(xiàn)，其目的是理解和優(yōu)化學(xué)習(xí)以及學(xué)習(xí)情境”。[3]由此看來，教育數(shù)據(jù)挖掘是實施學(xué)習(xí)分析技術(shù)的前提和基礎(chǔ)，通過有效的學(xué)習(xí)分析技術(shù)，我們可以監(jiān)測和預(yù)測學(xué)生的學(xué)習(xí)情況，及時發(fā)現(xiàn)潛在問題，并據(jù)此作出人為干預(yù)，以避免學(xué)生在學(xué)習(xí)中產(chǎn)生風(fēng)險。

對于校外合作單位辦學(xué)質(zhì)量評估而言，通過全面跟蹤學(xué)生的學(xué)習(xí)行為、學(xué)習(xí)過程、師生互動情況以及教學(xué)資源使用情況，微觀持續(xù)性地采集鮮活數(shù)據(jù)，然后運用教育數(shù)據(jù)挖掘、學(xué)習(xí)分析和可視化數(shù)據(jù)分析等技術(shù)對校外合作單位的各種教學(xué)信息、軟硬件投入與使用信息以及辦學(xué)管理信息等進(jìn)行綜合處理，就可以突破傳統(tǒng)經(jīng)驗式評估的弊端，更為全面及時地掌握校外合作單位的辦學(xué)狀況，強(qiáng)化質(zhì)量評估工作的科學(xué)性和有效性。同時，如果有穩(wěn)定的大數(shù)據(jù)源作為支撐，辦學(xué)質(zhì)量評估就可以開展得更為深入和細(xì)致。例如，通過分析不同學(xué)習(xí)因素的內(nèi)在特點與聯(lián)系，就可以掌握學(xué)生學(xué)習(xí)和教師教學(xué)的全過程。這樣一來，我們不僅可以全面客觀地評價學(xué)生的學(xué)習(xí)效果和教師的教學(xué)質(zhì)量，而且可以分析影響學(xué)習(xí)效果和教學(xué)質(zhì)量的因素，有針對性地提供改進(jìn)教學(xué)質(zhì)量的評估建議，從而強(qiáng)化教育管理和質(zhì)量評估的針對性與科學(xué)性。

三、校外合作單位辦學(xué)質(zhì)量評估改革路徑

校外合作單位辦學(xué)質(zhì)量評估是強(qiáng)化校外合作單位辦學(xué)管理的重要環(huán)節(jié)，通過對教育大數(shù)據(jù)的挖掘與分析，可以改變過去主要依賴現(xiàn)場定期督導(dǎo)評估來保障校外合作單位辦學(xué)質(zhì)量的做法，逐步建立遠(yuǎn)程評估與現(xiàn)場評估相結(jié)合、內(nèi)部評估與外部評估相呼應(yīng)、隨時抽查與階段檢查并舉的科學(xué)高效的校外合作單位辦學(xué)質(zhì)量評估體系。

從教育數(shù)據(jù)挖掘的基本流程可知，基于大數(shù)據(jù)分析的校外合作單位辦學(xué)質(zhì)量評估主要有如下環(huán)節(jié)：評估目標(biāo)制定、數(shù)據(jù)源遴選、辦學(xué)綜合數(shù)據(jù)處理、評估標(biāo)準(zhǔn)構(gòu)建、評估標(biāo)準(zhǔn)修正、評估結(jié)果呈現(xiàn)等。由此，我們可以構(gòu)建基于大數(shù)據(jù)分析的校外合作單位辦學(xué)質(zhì)量評估模型。

在實施校外合作單位辦學(xué)質(zhì)量評估時，首先需要制定評估的目標(biāo)，并對評估目標(biāo)進(jìn)行精確的定義，明確評估目的與要求;接著根據(jù)評估的具體要求，從成人網(wǎng)絡(luò)教育運行數(shù)據(jù)庫中抽取涉及評估指標(biāo)的數(shù)據(jù)（這些數(shù)據(jù)平時存放在各個數(shù)據(jù)庫中）;然后依據(jù)挖掘算法及預(yù)先開發(fā)的數(shù)據(jù)處理模型對相關(guān)數(shù)據(jù)進(jìn)行挖掘與分析;再接下來就會對數(shù)據(jù)挖掘的結(jié)果進(jìn)行評價，判斷其能否實現(xiàn)評估的目標(biāo)與要求，如果無法實現(xiàn)，則回頭重新收集數(shù)據(jù)，當(dāng)然，這時就可能會涉及到重新修正評估指標(biāo)及因子的設(shè)定、數(shù)據(jù)挖掘的算法與模型，直至呈現(xiàn)的最終結(jié)果達(dá)到評估目標(biāo)的要求（即，具體應(yīng)用該模型評估某一單位時，評估結(jié)果與該單位的真實情況的吻合度高，評估有效，可信）。??對于成人網(wǎng)絡(luò)教育主辦高校而言，建立這種新型的校外合作單位辦學(xué)質(zhì)量評估體系，需要重點做好以下幾個方面的工作：

（一）開發(fā)建設(shè)新型的網(wǎng)絡(luò)教育綜合服務(wù)平臺

先進(jìn)的高智能化網(wǎng)絡(luò)教育綜合服務(wù)平臺對建立更加科學(xué)化的校外合作單位辦學(xué)質(zhì)量評估體系至關(guān)重要。這個平臺不僅為學(xué)生提供自適應(yīng)性的學(xué)習(xí)內(nèi)容，還全程追蹤學(xué)生學(xué)習(xí)軌跡，實時記錄教師開展教學(xué)的信息和師生互動信息，并及時更新校外合作單位的教學(xué)管理信息。而且，平臺還應(yīng)具有一定的開放性，校外合作單位可以隨時通過信息輸入的方式更新調(diào)整后的辦學(xué)條件信息。??從校外合作單位辦學(xué)質(zhì)量評估工作的角度而言，綜合服務(wù)平臺應(yīng)建立以下幾個常態(tài)數(shù)據(jù)庫：學(xué)生學(xué)習(xí)狀態(tài)數(shù)據(jù)庫、教師教學(xué)狀況數(shù)據(jù)庫、師生交流互動數(shù)據(jù)庫、教學(xué)管理狀況數(shù)據(jù)庫、合作單位辦學(xué)條件數(shù)據(jù)庫、教學(xué)資源使用情況數(shù)據(jù)庫，這六個核心數(shù)據(jù)庫所儲存的海量數(shù)據(jù)經(jīng)過濾、集成、聚類、關(guān)聯(lián)規(guī)則挖掘后構(gòu)成了校外合作單位辦學(xué)質(zhì)量評估的重要信息源。

（二）研究和構(gòu)建新型的校外合作單位辦學(xué)質(zhì)量評估指標(biāo)體系

校外合作單位辦學(xué)質(zhì)量評估指標(biāo)體系的構(gòu)建應(yīng)綜合考慮辦學(xué)基本條件、教學(xué)管理隊伍與師資力量、管理規(guī)章制度、教學(xué)過程及辦學(xué)成效（含畢業(yè)生發(fā)展?fàn)顩r），提升評價指標(biāo)的科學(xué)性和準(zhǔn)確性。在制定這幾個方面的具體評價指標(biāo)時，應(yīng)重點突出與教學(xué)實施過程相關(guān)的因素，尤其是能夠體現(xiàn)師生互動、學(xué)生學(xué)習(xí)參與度、個性化學(xué)習(xí)、實踐能力培養(yǎng)等相關(guān)的內(nèi)容。

（三）構(gòu)建校外合作單位辦學(xué)質(zhì)量在線評估的質(zhì)量保障體系

盡管有大數(shù)據(jù)分析作為技術(shù)支撐，但校外合作單位辦學(xué)質(zhì)量在線評估也不是萬能的。這是因為，一方面，教學(xué)過程中依然存在無法數(shù)據(jù)化的考察內(nèi)容;另一方面，在線評估由于其與教學(xué)現(xiàn)場分離的特點，從而導(dǎo)致了這種評估方式不僅無法準(zhǔn)確地再現(xiàn)校外合作單位辦學(xué)狀況的全貌，同時也難以對發(fā)現(xiàn)的問題給予及時的處理和解決。因而，校外合作單位辦學(xué)質(zhì)量在線評估系統(tǒng)的正常運行還需要一套完善的質(zhì)量保障體系。這套質(zhì)量保障體系主要由以下幾個方面構(gòu)成：

1.在線評估與現(xiàn)場督查相結(jié)合的評估方式

在線評估可以作為日常教學(xué)監(jiān)控評估方式，但在網(wǎng)絡(luò)教育綜合服務(wù)平臺所提供的校外合作單位辦學(xué)信息出現(xiàn)異常，或者主辦高校認(rèn)為某些合作單位的辦學(xué)需要現(xiàn)場督導(dǎo)時，仍需組織專門人員到現(xiàn)場開展專項的督導(dǎo)與檢查。

2.內(nèi)外部評估并行的評估方式

內(nèi)部評估主要由校外合作單位實施，對在學(xué)學(xué)生、任課教師、各類工作人員獨立進(jìn)行評估，評估的具體項目可由主辦高校根據(jù)評估的基本要求制定，評估的全部程序都在網(wǎng)絡(luò)教育綜合服務(wù)平臺上完成。外部評估主要是由主辦高校來實施，所依據(jù)的評估材料一方面是內(nèi)部評估的結(jié)果，另一方面則是從網(wǎng)絡(luò)教育綜合服務(wù)平臺中提取的校外合作單位運行信息。在這種評估機(jī)制下，內(nèi)部評估對校外合作單位辦學(xué)質(zhì)量的控制發(fā)揮著更為重要的引導(dǎo)作用，評估其實已經(jīng)演變成了校外合作單位辦學(xué)的一種自我約束，自我規(guī)范。外部評估在某種程度上具有了真正意義上的監(jiān)督作用，而不再是直接干預(yù)校外合作單位辦學(xué)的具體業(yè)務(wù)工作，為校外合作單位主動適應(yīng)終身教育最新要求，探索新型的人才培養(yǎng)方式提供了更大的自由空間。

3.實時抽查與階段性評價相結(jié)合的綜合評估機(jī)制

借助于網(wǎng)絡(luò)教育綜合服務(wù)平臺中的大數(shù)據(jù)分析功能，主辦高校隨時可以調(diào)取任一個校外合作單位實時的辦學(xué)數(shù)據(jù)及其各個時期的內(nèi)部評估數(shù)據(jù)，尤其是在學(xué)學(xué)生對校外合作單位的評估數(shù)據(jù)，由此來掌握合作單位的實時運行情況。顯然，實時抽查彌補(bǔ)了階段性評估的不足，能夠及時發(fā)現(xiàn)日常辦學(xué)中存在的問題，并給予處理。