基于大數(shù)據(jù)的高校學(xué)生評價體系設(shè)計與研究

摘要：大數(shù)據(jù)的廣泛應(yīng)用為高校學(xué)生的綜合評價提供新思維、新方法、新手段?；诖髷?shù)據(jù)的高校學(xué)生評價體系的設(shè)計和研究，就是針對目前高校在學(xué)生評價方面存在的滯后性、片面性、科學(xué)性不足、缺乏個性化和沒有體現(xiàn)“產(chǎn)出導(dǎo)向”等問題，首先對高校學(xué)生評價相關(guān)因素及數(shù)據(jù)來源進(jìn)行分析;其次對評價體系中多元化問題進(jìn)行研究;最后對各評價要素之間關(guān)系進(jìn)行解析，并以數(shù)據(jù)中心為核心，采用大數(shù)據(jù)技術(shù)設(shè)計多元化綜合評價體系。

關(guān)鍵詞：大數(shù)據(jù);多元化;產(chǎn)出導(dǎo)向

我國以“品學(xué)兼優(yōu)”為核心的評價指標(biāo)自古有之。數(shù)年來，盡管高等教育已進(jìn)行多次教學(xué)體制改革，但仍缺乏科學(xué)、系統(tǒng)的體系和方法。目前，許多高校已對傳統(tǒng)評價體系進(jìn)行修正和補(bǔ)充。2010年出臺的《國家中長期教育改革和發(fā)展規(guī)劃綱要（2010-2020年）》明確提出“堅持以人為本、全面實(shí)施素質(zhì)教育”的教育改革發(fā)展戰(zhàn)略，為建立一套更符合時代要求的大學(xué)生評價體系奠定基礎(chǔ)、明確方向。

大數(shù)據(jù)在人們對數(shù)據(jù)搜集能力、傳輸能力、存儲能力和處理分析能力的發(fā)展和跨越基礎(chǔ)上，已在各行業(yè)掀起變革巨浪。美國哥倫比亞大學(xué)心理學(xué)教授Duncan Watts認(rèn)為，有關(guān)人們行為和喜好的豐沛數(shù)據(jù)正改變著社會科學(xué)，使社會科學(xué)從數(shù)據(jù)最貧瘠的領(lǐng)域轉(zhuǎn)變?yōu)閿?shù)據(jù)最豐富的領(lǐng)域。大學(xué)生學(xué)習(xí)、生活、交往等巨量數(shù)據(jù)的記錄，使得藏身于行為背后的思想動態(tài)變得公開化。可通過數(shù)據(jù)對行為精確識別，在定性基礎(chǔ)上進(jìn)行定量界定，不斷反演推理分析，找出行為背后的思想內(nèi)核，為高校學(xué)生綜合評價提供新思維、新方法、新手段。

一、研究背景

（一）國外基于大數(shù)據(jù)的教育研究和評價現(xiàn)狀

美國很早就將大數(shù)據(jù)應(yīng)用于教育領(lǐng)域，2001年頒布《NCLB（不讓任何一個孩子落后）》教育法案，大力推進(jìn)數(shù)據(jù)在教育評價中的應(yīng)用，并認(rèn)為數(shù)據(jù)可為教育評價提供直觀、可靠的依據(jù)，幫助教育決策者、管理者、教師以及家長全面且客觀地了解學(xué)生教育的現(xiàn)狀、趨勢以及發(fā)展方向，從而能科學(xué)地評價學(xué)生學(xué)習(xí)與教師教學(xué)的有效性。2012年3月29日，美國政府推出“大數(shù)據(jù)研究與開發(fā)提案”，在此基礎(chǔ)上，2016年5月又頒布“聯(lián)邦大數(shù)據(jù)研究與開發(fā)戰(zhàn)略計劃”，指出要提升大數(shù)據(jù)在教育領(lǐng)域的應(yīng)用水平，要尋求大數(shù)據(jù)分析和“人類一數(shù)據(jù)接口”在教育領(lǐng)域中的應(yīng)用場景。

美國很多學(xué)校在制定學(xué)校長遠(yuǎn)發(fā)展計劃、教學(xué)管理和學(xué)生管理方面使用教育評價大數(shù)據(jù)作為決策依據(jù)。據(jù)不完全統(tǒng)計，97%的美國中小學(xué)利用教育大數(shù)據(jù)確定學(xué)校需要提升的關(guān)鍵領(lǐng)域，分析學(xué)生個體數(shù)據(jù)以便于分班或安排相關(guān)學(xué)習(xí)與服務(wù)。而83%的學(xué)校利用教育大數(shù)據(jù)了解本校教師教學(xué)發(fā)展的現(xiàn)狀與需求，并據(jù)此決策如何支持本校教師的教學(xué)發(fā)展。

（二）國內(nèi)基于大數(shù)據(jù)的教育研究和評價現(xiàn)狀

2015年8月31日，國務(wù)院發(fā)布《促進(jìn)大數(shù)據(jù)發(fā)展行動綱要》，對10個大數(shù)據(jù)工程進(jìn)行規(guī)劃，并在“公共服務(wù)大數(shù)據(jù)工程”中提出要建設(shè)教育文化大數(shù)據(jù)。2018年，教育部印發(fā)的《教育信息化2.0行動計劃》中，共21次提及“數(shù)據(jù)”，11次提及“大數(shù)據(jù)”，并且提出要利用大數(shù)據(jù)技術(shù)為學(xué)習(xí)者提供學(xué)習(xí)資源服務(wù)，深化教育大數(shù)據(jù)應(yīng)用，助力教育教學(xué)管理和服務(wù)的深化改革。

在教育評價方面，教育部已建立國家基礎(chǔ)教育數(shù)據(jù)庫并為學(xué)生建立云檔案，用于保存學(xué)生學(xué)習(xí)、成長和發(fā)展方面的數(shù)據(jù)，跟蹤學(xué)生在校及畢業(yè)后的發(fā)展情況，為教學(xué)評價提供更準(zhǔn)確的數(shù)據(jù)依據(jù)。然而，與歐美發(fā)達(dá)國家相比，我國在教育大數(shù)據(jù)研究和發(fā)展方面，尤其是在應(yīng)用于教學(xué)評價的基礎(chǔ)大數(shù)據(jù)設(shè)施建設(shè)上，還存在一定差距。

二、存在問題

第一，評價的滯后性。目前，高校對學(xué)生的評價主要是結(jié)果評價，以華東交通大學(xué)軟件學(xué)院為例，學(xué)生評價主要包括學(xué)習(xí)成績評定、實(shí)習(xí)測評和操行評定三方面內(nèi)容，這些評價數(shù)據(jù)都是以結(jié)果的方式呈現(xiàn)，屬于總結(jié)性評價。因此，不能對學(xué)生平時表現(xiàn)進(jìn)行及時跟蹤與反饋，難以發(fā)現(xiàn)學(xué)生成長和學(xué)習(xí)過程中的問題。

第二，評價的片面性。評價數(shù)據(jù)和評價主體的片面性導(dǎo)致學(xué)生評價的片面性。學(xué)生日常學(xué)習(xí)和成長數(shù)據(jù)的缺失，無法對學(xué)生進(jìn)行綜合、全面和客觀評價。并且評價主體僅僅是教師和輔導(dǎo)員，他們的主觀判斷更加大了評價的片面性。

第三，評價的科學(xué)性不足。傳統(tǒng)的學(xué)生評價體系科學(xué)性不足表現(xiàn)在評價過程數(shù)據(jù)來源標(biāo)準(zhǔn)不統(tǒng)一、采集方法不一致、數(shù)據(jù)評價結(jié)果使用計算方法欠科學(xué)，不同學(xué)院、系、專業(yè)甚至不同班級和任課教師采用的評價標(biāo)準(zhǔn)與方法都不相同，最終影響學(xué)生評價的科學(xué)性。

第四，評價缺乏個性。傳統(tǒng)學(xué)生評價方案的設(shè)計主要基于普適性，同一評價主體針對不同評價目標(biāo)時使用同一指標(biāo)，采用統(tǒng)一尺度對所有個體進(jìn)行評價，評價結(jié)果難以體現(xiàn)不同學(xué)生的個性化發(fā)展。

第五，沒有體現(xiàn)“產(chǎn)出導(dǎo)向”。高校工程教育認(rèn)證的核心理念是“產(chǎn)出導(dǎo)向”理念，即強(qiáng)調(diào)專業(yè)教學(xué)設(shè)計和教學(xué)實(shí)施以學(xué)生接受教育后所取得的學(xué)習(xí)成果為向?qū)?，并對照畢業(yè)生核心能力和要求，評價專業(yè)教育的有效性。而目前的評價體系都屬于“投入導(dǎo)向”。盡管傳統(tǒng)評價采用的數(shù)據(jù)都是結(jié)果數(shù)據(jù)，但結(jié)果都是在培養(yǎng)方案、學(xué)生守則、課程大綱和實(shí)驗大綱等構(gòu)成的框架內(nèi)得出，這些方案和綱要往往是以學(xué)分、學(xué)時、基礎(chǔ)設(shè)施等投入因素為考量設(shè)計得到。因此，其結(jié)果數(shù)據(jù)以及以此為基礎(chǔ)的評價體系并不符合工程教育認(rèn)證提出的“產(chǎn)出導(dǎo)向”理念。

從以上五方面來看，學(xué)生評價體系還不能科學(xué)、全面、準(zhǔn)確地評價學(xué)生，從而影響學(xué)校全面了解學(xué)生發(fā)展?fàn)顩r和教育教學(xué)效果，阻礙學(xué)生發(fā)展和學(xué)校教育教學(xué)質(zhì)量的全面提升。除此之外，目前高校的基礎(chǔ)數(shù)據(jù)設(shè)施也不足以滿足對學(xué)生進(jìn)行綜合性評價的需要。高校在教育信息化過程中，不同院系部門建成不同的網(wǎng)絡(luò)信息平臺，數(shù)據(jù)繁多且不能互通。例如，專業(yè)建設(shè)和評估數(shù)據(jù)、人才培養(yǎng)計劃和過程數(shù)據(jù)、院系教學(xué)管理數(shù)據(jù)、網(wǎng)絡(luò)教學(xué)平臺數(shù)據(jù)、實(shí)驗教學(xué)平臺數(shù)據(jù)等。平臺的割裂造成數(shù)據(jù)的分散，很難利用所有數(shù)據(jù)對學(xué)生進(jìn)行科學(xué)、全面的評價。

互聯(lián)網(wǎng)和大數(shù)據(jù)全方位對學(xué)生在校期間的學(xué)習(xí)、活動和生活等進(jìn)行準(zhǔn)確、科學(xué)評價提供強(qiáng)有力的技術(shù)支撐。高等院校應(yīng)以此為契機(jī)，重新構(gòu)建學(xué)生綜合評價體系和大數(shù)據(jù)基礎(chǔ)平臺，全面、科學(xué)、準(zhǔn)確評價學(xué)生，促進(jìn)學(xué)生全面發(fā)展，提高學(xué)校教育教學(xué)質(zhì)量。

三、基于大數(shù)據(jù)的高校學(xué)生評價問題分析

（一）學(xué)生評價的因素和數(shù)據(jù)來源分析

基于大數(shù)據(jù)的學(xué)生評價體系與傳統(tǒng)評價體系不同之處在于，其數(shù)據(jù)更豐富、涵蓋范圍更全面、評價更實(shí)時、標(biāo)準(zhǔn)更多元。要做到這一點(diǎn)就需要分析大數(shù)據(jù)，從中找出與學(xué)生評價有關(guān)的因素，并建立其與數(shù)據(jù)來源之間的關(guān)系。與傳統(tǒng)評價體系采用數(shù)據(jù)樣本進(jìn)行評價的方式不同，基于大數(shù)據(jù)的評價體系需與評價指標(biāo)有關(guān)的全部數(shù)據(jù)。

不可否認(rèn)，高校現(xiàn)行學(xué)生評價體系中的評價指標(biāo)是與學(xué)生評價關(guān)系最為密切的因素。因此，分析的第一步是研究現(xiàn)行評價體系的評價指標(biāo)，并在大數(shù)據(jù)平臺找到完整數(shù)據(jù)來源。以華東交通大學(xué)軟件學(xué)院目前的評價體系為例，評價數(shù)據(jù)除了學(xué)生和課程的基本信息外，還包括課程的考核成績、平時成績，實(shí)習(xí)實(shí)訓(xùn)的平時成績、考核成績和答辯分?jǐn)?shù)，以及操行評定等級和獎學(xué)金評定結(jié)果，這些主要來自4個信息平臺，即教學(xué)管理平臺、實(shí)習(xí)實(shí)訓(xùn)管理平臺、網(wǎng)絡(luò)教學(xué)平臺和學(xué)生信息管理平臺。

對高校學(xué)生的評價，除了課內(nèi)學(xué)習(xí)方面的評價指標(biāo)，還應(yīng)包括科研、體育健康和校內(nèi)外活動等方面內(nèi)容。因此，評價因素可加入科研成果、體育成績、體檢結(jié)果、校內(nèi)外競賽類和評比類活動的結(jié)果、校內(nèi)外媒體相關(guān)報道等。其數(shù)據(jù)來源除了教學(xué)管理平臺和學(xué)生信息管理平臺之外，還應(yīng)包括校醫(yī)院信息管理系統(tǒng)、校內(nèi)各協(xié)會信息管理系統(tǒng)、與學(xué)生有關(guān)的校外競賽信息系統(tǒng)及相關(guān)媒體平臺。

結(jié)果性評價因素只是評價的一個方面，另一個方面是過程性評價因素。過程性評價是一個對學(xué)習(xí)過程的價值進(jìn)行建構(gòu)的過程，是伴隨學(xué)生學(xué)習(xí)過程的一種實(shí)時評價。過程性評價因素所涉及的方面更加廣泛，數(shù)據(jù)來源更為復(fù)雜。過程包括學(xué)習(xí)過程和生活過程兩個方面，從保護(hù)大學(xué)生隱私方面考慮，基于大數(shù)據(jù)的高校學(xué)生評價體系主要著眼于學(xué)生學(xué)習(xí)過程，學(xué)習(xí)過程包括兩個主要因素，即過程價值和學(xué)習(xí)者的主體參與。學(xué)習(xí)過程的價值取決于過程中的學(xué)習(xí)行為，學(xué)習(xí)過程的效果取決于學(xué)習(xí)者的主體參與程度。與學(xué)習(xí)行為和參與程度有關(guān)的數(shù)據(jù)除了來自教學(xué)管理平臺、學(xué)生信息管理平臺等數(shù)據(jù)平臺的過程類數(shù)據(jù)，還應(yīng)包括系統(tǒng)的日志文件。除此之外，還可利用智能手機(jī)的某些功能獲取相關(guān)信息。例如，學(xué)習(xí)時間內(nèi)的定位信息、活動軌跡和二維碼掃碼信息等。

目前，上述數(shù)據(jù)分散在高校不同信息系統(tǒng)中，即便是存儲在統(tǒng)一的大數(shù)據(jù)平臺上，也僅實(shí)現(xiàn)初步統(tǒng)計分析，數(shù)據(jù)沒有有效進(jìn)行整合和高效利用。數(shù)據(jù)來源分析除了要采集與評價因素直接相關(guān)的數(shù)據(jù)，還必須進(jìn)行數(shù)據(jù)挖掘，從而盡可能獲取與高校學(xué)生評價有關(guān)的全部數(shù)據(jù)。

（二）多元化問題研究

首先是評價主體多元化。傳統(tǒng)評價體系的評價主體單一，其主觀因素可能使評價結(jié)果不準(zhǔn)確。多元化的評價主體可克服單一主體造成的偏見。大數(shù)據(jù)由于其來源和適用面的廣泛性，使得參與高校學(xué)生評價主體多元化成為可能。除了教師和輔導(dǎo)員之外，學(xué)生、大數(shù)據(jù)分析工程師、教育專家、家長等相關(guān)角色都能參與到學(xué)生評價中。大數(shù)據(jù)平臺甚至能提供開放式交互方式，將學(xué)生評價公開給所有關(guān)心學(xué)生學(xué)習(xí)和成長的群體，使之成為多元化評價主體的一部分。

其次是評價目標(biāo)多元化。以往的評價體系由于數(shù)據(jù)的單一性，其評價目標(biāo)只針對單一學(xué)生群體。例如，高職學(xué)生、軟件工程專業(yè)學(xué)生等。評價目標(biāo)的多元化和全面化有助于推進(jìn)教育公平，對增加優(yōu)質(zhì)教育的覆蓋面有積極作用。

再次是評價指標(biāo)多元化。目前，高校大數(shù)據(jù)平臺上與學(xué)生評價有關(guān)的數(shù)據(jù)涉及方方面面。因此，在評價指標(biāo)的設(shè)計上，可通過將數(shù)據(jù)集合進(jìn)行聚類分析，并采用逐層分解的設(shè)計方法。一是將評價指標(biāo)分為過程性評價和結(jié)果性評價兩大類;二是對相關(guān)數(shù)據(jù)進(jìn)行聚類分析，根據(jù)分析結(jié)果在兩個大類下分別設(shè)立一級指標(biāo);三是可在一級指標(biāo)下劃分二級指標(biāo)。多元化的指標(biāo)可以為評價主體提供多角度和多層次的評價方式，評價指標(biāo)的任意組合有助于觀察和發(fā)現(xiàn)特定問題，揭示學(xué)生學(xué)習(xí)中的規(guī)律。

最后是評價結(jié)果多元化。以往的學(xué)生評價都是結(jié)果性評價，評價結(jié)果以“通過/未通過”，“優(yōu)/良/中/差”和班級排名等簡單方式給出，沒有體現(xiàn)出學(xué)生存在的問題。大數(shù)據(jù)的實(shí)時性和完備性為評價結(jié)果多元化提供可能，基于大數(shù)據(jù)的評價體系不僅可以給出評價結(jié)論、存在問題，而且能繪制每個學(xué)生的成長曲線，給出學(xué)習(xí)行為的分布、趨勢和密度等過程性數(shù)據(jù)，使得對學(xué)生的認(rèn)識和評價更為全面、客觀。

（三）評價要素的相互關(guān)系

體系是集合內(nèi)各個要素之間的相互關(guān)系。高校學(xué)生評價體系的研究要注重評價指標(biāo)和評價主體、評價指標(biāo)和數(shù)據(jù)來源等要素之間的關(guān)系。例如，可以以評價指標(biāo)為條目，建立二級指標(biāo)與數(shù)據(jù)采集方式以及評價主體之間的聯(lián)系，建立起一個層次型評價體系。

四、基于大數(shù)據(jù)的高校學(xué)生評價體系設(shè)計

基于大數(shù)據(jù)的高校學(xué)生評價體系設(shè)計，其核心是與學(xué)生有關(guān)的數(shù)據(jù)中心。圍繞這個中心，需進(jìn)行數(shù)據(jù)獲取和數(shù)據(jù)分析，然后進(jìn)行指標(biāo)設(shè)計。指標(biāo)設(shè)計依賴于數(shù)據(jù)分析的結(jié)果，最后將分析結(jié)果反饋給評價主體，由其按照評價指標(biāo)進(jìn)行學(xué)生評價。評價體系結(jié)構(gòu)如圖1所示。

（一）數(shù)據(jù)獲取

按照上文影響高校學(xué)生評價的因素和數(shù)據(jù)來源問題的分析，從分散、獨(dú)立的系統(tǒng)和平臺中對大量數(shù)據(jù)進(jìn)行挖掘與整合，基于大數(shù)據(jù)技術(shù)構(gòu)建高校學(xué)生評價數(shù)據(jù)中心。

（二）數(shù)據(jù)中心

基于大數(shù)據(jù)技術(shù)搭建的統(tǒng)一數(shù)據(jù)平臺，存儲從多渠道獲取的有關(guān)學(xué)生評價的當(dāng)前及歷史數(shù)據(jù)。此外，還需存儲數(shù)據(jù)分析的結(jié)構(gòu)和學(xué)生評價的結(jié)果用于數(shù)據(jù)持續(xù)更新。由于數(shù)據(jù)來自于不同系統(tǒng)，數(shù)據(jù)中心需對不同結(jié)構(gòu)的數(shù)據(jù)進(jìn)行轉(zhuǎn)換，并采用統(tǒng)一數(shù)據(jù)定義和存儲結(jié)構(gòu)。

（三）數(shù)據(jù)分析

采用聚類分析法、時間序列分析法、決策樹分析法、信度分析法、相關(guān)分析法、方差分析法、主成分分析法、因子分析法等數(shù)據(jù)分析方法，對數(shù)據(jù)進(jìn)行多角度分析，發(fā)現(xiàn)數(shù)據(jù)中的現(xiàn)象，并找到其背后的影響因子和發(fā)展規(guī)律，為學(xué)生評價提供堅實(shí)的數(shù)據(jù)基礎(chǔ)。

（四）分析結(jié)果

通過表格、文本、圖形直觀的甚至更為豐富的表現(xiàn)方式呈現(xiàn)分析結(jié)果，使評價主體更為高效地獲得數(shù)據(jù)中包含的信息。如，發(fā)展趨勢、分布情況、密度以及統(tǒng)計信息等。其分析結(jié)果作為學(xué)生評價的依據(jù)，相較于以往的主觀判斷和成績等數(shù)據(jù)更為全面、科學(xué)。

（五）評價指標(biāo)

與傳統(tǒng)評價體系不同，基于大數(shù)據(jù)的高校學(xué)生評價體系的評價指標(biāo)依賴于對數(shù)據(jù)進(jìn)行聚類分析，即“先有數(shù)據(jù)，再有指標(biāo)”，而并非“先有指標(biāo)，再取數(shù)據(jù)”。這種指標(biāo)設(shè)計方法使高校學(xué)生評價更為科學(xué)和客觀，避免有的指標(biāo)數(shù)據(jù)樣本太少造成評價結(jié)果偏差過大的問題。聚類分析產(chǎn)生一級指標(biāo)后，可使用因子分析法、相關(guān)分析法等方法進(jìn)一步產(chǎn)生二級評價指標(biāo)，進(jìn)而用關(guān)聯(lián)分析法和方差分析法等方法確定每個評價指標(biāo)在相關(guān)評價內(nèi)容中的權(quán)值。評價主體也可根據(jù)評價內(nèi)容的需要對評價指標(biāo)進(jìn)行調(diào)整。

（六）評價過程

評價主體可根據(jù)需要對高校學(xué)生的某一方面內(nèi)容進(jìn)行評價。值得注意的是，評價主體和評價指標(biāo)因評價內(nèi)容的不同而不同。

（七）評價結(jié)果

多元化的評價結(jié)果可以是簡單的結(jié)果數(shù)據(jù)，也可以是持續(xù)的連續(xù)數(shù)據(jù)。根據(jù)高校工程教育認(rèn)證的“持續(xù)改進(jìn)”理念，評價結(jié)果需用于持續(xù)改進(jìn)學(xué)習(xí)過程。因此，評價結(jié)果也作為原始數(shù)據(jù)的一部分存入數(shù)據(jù)中心，用于對后續(xù)評價進(jìn)行改進(jìn)。

結(jié)語

信息化建設(shè)的持續(xù)推進(jìn)和大數(shù)據(jù)時代的到來給高等教育和學(xué)生管理帶來新挑戰(zhàn)。如何利用大數(shù)據(jù)的優(yōu)勢改進(jìn)高校學(xué)生的評價，使得評價結(jié)果更為科學(xué)、全面，從而提高高等教育和高校學(xué)生管理水平是大數(shù)據(jù)在高等教育領(lǐng)域應(yīng)用中值得關(guān)注的問題。在此背景下，構(gòu)建基于大數(shù)據(jù)的高校學(xué)生評價體系，對于推動高校學(xué)生綜合素質(zhì)的培養(yǎng)，實(shí)現(xiàn)工程教育認(rèn)證以“產(chǎn)出為導(dǎo)向”的培養(yǎng)理念，都具有重要意義。

基金項目：2020年度江西省教育科學(xué)“十三五”規(guī)劃課題“大數(shù)據(jù)背景下高校學(xué)生評價體系研究與探索”，項目編號：20YB060。

作者簡介：王玨（1978-），男，安徽無為人，碩士，講師，研究方向：云計算與大數(shù)據(jù)技術(shù)。

（責(zé)任編輯 朱妍）

2160500520229