基于關(guān)聯(lián)矩陣的用戶視角教學(xué)資源庫評(píng)價(jià)模式研究

胡光明，吳群妹

(1.無錫科技職業(yè)學(xué)院 文化旅游學(xué)院， 江蘇 無錫 214028；2.無錫科技職業(yè)學(xué)院 基礎(chǔ)部， 江蘇 無錫 214028)

0 引言

2010年起，我國由教育部牽頭，引領(lǐng)政、行、企、校各方參與，建設(shè)了國家級(jí)職業(yè)教育專業(yè)教學(xué)資源庫。職業(yè)教育專業(yè)教學(xué)資源庫是“互聯(lián)網(wǎng)+教育”在高職教育領(lǐng)域的率先落地，以網(wǎng)絡(luò)信息技術(shù)為基礎(chǔ)的系統(tǒng)教學(xué)資源，能為學(xué)習(xí)者提供更豐富、全面的學(xué)習(xí)資源，提高教學(xué)水平和教學(xué)質(zhì)量，也能夠引領(lǐng)教育教學(xué)改革，支撐產(chǎn)業(yè)發(fā)展，有助于推動(dòng)職業(yè)教育公平和高質(zhì)量發(fā)展。經(jīng)過十余年的時(shí)間，目前已建設(shè)112個(gè)國家級(jí)資源庫，開發(fā)241萬余條資源，注冊用戶304萬余人，累計(jì)訪問超過6億人次。作為資源庫的教學(xué)資源使用者，用戶理應(yīng)成為高職院校教學(xué)資源庫的關(guān)注核心。然而目前從國家職業(yè)教育資源庫到省市及各高職院校的資源庫建設(shè)，仍然以資源庫的管理者為監(jiān)督和驗(yàn)收的主體，采取自上而下的實(shí)施監(jiān)控，更多注重資源數(shù)量是否達(dá)標(biāo)、技術(shù)是否合格、使用是否到位。目前在監(jiān)管體系中還沒有統(tǒng)一的用戶體驗(yàn)、評(píng)價(jià)、反饋和監(jiān)督標(biāo)準(zhǔn)。本文是以用戶需求為導(dǎo)向，以我校承建的國家職業(yè)教育專業(yè)教學(xué)資源庫建設(shè)子項(xiàng)目為研究對(duì)象，嘗試構(gòu)建高職專業(yè)教學(xué)資源庫建設(shè)效果評(píng)價(jià)的指標(biāo)體系[1]，并在建設(shè)及應(yīng)用的過程中不斷根據(jù)用戶反饋進(jìn)行修正，為實(shí)現(xiàn)以用戶為導(dǎo)向的高職教學(xué)資源庫的建設(shè)提供理論依據(jù)和實(shí)踐參考。

1 以用戶為導(dǎo)向的評(píng)價(jià)指標(biāo)體系的構(gòu)建

隨著教育資源庫的不斷推廣和應(yīng)用，用戶對(duì)于資源庫的需求也正在變得越來越高：從簡單的資源共享服務(wù)發(fā)展到資源加工、處理、共享、交流的一體化服務(wù)；從單一的資源服務(wù)發(fā)展到網(wǎng)上資源學(xué)習(xí)、下載、共享、網(wǎng)上學(xué)習(xí)互動(dòng)、網(wǎng)上教研、網(wǎng)絡(luò)課堂等整合性的資源服務(wù)。2020年初新冠疫情的爆發(fā)，一時(shí)間使得網(wǎng)絡(luò)遠(yuǎn)程教學(xué)成為世界各地各類學(xué)校的重要教學(xué)手段。在國內(nèi)高職教育的遠(yuǎn)程教學(xué)過程中，國家職業(yè)教育專業(yè)教學(xué)資源庫提供了豐富可靠的教學(xué)資源。但與此同時(shí)，遠(yuǎn)程教學(xué)過程中，由于學(xué)習(xí)者的背景層次不同，學(xué)習(xí)目的不同，學(xué)習(xí)偏好不同等原因，各類用戶對(duì)資源庫建設(shè)使用的要求和滿意度也各不相同。從終端使用及反饋的角度出發(fā)，目前迫切需要解決的問題是：高職院校專業(yè)教學(xué)資源庫的建設(shè)如何能真正做到把用戶放在首位？用戶滿意度的評(píng)價(jià)標(biāo)準(zhǔn)如何能夠科學(xué)、系統(tǒng)地實(shí)施并良性反饋于資源庫的再建設(shè)？

綜合各層級(jí)教育主管部門的要求，高職院校專業(yè)教學(xué)資源庫主要應(yīng)從資源開發(fā)與建設(shè)、資源管理與共享、教學(xué)實(shí)踐與應(yīng)用、社會(huì)服務(wù)、特色與創(chuàng)新、長效機(jī)制等方面進(jìn)行建設(shè)。而這些指標(biāo)的實(shí)現(xiàn)均離不開用戶的使用反饋和需求要求。本文結(jié)合用戶行為分析理論，就不同類型的用戶需求進(jìn)行不同維度的數(shù)據(jù)解讀，用層次分析法賦予高職院校專業(yè)資源庫指標(biāo)體系的各層級(jí)權(quán)重，進(jìn)行評(píng)價(jià)維度和指標(biāo)要素的設(shè)計(jì)。

1.1 基于用戶視角的教學(xué)資源庫建設(shè)[2]

立足于我校2018年職業(yè)教育專業(yè)教學(xué)資源庫立項(xiàng)任務(wù)“會(huì)展策劃與管理”資源庫的“會(huì)展市場調(diào)查”和“企業(yè)年會(huì)實(shí)務(wù)”兩門課程的建設(shè)，制作調(diào)查問卷。通過對(duì)436份問卷的反饋信息進(jìn)行統(tǒng)計(jì)分析，發(fā)現(xiàn)影響用戶使用資源庫的主要因素有四個(gè)，即資源內(nèi)容、技術(shù)指標(biāo)、視覺效果和使用效果。結(jié)合反饋情況，將對(duì)這些因素的具體要求總結(jié)如下：

第一，資源內(nèi)容。資源庫的教學(xué)內(nèi)容是資源庫的重中之重。內(nèi)容應(yīng)該達(dá)到基本理論概念清楚，重點(diǎn)突出，難點(diǎn)破解有方，內(nèi)容詳略得當(dāng)。教學(xué)資料規(guī)范，教學(xué)行為規(guī)范，并且設(shè)計(jì)上具有自己的特色。在教學(xué)過程中，能夠吸收新成果，反映新信息；理論聯(lián)系實(shí)際，注重素養(yǎng)教育和創(chuàng)新創(chuàng)業(yè)能力培養(yǎng)。以先進(jìn)教育思想和教學(xué)理念為指導(dǎo)，以使學(xué)習(xí)者自主學(xué)習(xí)達(dá)到最佳效果為目標(biāo)。

第二，技術(shù)指標(biāo)。資源庫的制作也非常重要，包括視頻與音頻的清晰度。視頻每個(gè)長度也要符合使用者最舒適的長度，太短內(nèi)容還沒有表達(dá)完整或者太長觀看起來太辛苦都不合適。拍攝的過程中，要求人物和板書(或其他畫面元素)同樣清晰，錄像環(huán)境應(yīng)光線充足、安靜，教師衣著整潔，講話清晰，板書清楚。音頻清晰，無交流聲或其他雜音、噪音等缺陷。

第三，視覺效果。視覺效果是攝影畫面形象給觀眾造成的視覺感受，畫面上應(yīng)該盡量做到準(zhǔn)確、鮮明、生動(dòng)，符合視覺規(guī)律。資源庫的視覺效果評(píng)價(jià)包括界面設(shè)計(jì)是否合理，媒體制作是否精細(xì)，畫面是否具有吸引力。色彩是否真實(shí)清晰，是否符合觀看者的視覺心理，聲音是否柔和等等。

第四，使用效果。使用效果也是非常重要的，如果光有制作技術(shù)、色彩畫面再美，達(dá)不到學(xué)習(xí)成效都是無用的。資源庫的建設(shè)如果能夠給使用者帶來幫助，通過學(xué)習(xí)，他們確實(shí)能夠得到提升，那么這樣的資源庫才是成功的。其中具體內(nèi)容包括是否可以調(diào)動(dòng)使用者的積極性、主動(dòng)性；相比面授課程，能否提高使用者的學(xué)習(xí)效率；在能力的培養(yǎng)方面，是否可以提高使用者分析問題和解決問題的能力。

通過調(diào)查，在資源庫的諸多指標(biāo)中，參照用戶最在意的是資源的內(nèi)容、資源庫錄制的技術(shù)指標(biāo)、觀看的視覺效果以及使用后的效果這四個(gè)指標(biāo)，對(duì)資源庫的評(píng)價(jià)指標(biāo)體系進(jìn)行初步構(gòu)建。

1.2 指標(biāo)體系的構(gòu)建[3]

在上述兩門課程通過一期驗(yàn)收并上線使用后，通過對(duì)校內(nèi)學(xué)生用戶反饋、校外社會(huì)用戶反饋、校企專家使用反饋收集相關(guān)用戶使用評(píng)價(jià)信息，將其進(jìn)行量化分析并與專業(yè)教學(xué)資源庫項(xiàng)目管理平臺(tái)監(jiān)控?cái)?shù)據(jù)進(jìn)行比對(duì)，以提出用戶評(píng)價(jià)指標(biāo)體系在建設(shè)效果評(píng)價(jià)體系中的側(cè)重點(diǎn)和權(quán)重值。具體各個(gè)指標(biāo)的權(quán)重如表1所示。

表1 教學(xué)資源庫指標(biāo)體系表

2 關(guān)聯(lián)矩陣法在指標(biāo)體系中的應(yīng)用

2.1 關(guān)聯(lián)矩陣法

關(guān)聯(lián)矩陣法是一種利用備選方案中各個(gè)評(píng)價(jià)指標(biāo)的重要程度以及指標(biāo)評(píng)價(jià)尺度進(jìn)行列表分析，根據(jù)最終算出的綜合評(píng)估數(shù)值評(píng)價(jià)出最優(yōu)的方案。關(guān)聯(lián)矩陣法[4]的主要步驟有兩個(gè)：

2.2 關(guān)聯(lián)矩陣法在資源庫評(píng)價(jià)指標(biāo)體系中的應(yīng)用

以我?，F(xiàn)有的兩門資源庫課程“會(huì)展市場調(diào)查”和“企業(yè)年會(huì)實(shí)務(wù)”為例，對(duì)建立的資源庫指標(biāo)評(píng)價(jià)體系中各個(gè)指標(biāo)進(jìn)行效用評(píng)價(jià)，設(shè)“會(huì)展市場調(diào)查”為資源庫A，“企業(yè)年會(huì)實(shí)務(wù)”為資源庫B，結(jié)果如表2所示。

表2 資源庫指標(biāo)評(píng)價(jià)表

根據(jù)對(duì)校企專家的訪問調(diào)查，得到各個(gè)評(píng)價(jià)指標(biāo)的評(píng)價(jià)得分，即評(píng)價(jià)尺度表，如表3所示。

表3 評(píng)價(jià)尺度表

再結(jié)合指標(biāo)體系表以及評(píng)價(jià)尺度表，得到關(guān)聯(lián)矩陣法計(jì)算表，如表4所示。

表4 關(guān)聯(lián)矩陣法計(jì)算表

算得兩個(gè)資源庫的綜合評(píng)價(jià)值為：m1=38/10，m2=33/10，顯然用戶更加滿意的資源庫是A，即“會(huì)展市場調(diào)查”。且由資源庫指標(biāo)評(píng)價(jià)表直接可以看出，從用戶評(píng)價(jià)的角度，對(duì)“企業(yè)年會(huì)實(shí)務(wù)”這門課的視覺效果滿意度高于“會(huì)展市場調(diào)查”，而“會(huì)展市場調(diào)查”的資源內(nèi)容的滿意度要高于“企業(yè)年會(huì)實(shí)務(wù)”。

以上僅是初步分析中相對(duì)較為突出的兩個(gè)指標(biāo)，以此為例，可根據(jù)相關(guān)數(shù)據(jù)反饋，在課程第二輪資源添加及整改過程中進(jìn)行有針對(duì)性的修正，同時(shí)關(guān)聯(lián)矩陣也可以在評(píng)價(jià)指標(biāo)、評(píng)價(jià)尺度、權(quán)重系數(shù)等各類系數(shù)中進(jìn)行動(dòng)態(tài)調(diào)整，以確定既能滿足用戶需求，又符合教學(xué)要求和技術(shù)支持的資源建設(shè)需要，從而真正提升資源庫素材建設(shè)的質(zhì)量。

構(gòu)建基于用戶視角的指標(biāo)評(píng)價(jià)體系，基本能夠區(qū)分各個(gè)資源庫在使用者心目中的滿意程度。關(guān)聯(lián)矩陣法也可以對(duì)多個(gè)資源庫進(jìn)行綜合比較，給出各個(gè)資源庫的綜合評(píng)估值，分析受用戶歡迎的資源庫的突出特質(zhì)和用戶不滿意的資源庫資源的缺欠指標(biāo)，從而進(jìn)行有針對(duì)性的修正改進(jìn)。

3 結(jié)語

本文采用關(guān)聯(lián)矩陣法采樣，對(duì)用戶反饋評(píng)價(jià)進(jìn)行了評(píng)價(jià)程度和尺度分析。由于樣本數(shù)量以及時(shí)間的局限性，本研究還停留在我校的師生以及我校現(xiàn)有的兩門在線課程上。希望后面能夠做進(jìn)一步的研究，擴(kuò)大樣本使用者范圍，區(qū)分出各個(gè)在線課程的優(yōu)劣，為更多的建設(shè)者和研究者提供更為詳實(shí)可靠的數(shù)據(jù)以資參考。

毋庸置疑，用戶滿意度理應(yīng)是一款產(chǎn)品開發(fā)或一個(gè)項(xiàng)目建設(shè)應(yīng)追求的重要指標(biāo)。但亦應(yīng)注意到，國家級(jí)高職院校專業(yè)教育資源庫所規(guī)定的教育教學(xué)及技術(shù)評(píng)價(jià)指標(biāo)，并不能因?yàn)閷?duì)用戶滿意度的單純追求而有絲毫偏廢。對(duì)“碎片化資源、結(jié)構(gòu)化課程、系統(tǒng)化設(shè)計(jì)”的頂層設(shè)計(jì)和建設(shè)規(guī)范，強(qiáng)化共享應(yīng)用的功能與制度設(shè)計(jì)，都必須在資源庫建設(shè)及評(píng)價(jià)過程中一以貫之。同時(shí)，由于職業(yè)教育資源庫有為社會(huì)學(xué)習(xí)者提供資源和服務(wù)，增強(qiáng)職業(yè)教育社會(huì)服務(wù)能力，為形成靈活開放的終身教育體系、促進(jìn)學(xué)習(xí)型社會(huì)建設(shè)提供條件和保障的功能，那么校內(nèi)外、職場內(nèi)外的不同學(xué)習(xí)者對(duì)資源庫評(píng)價(jià)的標(biāo)準(zhǔn)和要求又會(huì)有所不同，這些都將是作者后續(xù)研究的方向。