創(chuàng)業(yè)在線教育平臺評價和實證研究
——以青島市創(chuàng)業(yè)培訓(xùn)平臺為例

孫　丹，王　鑫

(青島廣播電視大學(xué)，山東　青島　266012)

隨著互聯(lián)網(wǎng)+、云計算和手機(jī)移動端的快速發(fā)展，創(chuàng)業(yè)教育的實施越來越多的依靠線上教育網(wǎng)絡(luò)平臺的支持。創(chuàng)業(yè)教育網(wǎng)絡(luò)平臺是為創(chuàng)業(yè)者提供線上創(chuàng)業(yè)知識的平臺，以提供創(chuàng)業(yè)培訓(xùn)課程為主，同時提供創(chuàng)業(yè)動態(tài)資訊、創(chuàng)業(yè)測評和創(chuàng)業(yè)政策查詢等內(nèi)容。該類平臺的核心特征是以學(xué)習(xí)者為中心，吸引學(xué)生在平臺學(xué)習(xí)并提高學(xué)習(xí)效果是該類平臺設(shè)計的主要目的。因此，一方面要提高創(chuàng)業(yè)教育網(wǎng)絡(luò)平臺課程內(nèi)容的精準(zhǔn)性，另一方面，還要通過內(nèi)容與外觀的設(shè)計，增強(qiáng)課程的可視化效果以及互動性。此外，創(chuàng)業(yè)教育網(wǎng)絡(luò)平臺的學(xué)習(xí)者主要是社會各類創(chuàng)業(yè)人士，包含在校大學(xué)生、小微企業(yè)主、失業(yè)人員等。該類群體的特點是學(xué)習(xí)水平參差不齊，學(xué)習(xí)時間零碎，對網(wǎng)絡(luò)平臺的易用性以及課程的普及性要求較高。

在國家“大眾創(chuàng)業(yè)，萬眾創(chuàng)新”的號召下，針對創(chuàng)業(yè)教育設(shè)計的網(wǎng)絡(luò)平臺如雨后春筍般涌現(xiàn)，以“創(chuàng)業(yè)教育網(wǎng)絡(luò)平臺/網(wǎng)站”為關(guān)鍵字進(jìn)行百度搜索，找到相關(guān)結(jié)果約586萬個。因此，建立一個科學(xué)的線上創(chuàng)業(yè)教育網(wǎng)絡(luò)平臺評價模型十分有必要，一方面能幫助創(chuàng)業(yè)者在眾多的創(chuàng)業(yè)教育網(wǎng)絡(luò)平臺中篩選優(yōu)質(zhì)網(wǎng)站，提高學(xué)習(xí)效率，節(jié)約寶貴時間；另一方面也能為網(wǎng)站運營者提供一個客觀的評價結(jié)果，便于自身網(wǎng)站改進(jìn)，從而提升網(wǎng)站品質(zhì)，進(jìn)一步推動大眾創(chuàng)業(yè)，萬眾創(chuàng)新。

一、創(chuàng)業(yè)教育網(wǎng)絡(luò)平臺指標(biāo)體系的建立

網(wǎng)站評價是評價主體根據(jù)既定的評價目標(biāo)，依據(jù)科學(xué)的評價原理，運用有效的評價方法，在完善的評價制度保障下制定合理的評價標(biāo)準(zhǔn)，構(gòu)建切實可行的評價指標(biāo)體系，對網(wǎng)站進(jìn)行選擇和評估，以確定其特征、質(zhì)量和價值。

在一般性網(wǎng)站評價指標(biāo)方面，Abdel Fattah M，Galal Edeen G H．(2008)在評價電子政務(wù)網(wǎng)站時，從用戶對網(wǎng)站服務(wù)的滿意度方面出發(fā)，設(shè)計了內(nèi)容、功能設(shè)計和可用性三方面指標(biāo)。M.A.Storey,B.Phillips(2002)在評價以學(xué)習(xí)工具為主的網(wǎng)站時，提出了易用性、可視性、互動性、信息一致性等四方面指標(biāo)。Hassan S,Li F(2005)在文獻(xiàn)整理的基礎(chǔ)上，確定了46項基礎(chǔ)指標(biāo)，可以分為七類：內(nèi)容、可獲得性、外觀、互動性、一致性、導(dǎo)航性和媒體使用。

王知津，李明珍(2006)評價中文社會科學(xué)網(wǎng)站提出信息內(nèi)容、用戶服務(wù)、網(wǎng)站結(jié)構(gòu)、技術(shù)支持和使用情況五個一級指標(biāo)，設(shè)計27個二級指標(biāo)。范佳佳，葉繼元(2014)分析了國內(nèi)外68篇網(wǎng)站評價的文章，總結(jié)出一種全評價的評價模式，評價目標(biāo)包括網(wǎng)站可信度、網(wǎng)站易訪問性、網(wǎng)站效用和網(wǎng)站可用性四個方面，以此總結(jié)的評價指標(biāo)包括網(wǎng)站外部特征、內(nèi)容、信息組織性能、網(wǎng)站服務(wù)情況、其他等六個方面。白銀，曹梅(2011)分析了29篇教育教學(xué)網(wǎng)站的評價文章，總結(jié)出網(wǎng)站內(nèi)容、設(shè)計、技術(shù)和側(cè)重內(nèi)容四方面的指標(biāo)。趙文靜，曹忠(2007)在進(jìn)行教育網(wǎng)站評價時除考慮內(nèi)容維度、藝術(shù)維度、技術(shù)維度和發(fā)展維度外，加入教學(xué)維度指標(biāo)，將教學(xué)目標(biāo)、教學(xué)方法、資源支持納入評價范圍。張凱勇(2007)首次將教材合適性、教師控制、學(xué)生控制三個指標(biāo)作為教育層面的二級指標(biāo)，注重對課程、教師進(jìn)行評價。其余指標(biāo)包括網(wǎng)站操作使用方便性、可及性、多媒體設(shè)計、網(wǎng)站基本資料、合作及互動性等。

綜合來看，在評價一般網(wǎng)站時重點考慮的指標(biāo)有網(wǎng)站內(nèi)容、設(shè)計、技術(shù)和互動性四方面。結(jié)合創(chuàng)業(yè)教育網(wǎng)站的特點以及受教育群體的特殊性，加入教育相關(guān)內(nèi)容的評價。本文將創(chuàng)業(yè)教育網(wǎng)絡(luò)平臺的評價指標(biāo)分為內(nèi)容、設(shè)計、技術(shù)支持、用戶參與程度四個一級指標(biāo)。其中，內(nèi)容維度包含內(nèi)容深度、廣度、準(zhǔn)確性、權(quán)威性和時效性五個二級指標(biāo)，設(shè)計維度包含界面友好程度和版面設(shè)計兩個二級指標(biāo)，技術(shù)支持包含穩(wěn)定性和傳輸速度兩個二級指標(biāo)，用戶參與程度包含互動性和使用頻率兩個二級指標(biāo)。此外，四個一級指標(biāo)以外，創(chuàng)新性增加“用戶感知價值”這一綜合指標(biāo)。具體如表一所示。

表一：創(chuàng)業(yè)教育網(wǎng)絡(luò)平臺評價指標(biāo)

(一)內(nèi)容維度

內(nèi)容維度指標(biāo)是對網(wǎng)站信息進(jìn)行評價的指標(biāo)。創(chuàng)業(yè)教育網(wǎng)絡(luò)平臺的信息以創(chuàng)業(yè)課程為主，因此二級指標(biāo)主要針對課程的內(nèi)容進(jìn)行設(shè)計。具體分為內(nèi)容廣度、內(nèi)容深度、準(zhǔn)確性、權(quán)威性和時效性5個二級指標(biāo)。

內(nèi)容廣度：知識及資訊內(nèi)容的橫向維度是否能夠涵蓋大多數(shù)的創(chuàng)業(yè)知識和創(chuàng)業(yè)信息，課程的設(shè)置與規(guī)劃是否合理。

內(nèi)容深度：重點課程內(nèi)容的縱向維度是否能夠深入解析，是否能夠提供有內(nèi)涵的知識。

準(zhǔn)確性：知識與資訊的內(nèi)容是否正確，有無錯誤。

權(quán)威性：內(nèi)容的來源是否有公信力，主講教師專業(yè)化程度如何。

時效性：能否及時更新課程內(nèi)容，能否及時上傳資訊。

(二)設(shè)計維度

設(shè)計維度是網(wǎng)站評價的一般性通用指標(biāo)，指網(wǎng)站美化程度與易用性的程度。包含界面友好程度和版面設(shè)計兩個二級指標(biāo)。

界面友好程度：指網(wǎng)站界面讓學(xué)習(xí)者感覺舒適，符合大眾閱覽習(xí)慣，操作簡便，資源查找方便。

版面設(shè)計：指網(wǎng)站頁面設(shè)計美觀大方，清晰明了，體現(xiàn)時代性創(chuàng)業(yè)特征。

(三)技術(shù)支持維度

在技術(shù)層面包含穩(wěn)定性和傳輸速度兩個二級指標(biāo)。

穩(wěn)定性：指網(wǎng)站鏈接的信息正確，鏈接穩(wěn)定，沒有閃退現(xiàn)象。

傳輸速度：指傳輸速度快，鏈接打開速度快，不會讓學(xué)習(xí)者長時間等待。

(四)用戶參與程度維度

用戶參與程度考察網(wǎng)站與學(xué)習(xí)者的互動程度，是學(xué)習(xí)者是否滿意該網(wǎng)站的最直接體現(xiàn)指標(biāo)。包含互動性和使用頻率兩個二級指標(biāo)。

互動性：指網(wǎng)站留有討論區(qū)，教師積極引導(dǎo)學(xué)習(xí)者網(wǎng)上討論，并及時回復(fù)留言。

使用頻率：指查找創(chuàng)業(yè)信息時，是否能長期使用該創(chuàng)業(yè)網(wǎng)站。以及每月使用該網(wǎng)站的頻次。

(五)用戶感知價值

“感知價值”是指客戶對產(chǎn)品屬性、效能以及使用結(jié)果的偏好和評價?！坝脩舾兄獌r值”指標(biāo)主要指從使用者自身角度出發(fā)，認(rèn)為產(chǎn)品的效能對自己的滿足程度，它獨立于四大一級指標(biāo)之外，是一個綜合考量指標(biāo)。

在以往的網(wǎng)站評價中，僅僅是設(shè)計一套自上而下的指標(biāo)體系，按指標(biāo)體系打分后得到最終得分。而文章往往忽略對最終得分的分析，最終得分是否符合網(wǎng)站真實水平有待商榷。因此，在對創(chuàng)業(yè)教育網(wǎng)絡(luò)平臺網(wǎng)站的指標(biāo)進(jìn)行設(shè)計時，增加“用戶感知價值”這一指標(biāo)，該指標(biāo)由平臺使用者在做調(diào)查問卷時直接打分。設(shè)計此指標(biāo)的目的是將根據(jù)指標(biāo)體系得來的最終得分與用戶感知價值得分相對比，以此來判斷指標(biāo)體系的合理性，并作為調(diào)節(jié)評價體系的依據(jù)。

二、評價方法選擇和指標(biāo)權(quán)重的確定

(一)評價方法選擇

在確定評價指標(biāo)之后，應(yīng)選擇合適的評價方法對網(wǎng)絡(luò)平臺進(jìn)行評定。在線平臺評價的方法有很多，目前使用比較多的層次分析法、網(wǎng)絡(luò)鏈接分析方法、經(jīng)濟(jì)管理學(xué)方法、數(shù)學(xué)分析法和輔助工具五種方法，其中層次分析法和模糊綜合評判方法是最為成熟，應(yīng)用廣泛的評價方法。

層次分析法(Analytic Hierarchy Process，簡稱AHP)通過指標(biāo)間的兩兩比較，確定指標(biāo)的相對重要性，從而進(jìn)行指標(biāo)間的優(yōu)劣排序。而模糊綜合評價法(Fuzzy Comprehensive Evaluation Method，簡稱FCE)應(yīng)用模糊變換和最大隸屬度原理，考慮被評價事物的各個因素，往往與層次分析法相結(jié)合，被廣泛應(yīng)用于定性與定量的綜合評價中。本文首先采用層次分析法確定各個指標(biāo)的權(quán)重，然后采用模糊綜合評價進(jìn)行最終結(jié)果的評定分析。

(二)指標(biāo)權(quán)重的確定

本文采用Expert Choice 11.5軟件對數(shù)據(jù)進(jìn)行預(yù)處理和權(quán)重計算。Export Choice是專門針對AHP開發(fā)的軟件，使用簡單，計算準(zhǔn)確。也可用MATLAB或Excel實現(xiàn)計算過程。本次邀請15位專家對權(quán)重進(jìn)行比較，包括本校創(chuàng)業(yè)導(dǎo)師6位，技術(shù)開發(fā)人員2位，美工2位，網(wǎng)絡(luò)教育專家5位。

Expert Choice將標(biāo)度分為1-9，代表“同等重要”-“極度重要”。具體標(biāo)度表示程度見表二。

表二：評價標(biāo)度表示程度說明

專家按照標(biāo)度程度進(jìn)行指標(biāo)間的兩兩比較，先對一級指標(biāo)進(jìn)行對比，再對各一級指標(biāo)下的二級指標(biāo)進(jìn)行對比。用Expert Choice計算的最終的指標(biāo)權(quán)重值如下表三。

表三：用Expert Choice計算指標(biāo)權(quán)重數(shù)值表

總的一致性系數(shù)C.I.=0.03<0.1，各二級指標(biāo)的一致性系數(shù)都小于0.1，均通過一致性檢驗。從權(quán)重表中可以看出，內(nèi)容和設(shè)計占總權(quán)重的70%以上，其中內(nèi)容占比達(dá)一半以上，說明在教育類網(wǎng)站中內(nèi)容的重要地位,這也與以往的研究是相一致的。

(三)計算評價結(jié)果

由評價指標(biāo)體系確定了模糊綜合評價中的風(fēng)險因素的集合，U={U1，U2，U3，U4}，與對應(yīng)的一級指標(biāo)是相一致的。其中各單因素子集分別為：

U1={U11，U12，U13，U14，U15}；

U2={U21，U22}；

U3={U31，U32}；

U4={U41，U42}；

與對應(yīng)的二級指標(biāo)是相一致的。

模糊綜合評價的評判者為該教育平臺的使用者，因此，風(fēng)險評價集采用簡單的4級評價，即V={V1，V2，V3，V4}。其中V1表示“很好”，V2表示“好”，V3表示“一般”，V4表示“不好”。模糊綜合評價法的計算原理簡單，可采用MATLAB或Excel來實現(xiàn)數(shù)據(jù)處理與最終結(jié)果的計算。

三、創(chuàng)業(yè)教育網(wǎng)絡(luò)平臺評價的實證研究

青島市創(chuàng)業(yè)教育網(wǎng)絡(luò)平臺(http://www.touke.net.cn/)，又稱頭客網(wǎng)，是針對青島市創(chuàng)業(yè)教育專門設(shè)計的線上平臺。平臺網(wǎng)站以學(xué)生為中心進(jìn)行頁面設(shè)計，以建構(gòu)主義為基本教學(xué)原則進(jìn)行課程設(shè)計，使學(xué)生積極主動的構(gòu)建知識模型，為學(xué)生們提供創(chuàng)業(yè)教育能力與知識的交流平臺、學(xué)習(xí)平臺，并為學(xué)生的學(xué)習(xí)提供深入的支持與引導(dǎo)。

(一)調(diào)查問卷與數(shù)據(jù)處理

創(chuàng)業(yè)教育網(wǎng)絡(luò)平臺是以學(xué)習(xí)者為中心的網(wǎng)站，因此，平臺的評判者確定為該平臺的使用者。根據(jù)評價指標(biāo)體系設(shè)計調(diào)查問卷，每個二級指標(biāo)對應(yīng)1～2個小問題，根據(jù)風(fēng)險評價集采用4級評價，并給予選項的詳細(xì)解釋，以提高評價的準(zhǔn)確性。平臺從上線到完成測評歷時7個月，最終收回有效調(diào)查問卷1007份。對問卷結(jié)果進(jìn)行統(tǒng)計，并用Excel進(jìn)行最終的模糊綜合評價計算。統(tǒng)計數(shù)據(jù)與計算結(jié)果見表四。

(二)結(jié)果分析

根據(jù)最大隸屬度原則，被評價對象的評價結(jié)果取決于歸一化向量的最大分量。歸一化后評價向量為Y1=(0.846，0.123,0.023,0.008)，最大分量為0.846，對應(yīng)的評價等級為“很好”。因此，采用模糊綜合評價法對青島市創(chuàng)業(yè)教育網(wǎng)絡(luò)平臺的評價結(jié)果為“很好”。

另一方面，經(jīng)統(tǒng)計，由平臺使用者對的“用戶感知價值”項進(jìn)行評價，(“很好”，“好”，“一般”，“不好”)統(tǒng)計數(shù)據(jù)為(836,142,28,1)，歸一化處理后Y2=(0.830,0.141,0.028,0.001)，同樣根據(jù)最大隸屬度原則，對應(yīng)的評價等級為“很好”。因此，不論是由層次分析法與模糊綜合評價法進(jìn)行的評價，還是由使用者直接給出的感知評價，結(jié)果都是“很好”。由此可得，此評價體系設(shè)計與真實結(jié)果相近。

四、研究結(jié)論

在指標(biāo)的確定上，參考以往文獻(xiàn)并根據(jù)教育類網(wǎng)站特征進(jìn)行指標(biāo)設(shè)計，取決于指標(biāo)設(shè)計者，可選擇性較大。為了減少這種不確定性，本文采取的措施是增加一個“用戶感知價值”項，將兩者的結(jié)果進(jìn)行對比。如果對比結(jié)果差距較大，則要重新調(diào)整指標(biāo)及權(quán)重；如果差距較小，則驗證了指標(biāo)體系的科學(xué)性。除此方法外，在指標(biāo)的設(shè)計方面，還可以采用主成分分析法進(jìn)一步降低指標(biāo)選擇的不確定性。盡可能多的選擇各種評價指標(biāo)，用主成分分析法進(jìn)行歸因處理，根據(jù)數(shù)據(jù)處理結(jié)果得到主成分指標(biāo)，作為指標(biāo)體系的確定指標(biāo)。

在評判者的選擇上，模糊綜合評價的評判者創(chuàng)新性的邀請了平臺的使用者。這一方面符合教育類網(wǎng)站的特征，另一方面可以突破評判者的數(shù)量瓶頸，得到更大的樣本容量。但是，單一由使用者評價會導(dǎo)致結(jié)果的片面性，因此，在后續(xù)的改進(jìn)上，會邀請教育類、網(wǎng)站設(shè)計類等專家進(jìn)行綜合評定，以使評價結(jié)果更具權(quán)威性。

表四：模糊綜合評價表

青島市創(chuàng)業(yè)教育網(wǎng)絡(luò)平臺承接的是青島市的網(wǎng)上創(chuàng)業(yè)培訓(xùn)，所以計劃繼續(xù)采用此評價體系與方法進(jìn)行2017年度的評價任務(wù)，將下一期評價結(jié)果與本文結(jié)果進(jìn)行差異性對比分析，以此來發(fā)現(xiàn)該網(wǎng)站的待改進(jìn)部分，以提高該平臺的教育水平。

參考文獻(xiàn)：

[1]Abdel-Fattah M，Galal-Edeen G H．Towards flexible evaluation for e-government websites quality: A multi-perspective evaluation framework[C]//2008 Proceedings of the 8th European Conference on E-government．Kidmore End，2008.

[2]Hassan S, Li F．Evaluating the usability and content usefulness of web sites: A Benchmarking Approach[J].Journal of Electronic Commerce in Organizations，2005,3(2):46-67．

[3]王知津，李明珍．網(wǎng)站評價指標(biāo)體系的構(gòu)建方法與過程[J].圖書與情報，2006，(03)：51-58．

[4]范佳佳，葉繼元．21世紀(jì)以來網(wǎng)站評價研究進(jìn)展與趨勢[J].中國圖書館學(xué)報，2014，(02):92-106．

[5]白銀，曹梅．國內(nèi)教育網(wǎng)站評價研究概述[J].現(xiàn)代教育技術(shù)，2011，21(01):107-111．

[6]趙文靜，曹忠．我國教育網(wǎng)站評價存在的問題及評價指標(biāo)體系的初步確立[J].網(wǎng)絡(luò)通訊與安全，2007，(21):727-729．