基于知識(shí)圖譜的職業(yè)能力達(dá)成度可視化評(píng)測(cè)系統(tǒng)設(shè)計(jì)與實(shí)現(xiàn)

劉力銘

(廣州城市職業(yè)學(xué)院 機(jī)電工程系，廣東 廣州 510405)

迄今為止，中國職業(yè)教育人才培養(yǎng)質(zhì)量評(píng)估主要是通過學(xué)校內(nèi)部的教學(xué)質(zhì)量評(píng)價(jià)和職業(yè)資格考試(鑒定)實(shí)現(xiàn)的，采用的評(píng)價(jià)指標(biāo)體系達(dá)不到大規(guī)模質(zhì)量監(jiān)控的信度和效度要求，無法藉此進(jìn)行校際間和區(qū)域間的比較[1]。由于相關(guān)技術(shù)支持不足，評(píng)價(jià)結(jié)果無法全面反映人才培養(yǎng)的質(zhì)量，更沒有建立起對(duì)評(píng)價(jià)結(jié)果與人才培養(yǎng)模式間對(duì)應(yīng)關(guān)系的解釋模型[2]。即使目前社會(huì)影響很大的技能大賽，在大規(guī)模推廣時(shí)也遇到了經(jīng)濟(jì)成本以及評(píng)分者間信度和試題效度等技術(shù)問題[3]。

在教育質(zhì)量監(jiān)控體系中，基于知識(shí)圖譜的職業(yè)能力達(dá)成度研究與應(yīng)用對(duì)職業(yè)教育質(zhì)量保障體系建設(shè)具有重要的參考價(jià)值。開展科學(xué)的職業(yè)能力測(cè)評(píng)(包括職業(yè)能力測(cè)評(píng)模型、測(cè)評(píng)實(shí)施方案以及測(cè)評(píng)結(jié)果分析研究)，科學(xué)診斷學(xué)生職業(yè)能力、職業(yè)承諾和職業(yè)認(rèn)同感的發(fā)展水平，將不同地區(qū)、不同院校間的課程與教學(xué)質(zhì)量進(jìn)行比較，可以獲得人才培養(yǎng)質(zhì)量的準(zhǔn)確信息和重要參數(shù)，為各級(jí)政府制定政策提供依據(jù)，從而提高職業(yè)教育體系設(shè)計(jì)和教育質(zhì)量控制水平，為在職業(yè)教育領(lǐng)域建立“能夠迅速提醒決策者及時(shí)糾正任何不利趨勢(shì)”(PISA 定義)的質(zhì)量保障機(jī)制奠定方法論和技術(shù)基礎(chǔ)[4]。

基于知識(shí)圖譜的職業(yè)能力達(dá)成度可視化評(píng)測(cè)系統(tǒng)為有效協(xié)助高職院校學(xué)生了解自我職業(yè)規(guī)劃發(fā)展方向，強(qiáng)化專業(yè)與就業(yè)職業(yè)能力，結(jié)合職業(yè)規(guī)劃探索及職業(yè)能力診斷，透過自我診斷，針對(duì)能力缺口進(jìn)行學(xué)習(xí)，提高職場(chǎng)競(jìng)爭(zhēng)力。針對(duì)職業(yè)興趣量表的測(cè)驗(yàn)水平提升計(jì)劃共有下列幾項(xiàng)目標(biāo)：

進(jìn)行職業(yè)興趣量表的項(xiàng)目分析、信度分析與效度評(píng)鑒。對(duì)于題目質(zhì)量進(jìn)行診斷，必要時(shí)進(jìn)行修題，確保量表題目的表面效度。

建構(gòu)職業(yè)興趣量表的雙重計(jì)分系統(tǒng)，亦即16個(gè)專業(yè)興趣傾向分?jǐn)?shù)系統(tǒng)與6類職業(yè)性格取向分析系統(tǒng)。

建立5個(gè)專業(yè)職業(yè)興趣索引。包括16個(gè)專業(yè)與目前高職校院科系對(duì)照索引，16個(gè)專業(yè)與Holland職業(yè)性格對(duì)照索引。

一、研究?jī)?nèi)容

(一)職業(yè)興趣診斷與興趣量表關(guān)聯(lián)性分析

依據(jù)國內(nèi)產(chǎn)業(yè)及職業(yè)狀況歸納出16大職業(yè)規(guī)劃種類及20項(xiàng)就業(yè)途徑。興趣診斷內(nèi)容則參考SCCI的興趣診斷(Career Cluster Interest Survery)，包括三種問項(xiàng)“我最喜歡哪些活動(dòng)”“我認(rèn)為自己有哪些特質(zhì)”“我喜歡哪些科目”，由受評(píng)者自我評(píng)量，選擇自己認(rèn)為最適合的職業(yè)規(guī)劃種類項(xiàng)目(可復(fù)選或不選)，藉由比較其強(qiáng)弱點(diǎn)，得出個(gè)人最感興趣的職業(yè)類型范圍[5]。

相較于國內(nèi)的高職入學(xué)考試中心興趣量表、生涯興趣量表及坊間常用量表，以Holland理論為基礎(chǔ)發(fā)展出的興趣量表與本計(jì)劃的興趣診斷略有不同。因此，本計(jì)劃將先進(jìn)行相關(guān)量表的整合分析，選定國內(nèi)相關(guān)興趣量表，作為本計(jì)劃的職業(yè)興趣診斷量表平行測(cè)量參照，然后進(jìn)行學(xué)生樣本抽樣，進(jìn)行施測(cè)。執(zhí)行關(guān)聯(lián)性研究統(tǒng)計(jì)分析，界定16種職業(yè)規(guī)劃類型與RIASEC(效標(biāo))關(guān)聯(lián)性。最后產(chǎn)出基于知識(shí)圖譜的高職職業(yè)能力診斷的16種職業(yè)規(guī)劃類型與Holland RIASEC的關(guān)聯(lián)性研究報(bào)告。

(二)基于知識(shí)圖譜的職業(yè)能力達(dá)成度可視化評(píng)測(cè)系統(tǒng)

配合本計(jì)劃職業(yè)能力分析部分，對(duì)在職人士的問卷調(diào)查結(jié)果回收后，將針對(duì)計(jì)劃職業(yè)能力架構(gòu)進(jìn)行分析。分析方向包含1份基本職業(yè)能力分析、1份興趣診斷分析、20個(gè)就業(yè)途徑下的專業(yè)職業(yè)能力分析，并進(jìn)行數(shù)據(jù)分析及報(bào)告的撰寫。針對(duì)數(shù)據(jù)分析，除預(yù)定的分析計(jì)劃外，數(shù)據(jù)分析評(píng)估團(tuán)隊(duì)將會(huì)另外執(zhí)行剖面分析。概述如下：

1. 職業(yè)能力分析部分

分為基本職業(yè)能力與專業(yè)職業(yè)能力兩部分：

(1)基本職業(yè)能力分析項(xiàng)目：

①因素分析，檢查基本職業(yè)能力向度的適應(yīng)性；

②Cronbach α分析，刪除低向度Cronbach α值的題目；

③統(tǒng)計(jì)檢定(如：?jiǎn)我粯颖総檢定檢查該項(xiàng)基本職業(yè)能力的“常用程度”以及“影響工作績(jī)效的程度”是否顯著大于量表的中位數(shù))，以確定該項(xiàng)職業(yè)能力確為常用且重要的基本職業(yè)能力；

④建立各職業(yè)規(guī)劃類型的基本職業(yè)能力剖面圖。

(2)專業(yè)職業(yè)能力分析項(xiàng)目：

① 檢查子項(xiàng)的折半信度：將該就業(yè)途徑下專業(yè)職業(yè)能力題目按單雙數(shù)拆解，計(jì)算其相關(guān)系數(shù)以檢查其內(nèi)部一致性信度。

②單一樣本t檢定：檢查由在職人士評(píng)定的每一項(xiàng)專業(yè)職業(yè)能力的“常用程度”以及“影響工作績(jī)效的程度”是否顯著大于量表的中位數(shù)，刪除“常用程度”及“影響工作績(jī)效的程度”皆不顯著的子項(xiàng)，藉以確認(rèn)專業(yè)職業(yè)能力子項(xiàng)的內(nèi)容效度。

2.興趣子項(xiàng)分析項(xiàng)目

(1)分析資料中“我最喜歡哪些活動(dòng)”“我認(rèn)為自己有哪些特質(zhì)”“我喜歡哪些科目”的評(píng)分，以其評(píng)分結(jié)果進(jìn)行統(tǒng)計(jì)檢定(如：將樣本以“對(duì)目前工作感興趣的程度”排序，去除第一四分位數(shù)以下的樣本，進(jìn)行單一樣本t檢定，評(píng)分是否顯著高于量表的中位數(shù))，以確認(rèn)本職業(yè)興趣診斷所列的活動(dòng)、特質(zhì)及學(xué)科科目與該職業(yè)規(guī)劃類型的關(guān)聯(lián)性。

(2)將全數(shù)樣本納入分析，以自評(píng)項(xiàng)目“個(gè)人對(duì)目前工作滿意程度”“主管對(duì)您的工作表現(xiàn)滿意程度”“我認(rèn)為我能比其他同事表現(xiàn)更好”等為依變項(xiàng)，樣本評(píng)定的“我最喜歡哪些活動(dòng)”“我認(rèn)為自己有哪些特質(zhì)”“我喜歡哪些科目”為獨(dú)變項(xiàng)，以回歸分析檢查各興趣相關(guān)的活動(dòng)與特質(zhì)對(duì)工作滿意度及績(jī)效表現(xiàn)的解釋量，以檢驗(yàn)其效標(biāo)關(guān)聯(lián)效度。

二、項(xiàng)目設(shè)計(jì)

(一)項(xiàng)目量表設(shè)計(jì)

基于上述的研究動(dòng)機(jī)，本研究的具體工作主要透過數(shù)據(jù)分析方式，了解基于知識(shí)圖譜的高職職業(yè)能力診斷的職業(yè)興趣量表與全國職業(yè)能力測(cè)評(píng)中心進(jìn)行信、效度的檢驗(yàn)與分析，同時(shí)放入O*NET的工作價(jià)值觀探索量表作為效標(biāo)參照。因此，數(shù)據(jù)搜集方式為紙本問卷法，資料搜集后，將進(jìn)行信、效度的檢查，并依數(shù)據(jù)分析出基于知識(shí)圖譜的高職職業(yè)能力診斷職業(yè)興趣量表中的5類職業(yè)類型與Holland的RIASEC關(guān)聯(lián)程度。

(二)項(xiàng)目研究對(duì)象設(shè)計(jì)

基于知識(shí)圖譜的高職職業(yè)能力診斷主要的使用者為高職校院的學(xué)生，因此在對(duì)象選取上以高職校院的在學(xué)學(xué)生為主，研究設(shè)計(jì)如表1，抽樣計(jì)劃如表2。為減輕填答者在填答上的負(fù)擔(dān)，本研究抽取至2018年10月31日止已受測(cè)過基于知識(shí)圖譜的高職職業(yè)能力診斷職業(yè)興趣量表的樣本為研究對(duì)象。并配合5類職業(yè)類型中歸納出的20個(gè)就業(yè)途徑，先列出20個(gè)就業(yè)途徑所代表的系所，再依據(jù)5類職業(yè)類型隨機(jī)抽取其中一個(gè)科系，預(yù)計(jì)每類抽取約160位，總施測(cè)人數(shù)約800人。此外，為求出基于知識(shí)圖譜的高職職業(yè)能力診斷職業(yè)興趣量表的再測(cè)信度，另抽取兩科系約80人，進(jìn)行基于知識(shí)圖譜的高職職業(yè)能力診斷職業(yè)興趣量表的再測(cè)信度。

表1 研究設(shè)計(jì)表

本研究將依照高職院校的特性進(jìn)行分層叢集取樣(stratified cluster sampling)，除依據(jù)公辦高職校院與民辦高職校院比例、學(xué)校類型比例之外，還考慮男女比例與地區(qū)比例(北、中、南、東)等進(jìn)行樣本抽樣(表2)。

表2 抽樣計(jì)劃

三、項(xiàng)目應(yīng)用

(一)職業(yè)興趣量表可視化

在基于知識(shí)圖譜的職業(yè)能力達(dá)成度可視化評(píng)測(cè)系統(tǒng)的“職業(yè)興趣量表”部分，由受評(píng)者透過“我最喜歡哪些活動(dòng)”“我認(rèn)為自己有哪些特質(zhì)”“我喜歡哪些科目”，選擇自己認(rèn)為最適合的項(xiàng)目(可復(fù)選或不選)，以找出自身對(duì)不同職業(yè)類型的興趣強(qiáng)弱。此外，在“職能診斷測(cè)驗(yàn)”部分，則透過以各職業(yè)類型為基礎(chǔ)的職能項(xiàng)目，并整合各產(chǎn)業(yè)專家意見，針對(duì)各專業(yè)的重要工作，歸納其所需具備的職能 (包含知識(shí)技能)，作為整體系統(tǒng)診斷、建議、咨詢及輔導(dǎo)所需之內(nèi)涵依據(jù)。以此診斷學(xué)生所具備的共通職能與專業(yè)職能，以協(xié)助學(xué)生了解個(gè)人競(jìng)爭(zhēng)力。

為了使職業(yè)興趣的探索能夠與前述16個(gè)專業(yè)生涯相互匹配，基于知識(shí)圖譜的職業(yè)能力達(dá)成度可視化評(píng)測(cè)系統(tǒng)的職業(yè)興趣量表的計(jì)分，也分別對(duì)應(yīng)成16個(gè)生涯群組(career clusters)，在“我最喜歡哪些活動(dòng)”“我認(rèn)為自己有哪些特質(zhì)”“我喜歡哪些科目”三部分的得分進(jìn)行加總，得到16個(gè)專業(yè)量尺得分，本案稱之為CC量尺(圖1)。

圖1 基于知識(shí)圖譜的職業(yè)能力達(dá)成度可視化評(píng)測(cè)系統(tǒng)職業(yè)興趣量表的CC量尺求出之得分狀況與雷達(dá)圖

表3 基于知識(shí)圖譜的職業(yè)能力達(dá)成度可視化評(píng)測(cè)系統(tǒng)的H量尺間相關(guān)系數(shù)(N=672)

(二)Holland分類量尺(H量尺)的分量表可視化

基于知識(shí)圖譜的職業(yè)能力達(dá)成度可視化評(píng)測(cè)系統(tǒng)題目的RIASEC碼的相關(guān)系數(shù)分析中(N=672)發(fā)現(xiàn)，在六碼的高度關(guān)聯(lián)的相關(guān)系數(shù)達(dá)0.145～0.532，中度關(guān)聯(lián)的相關(guān)系數(shù)達(dá)0.346～0.003，低度關(guān)聯(lián)的相關(guān)系數(shù)則為-0.037～0.077(表3、圖2)。

圖2 基于知識(shí)圖譜的職業(yè)能力達(dá)成度可視化評(píng)測(cè)系統(tǒng)的H量尺所對(duì)應(yīng)的六角形模式關(guān)系(N=672)

四、結(jié)論

系統(tǒng)職業(yè)興趣量表與當(dāng)代主流興趣測(cè)驗(yàn)具有高度的可連結(jié)性，在理論與實(shí)際層面均可與Holland理論兼容。

系統(tǒng)職業(yè)興趣量表以16個(gè)專業(yè)進(jìn)行個(gè)專業(yè)興趣量尺計(jì)分，符合O*NET系統(tǒng)之職業(yè)生涯群集(career cluster)的分類精神，可作為系統(tǒng)的分流指針。

系統(tǒng)職業(yè)興趣量表以Holland的6項(xiàng)職業(yè)興趣進(jìn)行H量尺計(jì)分，可連結(jié)當(dāng)代生涯發(fā)展之主流思想與輔導(dǎo)實(shí)際，作為系統(tǒng)加值應(yīng)用的新指標(biāo)。

系統(tǒng)職業(yè)興趣量表，不論是個(gè)專業(yè)興趣量尺(CC量尺)或Holland計(jì)分量尺(H量尺)，都具有良好的信度，KR20信度皆達(dá)0.70水平，跨族群亦具有高度信度穩(wěn)定性。

系統(tǒng)職業(yè)興趣量表的信度具有成熟效果，高年級(jí)受測(cè)者的作答質(zhì)量較低年級(jí)受測(cè)者為優(yōu)。

系統(tǒng)職業(yè)興趣量表，經(jīng)過專家咨詢、題本修題、量表對(duì)應(yīng)、理論關(guān)聯(lián)等各項(xiàng)處理后，能夠與Holland體系及O*NET系統(tǒng)鏈接，在內(nèi)容效度上得到相當(dāng)程度之確保。

系統(tǒng)職業(yè)興趣量表，經(jīng)過因素分析與MTMM矩陣分析檢驗(yàn)，在構(gòu)念效度上，具有良好的聚斂性并符合Holland的職業(yè)興趣六角理論的構(gòu)念區(qū)辨性。

系統(tǒng)職業(yè)興趣量表，在16個(gè)專業(yè)的分類上具有實(shí)際價(jià)值，且經(jīng)過效標(biāo)關(guān)聯(lián)效度與理論效度檢驗(yàn)，具有良好應(yīng)用價(jià)值。