北京市事業(yè)單位新進(jìn)人員通用能力考試的因素結(jié)構(gòu)穩(wěn)定性分析

辛南平 姜亞麗 陳海平 丁玎 栗小霞

北京市事業(yè)單位新進(jìn)人員通用能力考試的因素結(jié)構(gòu)穩(wěn)定性分析

辛南平1姜亞麗1陳海平1丁玎2栗小霞2

通過對北京市事業(yè)單位新進(jìn)人員通用能力考試（管理崗）2012年至2014年9次考試的40 877名考生數(shù)據(jù)的探索性因素分析，驗(yàn)證其因子結(jié)構(gòu)的穩(wěn)定性。結(jié)果表明，9次考試有8次考試的因素分析都只有一個公因子，且其大多數(shù)因子載荷總和都達(dá)到30%以上；閱讀理解、邏輯推理和圖表解讀3種傳統(tǒng)題型的因子載荷值歷次都最高，新開發(fā)的句段排序、計(jì)劃編排、實(shí)用寫作3種題型的因子載荷略低但也都可接受。歷次考試各個題型的公因子數(shù)目相同，且其因子載荷相當(dāng)穩(wěn)定，證明了它具有穩(wěn)定的因子結(jié)構(gòu)，表明盡管題目變動，但其仍然具有穩(wěn)定的篩查功能。

通用能力考試；探索性因素分析；因子載荷

1 引言

北京市事業(yè)單位新進(jìn)人員通用能力考試（以下簡稱“通用能力考試”）是北京市事業(yè)單位公開招聘考試，全市統(tǒng)一組織，各用人單位自愿參加，2012年開始推廣使用，每年組織3次考試。它基于北京市事業(yè)單位公開招聘工作人員的基本需要研發(fā)，重點(diǎn)考察進(jìn)入事業(yè)單位崗位工作所需的公共基本能力，報(bào)考崗位分為管理崗、專業(yè)技術(shù)崗和工勤崗。有研究表明，通用能力考試具有良好的信效度；[1]朱鳳艷等人（2103）對該項(xiàng)考試創(chuàng)設(shè)的新題型進(jìn)行預(yù)試研究，發(fā)現(xiàn)新題型總體來說對考生難度適中，區(qū)分度較高，信度α系數(shù)中等；[2]為了提高考試對崗位的針對性，同時減少考試時間，以便提高考試效率和效度，陳海平等人（2015）探究了在考試為單因子的情況下，基于因素分析結(jié)果選擇最優(yōu)簡版測驗(yàn)的問題，最優(yōu)判別綜合考慮了測量誤差、α和β錯誤、統(tǒng)計(jì)檢驗(yàn)力、覆蓋率、考試時間5項(xiàng)標(biāo)準(zhǔn)。[3]姜亞麗等人（2015）繼續(xù)深入研究了不同統(tǒng)計(jì)方法在組成簡版測驗(yàn)上的優(yōu)劣，對比了分別使用逐步回歸法和因素分析法構(gòu)建的簡版測驗(yàn)在不同及格線上的覆蓋率、正命中率和總命中率。[4]然而，所有的公開考試都具有一個顯而易見的特點(diǎn)，那就是題目的非重復(fù)性，[5]即每次考試的題目是不一樣的，這點(diǎn)不同于一般的心理測驗(yàn)。題目的非重復(fù)性是考試性能穩(wěn)定的最大威脅。每次變換新題目，不僅題目本身的性能參數(shù)及其測驗(yàn)性能參數(shù)都是問題，不同考試之間的可比性降低，更重要的是整個考試的測量目標(biāo)和測量要素都可能發(fā)生變化，以致?lián)p害考試預(yù)設(shè)的甄選功能。因此，探究公開考試的因子結(jié)構(gòu)穩(wěn)定性，確定歷次考試的測量因子是否穩(wěn)定，可以為這類考試的合理性、公平性和公正性提供依據(jù)。

此外，除了題目的非重復(fù)性，通用能力考試（管理崗）使用的“計(jì)劃編排”、“規(guī)則解讀”和“實(shí)用寫作”等題型都屬于創(chuàng)新題型，缺乏前期研究基礎(chǔ)，編題和審題也缺乏足夠的經(jīng)驗(yàn)和規(guī)范，因此，更容易給考試的測量目標(biāo)帶來不穩(wěn)定。

鑒于上述原因，在整個考試不能實(shí)行等值設(shè)計(jì)的情況下，為了保證歷年、歷次的考試分?jǐn)?shù)基本具有相同的價值，實(shí)現(xiàn)歷年、歷次考試的大致可比性，需要證明考試的測量目標(biāo)具有穩(wěn)定性，以此證明其實(shí)現(xiàn)了考試的甄選功能，這對保證整個考試的公平、公正，避免考生的命運(yùn)交由題目變動造成的隨機(jī)性，具有十分重要的意義。證明考試測量目標(biāo)穩(wěn)定性的方法之一，就是考察整個考試因素結(jié)構(gòu)的穩(wěn)定性，本研究選取管理崗9次考試的考生成績進(jìn)行探索性因素分析，檢驗(yàn)全部題型的因子結(jié)構(gòu)是否穩(wěn)定。

2 研究方法

本研究所用數(shù)據(jù)為通用能力考試（管理崗）2012年至2014年9次考試全部40 877名考生的真實(shí)數(shù)據(jù)，使用SPSS18.0統(tǒng)計(jì)軟件，運(yùn)用探索性因素分析方法，按照題型而非單個題目考察其每次考試的因素結(jié)構(gòu)及其變化。

通用能力考試（管理崗）有9種題型，每種題型的試題數(shù)量和分值見表1。

3 結(jié)果與分析

3.1 因素分析的適合性

首先需要檢驗(yàn)2012年至2014年9次考試的題型分?jǐn)?shù)是否適合做因素分析，結(jié)果如表2。

表1 通用能力考試（管理崗）試卷結(jié)構(gòu)

KMO值表示的是變量間的相關(guān)程度，是衡量變量間是否可以做因子分析的重要指標(biāo)，取值在0和1之間，越接近于1表示變量間的相關(guān)性越強(qiáng)，原有變量越適合作因子分析。特征根是每一公因子對全部項(xiàng)目的解釋力度，通常要求大于1。

從表2可以看出，這9次考試數(shù)據(jù)的KMO值都大于0.8。根據(jù)Kaiser給出的KMO常用度量標(biāo)準(zhǔn)，0.9以上表示非常適合，0.8表示適合，0.7表示一般，0.6表示不太適合。因此可以認(rèn)為通用能力考試（管理崗）各題型分?jǐn)?shù)間的相關(guān)性較好，適合做因素分析。

3.2 公因子數(shù)目及其解釋的分?jǐn)?shù)變異量的穩(wěn)定性

判斷測驗(yàn)因子結(jié)構(gòu)的穩(wěn)定性首先要考察探索性因素獲得的公因子數(shù)目和其解釋的分?jǐn)?shù)變異的波動。通常，探索性因素分析以特征根大于1為判定測驗(yàn)公因子合理數(shù)目的根據(jù)。從表2大于1的特征根數(shù)目看，除了2013年6月考試的公因子數(shù)為2個外，其余都為1個公因子。這說明，盡管題目的變化確實(shí)可能影響到測量目標(biāo)的穩(wěn)定性，進(jìn)而影響整個考試的公因子數(shù)目，但這種影響只是偶然的，變動很小，可以認(rèn)為通用能力考試（管理崗）的公因子數(shù)目是比較穩(wěn)定的，只測量1個公因子。

再從表2中公因子特征根所解釋的變異來看，除2014年6月的考試解釋了高達(dá)82.94%的分?jǐn)?shù)變異外，其余幾次考試解釋的變異都在32%～45%之間。按照因素分析理論，所有公因子特征根總和解釋的變異需在60%以上才可接受（理想的情況甚至要求70%），這說明，盡管管理崗考試的9種題型只測量了1個公共因子，但這個公因子解釋考試總分的變異是不夠理想的，一些影響考生分?jǐn)?shù)的重要因素沒有能夠通過考試考察出來，也就是說決定考生分?jǐn)?shù)高低的，除了這個公因子，還有其他的重要因素。但考慮到事業(yè)單位新進(jìn)人員入門考試本身的復(fù)雜性及其招聘選拔考試分?jǐn)?shù)分布基本呈負(fù)偏態(tài)的特點(diǎn)，還是可以認(rèn)為這個水平的解釋比例是可以接受的。原因在于：第一，作為入門考試，考試內(nèi)容的覆蓋面必須足夠廣泛，能夠包容所有性質(zhì)的事業(yè)單位以及所有可能的管理崗位的素質(zhì)要求，這意味著考試內(nèi)容必須具有針對所有崗位的通用性，即考查所有考生的“應(yīng)知應(yīng)會”，這容易導(dǎo)致題型的增多和考生之間分?jǐn)?shù)差距的縮小，具體體現(xiàn)在150分鐘的考試時間內(nèi)安排了9種題型，而每種題型的滿分分值又很小。第二，錄取政策導(dǎo)致考生分?jǐn)?shù)的天花板現(xiàn)象。一方面，不同的事業(yè)單位招聘崗位提供的待遇和發(fā)展空間差別巨大，乃至其吸引的考生群體水平也相差特別大；另一方面，北京市人力資源和社會保障局規(guī)定，任何招聘單位的原始分?jǐn)?shù)錄取線不得低于60分。這意味著為了保證每一個參加這一考試的招聘單位都能有可供甄選的過關(guān)考生，必須適當(dāng)降低考試的整體難度，試卷大部分題目的難度不能太大，以便確保被考生認(rèn)為待遇差、發(fā)展空間小的事業(yè)單位也能有足夠數(shù)量的過關(guān)考生。而降低整個考試難度的結(jié)果就是壓縮了整個考試的變異空間，減小了分?jǐn)?shù)波動的范圍，這就增大了不可控的隨機(jī)因素對分?jǐn)?shù)變異的影響權(quán)重，進(jìn)而降低了分?jǐn)?shù)變異解釋的占比。當(dāng)然，2014年6月考試的公因子是1個，而特征根解釋率高達(dá)82.94%，這凸顯了在因子保持1個的條件下提高特征根解釋率的可能性，也說明了題目變動對特征根的解釋率存在較大的影響。

表2 通用能力考試（管理崗）考試數(shù)據(jù)的因素分析前提檢驗(yàn)

3.3 各題型因子載荷的貢獻(xiàn)及其穩(wěn)定性

因子載荷是指某個變量（題目或題型分?jǐn)?shù)）在某個公因子上的負(fù)荷，反映了該變量在該因子上的相對重要性。因子載荷越大，則該變量對該公因子的作用越大，能解釋該因子的變異越多。各個題型的因子載荷見表3。

從表3可以看出，不同題型的因子載荷是有差異的。相對于其他題型，閱讀理解、邏輯推理和圖表解讀3種題型9次考試的因子載荷都比較大，都在0.6以上（其中圖表解讀2013年3月的考試略低于0.6），這一定程度上說明這3種題型對測量目標(biāo)具有更大的重要性，解釋率也更穩(wěn)定，這驗(yàn)證了這3種題型之所以被大家公認(rèn)為成熟、國內(nèi)外各個大型考試比較常用的合理性。規(guī)則解讀、文稿校對、句段排序這3種題型的因子載荷大多在0.5以上，說明這3種題型也是相當(dāng)穩(wěn)定的，對整個考試的因子結(jié)構(gòu)具有穩(wěn)定的重要貢獻(xiàn)。比較而言，客觀題的因子載荷還都比較理想，而主觀題（實(shí)用寫作）的因子載荷大多偏低（除2014年6月考試外），在0.5以下，再就是波動很大，這可能與主觀題題意模糊、解析困難、評分主觀性大有關(guān)，也顯示實(shí)用寫作測量的要素可能主要不在于公因子，其測量目標(biāo)可能不同于其他題型。由于考試實(shí)踐中，專家和用人單位都一致認(rèn)為主觀題更能考察考生的綜合素質(zhì)，為保證考試的表面效度和社會的滿意度，未來的考試研究需要多關(guān)注主觀題型如何提高特征根解釋率并保持穩(wěn)定的問題。

表3 通用能力考試（管理崗）各題型的因子載荷變化

2013年6 月考試探索性因素分析為2個公因子，從表3看出，“計(jì)劃編排”題型更適合歸屬于第二個公因子（載荷值0.680），其歸屬第一個公因子的載荷值僅僅為0.366，說明這次考試的“計(jì)劃編排”題型的測量目標(biāo)有所偏離，可能測量了與其他題型測量要素之外的能力要素，這表明這種題型容易“偏題”，需要在命題和審題環(huán)節(jié)加以特別的防范。

3.4 因子載荷的時間穩(wěn)定性

從表3可以看出，每次考試不同題型的因子載荷是波動變化的。2014年6月考試雖然只有1個公因子，但特征根解釋率高達(dá)82.94%，而且每個題型的特征根解釋率都在0.837以上，這揭示該考試因子結(jié)構(gòu)具有很好的單一性，9個題型有著很大的重合，可以合成一個指標(biāo)（即總分）來代替。然而從事業(yè)單位進(jìn)人考試需要綜合考察多方面素質(zhì)的需求看，單一因子的結(jié)構(gòu)和過高的特征根解釋率并不一定吻合其功能設(shè)定。簡單來說，9種題型重合太多，說明了它們之間的測量要素沒有太大差異，測量要素的范疇缺乏足夠的覆蓋面，并且從效率的角度講，測量同一要素的題型太多有點(diǎn)浪費(fèi)考試時間。

歷次考試不同題型的因子載荷穩(wěn)定性僅有很小的差異。從圖1看，所有題型的因子載荷基本上穩(wěn)定，并且每種題型的因子載荷總體上都呈現(xiàn)輕微的上升趨勢，只有計(jì)劃編排、句段排序和實(shí)用寫作這3種題型波動相對其他題型略微大一些，顯示這3種題型測量要素不夠穩(wěn)定，需要在編題中加以規(guī)范。

圖1 各題型因子載荷變化趨勢

4 討論和結(jié)論

通過以上對2012年至2014年9次考試數(shù)據(jù)的統(tǒng)計(jì)分析，可以得出通用能力考試（管理崗）因子結(jié)構(gòu)穩(wěn)定性的結(jié)論如下：

第一，9次考試數(shù)據(jù)中8次考試數(shù)據(jù)都為單個因子，說明北京市事業(yè)單位新進(jìn)人員通用能力考試總體上每次都只測量了一個共同的內(nèi)容，即可認(rèn)為是勝任事業(yè)單位管理崗位工作的通用能力。公因子數(shù)量的穩(wěn)定，很大程度上證明了整個考試因子結(jié)構(gòu)的穩(wěn)定性。

第二，大部分題型的公因子載荷都比較高，其中閱讀理解、邏輯推理和圖表解讀這3種經(jīng)典題型的因子載荷在每一次考試中都比較高，而且明顯比較穩(wěn)定，不僅說明這幾種題型比較成熟，而且表明它們測量的要素對勝任事業(yè)單位管理崗位的工作具有更大的重要性。

第三，歷次考試各個題型的因子載荷相對穩(wěn)定，從組成成分層面證明了整個考試因子載荷的穩(wěn)定性，并非完全是平均效應(yīng)，而是具有各個題型因子載荷穩(wěn)定性的堅(jiān)實(shí)基礎(chǔ)。

這三方面都證明通用能力考試（管理崗）的因子結(jié)構(gòu)除了偶爾有波動，整體上是相對穩(wěn)定的。當(dāng)然，這種穩(wěn)定性還需要更多的證據(jù)來證明，例如需要通過再測信度來加以佐證。另外，這個結(jié)論畢竟只是針對管理崗的考試而言，并沒有包含專業(yè)技術(shù)崗和工勤崗，因此，推斷整個考試的因子結(jié)構(gòu)穩(wěn)定性還需要進(jìn)一步的證據(jù)。

[1]黎穎.事業(yè)單位公開招聘考試探討[J].才智,2010（4）:221．

[2]朱鳳艷,陳海平,車宏生,等.事業(yè)單位公開招聘考試新題型預(yù)試研究[J].心理學(xué)探新,2013,33（3）.

[3]陳海平，姜亞麗，車宏生.事業(yè)單位新進(jìn)人員通用能力考試最優(yōu)簡版探究[J].北京師范大學(xué)學(xué)報(bào)（自然科學(xué)版）,2015,51（3）.

[4]姜亞麗,陳海平.事業(yè)單位通用能力考試簡版的比較研究——因素分析法與逐步回歸法[C]//第十七屆全國心理學(xué)學(xué)術(shù)會議論文摘要集.北京,2014.

[5]羅永蓮,賈玉芳.項(xiàng)目反應(yīng)理論在題庫建設(shè)中的應(yīng)用研究[J].計(jì)算機(jī)應(yīng)用與軟件,2015,32（1）.

An Analysis on the Stability of Factor Structure in the General Abilities Test for the New Staffs of Beijing Public Institutions

XIN Nanping,JIANG Yali,CHEN Haiping,DING Ding&LI Xiaoxia

In order to verify the stability of its factor structure comprised in the General Abilities Test for the New Staffs of Beijing Public Institutions（GAT-BPI）,the explorative factor analysis is conducted for the data of nine GAT-BPI testing samples with 40 877 candidates in all who apply for management positions from 2012 to 2014. The result shows that eight of nine testing examples have one common factor,and its sums of factor loadings mostly are above 30%.The traditional question types of Logic Reasoning,Reading Comprehension and Graph Understanding maintain the highest loadings,and the factor loadings of new developed question types such as Sentence Reordering,Plan Making-up and Practical Writing present a little lower,but acceptable.Based on the same number of common factors and quite stable loadings of all types of questions in all tests,it concludes that GATBPI owns a stable factor structure and plays a stable role with a screening function in spite of its changing items.

General Abilities Test;Explorative Factor Analysis;Factor Loading

G405

A

1005-8427（2016）04-0029-5

本研究得到北京市人事考試中心委托課題“北京市事業(yè)單位同步考試數(shù)據(jù)分析及新題型完善”及北京師范大學(xué)哲學(xué)社會科學(xué)報(bào)告支持項(xiàng)目“基于大數(shù)據(jù)的我國彩票業(yè)發(fā)展監(jiān)測平臺研究”（編號：SKZZP2013003）資助。

陳海平，男，博士，北京師范大學(xué)心理學(xué)院教師暨北京師范大學(xué)中國彩票事業(yè)研究中心研究員。

1北京師范大學(xué)心理學(xué)院（北京 100875）

2北京市人事考試中心（北京 100036）