• <tr id="yyy80"></tr>
  • <sup id="yyy80"></sup>
  • <tfoot id="yyy80"><noscript id="yyy80"></noscript></tfoot>
  • 99热精品在线国产_美女午夜性视频免费_国产精品国产高清国产av_av欧美777_自拍偷自拍亚洲精品老妇_亚洲熟女精品中文字幕_www日本黄色视频网_国产精品野战在线观看 ?

    PISA抽樣方法簡(jiǎn)介與PISA2015中國抽樣實(shí)踐

    2015-06-27 06:59:07丁慧明
    中國考試 2015年10期
    關(guān)鍵詞:總體分層變量

    丁慧明

    PISA抽樣方法簡(jiǎn)介與PISA2015中國抽樣實(shí)踐

    丁慧明

    學(xué)生能力國際評(píng)價(jià)(PISA)是由經(jīng)濟(jì)合作與發(fā)展組織發(fā)起的大規(guī)模國際教育評(píng)價(jià)項(xiàng)目,抽樣對(duì)評(píng)價(jià)結(jié)果的國際可比性至為關(guān)鍵。本文對(duì)PISA的抽樣方法與理念、抽樣的各個(gè)環(huán)節(jié)與技術(shù)標(biāo)準(zhǔn)進(jìn)行介紹,并簡(jiǎn)要介紹PISA2015中國抽樣的實(shí)踐情況,基于PISA的抽樣經(jīng)驗(yàn),對(duì)我國國內(nèi)大型教育測(cè)評(píng)項(xiàng)目未來抽樣的數(shù)據(jù)收集等環(huán)節(jié)提出一些設(shè)想與展望。

    PISA;抽樣;教育測(cè)評(píng)

    1 引言

    學(xué)生能力國際評(píng)價(jià)(Programme of International Students Assessment,PISA)是迄今為止全球最具影響力的教育評(píng)價(jià)項(xiàng)目之一,通過考察15歲學(xué)生在數(shù)學(xué)、閱讀、科學(xué)、協(xié)作問題解決領(lǐng)域中的表現(xiàn),了解義務(wù)教育結(jié)束階段學(xué)生運(yùn)用知識(shí)與技能適應(yīng)未來社會(huì)的能力,通過國際比較為各國的教育決策提供數(shù)據(jù)依據(jù)。自PISA2000開始,PISA每三年舉行一次,PISA2015中國以國家身份正式參加。

    PISA針對(duì)抽樣的各環(huán)節(jié)都制定了嚴(yán)格的技術(shù)標(biāo)準(zhǔn),所有參加國家或地區(qū)均需依據(jù)此標(biāo)準(zhǔn)完成PISA抽樣任務(wù),其科學(xué)的抽樣方法與嚴(yán)謹(jǐn)?shù)某闃映绦驗(yàn)槠鋽?shù)據(jù)的有效收集以及結(jié)果的國際可比提供了重要的前提保障。本文簡(jiǎn)要介紹PISA的抽樣設(shè)計(jì)、抽樣各個(gè)環(huán)節(jié)以及PISA2015中國抽樣實(shí)踐經(jīng)驗(yàn)。

    2 PISA抽樣方法簡(jiǎn)介

    2.1 概述

    PISA抽樣綜合采用多種方法。從PISA2000至今,絕大多數(shù)參加國家(或地區(qū))均采用兩階段抽樣。第一階段采用按規(guī)模大小成比例系統(tǒng)抽樣方法(Probability Proportional to Size,簡(jiǎn)稱PPS)抽取學(xué)校。當(dāng)所要研究的變量在總體中變異較大時(shí),PPS方法往往能夠提高抽樣的效率。該方法通常借助一個(gè)輔助測(cè)度(auxiliary measure),使得每個(gè)抽樣單元都有按其規(guī)模成比例被抽中的概率。在PISA中,每所學(xué)校的15歲學(xué)生估計(jì)值(ENR)則作為抽樣的輔助測(cè)度。抽取學(xué)校前,由依據(jù)學(xué)校屬性選定的外顯分層變量將學(xué)校劃分到不同分層中,對(duì)每層獨(dú)立抽取學(xué)校。在抽樣設(shè)計(jì)中,影響抽樣誤差的因素主要有兩個(gè),一是樣本容量,二是總體內(nèi)部的同質(zhì)性程度。分層抽樣便是基于第二因素的方法,確保樣本是從總體內(nèi)每個(gè)同質(zhì)次級(jí)集合中抽取適當(dāng)數(shù)量的要素,而非直接隨意在總體中抽取。[1]PISA使用分層抽樣是為了提高抽樣設(shè)計(jì)的效率,從而確保獲得可信的調(diào)查結(jié)果;確保樣本涵蓋總體的各個(gè)部分,對(duì)總體具有良好代表性;同時(shí),可滿足特定群體能夠采用不同抽樣設(shè)計(jì)的需求。[2]其他一些大型教育測(cè)量項(xiàng)目如 TIMSS(Trends in International Mathematics and Science Study)和 PIRLS(Progress in International Reading Literacy Study)等也都是對(duì)學(xué)校進(jìn)行分層,在各外顯層內(nèi)采用PPS方法對(duì)學(xué)校進(jìn)行系統(tǒng)抽樣。[3]第二階段是在樣本校內(nèi)隨機(jī)抽取學(xué)生,同一所學(xué)校內(nèi),每個(gè)符合PISA條件的學(xué)生被抽中的概率相同。而對(duì)于俄羅斯聯(lián)邦等極少數(shù)采用三階段抽樣的國家,第一階段則是用PPS方法抽取地理區(qū)域,第二、三階段再在抽中的區(qū)域中逐步抽取學(xué)校、學(xué)生。

    為了確保樣本能夠有效估計(jì)學(xué)生的總體表現(xiàn),PISA通過技術(shù)標(biāo)準(zhǔn)、抽樣指南等規(guī)則與材料嚴(yán)格把控參加國家或地區(qū)的抽樣質(zhì)量,主要包括以下三個(gè)方面:對(duì)PISA國際目標(biāo)群體的覆蓋;準(zhǔn)確性和精度;學(xué)校和學(xué)生的應(yīng)答率。[4]PISA抽樣的質(zhì)量控制具體體現(xiàn)在抽樣的各個(gè)環(huán)節(jié)。

    2.2 抽樣環(huán)節(jié)

    2.2.1 確定目標(biāo)總體

    PISA的調(diào)查對(duì)象為就讀于各級(jí)各類教育機(jī)構(gòu)7年級(jí)及以上的15歲在校生,包括普通教育與職業(yè)教育、全日制與非全日制等。PISA是在確定測(cè)試日期之后,根據(jù)測(cè)試日期以及“15歲”的年齡要求來確定學(xué)生目標(biāo)群體的出生日期范圍,因北半球國家大多在4月開展測(cè)試,目標(biāo)總體的“15歲”年齡要求便略作調(diào)整為15周歲3個(gè)月至16周歲2個(gè)月。如計(jì)劃在2015年4月開展PISA2015正式測(cè)試,則正式測(cè)試的目標(biāo)總體為1999年1月1日至1999年12月31日之間出生的所有在校生。PISA將通過樣本的表現(xiàn)來推斷此總體情況。

    2.2.2 確定抽樣方案

    以PISA2015為例,每個(gè)國家需至少抽150所學(xué)校,每校抽42名15歲學(xué)生,共6 300名學(xué)生。若出于本國研究需要,在擬定抽樣方案時(shí)也可提出增加樣本學(xué)校抽取數(shù)量。為事先了解學(xué)生可能參加測(cè)試的情況,確保施測(cè)后能獲得足夠的有效樣本量,各個(gè)國家或地區(qū)需要根據(jù)以往經(jīng)驗(yàn)提交期望評(píng)估率,此評(píng)估率指在考慮了無應(yīng)答、校內(nèi)排除等之后參加測(cè)試學(xué)生占樣本學(xué)生的比例。對(duì)于多次參加PISA的國家,可用以往PISA輪次中的評(píng)估率;對(duì)于首次參加的國家則可根據(jù)本國內(nèi)的測(cè)試經(jīng)驗(yàn)給出一個(gè)預(yù)估值。樣本容量是影響抽樣誤差大小最直接、最有效的因素。[5]按照PISA抽樣標(biāo)準(zhǔn)要求,6 300名樣本學(xué)生中至少需有5 400名參加測(cè)試。從統(tǒng)計(jì)測(cè)量角度來看,理想狀態(tài)是所有6 300名學(xué)生均參加測(cè)試。而當(dāng)期望評(píng)估率較低時(shí),參測(cè)國家則需考慮增加樣本學(xué)校的數(shù)量來保證參加測(cè)試學(xué)生的總量。

    通常情況下,PISA的初級(jí)抽樣單元是學(xué)校。在擬定抽樣方案時(shí),各個(gè)國家或地區(qū)需從PISA學(xué)生分布情況、本國實(shí)際研究需要以及提高抽樣效率等角度來選擇分層變量,如選擇學(xué)校地理位置變量將學(xué)校分為城市學(xué)校、縣鎮(zhèn)學(xué)校、農(nóng)村學(xué)校等。PISA的分層變量包括外顯和內(nèi)隱兩種。外顯分層變量用于將學(xué)校分組,即分到不同的外顯層,抽樣將在每個(gè)外顯層獨(dú)立進(jìn)行;內(nèi)隱分層變量用于對(duì)外顯層內(nèi)的學(xué)校進(jìn)行排序,方便在所有內(nèi)隱層能夠嚴(yán)格成比例抽樣,從而進(jìn)一步提高結(jié)果的信度。[6]為了防止抽中過多的超級(jí)大校或是小校,PISA默認(rèn)將學(xué)校規(guī)模也作為內(nèi)隱分層變量。[7]

    2.2.3 收集抽樣框

    抽樣框(sampling frame)是目標(biāo)總體中所有初級(jí)抽樣單元的完整列表。以兩階段抽樣為例,PISA抽樣框中需列出測(cè)試期間所有可能含15歲在校生的學(xué)校。抽樣框是學(xué)校抽樣的基礎(chǔ),為保證樣本的良好代表性,抽樣框需基于抽樣方案,按各個(gè)分層將所有符合條件的學(xué)校逐條列出。抽樣框中含有的信息包括學(xué)校編號(hào)、學(xué)校所屬分層、15歲學(xué)生數(shù)量估計(jì)值(ENR)等。ENR將作為PPS抽樣的輔助參考變量,越接近測(cè)試時(shí)的真實(shí)數(shù)量值越好。

    考慮到測(cè)試實(shí)際操作的可行性,PISA允許在一定范圍內(nèi)排除極個(gè)別學(xué)?;?qū)W生。排除分為兩種,一種是學(xué)校層面的排除,對(duì)于存在地理位置不通達(dá)、難以實(shí)施PISA等情況的學(xué)校,可排除整校的PISA學(xué)生,被排除的學(xué)校不置入抽樣框中,不參加抽樣;另一種是校內(nèi)排除,即在學(xué)校內(nèi)部排除有較為嚴(yán)重的生理障礙或認(rèn)知障礙的PISA學(xué)生,測(cè)試所用語言非母語、水平極為有限且接受該語言授課不足一年的學(xué)生也可在校內(nèi)排除。作為校內(nèi)排除的學(xué)生仍需納入抽樣框統(tǒng)計(jì),若被抽取到,在測(cè)試時(shí)再作排除。[8]為保證最終樣本結(jié)果對(duì)總體的代表性且可進(jìn)行國際比較,PISA技術(shù)標(biāo)準(zhǔn)嚴(yán)格控制學(xué)校層面排除與校內(nèi)排除的總比率,最高不得超過目標(biāo)總體的5%。[9]

    2.2.4 抽取學(xué)校

    PISA正式測(cè)試的樣本學(xué)校由負(fù)責(zé)PISA抽樣技術(shù)工作的國際承包商在各個(gè)國家或地區(qū)提交的抽樣框基礎(chǔ)上進(jìn)行統(tǒng)一抽取。在抽樣開始之前,PISA的抽樣框經(jīng)過縝密處理,每個(gè)外顯層內(nèi)的學(xué)校均按內(nèi)隱變量進(jìn)行排序,進(jìn)而根據(jù)PISA學(xué)生在各外顯層的分布比例為各外顯層分配樣本學(xué)校初始數(shù)額,并根據(jù)各層的小學(xué)校(以PISA2015為例,小學(xué)校指PISA學(xué)生人數(shù)不足42人的學(xué)校)數(shù)量、統(tǒng)計(jì)技術(shù)要求、參測(cè)國家研究訴求等因素對(duì)初始配額進(jìn)行調(diào)整,經(jīng)參測(cè)國家審核確認(rèn)后形成最終的樣本容量分配。

    外顯層內(nèi)的樣本學(xué)校等距抽取,每個(gè)外顯層抽樣間距為該層的PISA學(xué)生總數(shù)與待抽樣本校數(shù)目之比。當(dāng)有超級(jí)大校的PISA學(xué)生人數(shù)等于或超過其所在層的抽樣間距時(shí),該校則從所在層抽離出,作為必抽學(xué)校入樣,該層的抽樣間距則重新計(jì)算。

    為防止測(cè)試實(shí)施時(shí)有學(xué)校不愿參加PISA,抽樣時(shí)通常為每所樣本學(xué)校配備2所替補(bǔ)學(xué)校,抽樣框中位置緊鄰樣本學(xué)校上下的學(xué)校為替補(bǔ)校,以確保替補(bǔ)在各個(gè)屬性參數(shù)上同樣本學(xué)校最為相似。

    2.2.5 抽取學(xué)生

    學(xué)生樣本由PISA國家中心采用PISA國際統(tǒng)一專用抽樣軟件KeyQuest(簡(jiǎn)稱KQ)隨機(jī)抽取。國家中心在抽樣前收集參加測(cè)試學(xué)校所有符合PISA條件的學(xué)生名單,將名單導(dǎo)入KQ進(jìn)行抽樣。以PISA2015為例,KQ為每校抽取42名學(xué)生,對(duì)于不足42人的學(xué)校,軟件將自動(dòng)抽取名單中的全部學(xué)生。使用統(tǒng)一抽樣軟件可使得各個(gè)國家或地區(qū)的抽樣流程嚴(yán)格一致,此外,可便于測(cè)試實(shí)施后學(xué)校、學(xué)生等參加情況的更新與數(shù)據(jù)的最后校驗(yàn)。

    無論是紙筆模式還是機(jī)考模式,PISA測(cè)試均有多個(gè)試題版本。版本的多樣化覆蓋了各測(cè)評(píng)領(lǐng)域所要考察的維度,并平衡了試題的順序效應(yīng)。每個(gè)學(xué)生只接受一個(gè)版本的測(cè)試,KQ在抽取學(xué)生的同時(shí)就基于PISA的整體設(shè)計(jì)為每個(gè)樣本學(xué)生分配完成測(cè)試版本號(hào),對(duì)于參加機(jī)考模式的國家,學(xué)生機(jī)考登錄賬號(hào)及密碼也同時(shí)生成。KQ還可生成統(tǒng)一格式的學(xué)生信息、測(cè)試與問卷環(huán)節(jié)出席情況表格等,方便PISA在學(xué)校內(nèi)的組織安排、測(cè)試實(shí)施以及考場(chǎng)記錄。

    2.2.6 樣本參加情況及應(yīng)答率控制

    科學(xué)抽樣是獲得學(xué)生表現(xiàn)有效估計(jì)值的前提保障,但若要估計(jì)值更為精確,且能夠參與國際比較,則需極力調(diào)動(dòng)樣本參加測(cè)試的積極性。根據(jù)PISA技術(shù)標(biāo)準(zhǔn)要求,樣本學(xué)校的應(yīng)答率不得低于85%。若在85%~65%之間,在使用替補(bǔ)學(xué)校后的應(yīng)答率需在可接受的范圍值內(nèi);所有樣本學(xué)生的總應(yīng)答率需達(dá)到80%。[10]如果應(yīng)答率過低,調(diào)查結(jié)果將不足以有力說明學(xué)生總體表現(xiàn),不能參加國際比較。

    3 PISA2015中國抽樣實(shí)踐

    在PISA2006、PISA2009、PISA2012中國獨(dú)立研究的經(jīng)驗(yàn)探索基礎(chǔ)上,PISA2015中國以國家身份正式參加。本著自愿原則,PISA2015中國參加省份為北京、上海、江蘇、廣東,這4?。ㄊ校┳鳛檎w抽取樣本,樣本參加測(cè)試的結(jié)果將用來說明4省(市)整體15歲學(xué)生的表現(xiàn)情況。

    我國除參與標(biāo)準(zhǔn)的學(xué)生測(cè)試、學(xué)生問卷調(diào)查之外,還參加了學(xué)生財(cái)經(jīng)素養(yǎng)測(cè)試以及教師問卷調(diào)查這兩個(gè)可選項(xiàng)。抽樣各個(gè)環(huán)節(jié)均嚴(yán)格按照PISA國際統(tǒng)一要求與技術(shù)標(biāo)準(zhǔn)。我國采用兩階段分層抽樣,所有基礎(chǔ)抽樣信息如15歲總?cè)丝?、抽樣框信息、學(xué)生與教師名單等由PISA國家中心協(xié)同4?。ㄊ校┦占?。抽樣承包商以PPS系統(tǒng)抽樣方法在抽樣框中抽取學(xué)校,繼而國家中心在4省(市)提交的學(xué)生教師名單基礎(chǔ)上使用KQ為每所參測(cè)學(xué)校隨機(jī)抽取學(xué)生和教師,財(cái)經(jīng)子樣本也通過KQ在學(xué)生樣本基礎(chǔ)上抽取。

    PISA2015中國的分層變量在參加?。ㄊ校┑慕ㄗh基礎(chǔ)上確定為:外顯分層變量是學(xué)校地理位置(城市、縣鎮(zhèn)、農(nóng)村)、學(xué)校類型(普通、職業(yè))、學(xué)段(初中、高中、完全中學(xué))。根據(jù)這些變量將所有符合條件的學(xué)校分列在學(xué)校抽樣框的各外顯層;內(nèi)隱分層變量是學(xué)生入學(xué)成績(jī)等級(jí)或?qū)W校質(zhì)量(一般、實(shí)驗(yàn)性示范性、不適用)、學(xué)校性質(zhì)(公辦、民辦)。參加?。ㄊ校└鶕?jù)所能獲得的最新數(shù)值或估計(jì)值提供15歲人口信息以及抽樣框中的學(xué)校名單信息,抽樣框共有9 178所學(xué)校、1 448 879名15歲學(xué)生??紤]到測(cè)試的有效實(shí)施,學(xué)校層面排除了特殊教育學(xué)校、科學(xué)課程①PISA每個(gè)輪次以一個(gè)領(lǐng)域?yàn)橹饕獪y(cè)試領(lǐng)域,其他領(lǐng)域?yàn)榇我獪y(cè)試領(lǐng)域。PISA2015以科學(xué)領(lǐng)域?yàn)橹饕獪y(cè)試領(lǐng)域。以非漢語授課的學(xué)校。此外,多數(shù)地區(qū)由于技工學(xué)校不歸教育部門直管,不便組織測(cè)試,經(jīng)與抽樣承包商溝通,技工學(xué)校也在學(xué)校層面排除②上海市含15歲學(xué)生的技工學(xué)校納入到了抽樣框,未排除。;具有嚴(yán)重生理障礙或智力障礙,以及漢語非母語且漢語水平不足以參加測(cè)試的學(xué)生作為校內(nèi)排除類別在測(cè)試時(shí)排除??偱懦始s占4?。ㄊ校?5歲在校生總體的4%,在抽樣技術(shù)標(biāo)準(zhǔn)要求之內(nèi)。

    抽樣承包商基于我國4?。ㄊ校┨顖?bào)的抽樣框抽取樣本學(xué)校共270所。其中20所樣本學(xué)校因自身設(shè)備條件不足或有其他任務(wù)安排等原因表示不參加測(cè)試,使用了相應(yīng)替補(bǔ)學(xué)校。另外,1所樣本學(xué)校在測(cè)試期間無15歲在校生,1所樣本學(xué)校測(cè)試期間將與其他學(xué)校合并,學(xué)生教師將分流,這2所學(xué)校不參加測(cè)試,因不符合使用替補(bǔ)學(xué)校的條件,因而也未用替補(bǔ)。PISA2015中國4?。ㄊ校┕灿?68所學(xué)校參加了正式測(cè)試,在使用了替補(bǔ)后的學(xué)校應(yīng)答率為100%。4?。ㄊ校┏闃涌蚣皩W(xué)生樣本情況如表1所示。

    因4?。ㄊ校┑腜ISA學(xué)生主要分布在9年級(jí)和10年級(jí),因此9年級(jí)和10年級(jí)稱為“典型年級(jí)”。PISA2015以科學(xué)素養(yǎng)為主要測(cè)評(píng)領(lǐng)域,教師問卷的調(diào)查對(duì)象為能夠教授典型年級(jí)的科學(xué)學(xué)科教師和其他學(xué)科教師。我國4省(市)的268所學(xué)校共抽取6 423名教師,其中科學(xué)學(xué)科2 456名,其他學(xué)科3 967名③每校抽取10名科學(xué)學(xué)科教師、15名其他學(xué)科教師,在教師人數(shù)不足的學(xué)校則抽取全部。。測(cè)試實(shí)施與數(shù)據(jù)初步清理后,實(shí)際獲得的學(xué)生有效樣本大小逾9 800人,教師有效樣本大小約6 300人。

    4 啟示與展望

    PISA抽樣不僅方法科學(xué),而且程序嚴(yán)謹(jǐn),可資借鑒。PISA抽樣綜合采用了多階段、分層、PPS等多種抽樣方法,這些是目前國際上大型測(cè)評(píng)項(xiàng)目普遍使用的方法,具有較為成熟的研究基礎(chǔ),可較為經(jīng)濟(jì)有效地實(shí)現(xiàn)樣本對(duì)總體的代表性,同時(shí)也可靈活適應(yīng)國家內(nèi)部研究的需要。PISA每個(gè)輪次通過國際招標(biāo)確定負(fù)責(zé)抽樣各個(gè)環(huán)節(jié)的承包商,承包商依據(jù)PISA技術(shù)標(biāo)準(zhǔn)統(tǒng)籌抽樣各項(xiàng)任務(wù),審核抽樣數(shù)據(jù)質(zhì)量,為各個(gè)國家或地區(qū)提供全面的抽樣技術(shù)支持,確保各個(gè)國家或地區(qū)在每個(gè)時(shí)間節(jié)點(diǎn)內(nèi)有質(zhì)量地按時(shí)完成抽樣任務(wù)。從方法和程序上保證所有國家或地區(qū)在整個(gè)抽樣工作環(huán)節(jié)上的標(biāo)準(zhǔn)一致,為結(jié)果的國際可比性提供保障。

    表1 PISA2015中國抽樣框及樣本情況

    建立與完善兼顧以教育測(cè)評(píng)為目的的全國統(tǒng)一學(xué)生信息庫十分必要。抽樣結(jié)果的精度很大程度上依賴于抽樣數(shù)據(jù)收集的有效性與精確性。以PISA 15歲學(xué)生估計(jì)值為例,其精確度直接關(guān)系到PPS抽樣結(jié)果。教育部2013年已在全國32個(gè)省份安裝完成中小學(xué)生學(xué)籍信息管理系統(tǒng),多數(shù)省份數(shù)據(jù)已進(jìn)入全國數(shù)據(jù)系統(tǒng)。[11]若數(shù)據(jù)庫中能夠增加學(xué)校地理位置等當(dāng)前大型教育測(cè)評(píng)項(xiàng)目普遍關(guān)心的變量,勢(shì)必今后不僅能服務(wù)于學(xué)籍管理與招生,同樣可服務(wù)于教育測(cè)評(píng)。大型測(cè)評(píng)項(xiàng)目如PISA、全國基礎(chǔ)教育質(zhì)量監(jiān)測(cè)等可從同一完備數(shù)據(jù)庫中收集抽樣基礎(chǔ)信息,如此可大大節(jié)省抽樣準(zhǔn)備環(huán)節(jié)的人力與時(shí)間,同時(shí)可減少數(shù)據(jù)收集過程中的誤差引入,也便于實(shí)現(xiàn)多個(gè)測(cè)評(píng)結(jié)果的相互參照研究與跟蹤研究。

    大型教育質(zhì)量評(píng)估需借助于多部門的合作。以技工學(xué)校為例,除上海之外,其他?。ㄊ校┑募脊W(xué)校因不便組織開展PISA準(zhǔn)備與實(shí)施工作而作為排除類別置入抽樣框。技工學(xué)校15歲學(xué)生雖僅占15歲在校生總?cè)丝诘妮^小比例,但卻是我國中等職業(yè)教育的重要組成部分。如在PISA等面向中等教育學(xué)生群體的大型測(cè)評(píng)項(xiàng)目中,教育部門、人社部門等實(shí)現(xiàn)多部門協(xié)同合作,樣本覆蓋技工學(xué)校學(xué)生,測(cè)評(píng)結(jié)果將能更細(xì)致有力地刻畫技工學(xué)校等中等職業(yè)教育學(xué)生的表現(xiàn),更為全面地說明中等職業(yè)教育的總體教育質(zhì)量狀況。

    [1]艾爾·巴比.社會(huì)研究方法(第十一版)[M].邱澤奇,譯.北京:華夏出版社,2009:206.

    [2][4][7]OECD PISA.PISA2012 Technical Report[R].OECD,2014.

    [3]Martin,M.O.&Mullis,I.V.S.(Eds.).Methods and procedures in TIMSS and PIRLS 2011[R].Chestnut Hill,MA:TIMSS&PIRLS International Study Center,Boston College,2012.

    [5]李金昌.應(yīng)用抽樣技術(shù)[M].北京:科學(xué)出版社,2010:32.

    [6]Westat.PISA2015 FT Sampling Guidelines[R].Rockville,MD, 2013.

    [8]Westat.School Sampling Preparation Manual:PISA2015 Main Sur?vey[R].Rockville,MD,2014.

    [9][10]OECD PISA.PISA 2015 Technical Standards[R].OECD,2012.

    [11]教育部.全國32個(gè)省份全部裝完中小學(xué)生學(xué)籍信息管理系統(tǒng)[EB/OL].(2013-11-20)[2015-09-01].http://www.moe.gov.cn/ publicfiles/business/htmlfiles/moe/s5987/201310/158559.html.

    An Introduction to the Sampling Methods for PISA and Sampling Practice of China in PISA2015

    DING Huiming

    The Programme for International Student Assessment(PISA),launched by Organization for Economic Co-operation and Development,is an international survey which aims to evaluate education systems worldwide.To provide reliable and comparable results across countries,sampling is critical for PISA.In this paper,an introduction of sampling methods and procedures in PISA are given.Sampling practice of China in PISA2015 is elaborated as well.And then the assumption and prospect of the process for educational assessment in China are discussed.

    PISA;Sampling;Educational Assessment

    G405

    A

    1005-8427(2015)10-0046-5

    丁慧明,女,PISA2015國家中心(北京 100084)

    猜你喜歡
    總體分層變量
    抓住不變量解題
    用樣本估計(jì)總體復(fù)習(xí)點(diǎn)撥
    2020年秋糧收購總體進(jìn)度快于上年
    也談分離變量
    一種沉降環(huán)可準(zhǔn)確就位的分層沉降儀
    外匯市場(chǎng)運(yùn)行有望延續(xù)總體平穩(wěn)發(fā)展趨勢(shì)
    中國外匯(2019年6期)2019-07-13 05:44:06
    雨林的分層
    有趣的分層
    直擊高考中的用樣本估計(jì)總體
    SL(3,3n)和SU(3,3n)的第一Cartan不變量
    在线 av 中文字幕| 国产探花极品一区二区| 久久天躁狠狠躁夜夜2o2o | 伊人亚洲综合成人网| 操出白浆在线播放| 多毛熟女@视频| 一级毛片我不卡| 婷婷成人精品国产| 黄片小视频在线播放| 最近最新中文字幕大全免费视频 | 好男人视频免费观看在线| 黄色 视频免费看| 欧美97在线视频| 大陆偷拍与自拍| 少妇精品久久久久久久| 成年美女黄网站色视频大全免费| 可以免费在线观看a视频的电影网站 | 女性被躁到高潮视频| 国产精品久久久久久久久免| 欧美激情极品国产一区二区三区| 十八禁人妻一区二区| 自拍欧美九色日韩亚洲蝌蚪91| 亚洲国产最新在线播放| tube8黄色片| 亚洲av日韩精品久久久久久密 | 久久毛片免费看一区二区三区| 乱人伦中国视频| 欧美成人精品欧美一级黄| 王馨瑶露胸无遮挡在线观看| 亚洲 欧美一区二区三区| www.精华液| 午夜激情久久久久久久| 爱豆传媒免费全集在线观看| 青春草亚洲视频在线观看| 成人影院久久| 精品一区二区三区av网在线观看 | 免费不卡黄色视频| 国产97色在线日韩免费| 欧美另类一区| 午夜91福利影院| 国产精品国产三级国产专区5o| 精品亚洲成a人片在线观看| 国产探花极品一区二区| 国产精品成人在线| 最近中文字幕高清免费大全6| 天堂俺去俺来也www色官网| 国产精品国产av在线观看| 天天躁夜夜躁狠狠久久av| av网站在线播放免费| 一本久久精品| 国产欧美日韩一区二区三区在线| 免费黄网站久久成人精品| 久久久久精品久久久久真实原创| bbb黄色大片| 国产一区亚洲一区在线观看| 国产一区二区 视频在线| 中文字幕最新亚洲高清| 久久久久久久精品精品| 久久午夜综合久久蜜桃| 黄色怎么调成土黄色| 色播在线永久视频| 少妇 在线观看| 丝瓜视频免费看黄片| 亚洲成人免费av在线播放| 免费少妇av软件| 精品视频人人做人人爽| 亚洲欧美成人精品一区二区| 国产在线视频一区二区| 天天添夜夜摸| 亚洲欧美一区二区三区黑人| 久久99一区二区三区| 免费观看av网站的网址| 女性生殖器流出的白浆| 国产欧美亚洲国产| 99re6热这里在线精品视频| 十八禁人妻一区二区| 欧美精品av麻豆av| 亚洲成人一二三区av| 国产午夜精品一二区理论片| 肉色欧美久久久久久久蜜桃| 少妇被粗大猛烈的视频| 最近中文字幕高清免费大全6| 亚洲成人手机| 丝袜喷水一区| a级毛片在线看网站| 日韩大码丰满熟妇| 久久久精品94久久精品| 国产精品久久久久久久久免| 色网站视频免费| 亚洲免费av在线视频| 亚洲国产最新在线播放| h视频一区二区三区| 黄频高清免费视频| 国产精品欧美亚洲77777| 欧美日韩av久久| 国产av一区二区精品久久| 1024视频免费在线观看| 午夜免费鲁丝| 丝瓜视频免费看黄片| 夫妻性生交免费视频一级片| 自拍欧美九色日韩亚洲蝌蚪91| 成年人午夜在线观看视频| 丝袜脚勾引网站| 大陆偷拍与自拍| 亚洲伊人色综图| 五月天丁香电影| 久久久久精品国产欧美久久久 | 男女高潮啪啪啪动态图| 伦理电影免费视频| 久久久久久久久免费视频了| 久久人人爽av亚洲精品天堂| 看免费av毛片| 99久久99久久久精品蜜桃| 王馨瑶露胸无遮挡在线观看| 国产av国产精品国产| 丰满饥渴人妻一区二区三| 亚洲av成人不卡在线观看播放网 | 精品人妻熟女毛片av久久网站| 亚洲人成77777在线视频| 观看av在线不卡| www.精华液| 99热网站在线观看| 一区二区三区精品91| 国产黄色免费在线视频| 精品福利永久在线观看| 亚洲av欧美aⅴ国产| 男女边摸边吃奶| 日韩人妻精品一区2区三区| 亚洲一区二区三区欧美精品| 视频在线观看一区二区三区| 亚洲精品久久久久久婷婷小说| 超色免费av| 亚洲色图 男人天堂 中文字幕| 成人漫画全彩无遮挡| 蜜桃国产av成人99| 国产精品.久久久| 国产成人91sexporn| 欧美人与性动交α欧美软件| 久久毛片免费看一区二区三区| 青草久久国产| 国产在视频线精品| 久久av网站| 免费观看a级毛片全部| 午夜福利视频精品| 搡老岳熟女国产| 日韩av在线免费看完整版不卡| 国产高清国产精品国产三级| 九九爱精品视频在线观看| 精品国产乱码久久久久久男人| 大片电影免费在线观看免费| 蜜桃国产av成人99| 国产av码专区亚洲av| 久久久国产一区二区| 亚洲欧美激情在线| 国产高清不卡午夜福利| 激情五月婷婷亚洲| 国产爽快片一区二区三区| 欧美日韩亚洲综合一区二区三区_| 自拍欧美九色日韩亚洲蝌蚪91| 亚洲欧美日韩另类电影网站| 午夜福利在线免费观看网站| 国产亚洲最大av| netflix在线观看网站| 久久久久网色| 亚洲欧美一区二区三区久久| av国产久精品久网站免费入址| 亚洲精品久久午夜乱码| 亚洲专区中文字幕在线 | 色婷婷久久久亚洲欧美| 国产探花极品一区二区| 大码成人一级视频| 亚洲成人一二三区av| 国产精品一区二区在线观看99| 18禁裸乳无遮挡动漫免费视频| 亚洲欧美精品综合一区二区三区| 大香蕉久久网| 亚洲精品国产一区二区精华液| 国产精品一二三区在线看| 国产欧美亚洲国产| 啦啦啦在线观看免费高清www| 亚洲五月色婷婷综合| 久久久久精品人妻al黑| 国产亚洲欧美精品永久| 中文字幕制服av| 国产伦人伦偷精品视频| 91老司机精品| 精品一区二区三卡| 日韩不卡一区二区三区视频在线| 曰老女人黄片| 亚洲av电影在线进入| 亚洲av福利一区| 国产精品国产三级国产专区5o| 性高湖久久久久久久久免费观看| 男女边吃奶边做爰视频| 日韩制服丝袜自拍偷拍| 欧美精品人与动牲交sv欧美| 嫩草影院入口| 免费看不卡的av| 免费观看av网站的网址| √禁漫天堂资源中文www| 欧美日韩av久久| 成年人午夜在线观看视频| 美女视频免费永久观看网站| 热re99久久精品国产66热6| 亚洲欧美精品综合一区二区三区| 性色av一级| 19禁男女啪啪无遮挡网站| 亚洲熟女精品中文字幕| 91精品伊人久久大香线蕉| 欧美97在线视频| 欧美日韩视频精品一区| 最近的中文字幕免费完整| 国产精品一区二区在线观看99| 久久久精品94久久精品| 搡老岳熟女国产| 日本色播在线视频| 在线免费观看不下载黄p国产| 日韩熟女老妇一区二区性免费视频| 亚洲综合色网址| 女人被躁到高潮嗷嗷叫费观| 日韩一本色道免费dvd| 午夜日韩欧美国产| 欧美激情 高清一区二区三区| 色婷婷av一区二区三区视频| 免费看av在线观看网站| 久久99一区二区三区| 日日爽夜夜爽网站| 两个人免费观看高清视频| 精品一区二区三区四区五区乱码 | 女的被弄到高潮叫床怎么办| 十八禁人妻一区二区| 亚洲精品国产av成人精品| 欧美黄色片欧美黄色片| 一边亲一边摸免费视频| 国产爽快片一区二区三区| 叶爱在线成人免费视频播放| 一区二区av电影网| 激情五月婷婷亚洲| 在现免费观看毛片| 日韩电影二区| 大话2 男鬼变身卡| 成人国产麻豆网| av卡一久久| 人人妻,人人澡人人爽秒播 | 99国产综合亚洲精品| 久久免费观看电影| 国产男女内射视频| 久久久久精品性色| 免费在线观看完整版高清| 国产有黄有色有爽视频| 精品国产一区二区久久| 午夜免费鲁丝| 亚洲精品中文字幕在线视频| 久久毛片免费看一区二区三区| 性高湖久久久久久久久免费观看| 日本av免费视频播放| 精品少妇久久久久久888优播| 久久久久久久大尺度免费视频| 日韩,欧美,国产一区二区三区| 成人国产麻豆网| 一级毛片我不卡| 国产免费又黄又爽又色| a级毛片在线看网站| 丰满迷人的少妇在线观看| 在线亚洲精品国产二区图片欧美| 亚洲av电影在线进入| 亚洲精品乱久久久久久| 午夜激情av网站| 国产精品国产av在线观看| 91国产中文字幕| 久久99热这里只频精品6学生| 青春草视频在线免费观看| 日韩制服骚丝袜av| 久久久久久久大尺度免费视频| 亚洲精品视频女| 2021少妇久久久久久久久久久| 女性生殖器流出的白浆| 国产高清国产精品国产三级| 久久精品熟女亚洲av麻豆精品| 亚洲美女视频黄频| 韩国高清视频一区二区三区| 中文天堂在线官网| 在线 av 中文字幕| 亚洲第一区二区三区不卡| 国产免费视频播放在线视频| 欧美人与善性xxx| 欧美中文综合在线视频| 日韩精品免费视频一区二区三区| 18禁裸乳无遮挡动漫免费视频| 女人被躁到高潮嗷嗷叫费观| 免费观看av网站的网址| 色吧在线观看| 亚洲精品日韩在线中文字幕| 国产精品人妻久久久影院| 免费在线观看视频国产中文字幕亚洲 | 热re99久久精品国产66热6| 欧美激情极品国产一区二区三区| 日韩制服骚丝袜av| 男人爽女人下面视频在线观看| 亚洲第一青青草原| 午夜老司机福利片| 中文字幕精品免费在线观看视频| 午夜免费观看性视频| 国产福利在线免费观看视频| 人人妻人人澡人人看| 日韩欧美精品免费久久| 青春草视频在线免费观看| 免费人妻精品一区二区三区视频| 久久青草综合色| 十八禁高潮呻吟视频| 欧美激情高清一区二区三区 | 国产又爽黄色视频| 大香蕉久久成人网| 亚洲精品av麻豆狂野| 亚洲第一av免费看| 丝袜人妻中文字幕| 亚洲 欧美一区二区三区| 亚洲国产精品国产精品| 人成视频在线观看免费观看| 我要看黄色一级片免费的| 国产高清不卡午夜福利| 欧美日韩国产mv在线观看视频| 日韩,欧美,国产一区二区三区| 亚洲av电影在线观看一区二区三区| 欧美黑人精品巨大| 国产男女内射视频| 精品人妻在线不人妻| 777米奇影视久久| 极品少妇高潮喷水抽搐| 久久这里只有精品19| 国产欧美日韩一区二区三区在线| 操出白浆在线播放| 欧美成人精品欧美一级黄| 两性夫妻黄色片| 国产乱来视频区| 日韩人妻精品一区2区三区| 国产精品嫩草影院av在线观看| 亚洲成人av在线免费| 久久韩国三级中文字幕| 久久毛片免费看一区二区三区| 中文字幕人妻熟女乱码| 女的被弄到高潮叫床怎么办| 只有这里有精品99| 不卡av一区二区三区| 五月开心婷婷网| 校园人妻丝袜中文字幕| 成年人免费黄色播放视频| 精品少妇久久久久久888优播| 午夜福利,免费看| 久久久久精品国产欧美久久久 | 一边摸一边抽搐一进一出视频| 制服丝袜香蕉在线| 久久精品亚洲熟妇少妇任你| 不卡av一区二区三区| 欧美日韩一区二区视频在线观看视频在线| 99久久99久久久精品蜜桃| 色94色欧美一区二区| 亚洲精品av麻豆狂野| 国产一区二区三区综合在线观看| 丁香六月欧美| 啦啦啦 在线观看视频| 啦啦啦中文免费视频观看日本| 不卡视频在线观看欧美| 啦啦啦视频在线资源免费观看| 亚洲在久久综合| 精品一区二区三区av网在线观看 | 免费久久久久久久精品成人欧美视频| 人妻 亚洲 视频| 亚洲欧洲日产国产| 少妇被粗大的猛进出69影院| 青春草亚洲视频在线观看| a级片在线免费高清观看视频| 久久久精品94久久精品| 久久av网站| 我的亚洲天堂| 看免费成人av毛片| 色播在线永久视频| 欧美日韩一区二区视频在线观看视频在线| 国产精品熟女久久久久浪| 男女免费视频国产| 日韩 亚洲 欧美在线| 久久久久久久久久久久大奶| 九色亚洲精品在线播放| 又大又爽又粗| 免费看av在线观看网站| 久久久久精品久久久久真实原创| 极品少妇高潮喷水抽搐| 中国三级夫妇交换| 国产色婷婷99| 国产片内射在线| 国产又色又爽无遮挡免| 黄色怎么调成土黄色| 黄色视频不卡| 亚洲欧美一区二区三区久久| 久久精品国产亚洲av高清一级| 亚洲四区av| 男女下面插进去视频免费观看| www日本在线高清视频| 国产女主播在线喷水免费视频网站| 下体分泌物呈黄色| 人体艺术视频欧美日本| 久久精品久久精品一区二区三区| 天天躁夜夜躁狠狠躁躁| 久久久久久人妻| 欧美精品人与动牲交sv欧美| 亚洲精品av麻豆狂野| 日韩 欧美 亚洲 中文字幕| 久久精品久久久久久噜噜老黄| 亚洲一区中文字幕在线| 久久久久久久大尺度免费视频| 男人添女人高潮全过程视频| 纵有疾风起免费观看全集完整版| 精品第一国产精品| 飞空精品影院首页| 国产成人精品福利久久| 中文字幕最新亚洲高清| 超碰成人久久| 亚洲国产最新在线播放| 九九爱精品视频在线观看| 国产极品天堂在线| 不卡av一区二区三区| 成年人免费黄色播放视频| 色吧在线观看| 晚上一个人看的免费电影| 69精品国产乱码久久久| 热re99久久精品国产66热6| 人体艺术视频欧美日本| 美女福利国产在线| 岛国毛片在线播放| 午夜免费鲁丝| 亚洲精品国产av蜜桃| 1024视频免费在线观看| 99久国产av精品国产电影| 女性生殖器流出的白浆| 伦理电影免费视频| 赤兔流量卡办理| 男女边吃奶边做爰视频| 国产爽快片一区二区三区| 国产极品天堂在线| 97人妻天天添夜夜摸| 日韩熟女老妇一区二区性免费视频| 可以免费在线观看a视频的电影网站 | 亚洲国产精品成人久久小说| 国产成人精品无人区| 18禁国产床啪视频网站| 又大又黄又爽视频免费| 亚洲精品成人av观看孕妇| 国产免费现黄频在线看| 国产一区二区 视频在线| 欧美变态另类bdsm刘玥| 黑人欧美特级aaaaaa片| 久久精品人人爽人人爽视色| www日本在线高清视频| 亚洲精品日韩在线中文字幕| 久久久久久免费高清国产稀缺| 日本一区二区免费在线视频| 搡老岳熟女国产| 一级毛片 在线播放| 亚洲av在线观看美女高潮| 黄片小视频在线播放| 天天添夜夜摸| 亚洲精品国产色婷婷电影| 免费黄频网站在线观看国产| 波多野结衣一区麻豆| 亚洲精品在线美女| 国产精品 国内视频| 亚洲四区av| 免费观看人在逋| 色播在线永久视频| 久久精品人人爽人人爽视色| 人人妻人人添人人爽欧美一区卜| 成人午夜精彩视频在线观看| 国产精品人妻久久久影院| 久久久久久人妻| 波多野结衣一区麻豆| 青春草国产在线视频| 伊人亚洲综合成人网| 最近手机中文字幕大全| 九草在线视频观看| 久久久久久久久免费视频了| 另类亚洲欧美激情| 午夜激情久久久久久久| 伊人久久国产一区二区| 观看av在线不卡| 亚洲精品第二区| 男女下面插进去视频免费观看| 亚洲欧美一区二区三区久久| 老汉色av国产亚洲站长工具| xxxhd国产人妻xxx| 一本一本久久a久久精品综合妖精| 亚洲国产欧美在线一区| 亚洲av成人不卡在线观看播放网 | 亚洲成av片中文字幕在线观看| 99久久99久久久精品蜜桃| 欧美精品一区二区大全| 女的被弄到高潮叫床怎么办| 777米奇影视久久| 人妻一区二区av| 午夜91福利影院| 欧美精品一区二区大全| 欧美日韩亚洲高清精品| 又粗又硬又长又爽又黄的视频| 高清视频免费观看一区二区| 丰满少妇做爰视频| 汤姆久久久久久久影院中文字幕| 嫩草影视91久久| www.精华液| 九草在线视频观看| 曰老女人黄片| 操出白浆在线播放| 秋霞伦理黄片| 久久韩国三级中文字幕| 一级片免费观看大全| 久久久久久人人人人人| 亚洲精品国产一区二区精华液| 精品人妻熟女毛片av久久网站| 一本大道久久a久久精品| 免费高清在线观看视频在线观看| av线在线观看网站| 夫妻午夜视频| 老汉色av国产亚洲站长工具| 国产精品嫩草影院av在线观看| 国产一区二区三区av在线| 一个人免费看片子| 人人澡人人妻人| av.在线天堂| 亚洲欧美激情在线| 成人国产av品久久久| 最黄视频免费看| 精品国产一区二区三区四区第35| 高清av免费在线| 精品人妻在线不人妻| 亚洲欧洲精品一区二区精品久久久 | 午夜福利免费观看在线| 午夜福利视频精品| 欧美日韩亚洲综合一区二区三区_| 国产精品熟女久久久久浪| a级毛片在线看网站| 天堂俺去俺来也www色官网| 国产黄色免费在线视频| 久久久久久人人人人人| 菩萨蛮人人尽说江南好唐韦庄| videos熟女内射| 国产男人的电影天堂91| 午夜免费观看性视频| 亚洲欧洲精品一区二区精品久久久 | 秋霞伦理黄片| 久久久久久久久免费视频了| 成人亚洲精品一区在线观看| 不卡av一区二区三区| 日韩av在线免费看完整版不卡| 老司机靠b影院| 一本—道久久a久久精品蜜桃钙片| 久久久精品免费免费高清| svipshipincom国产片| 少妇被粗大的猛进出69影院| 久久青草综合色| 香蕉丝袜av| 亚洲五月色婷婷综合| 看非洲黑人一级黄片| 三上悠亚av全集在线观看| 亚洲一级一片aⅴ在线观看| 欧美变态另类bdsm刘玥| 午夜免费鲁丝| 大陆偷拍与自拍| 亚洲国产精品成人久久小说| 91aial.com中文字幕在线观看| 亚洲图色成人| 日本猛色少妇xxxxx猛交久久| 人人妻人人爽人人添夜夜欢视频| 黄色毛片三级朝国网站| 免费观看人在逋| 九色亚洲精品在线播放| 香蕉国产在线看| 丝瓜视频免费看黄片| 国产一区亚洲一区在线观看| 久久婷婷青草| 综合色丁香网| 精品国产乱码久久久久久男人| 嫩草影院入口| 在线看a的网站| 99热全是精品| 视频区图区小说| 精品一区二区三卡| av一本久久久久| 在线天堂中文资源库| 一区二区三区乱码不卡18| 51午夜福利影视在线观看| 中文乱码字字幕精品一区二区三区| av网站免费在线观看视频| 在线观看www视频免费| 少妇人妻 视频| 国产精品久久久av美女十八| 黑人猛操日本美女一级片| 欧美黑人欧美精品刺激| 精品少妇内射三级| 亚洲第一区二区三区不卡| 免费黄色在线免费观看| 美女主播在线视频| 在线观看人妻少妇| 国产精品欧美亚洲77777| 国产成人午夜福利电影在线观看| av国产精品久久久久影院| 大香蕉久久网| 国产精品熟女久久久久浪| 亚洲精品aⅴ在线观看| 日韩中文字幕欧美一区二区 | 看非洲黑人一级黄片| av在线老鸭窝| 中国三级夫妇交换| 久久鲁丝午夜福利片| 精品少妇一区二区三区视频日本电影 | 欧美乱码精品一区二区三区| 亚洲熟女精品中文字幕| 赤兔流量卡办理|