• <tr id="yyy80"></tr>
  • <sup id="yyy80"></sup>
  • <tfoot id="yyy80"><noscript id="yyy80"></noscript></tfoot>
  • 99热精品在线国产_美女午夜性视频免费_国产精品国产高清国产av_av欧美777_自拍偷自拍亚洲精品老妇_亚洲熟女精品中文字幕_www日本黄色视频网_国产精品野战在线观看 ?

    影響主觀評分一致性的評分者自身特征分析

    2010-08-30 05:50:18
    關鍵詞:教齡評分標準信度

    李 斌

    (北京師范大學發(fā)展心理研究所,北京 100875)

    影響主觀評分一致性的評分者自身特征分析

    李 斌

    (北京師范大學發(fā)展心理研究所,北京 100875)

    文章編制一份調(diào)查問卷對參加某全國統(tǒng)一考試作文題目評閱的評分者進行調(diào)查,來分析影響評分一致性的評分者自身特征。首先,采用探索性因子分析方法對數(shù)據(jù)進行處理后,得出影響主觀評分一致性的評分者自身特征為六因子結(jié)構(gòu),即:責任心、自信心、情緒穩(wěn)定性、評分經(jīng)驗、標準把握能力及執(zhí)裁能力。然后,應用單因素方差分析法研究被調(diào)查者的有關人口學特征與評分者自身特征的關聯(lián),研究表明教齡和評分經(jīng)驗、閱卷次數(shù)和情緒穩(wěn)定性之間存在明顯正相關。

    主觀評分一致性;因素結(jié)構(gòu);探索性因子分析

    一 問題提出

    主觀評分是指具有一定專業(yè)知識和經(jīng)驗背景的評分者,按照一定的評分標準對被測對象的作答內(nèi)容或行為表現(xiàn)做出有效和客觀評判的思維過程,其目的是對被測對象進行打分 (判斷其類別)或者以此分數(shù)來決定被測對象的排名順序。主觀評判性是主觀評分的本質(zhì)屬性,[1]每個評分主體即評分者依據(jù)評分標準做出某一種判斷,具有強烈的主觀色彩,帶有許多人為估計的成分。評分者的知識、經(jīng)驗、性格、習慣以及心態(tài)等因素都體現(xiàn)在評分活動過程中并影響評分結(jié)果,造成多個評判主體間的不一致現(xiàn)象。[2]因此在實際應用中評分信度常常較難保障,影響了主觀評分的客觀性、公平性和科學性。

    目前國內(nèi)外研究者主要運用不同的理論模型從統(tǒng)計學的角度,針對主觀評分者的信度進行研究:經(jīng)典測量理論將主觀測試的信度理解為評分者所評分數(shù)的一致性,并用相關系數(shù)表示信度系數(shù)用以計算評分者的一致性,如皮爾遜積差相關、斯皮爾曼等級相關、肯德爾等級相關以及 Cronbach’s Alpha系數(shù)等組內(nèi)相關法。[3]概化理論則通過識別各種誤差來源以及他們對于總變異的貢獻大小,來提供一個總體概化系數(shù)以反應測量的水平。該理論全面描述評分的各種誤差來源,特別是評分者效應,不單關注某個評分員,還提供了評分員間信度的信息。[4]項目反應理論更關注于對評分員效應的分析識別,得出評分員的不一致性不僅表現(xiàn)為嚴厲度的差異,還表現(xiàn)在準確度和集中度的差異上。[5,6,7]有的學者針對主觀評分的誤差分析和控制進行研究,關注主觀評分各種誤差來源及其特點研究[8,9],蘇永華博士研究了影響主觀題評分誤差的各種心理效應。[10]有研究評分員隊伍建設、評分資格認證以及評分員培訓在控制主觀評分不一致性現(xiàn)象中的作用。[11,12,13]還有的學者結(jié)合主觀評分的應用背景環(huán)境展開相關研究,如結(jié)合英語口語測試討論評分者效應的各種影響因素;[14,15]研究結(jié)構(gòu)化面試中評分過程中追問方式、首因效應、面試者接收信息的順序等影響因素,[16]有四個影響因素維度,即“評價維度、測評的情景、評價員、受測被試”四個不同側(cè)面影響到了測評的有效性,[17]研究績效考核中寬大效應的成因及其控制方法[18]等等。

    總的來說,對主觀評分的研究國外學者注重從統(tǒng)計學角度對主觀評分結(jié)果進行衡量分析與應用,而國內(nèi)則偏重從實踐應用的角度來分析主觀評分不一致的影響因素以及采取的一些可行措施。主觀評分活動是一個復雜的思維過程,受到諸多來自自身和環(huán)境等因素的影響,并且人們對主觀評分不一致產(chǎn)生的機理還不明確,對影響因素較難有全面的認識;主觀評分一致性影響因素的研究分散在信度衡量研究、誤差分析與控制研究以及一些具體背景問題的研究中,同時研究者又從不同側(cè)面對其進行研究,比如:從整個評分系統(tǒng)、評分過程、評分者效應、評分者的個體效應等。本文不涉及主觀試題、評分標準設計以及被試的表現(xiàn)或作答等因素,主要以主觀評分者的自身心理特征為主,通過設計的調(diào)查問卷來研究影響主觀評分一致性的評分者自身特征因素,并進行解釋。

    二 研究方法

    (一)被試選擇

    本文選擇參加某全國統(tǒng)一考試英語科目作文和語文作文網(wǎng)上閱卷的教師為被試,評分者對考生的作文在計算機上獨立打分,彼此互不影響。

    (二)工具編制

    我們檢索了已有評分者一致性研究文獻,沒有找到對評分者自身特征進行研究的調(diào)查問卷。于是通過專家訪談、預試等程序編制了評分者自身特征調(diào)查問卷,來分析評分者自身特征對評分一致性的影響。

    首先,采用訪談法搜集影響主觀評分一致性的各種因素。我們選擇了多年從事主觀試卷評閱,具有豐富主觀評分經(jīng)驗的專家共 10人,進行了深度訪談。主要的訪談提綱是:

    問題一:您是如何理解“主觀評分一致性”這個概念的?并舉例說明。

    問題二:請您列舉出一些“主觀評分不一致”的現(xiàn)象,并用實例說明。

    問題三:您以為影響主觀評分一致性的因素有哪些?請列舉說明。

    問題四:主觀評分的特點是依靠主觀評分者的主觀判斷,請您談談自身某些特征對評分結(jié)果有哪影響?

    問題五:請您就影響主觀評分一致性的不同因素來源,列舉出影響主觀評分一致性的各因素? (每個因素來源至少五個)

    問題六:關于影響主觀評分者一致性問題,您的其他想法?

    然后,確定調(diào)查問卷的內(nèi)容。將訪談分析中收集到的影響主觀評分一致性的因素進行歸納整理,得出主觀評分一致性的影響因素有 22項,即來自主觀評分環(huán)境的有安靜程度、氣氛等;來自主觀評分者方面的有評分者的自身素質(zhì)、專業(yè)知識水平、業(yè)務水平、評分經(jīng)驗、認真負責態(tài)度、注意力、心理、心情及疲勞度等;來自被試者方面的有被試者書寫的字體清晰度、內(nèi)容要點突出、表達準確、卷面整潔度、字跡工整程度等;來自評分標準的有評分標準中主觀題的分值與平時百分制打分不協(xié)調(diào);來自主觀評分組織管理工作的有評卷任務壓力、評卷方式、專家和組長的意見、評分過程管理的嚴格程度、閱卷報酬計算標準等。因本文主要從評分者自身角度來探索影響主觀評分一致性的因素,因此不考慮評分環(huán)境、評分標準及被測試者表現(xiàn)等因素,從而編制了包含 25個調(diào)查項目的問卷。

    經(jīng)隨機選取參加某省統(tǒng)一考試英語作文閱卷的教師進行預試 (發(fā)放問卷 80份,收回 72份,有效問卷 71份)。經(jīng)對問卷預試結(jié)果的分析,剔出 2項無關項,最終得到 20項主觀評分一致性的影響因素調(diào)查問卷。

    (三)施測

    我們分兩次向參加某全國英語考試作文和語文作文網(wǎng)上閱卷的教師發(fā)放調(diào)查問卷 120份,收回115份,剔除無效問卷 5份,共獲得有效問卷 110份。這 110位評分者的人口學特征為:按性別分,男40人,女 70人;按年齡分,30歲以下 5人,31-40歲 85人,41-50歲 11人,51歲以上 9人;按教齡分,2年以下 26人,3-8年 54人,8年以上 30人;按從參加閱卷的次數(shù)分,第一次參加 8人,第二次 22人,第三次 34人,參加 4次以上 46人。

    三 數(shù)據(jù)分析

    我們采用 Cronbach’sAlpha系數(shù)法對調(diào)查問卷信度進行分析。一般來說,Cronbach’s Alpha如量表的信度系數(shù)在 0.9以上,表示量表的信度很好;信度系數(shù)在 0.8~0.9之間,表示量表的信度可以接受;信度系數(shù)在 0.7~0.8之間,表示量表有些項目需要修訂;如果量表的信度系數(shù)在 0.7以下,表示量表有些項目需要拋棄[19]。本調(diào)查問卷 20個調(diào)查項的信度Alpha=0.862 0,因此其信度和探索分析結(jié)果是可以接受的。

    本調(diào)查問卷 K MO值為 0.685有些偏低,但滿足大于 0.5的條件,還是適合因素分析[20]。

    (一)因子結(jié)構(gòu)

    本文采用比較常用的主成分析法來進行公共因子的提取,因子旋轉(zhuǎn)采用方差最大化正交旋轉(zhuǎn)方法,得到了影響主觀評分一致性因素結(jié)構(gòu),累計解釋變異數(shù)為 68.029%,能解釋出大部分整體的變異。共抽取出了 6個公因子,各個公因子的解釋指標都在三個或三個以上。其中各項指標在各因子上的載荷達到 0.8以上的占 35%,載荷在 0.7-0.8的占到15%,載荷在 0.6-0.7的占到 20%,載荷在 0.5-0.6之間的占到 30%。解釋命名后,得到影響主觀評分一致性的評分者自身特征六因子結(jié)構(gòu),即責任心因素、情緒穩(wěn)定性因素、自信心因素、評分經(jīng)驗因素和標準把握能力因素。

    因素一命名為“責任心”:包含 3.閱卷時我能很好的安排時間,使各項評閱工作按時完成;20.對各種閱卷工作我都能及時正確地完成;5.我能夠高質(zhì)量地完成閱卷工作;16.閱卷中我會盡力把相關問題考慮周全。主要體現(xiàn)評分中評分者主觀上重視、行動上落實、嚴格要求自己、有信心勝任主觀評分工作。

    因素二命名為“情緒穩(wěn)定性”:包含 10.情緒激動會使我的評分出現(xiàn)偏差;8.評分工作環(huán)境的偶然變化會引起我情緒的改變;17.我的打分會受到評卷過程中其他無關事件的干擾。情緒和心情都是評分者的心理活動表現(xiàn),這些都影響到評分者的主觀判斷,情緒會影響到對被試的態(tài)度以及對評分標準的把握。

    因素三命名為“自信心”:包含 11.我認為專業(yè)知識水平?jīng)Q定了評分的公正性;6.我評分時精力集中思維敏捷;7.評分中我會合理安排評分細則等三項。評分者自信來自于本身的專業(yè)背景和知識水平、評分過程中的判斷思維活動以及自己對主觀評分標準的科學理解和把握,自信因素將影響到主觀評分的整個過程環(huán)節(jié)。

    因素四命名為“評分經(jīng)驗”:包含 2.過去的評分經(jīng)驗有利于提高我的評分效率;15.我的第一印象往往是正確的;1.我在評分時是理性的等三項。評分者的經(jīng)驗形成了定勢的評分行為,造成評分者的偏好和盲目自信,只有經(jīng)驗和客觀標準的有機結(jié)合才是理性的評分。

    因素五命名為“執(zhí)裁能力”:包含 12.我打分有時猶豫不決;13.缺乏評分經(jīng)驗會使我對題目評分的判斷把握不準確;4.面對繁重的評卷任務我會感到不安等三項。體現(xiàn)評分者對評分問題的應急處理能力以及對評分任務的適應性,和評分者所具有的專業(yè)知識、評分經(jīng)驗及評分標準的熟練掌握程度。

    因素六命名為“標準把握能力”:包含 18.評分時過去的某些評分經(jīng)驗可能會與評分標準的要求不符;19.感覺疲勞時我會放松對評分過程的把握;14.通常要花很多時間我才能靜下心來評分;9.我對評分標準把握得不好。評分過程中評分者對評分標準的把握尺度很重要,不能前緊后松、忽高忽低,標準的把握不能受制于先驗的評分經(jīng)驗和評分習慣。

    (二)人口學特征與主觀評分一致性自身特征的關聯(lián)分析

    對調(diào)查問卷數(shù)據(jù)進行探索性分析得到六因子結(jié)構(gòu)后,以六因子的因子得分數(shù)據(jù)和被調(diào)查教師的人口學特征數(shù)據(jù)為依據(jù),運用方差分析方法 (SPSS15. 0中的One-Way ANOVA)來分析人口學特征與各因素的關系,并通過平均值比較、方差檢驗和組間多重比較的方式進行分析檢定,得到的分析檢定結(jié)果如下表所示。因為在被試中研究生以上學歷占總數(shù)的 86%,其他學歷人數(shù)較少,年齡也是集中在 30到40歲,數(shù)據(jù)沒有代表性,僅分析教齡和閱卷次數(shù)與自身特征的關聯(lián)。

    表1 教齡和閱卷次數(shù)對主觀評分一致性影響因素分析檢定結(jié)果(n=110)

    平均值比較的結(jié)果說明不同的教齡層次和不同的閱卷次數(shù)在主觀評分一致性影響因素的六個影響維度上都存在一般性差異,但是否在顯著性差異則需要通過方差檢驗的結(jié)果來說明,由表中的 F值可知,三個不同層次的教齡組在評分經(jīng)驗維度上的差異達到了 0.05;四個不同層次的閱卷次數(shù)組在情緒穩(wěn)定維度上的差異達到了 0.05。

    教齡的差異分析,在評分經(jīng)驗維度上 8年以上教齡顯著高于 2年以下教齡,其他維度沒有發(fā)現(xiàn)因教齡差異而帶來的顯著差異。不同教齡的教師僅在“評分經(jīng)驗”上差異顯著,而在其他因素上不存在顯著差異。教齡越長,評分經(jīng)驗也就積累越多。

    閱卷次數(shù)的差異分析,在情緒穩(wěn)定性維度上閱卷次數(shù) 4次以上的顯著高于只參加過 1次閱卷的,其他維度沒有發(fā)現(xiàn)因閱卷次數(shù)差異而帶來的顯著差異。參加過不同閱卷次數(shù)的人員在“情緒穩(wěn)定性”上表現(xiàn)出差異顯著,可見,參加閱卷的次數(shù)越多,閱卷者的情緒越容易保持穩(wěn)定。

    四 結(jié)論與展望

    本文通過專家訪談方法,來搜集和整理主觀評分一致性的各影響因素,并通過編制主觀評分一致性評價者自身特征問卷來獲取主觀評分者對各影響因素的評定信息,然后對調(diào)查問卷數(shù)據(jù)進行探索性因子分析,得出主觀評分一致性影響因素的因子結(jié)構(gòu),即責任心、自信心、情緒穩(wěn)定性、評分經(jīng)驗和標準把握能力和執(zhí)裁力六個因素,六因素結(jié)構(gòu)分別從主觀評分過程和主觀評分者方面對主觀評分不一致性的產(chǎn)生進行了解釋。一般來說,評分者的責任心和自信心能夠保證評閱任務的順利完成,其情緒穩(wěn)定性則是不受外界干擾的關鍵因素,過去的經(jīng)驗對一致性影響不能忽視,它使評分者可以盡快適應評分要求,而標準把握能力則是反應評閱工作中標準的重要性,一個評分者具有良好的執(zhí)裁力才能作出客觀的評判。通過單因素方差分析得出主觀評分者的人口統(tǒng)計特征對主觀評分一致性影響因素結(jié)構(gòu)的影響,即教齡和閱卷次數(shù)分別對主觀評分一致性影響因素結(jié)構(gòu)中的自信心、評分經(jīng)驗和情緒穩(wěn)定三個維度影響顯著。

    影響主觀評分一致性的評分者自身因素的驗證和應用是今后的兩個研究內(nèi)容。本文經(jīng)探索分析得到的影響因素結(jié)構(gòu)只是在初步分析調(diào)查數(shù)據(jù)的基礎上得到的,還需要在更大樣本的調(diào)查數(shù)據(jù)基礎上來進行驗證性因子分析,來驗證并修正六因子結(jié)構(gòu)模型,以得到模型結(jié)構(gòu)簡單、與大量樣本數(shù)據(jù)擬合度較好的影響因素結(jié)構(gòu)模型。主觀評分一致性的影響因素結(jié)構(gòu)在一定程度上解釋了主觀評分不一致性產(chǎn)生的根源和常見因素,希望把這一結(jié)果應用到對主觀評分信度的控制中去。比如在選擇主觀評分者時,要選拔那些責任心強、自信心高且情緒穩(wěn)定,能夠很好把握標準的人員,這樣能夠減少主觀評分的不一致性;并且優(yōu)先選擇那些具有一定專業(yè)知識背景學歷較高、教齡較長并多次參加過主觀評分閱卷的人員,以便在主觀評分者選擇階段來預先控制主觀評分不一致現(xiàn)象的產(chǎn)生。

    [1]劉建立.體育競賽中主觀評分的概念、內(nèi)涵及其評判特征研究[J].體育與科學,2008(3):78-81.

    [2]徐曉鋒,劉 勇.評分者內(nèi)部一致性的研究和應用[J].心理科學,2007(5):1175-1178.

    [3]孫曉敏,張厚粲.表現(xiàn)性評價中評分者信度估計方法的比較研究——從相關法、百分比法到概化理論[J].心理科學,2005(3):646-649.

    [4]魏高峽,李佑發(fā),孫曉敏.概化理論及其在運動成績主觀評定中的應用 [J].北京體育大學學報,2006(1):53-55.

    [5]Thomas Eckes.Examining Rater Effects in TestDaF W riting and Speaking Performance Assess ments:A Many-Facet Rasch Analysis[J].Language AssessmentQuarterly,2005, 2(3):197-221.

    [6]George Engelhard,Jr.Examining Rater Errors in the Assessment of W ritten Composition W ith a Many-Faceted RaschModel[J].Journal of EducationalMeasurement Summer,1994,31(2):93-112.

    [7]George Engelhard,Jr.Evaluating Rater Accuracy in Perfor mance Assess ments[J].Journal of EducationalMeasurement Spring,1996,33(1):56-70.

    [8]王文成.筆試主觀性試題評分誤差及其控制研究[D].華中師范大學碩士學位論文,2005.

    [9]Okim Kang.Ratings of L2 Oral Performance in English: Relative I mpactof RaterCharacteristics andAcousticMeasures of Accentedness[J].Spaan Fellow Working Papers in Second or Foreign Language Assess ment,2008(6):181-205.

    [10]蘇永華.現(xiàn)代人才測評理論與方法研究[D].華東師范大學博士學位論文,2000.

    [11]O Loughlin.K.The I mpact of Gender in Oral Proficiency Testing[J].Language Testing,2002(2):169-192.

    [12]Bachman,L.F.Some Reflection on Task-Based Language Performance Assess ment[J].Language Testing, 2006(2):452-476.

    [13]Steven Barrett.The I mpact of Training on Rater Variability [J].International Education Journal,2001,2(1):49-58.

    [14]Wang Haizhen.Rater Perceptions of Factors thatAffect the Rating of TEM-4 oral test[J].Celea Journal(Bimonthly) (30)2:9-15.

    [15]Lawrence T.DeCarlo A Model of Rater Behavior in Essay GradingBased on Signal Detection Theory[J].Journal of EducationalMeasurement Spring,2005,42(1):53-76.

    [16]孫悅博.結(jié)構(gòu)化面試中評分過程影響因素的實驗研究[D].吉林大學碩士學位論述文,2007.

    [17]彭平根.評價中心的測評有效性及其影響因素的實證研究[D].華東師范大學博士學位論文,2003.

    [18]周 浩,龍立榮.績效考核中寬大效應的成因及控制方法[J].心理科學進展,2005(6):806-813.

    [19]王劍輝,肖 瑋,車文博.軍事飛行員職業(yè)自我效能感量表的探索性分析[J].中華航空航天醫(yī)學雜志,2005, 16(1):34-37.

    [20]李永鑫,趙 娜.工作 -家庭支持的結(jié)構(gòu)與測量及其調(diào)節(jié)作用[J].心理學報,2009(9):863-874.

    The Analysis of Raters’O wn Characteristics Influencing Subjective Scoring Agreement

    L IBin
    (Institute of Developm ental Psychology,B eijing Nor m al University,B eijing100875,China)

    By surveying many raterswho attended the writing scoring in a National Examination with the questionnaire,this papermakes an analysis of raters’own characteristicswhich influence the subjective scoring agreement. Firstly,after processing the collected data with the method of exploratory factor analysis,it finds that the raters’own characteristicswhich influence subjective scoring agreement are of six-factor structure,namely,responsibility,self-confidence,stabilization of emotion,scoring experiences,and the abilities in grasping criterion and exercising scoring.Then,by the means of single factor analysis of variance this paper explores the relationship between the factor structure and demographic variable,with the result that therewere significantpositive correlations between education and self-confidence,teaching years and scoring experiences,total scoring ti mes and stabilization of emotion respectively.

    subjective scoring agreement;factorial structure;exploratory factor analysis

    book=75,ebook=296

    G449.7

    A

    1000-5935(2010)03-0075-05

    (責任編輯 石 濤)

    2009-11-08

    李 斌(1974-),男,山東章丘人,教育部基礎教育課程教材發(fā)展中心助理研究員,北京師范大學發(fā)展心理研究所在讀博士,主要從事教育評價與測量方向的研究。

    猜你喜歡
    教齡評分標準信度
    《廣東地區(qū)兒童中醫(yī)體質(zhì)辨識量表》的信度和效度研究
    湖南省孤獨癥康復教師培訓需求的調(diào)查與分析
    讀天下(2020年21期)2020-09-22 18:36:17
    提高教師教齡津貼,激勵教師終身從教
    教育家(2018年41期)2018-11-20 11:49:54
    中學數(shù)學教師的繼續(xù)教育研究
    考試周刊(2017年87期)2018-01-31 17:40:41
    永遠的格紋
    優(yōu)雅(2017年11期)2017-11-11 08:59:21
    初高中英語作文評分標準初探
    海峽兩岸高考語文作文評分標準的比較研究
    文學教育(2016年33期)2016-08-22 12:58:50
    馬秀珍:建議提高教齡津貼標準
    民主與科學(2016年2期)2016-05-18 07:56:24
    科技成果評價的信度分析及模型優(yōu)化
    體育社會調(diào)查問卷信度檢驗的方法學探索——基于中文核心體育期刊163篇文章分析
    亚洲av免费高清在线观看| 国产伦精品一区二区三区四那| 赤兔流量卡办理| 欧美 日韩 精品 国产| 韩国高清视频一区二区三区| av在线app专区| 久久久欧美国产精品| 成人午夜精彩视频在线观看| 99re6热这里在线精品视频| h日本视频在线播放| 日韩亚洲欧美综合| 涩涩av久久男人的天堂| 夜夜爽夜夜爽视频| 少妇高潮的动态图| 久久精品人妻少妇| 亚洲综合色惰| 18禁在线播放成人免费| 99热6这里只有精品| 九九爱精品视频在线观看| 一级爰片在线观看| 十八禁网站网址无遮挡 | 色婷婷久久久亚洲欧美| 建设人人有责人人尽责人人享有的 | 伦理电影免费视频| 啦啦啦视频在线资源免费观看| 久久人人爽av亚洲精品天堂 | 国产av一区二区精品久久 | 夜夜爽夜夜爽视频| 伦理电影大哥的女人| 蜜臀久久99精品久久宅男| 亚洲欧美精品专区久久| av又黄又爽大尺度在线免费看| 国产精品爽爽va在线观看网站| 少妇猛男粗大的猛烈进出视频| 精品一区二区三区视频在线| 成年av动漫网址| 国产成人精品一,二区| 亚洲国产精品999| 九草在线视频观看| 婷婷色麻豆天堂久久| 亚洲欧美精品专区久久| 国产精品免费大片| 亚洲欧美清纯卡通| 妹子高潮喷水视频| 久久这里有精品视频免费| 亚洲国产日韩一区二区| 男女啪啪激烈高潮av片| 色吧在线观看| 精品少妇久久久久久888优播| 午夜福利影视在线免费观看| 免费看日本二区| 一个人免费看片子| 国产探花极品一区二区| 大话2 男鬼变身卡| 日韩不卡一区二区三区视频在线| 亚洲国产欧美人成| 大片免费播放器 马上看| 色视频在线一区二区三区| 男男h啪啪无遮挡| 国产老妇伦熟女老妇高清| 欧美丝袜亚洲另类| 欧美精品亚洲一区二区| 啦啦啦啦在线视频资源| h视频一区二区三区| 看免费成人av毛片| 91精品一卡2卡3卡4卡| h日本视频在线播放| 亚洲激情五月婷婷啪啪| 色吧在线观看| 国产成人免费无遮挡视频| a 毛片基地| 精品99又大又爽又粗少妇毛片| 欧美97在线视频| 岛国毛片在线播放| 老司机影院毛片| av在线观看视频网站免费| 亚洲综合色惰| 久久韩国三级中文字幕| 啦啦啦啦在线视频资源| 午夜免费男女啪啪视频观看| 午夜福利网站1000一区二区三区| 亚洲国产精品专区欧美| 一级片'在线观看视频| 有码 亚洲区| 美女内射精品一级片tv| 极品教师在线视频| 一级毛片aaaaaa免费看小| 国产成人freesex在线| 1000部很黄的大片| 亚洲美女视频黄频| 国产成人a∨麻豆精品| 久久久久国产精品人妻一区二区| 精品亚洲乱码少妇综合久久| 十八禁网站网址无遮挡 | 亚洲精品亚洲一区二区| 国产男女内射视频| 最后的刺客免费高清国语| 韩国av在线不卡| 在线观看一区二区三区激情| 精品酒店卫生间| 永久网站在线| 亚洲综合色惰| 国产av国产精品国产| 午夜福利影视在线免费观看| videos熟女内射| 欧美日本视频| 日韩一本色道免费dvd| 日本vs欧美在线观看视频 | 国产国拍精品亚洲av在线观看| 综合色丁香网| 精品久久久久久久末码| 一级av片app| 国产深夜福利视频在线观看| 亚洲无线观看免费| 亚洲激情五月婷婷啪啪| 精品一区在线观看国产| 99久国产av精品国产电影| 香蕉精品网在线| tube8黄色片| 亚洲av日韩在线播放| 精品久久久久久电影网| 一级毛片电影观看| 亚洲国产精品成人久久小说| 亚洲av成人精品一区久久| 岛国毛片在线播放| 亚洲欧洲国产日韩| 欧美一区二区亚洲| 在线免费观看不下载黄p国产| 少妇精品久久久久久久| 最近中文字幕2019免费版| freevideosex欧美| 一级毛片电影观看| 啦啦啦中文免费视频观看日本| 老司机影院成人| 久久精品国产鲁丝片午夜精品| 高清视频免费观看一区二区| 免费高清在线观看视频在线观看| 国产综合精华液| av女优亚洲男人天堂| av黄色大香蕉| 欧美区成人在线视频| 精品国产乱码久久久久久小说| 一边亲一边摸免费视频| 婷婷色综合www| 亚洲精品国产av蜜桃| 成人二区视频| a级一级毛片免费在线观看| 美女脱内裤让男人舔精品视频| 天堂中文最新版在线下载| 亚洲伊人久久精品综合| 免费观看性生交大片5| 在线免费观看不下载黄p国产| 精品一品国产午夜福利视频| 欧美精品一区二区大全| 久久久国产一区二区| 婷婷色综合www| 亚洲图色成人| av福利片在线观看| 亚洲欧美成人综合另类久久久| 丰满迷人的少妇在线观看| 熟女人妻精品中文字幕| 日韩在线高清观看一区二区三区| 日本黄大片高清| 日韩制服骚丝袜av| 日韩免费高清中文字幕av| 国产精品伦人一区二区| 亚洲,欧美,日韩| 久久久久久九九精品二区国产| 一本—道久久a久久精品蜜桃钙片| 欧美zozozo另类| 亚洲欧美日韩另类电影网站 | 制服丝袜香蕉在线| 亚洲欧洲国产日韩| 春色校园在线视频观看| 伊人久久国产一区二区| 久久久久久久久久成人| 美女主播在线视频| 久久97久久精品| av黄色大香蕉| 午夜免费男女啪啪视频观看| 欧美精品一区二区免费开放| 舔av片在线| 亚洲欧美中文字幕日韩二区| 亚洲精品第二区| 在线观看一区二区三区激情| 中文天堂在线官网| 黑人猛操日本美女一级片| 国产精品99久久99久久久不卡 | 午夜免费观看性视频| 中文天堂在线官网| 欧美精品国产亚洲| 久久久色成人| 久久毛片免费看一区二区三区| 国产精品一区二区性色av| 国产精品国产三级国产av玫瑰| av卡一久久| 国产精品久久久久久久久免| 久久久久久久久久成人| 国产黄频视频在线观看| 免费大片18禁| 九九爱精品视频在线观看| 大香蕉久久网| 日韩制服骚丝袜av| 五月天丁香电影| 国产日韩欧美亚洲二区| 人体艺术视频欧美日本| 亚洲av男天堂| av女优亚洲男人天堂| 亚洲三级黄色毛片| 三级国产精品欧美在线观看| 亚洲欧洲日产国产| a 毛片基地| 秋霞伦理黄片| 2022亚洲国产成人精品| 在线观看国产h片| 插阴视频在线观看视频| 99热网站在线观看| 久久精品熟女亚洲av麻豆精品| 少妇熟女欧美另类| 亚洲精品第二区| 亚洲人成网站在线播| 精品视频人人做人人爽| 亚洲最大成人中文| 男的添女的下面高潮视频| 国产精品成人在线| 视频区图区小说| av播播在线观看一区| av免费观看日本| 国产高清国产精品国产三级 | 免费看日本二区| 国产在线一区二区三区精| 亚洲中文av在线| 黄色配什么色好看| 亚洲国产av新网站| 最近2019中文字幕mv第一页| 在线观看免费视频网站a站| 三级国产精品欧美在线观看| 在线观看三级黄色| 欧美xxxx性猛交bbbb| av视频免费观看在线观看| av播播在线观看一区| 一区二区三区四区激情视频| 99热这里只有精品一区| .国产精品久久| 精品一区二区免费观看| 我要看黄色一级片免费的| 青春草视频在线免费观看| 中文天堂在线官网| 观看美女的网站| 欧美日韩亚洲高清精品| 色综合色国产| 亚州av有码| 亚洲精品日本国产第一区| 亚洲中文av在线| 狂野欧美激情性xxxx在线观看| 丝袜喷水一区| 亚洲伊人久久精品综合| 久久久久久久国产电影| 久久久亚洲精品成人影院| 大片免费播放器 马上看| 欧美日本视频| 成人特级av手机在线观看| 亚洲国产精品国产精品| 3wmmmm亚洲av在线观看| 国产精品一区www在线观看| 久久亚洲国产成人精品v| 日本色播在线视频| videossex国产| 国产日韩欧美亚洲二区| 国产黄片美女视频| 街头女战士在线观看网站| 天美传媒精品一区二区| 精品亚洲乱码少妇综合久久| 我的老师免费观看完整版| av一本久久久久| 日本黄色片子视频| 日本黄色日本黄色录像| 色婷婷av一区二区三区视频| 国产黄色视频一区二区在线观看| 在线精品无人区一区二区三 | 建设人人有责人人尽责人人享有的 | 中文字幕制服av| 久久久久国产网址| 观看av在线不卡| 多毛熟女@视频| 欧美日韩一区二区视频在线观看视频在线| 全区人妻精品视频| 黄片wwwwww| 激情 狠狠 欧美| 欧美成人一区二区免费高清观看| 乱系列少妇在线播放| 国产乱来视频区| 大又大粗又爽又黄少妇毛片口| 另类亚洲欧美激情| 黄色配什么色好看| av.在线天堂| 国产伦精品一区二区三区视频9| 多毛熟女@视频| 婷婷色综合www| 晚上一个人看的免费电影| 久久国产精品男人的天堂亚洲 | 国产真实伦视频高清在线观看| 久久人人爽人人爽人人片va| 亚洲色图综合在线观看| 欧美成人一区二区免费高清观看| 亚洲精品中文字幕在线视频 | av网站免费在线观看视频| 成人国产av品久久久| 十分钟在线观看高清视频www | 菩萨蛮人人尽说江南好唐韦庄| 成人漫画全彩无遮挡| 毛片女人毛片| 在线免费十八禁| 久久久久久久久久久丰满| 欧美老熟妇乱子伦牲交| 欧美xxⅹ黑人| 少妇人妻 视频| 综合色丁香网| 亚洲精品第二区| 国产色婷婷99| 永久网站在线| 国产精品无大码| 777米奇影视久久| 99九九线精品视频在线观看视频| 97在线视频观看| 国产精品久久久久成人av| 婷婷色av中文字幕| 日韩视频在线欧美| 欧美最新免费一区二区三区| 免费高清在线观看视频在线观看| 日韩av免费高清视频| 成人无遮挡网站| 乱系列少妇在线播放| av在线老鸭窝| 人人妻人人澡人人爽人人夜夜| 国产精品成人在线| 丰满乱子伦码专区| 99热这里只有是精品在线观看| 久久鲁丝午夜福利片| 2022亚洲国产成人精品| 免费观看的影片在线观看| 亚洲久久久国产精品| 国产精品人妻久久久影院| 国产乱来视频区| 久久久久久久久久人人人人人人| 丰满乱子伦码专区| av黄色大香蕉| 久久精品人妻少妇| 国产精品精品国产色婷婷| 亚洲国产精品国产精品| 欧美成人精品欧美一级黄| 成人亚洲欧美一区二区av| 国产高清国产精品国产三级 | 国产午夜精品一二区理论片| 亚洲国产精品专区欧美| 国产精品久久久久久精品古装| 欧美xxⅹ黑人| 国产视频首页在线观看| 观看免费一级毛片| 一区在线观看完整版| 国产精品熟女久久久久浪| 高清视频免费观看一区二区| 少妇的逼好多水| 国产爽快片一区二区三区| 天天躁夜夜躁狠狠久久av| 国产成人a∨麻豆精品| 少妇的逼水好多| 美女国产视频在线观看| 国产亚洲一区二区精品| 高清黄色对白视频在线免费看 | 午夜福利在线观看免费完整高清在| 精品久久久久久电影网| 国产精品伦人一区二区| 久久精品人妻少妇| 国产精品久久久久成人av| 九九爱精品视频在线观看| 国产av精品麻豆| 黑人猛操日本美女一级片| 国产成人aa在线观看| 成人亚洲精品一区在线观看 | 啦啦啦啦在线视频资源| 制服丝袜香蕉在线| 毛片一级片免费看久久久久| 在线播放无遮挡| 精品国产露脸久久av麻豆| a级毛片免费高清观看在线播放| 欧美高清性xxxxhd video| 午夜福利在线在线| 成年人午夜在线观看视频| 看十八女毛片水多多多| 99九九线精品视频在线观看视频| 欧美一级a爱片免费观看看| 大香蕉97超碰在线| 黄色配什么色好看| 2018国产大陆天天弄谢| av线在线观看网站| 男男h啪啪无遮挡| 成年女人在线观看亚洲视频| 少妇的逼好多水| 日韩欧美一区视频在线观看 | 亚洲成人手机| 国产av精品麻豆| 中文字幕精品免费在线观看视频 | 性色av一级| 久久99蜜桃精品久久| 成人二区视频| 亚洲怡红院男人天堂| 新久久久久国产一级毛片| 国产精品一及| 亚洲三级黄色毛片| 舔av片在线| 99re6热这里在线精品视频| 一区二区三区四区激情视频| 色网站视频免费| 日本一二三区视频观看| 久久热精品热| 韩国高清视频一区二区三区| 久久精品久久久久久噜噜老黄| 国产在线一区二区三区精| 美女国产视频在线观看| 日韩电影二区| 深爱激情五月婷婷| 看十八女毛片水多多多| 国产精品久久久久成人av| 亚洲av欧美aⅴ国产| 最近的中文字幕免费完整| 自拍偷自拍亚洲精品老妇| 一级av片app| 亚洲欧美成人综合另类久久久| av在线app专区| xxx大片免费视频| 亚洲av中文字字幕乱码综合| 校园人妻丝袜中文字幕| 亚洲成人av在线免费| 亚洲国产最新在线播放| 成人毛片a级毛片在线播放| 少妇 在线观看| 国产精品无大码| 内地一区二区视频在线| 97超视频在线观看视频| 国产精品国产av在线观看| 欧美日韩视频高清一区二区三区二| 日韩,欧美,国产一区二区三区| 午夜福利视频精品| 身体一侧抽搐| 亚洲精品第二区| 成人黄色视频免费在线看| 久久精品国产a三级三级三级| 十分钟在线观看高清视频www | 亚洲国产日韩一区二区| 一本久久精品| 亚洲精品视频女| 国产v大片淫在线免费观看| 九九久久精品国产亚洲av麻豆| 一级爰片在线观看| 青春草亚洲视频在线观看| 久久精品国产亚洲av涩爱| 久久午夜福利片| 午夜福利在线观看免费完整高清在| 国产成人aa在线观看| 国产精品无大码| 老熟女久久久| 麻豆国产97在线/欧美| 国产精品不卡视频一区二区| 欧美zozozo另类| 夜夜看夜夜爽夜夜摸| 51国产日韩欧美| 少妇人妻一区二区三区视频| 直男gayav资源| 国产亚洲欧美精品永久| 久久av网站| 天天躁日日操中文字幕| 交换朋友夫妻互换小说| 久热久热在线精品观看| 免费不卡的大黄色大毛片视频在线观看| a级一级毛片免费在线观看| 日本av手机在线免费观看| 大陆偷拍与自拍| 成年人午夜在线观看视频| 在线观看免费日韩欧美大片 | 亚洲av成人精品一区久久| 国产精品欧美亚洲77777| 一个人看视频在线观看www免费| videossex国产| av网站免费在线观看视频| 成人二区视频| 免费不卡的大黄色大毛片视频在线观看| 午夜视频国产福利| 国产免费视频播放在线视频| 永久免费av网站大全| 国产无遮挡羞羞视频在线观看| 亚洲av成人精品一二三区| 青春草视频在线免费观看| 超碰av人人做人人爽久久| 夫妻性生交免费视频一级片| 欧美xxxx性猛交bbbb| 少妇被粗大猛烈的视频| 欧美97在线视频| 在线观看美女被高潮喷水网站| 黑丝袜美女国产一区| 熟女人妻精品中文字幕| 久久精品久久久久久噜噜老黄| 国产免费又黄又爽又色| 偷拍熟女少妇极品色| 黄色日韩在线| 乱系列少妇在线播放| 精品久久久久久久久亚洲| 成人美女网站在线观看视频| 视频中文字幕在线观看| 九九在线视频观看精品| 精品人妻熟女av久视频| 成人国产麻豆网| 久久婷婷青草| 久久 成人 亚洲| 午夜福利网站1000一区二区三区| 国产精品久久久久久久久免| 自拍欧美九色日韩亚洲蝌蚪91 | 亚洲婷婷狠狠爱综合网| av网站免费在线观看视频| 欧美成人精品欧美一级黄| av免费观看日本| 欧美 日韩 精品 国产| 精品国产三级普通话版| 又爽又黄a免费视频| 一本—道久久a久久精品蜜桃钙片| 一个人免费看片子| 亚洲精品色激情综合| 成人一区二区视频在线观看| 青春草亚洲视频在线观看| 内射极品少妇av片p| 免费观看无遮挡的男女| 亚洲成人av在线免费| 国产片特级美女逼逼视频| 久久久午夜欧美精品| 韩国高清视频一区二区三区| 国产黄频视频在线观看| 最近手机中文字幕大全| 欧美区成人在线视频| 日本欧美国产在线视频| 午夜福利在线观看免费完整高清在| 中文乱码字字幕精品一区二区三区| 国内少妇人妻偷人精品xxx网站| 久久精品国产亚洲网站| 精华霜和精华液先用哪个| 欧美极品一区二区三区四区| 久久99蜜桃精品久久| 天堂俺去俺来也www色官网| 国产黄频视频在线观看| 如何舔出高潮| 99久久精品热视频| av黄色大香蕉| 2018国产大陆天天弄谢| 久久精品熟女亚洲av麻豆精品| 亚洲欧洲国产日韩| 久久精品国产a三级三级三级| 高清日韩中文字幕在线| 99热这里只有精品一区| 精品一区二区免费观看| 最近最新中文字幕大全电影3| 大片电影免费在线观看免费| av专区在线播放| 久久久久人妻精品一区果冻| 高清视频免费观看一区二区| 日日摸夜夜添夜夜爱| 精品国产一区二区三区久久久樱花 | 成人无遮挡网站| 寂寞人妻少妇视频99o| 亚洲欧美一区二区三区国产| 在线观看免费日韩欧美大片 | 伦理电影免费视频| 一个人看视频在线观看www免费| 久久国产亚洲av麻豆专区| 一级毛片黄色毛片免费观看视频| 成人二区视频| 免费久久久久久久精品成人欧美视频 | 久久精品国产自在天天线| 精品视频人人做人人爽| 黄色怎么调成土黄色| 寂寞人妻少妇视频99o| 亚洲人成网站在线播| a级毛片免费高清观看在线播放| 最近中文字幕2019免费版| 国产无遮挡羞羞视频在线观看| 亚洲自偷自拍三级| 精品酒店卫生间| 少妇熟女欧美另类| 黑人高潮一二区| 少妇高潮的动态图| 99热全是精品| 在线观看三级黄色| h日本视频在线播放| 国产精品一二三区在线看| 免费不卡的大黄色大毛片视频在线观看| 亚洲欧美日韩东京热| 最近的中文字幕免费完整| 日韩大片免费观看网站| 亚洲久久久国产精品| 国产 精品1| 亚洲av.av天堂| 精品少妇黑人巨大在线播放| 熟女人妻精品中文字幕| 最近最新中文字幕免费大全7| 亚洲欧美日韩东京热| 97精品久久久久久久久久精品| 18禁裸乳无遮挡动漫免费视频| 不卡视频在线观看欧美| 人妻少妇偷人精品九色| 高清日韩中文字幕在线| 看免费成人av毛片| 一级黄片播放器| 亚洲av福利一区| 免费av不卡在线播放| 国产精品伦人一区二区| 久久久精品94久久精品| 国产熟女欧美一区二区|