• <tr id="yyy80"></tr>
  • <sup id="yyy80"></sup>
  • <tfoot id="yyy80"><noscript id="yyy80"></noscript></tfoot>
  • 99热精品在线国产_美女午夜性视频免费_国产精品国产高清国产av_av欧美777_自拍偷自拍亚洲精品老妇_亚洲熟女精品中文字幕_www日本黄色视频网_国产精品野战在线观看 ?

    心理與教育元分析中相關(guān)系數(shù)的合并

    2015-12-27 06:25:14李金德
    心理學(xué)探新 2015年3期
    關(guān)鍵詞:置信區(qū)間方差公式

    李金德

    (廣西大學(xué)行健文理學(xué)院,南寧530005)

    1 前言

    元分析(Meta -analysis)是定量綜述的有效方法,其核心是效應(yīng)量(Effect Size)的合并。效應(yīng)量的指標(biāo)很多:計(jì)量資料包括相關(guān)系數(shù)ρ、均數(shù)差(mean difference)、加權(quán)均數(shù)差(weight mean difference)和標(biāo)準(zhǔn)化均數(shù)差(standardized mean differences)等;計(jì)數(shù)資料包括如率(odds)、比值比(odds ratios)、相對危險度(relative risk)、危險度比(risk ratio)、危險度差(risk difference)和比率差(rate difference)等。近年來中國心理和教育學(xué)界的元分析逐漸增多,但絕大部分集中在對差異的效應(yīng)量分析上,而對相關(guān)的效應(yīng)量做分析的只有極少數(shù)。這部分受醫(yī)學(xué)領(lǐng)域元分析的影響,但最重要的是受限于目前的技術(shù),因?yàn)閲鴥?nèi)極少有文獻(xiàn)對r 的合并和分析做系統(tǒng)性的介紹,同時目前流行的元分析統(tǒng)計(jì)軟件例如MA,Rev-Man 等沒有分析r 的功能,而Ralf Schwarzer 編寫的軟件meta-analysis5.3 盡管可以進(jìn)行效應(yīng)量r 的元分析,但因其操作界面是DOS 系統(tǒng),使用起來很不方便。本文擬就效應(yīng)量r 的合并與分析做相應(yīng)介紹以填補(bǔ)國內(nèi)該領(lǐng)域的空缺。

    2 指標(biāo)的獲得

    2.1 兩個重要分布

    假設(shè)(X1,Y1),(X2,Y2),……,(Xn,Yn)隨機(jī)抽樣自平均數(shù)為(μ1,μ2)、方差為()、相關(guān)為ρ的總體,對于大樣本,有以下分布(Hartung,Knapp,& Sinha,2011,pp.11 -12):

    其中r 為兩變量樣本的相關(guān)系數(shù),ρ 為兩變量總體的相關(guān)系數(shù)。

    其中:

    z 是Fisher’s z(Fisher,1925)。若要把Fisher’s z 轉(zhuǎn)化成r,公式為:

    其中,r' 為轉(zhuǎn)換后的相關(guān)系數(shù),z 為Fisher’s z。

    2.2 指標(biāo)的初步分析

    2.2.1 基本步驟

    兩變量間相關(guān)的真值可用ρ 和ζ 表示,但真值ρ和ζ 是未知的,所以一般用樣本r 和z 估計(jì)ρ 和ζ,兩者的方差可近似估計(jì)為(Rao,1973):

    若要對兩者進(jìn)行顯著性檢驗(yàn),即H0:ρ = 0 和H1:ρ ≠0(H0:ζ = 0 和H1:ζ ≠0),一般基于正態(tài)分布,兩者的檢驗(yàn)統(tǒng)計(jì)量分別為:

    若Zr或Zz超過臨界值Zα/2,則拒絕H0接受H1,即效應(yīng)量顯著不為0。

    元分析一般都會報(bào)告置信區(qū)間(Confidential Interval),若置信區(qū)間包括0,則接受H0拒絕H1,公式如下:

    表1 單個相關(guān)系數(shù)的顯著性檢驗(yàn)及其置信區(qū)間的計(jì)算

    2.2.2 舉例計(jì)算

    表1 原始數(shù)據(jù)來自Hedges 等人的研究(Hedges et al.,1985,p.25),第2 列是樣本,第3 列是效應(yīng)量r,第4 列是對效應(yīng)量的檢驗(yàn),據(jù)公式(6)可得;第5列是r 的置信區(qū)間,可用公式(8)完成;第6 列是通過公式(1)轉(zhuǎn)換的Fisher’s z;通過公式(7)可以對其顯著性進(jìn)行檢驗(yàn),即第7 列數(shù)據(jù);通過公式(9)可得到第8 列的Fisher’s z 的95% 置信區(qū)間;第9 列是通過公式(3)轉(zhuǎn)化而得的r;而第10 列的置信區(qū)間也可通過公式(3)通過轉(zhuǎn)化而得。以研究1 為例:

    (1)采用直接方式

    其95% 的置信區(qū)間下限(LB)和上限(UB)分別為:

    LB = -0.073 -1.96 ×0.266 = -0.594

    UB = -0.073 +1.96 ×0.266 = 0.488

    (2)采用Fisher 轉(zhuǎn)化

    其95% 的置信區(qū)間下限(LB)和上限(UB)分別為:

    LB = -0.073 -1.96 ×0.266 = -0.594

    UB = -0.073 +1.96 ×0.266 = 0.488

    3 指標(biāo)的合成

    3.1 固定效應(yīng)模型(Fixed Effects Model)

    3.1.1 基本假設(shè)和步驟

    該模型中效應(yīng)量r 的合并遵循效應(yīng)量的一般性合 并 過 程(Hartung,Knapp,& Sinha,2011,pp.35 -37;Cooper,Hedges,& Valentine,2009,pp.261 - 262)。假設(shè)所有的效應(yīng)量都是來自同一總體:

    其中,wi為第i 個研究的權(quán)重,Ti為第i 個研究的效應(yīng)量。

    方差體現(xiàn)出測量指標(biāo)的準(zhǔn)確性與否,因此用各個研究的方差倒數(shù)表示權(quán)重:

    其方差為:

    可以估計(jì)效應(yīng)量真值置信區(qū)間為:

    把上面公式的θ 換成ρ 或ζ,Ti換成r 或Fisher’s z,該過程便成了對效應(yīng)量r 或Fisher’s z 的合并。

    3.1.2 直接合并法

    基本步驟如下(Cooper,Hedges,& Valentine,2009,p.265)(結(jié)果見表2):

    第三步:根據(jù)公式(14)對ρ~進(jìn)行檢驗(yàn):

    第四步:根據(jù)公式(15)計(jì)算95% 置信區(qū)間:

    表2 相關(guān)系數(shù)合并的基本過程

    3.1.3 Fisher 轉(zhuǎn)化法

    Fisher 轉(zhuǎn)化法和直接合并法過程基本一致(Cooper,Hedges,& Valentine,2009,pp.264 -265)。

    第三步:根據(jù)公式(14)對ζ~進(jìn)行檢驗(yàn):

    第四步:根據(jù)公式(15)計(jì)算95% 置信區(qū)間:

    有研究者習(xí)慣把Fisher’s z 轉(zhuǎn)化為r,可通過公式(3)完成,經(jīng)轉(zhuǎn)化r' = 0.297,其95% 的置信區(qū)間為[0.093,0.477]。

    3.2 隨機(jī)效應(yīng)模型(Random Effects Model)

    3.2.1 基本假設(shè)

    固定效應(yīng)模型假設(shè)納入研究的效應(yīng)量是同質(zhì)的,即θ1= θ2= …… = θk= θ。但隨機(jī)效應(yīng)模型假設(shè)θ1≠θ2≠……≠θk≠θ,即θi是異質(zhì)的,是隨機(jī)的,且有其自身的分布。因此效應(yīng)量的觀察方差(observed variance)有兩部分,一是隨機(jī)效應(yīng)方差(random effect variance),一是抽樣誤差(sampling error)(Cooper,Hedges,& Valentine,2009,p.270):

    若σ2= 0,意味著總效應(yīng)量的總變異都是來自于抽樣誤差,研究間不存在差異,這便是固定效應(yīng)模型;但在隨機(jī)效應(yīng)模型中,σ2≠0,研究間異質(zhì),合并是不合適的,但一般做法還是會合并,然后對影響其變異的因素加以分析。在隨機(jī)效應(yīng)模型中,效應(yīng)的合并也遵循公式(10)到(15)的步驟,不同的是計(jì)算合并量方差的方式。

    3.2.2 合并方法一

    據(jù)上文所述,效應(yīng)量總變異包括隨機(jī)效應(yīng)方差和抽樣誤差方差:

    通過公式(17)可推出隨機(jī)效應(yīng)方差為:

    (1)直接合并。以表2 為例,根據(jù)公式(18)和(19)得:

    (2)Fisher 合并。根據(jù)公式(18)和(19)得:

    3.2.3 合并方法二

    直接從原始效應(yīng)量出發(fā)推算出隨機(jī)效應(yīng)方差σ2(Cooper,Hedges,& Valentine,2009,pp.270 -271):

    公式(21)可以轉(zhuǎn)化為:

    因此s2(ri)的期望值可以表示為:

    總方差或觀察方差可由公式(21)直接算出來,它是E[s2(ri)]的無偏估計(jì);要計(jì)算σ2(ri| ρi),可采用公式(4)和公式(5)得到近似估計(jì);因此隨機(jī)效應(yīng)方差就可以近似估計(jì)為:

    采用該公式計(jì)算隨機(jī)效應(yīng)方差也可能得到負(fù)數(shù), 這 種 情 況 也 設(shè) 定 為 0(Cooper,Hedges,&Valentine,2009,p.270)。

    (1)直接合并。以表2 的數(shù)據(jù)為例,根據(jù)公式(21)和(22)得:

    (2)Fisher 合并。根據(jù)公式(21)和(22)得:

    4 異質(zhì)性檢驗(yàn)(Heterogeneity Test)

    異質(zhì)性分析是合并效應(yīng)量前的必要工作,若各個研究的效應(yīng)量同質(zhì),則采用固定效應(yīng)合并效應(yīng)量,若異質(zhì)則采用隨機(jī)效應(yīng)模型來合并效應(yīng)量。常用方法如下:

    4.1 Q 檢驗(yàn)

    Q 檢驗(yàn)法的假設(shè)檢驗(yàn)如下:

    統(tǒng)計(jì)量為:

    其中,wi為第i 篇文獻(xiàn)的權(quán)重,ri為第i 個研究的效應(yīng)量為平均效應(yīng)量,Q 服從df = k -1 的χ2分布,k 為文獻(xiàn)數(shù)量(王沛,馮麗娟,2005)。當(dāng)Q >時,拒絕H0,接受H1,表明研究間的效應(yīng)量異質(zhì),反之則同質(zhì)。以表2 數(shù)據(jù)為例,直接法和Fisher 轉(zhuǎn)化法的Q 值分別為:

    4.2 I2 檢驗(yàn)

    Q 受樣本影響較大,檢驗(yàn)效能較低,為此研究者提出I2(Higgins & Thompson,2002):

    Q 即公式(25)計(jì)算的統(tǒng)計(jì)量,df 是自由度。當(dāng)I2超過25%、50%、75% 時,分別提示有低、中和高度異質(zhì)性,大于50% 時存在實(shí)質(zhì)性的異質(zhì)性。

    以表2 數(shù)據(jù)為例,直接法和Fisher 轉(zhuǎn)化法的I2值分別為:

    第一個值為負(fù)數(shù),設(shè)定為0,說明同質(zhì),第二個值說明研究間有低度的異質(zhì)性。

    4.3 方差檢驗(yàn)

    有研究者認(rèn)為效應(yīng)量的觀察方差等于抽樣誤差方差和殘差方差相加(Hunter,Schmidt,& Jachson,1982,pp.35 -92):

    5 發(fā)表偏倚(Publication Bias)

    發(fā)表偏倚是指陽性比陰性結(jié)果的研究更容易發(fā)表,由此造成的誤差。常用方法有失安全系數(shù)和漏斗圖。

    5.1 失安全系數(shù)(Fail - safe Number)

    失安全系數(shù)指當(dāng)元分析的合并效應(yīng)量有統(tǒng)計(jì)學(xué)意義時,需要多少未發(fā)表的文獻(xiàn)才能使結(jié)論逆轉(zhuǎn)(從顯著到不顯著)(Rosenthal,1984,p.89)。在p 為0.05或0.01 水平上估計(jì)失安全系數(shù),公式分別為:

    其中Zi為第i 個效應(yīng)量對應(yīng)的Z 值,k 為文獻(xiàn)的個數(shù)。

    失安全系數(shù)越大效應(yīng)值越穩(wěn)定,失安全系數(shù)小于10 說明可能存在發(fā)表偏倚。

    以表2 數(shù)據(jù)為例,對于直接合并法:

    說明需要24 或10 篇陰性文獻(xiàn)可以使效應(yīng)量在0.05 或0.01 水平上不再顯著。

    對于Fisher 轉(zhuǎn)化法:

    說明需要14 或5 篇陰性文獻(xiàn)可以使效應(yīng)量在0.05 或0.01 水平上不再顯著。

    5.2 漏斗圖(Funnel Plot)

    失安全系數(shù)的優(yōu)點(diǎn)是量化簡潔,但有時值很大,還可能是負(fù)數(shù),不好理解,因此有些研究以漏斗圖的方式表達(dá)發(fā)表偏倚。其基本思想是每個納入研究的效應(yīng)值的精度應(yīng)隨樣本含量的增加而增加。以效應(yīng)大小為橫坐標(biāo),以標(biāo)準(zhǔn)誤(或標(biāo)準(zhǔn)誤倒數(shù))為縱坐標(biāo)作圖,若沒有發(fā)表偏倚,應(yīng)呈一個倒置的漏斗形,漏斗以真值為準(zhǔn)左右對稱;圖形不對稱有偏向,表示存在偏倚。漏斗圖的優(yōu)點(diǎn)是形象直觀,但若一篇綜述需要同時研究多個、甚至幾十個效應(yīng)量時,同時呈現(xiàn)幾十個漏斗圖則不夠現(xiàn)實(shí)。這里采用Excel 完成漏斗圖的制作(圖1 和圖2),但因數(shù)據(jù)較少,不好對該漏斗圖做判斷。

    圖1 效應(yīng)量r 的漏斗圖

    圖2 效應(yīng)量的漏斗圖

    6 效應(yīng)量的影響因素分析

    研究間異質(zhì)時,需要進(jìn)行異質(zhì)性分析。若需要分析的變量只有一個或很少,可對數(shù)據(jù)進(jìn)行亞組分析,即按照變量把原始數(shù)據(jù)分層重新進(jìn)行元分析;需要分析的變量很多時,則可以做一般性相關(guān)分析和回歸分析。這里介紹兩種比較特殊的分析方式。

    6.1 橫斷歷史研究

    在對年代效應(yīng)分析上可采用橫斷歷史元分析(Cross - temporal Metal - analysis),即“橫斷歷史研究”(辛自強(qiáng),池麗萍,2008)。橫斷歷史分析首先出現(xiàn)在Twenge 的系列研究中(Twenge,2001a;Twenge & Im,2007;Twenge,2000;Twenge et al.,2010;Twenge & Campbell,2001),該方法目標(biāo)是分解出年代對效應(yīng)量間變異的解釋能力,做法很簡單,即把出版的文章年代系統(tǒng)性的減去2 年然后與效應(yīng)量做相關(guān)。例如年代和某一效應(yīng)量的相關(guān)系數(shù)r =0.8,則年代可以解釋該效應(yīng)量變異的64% 的變異(r2= 0.82= 0.64)。

    但年代對心理變量的解釋有時候會讓人困惑,即僅僅是因?yàn)槟甏淖兓说男睦砹烤妥兓?還是因?yàn)槟甏兓澈筇N(yùn)含著其他的社會因素的變化,是這些因素造成了心理量的變化?顯然,后者更能明確的指出心理變量變化的真實(shí)原因?;诖?,橫斷歷史研究發(fā)展出了一種特殊的分析技術(shù),即“滯后分析”,即做心理量與5 年前(或10 年)和5 年后(或10年)的社會性指標(biāo)的相關(guān),分析社會因素和心理量間的相互作用(Twenge,2001b;辛自強(qiáng),張梅,2009)。若是社會環(huán)境改變了心理量,那么當(dāng)年的心理量應(yīng)該與5 年或10 年前的社會指標(biāo)顯著相關(guān);若是心理量影響了社會文化環(huán)境,心理量應(yīng)該與5 年或10 年后的社會指標(biāo)顯著相關(guān)??梢姕蠓治鰧?shí)際上連接了個體層面的心理變量和整體層面的變量,并試圖解釋兩者的關(guān)系。但這種做法可能存在不足,心理變量屬于個體層面的變量,而年代的特征屬于更高一層的變量,各個研究可以看做鑲嵌于年代中的個案,因?yàn)楦鱾€年代的特征變量是不一樣的,若簡單的把效應(yīng)量和年代中的特征變量做相關(guān)或者一般線性回歸,在方法論上是不恰當(dāng)?shù)模线m的做法是采用多層線性模型分析(張雷,雷靂,郭伯良,2003)。

    6.2 多層線性模型

    元分析的多層線性模型法在理論上是解決多效果量非獨(dú)立性問題最為有效的一種方法,應(yīng)用該方法可以得到更精確的平均效果量的估計(jì)值,還能進(jìn)行更有效的假設(shè)檢驗(yàn)。

    利用多層線性模型的思維,參與元分析的各個研究結(jié)果數(shù)據(jù)可以被看做是一個多層結(jié)果的數(shù)據(jù),各個研究中的不同結(jié)果可以看做是第一層的單位,各個研究可被看做是第二層的單位(第二層的每個單位只有一個個案),通過建立一個多層模型來探討第二層(各個研究)的特征對研究結(jié)果的影響,使用多層分析技術(shù),把各個研究的特征作為第二層的自變量加入到模型的方程中,從而探討這些特征對因變量即各研究結(jié)果變異的影響。

    若不考慮各研究特征對研究結(jié)果的影響,則基本的分析模型可以表示為(張雷,雷靂,郭伯良,2003,pp.160 -1163):

    其中,ri是第i 個研究的效應(yīng)量,ρi是第i 個研究結(jié)果相應(yīng)的總體參數(shù)值,ei是第i 個研究的抽樣誤差,假定ei服從方差為σ2的正態(tài)分布。若是固定效應(yīng)模型,則各個研究間的ρ 是相等的。若假設(shè)各個研究的ρ 在各個研究之間是隨機(jī)變異的,并且是各個研究特征的函數(shù),可建立方程:

    其中,X 為各個研究的特征值(第二水平的解釋變量);p 為第二層預(yù)測變量的個數(shù);μi為第二層的殘差項(xiàng),假定μi服從方差為τ00的正態(tài)分布。合并上述兩個方程:

    若方程中沒有第二層的解釋變量,則方程還原為基本的截距模型:

    此時β0就是所有研究結(jié)果的平均值,μi的方差τ00是各研究結(jié)果分布的方差,表明各研究結(jié)果的離散程度。這樣,對不同研究結(jié)果同質(zhì)性的檢驗(yàn)就等同于對殘差項(xiàng)μi的方差τ00是否等于0 的檢驗(yàn),若顯著不為0 說明各研究結(jié)果間異質(zhì)。這時就可以進(jìn)一步把第二層的變量(即各個研究的特征值)擬合到方程中探索它們對第一層變異的解釋程度。具體操作請參考張雷等《多層線性模型應(yīng)用》一書(pp.166 -175)(張雷,雷靂,郭伯良,2003)。

    很多讀者關(guān)心如何完成這一系列過程,Ralf Schwarzer 編寫的軟件meta - analysis5.3 采用的是隨機(jī)效應(yīng)模式合并相關(guān)系數(shù)r,它提供的主要指標(biāo)有未加權(quán)合并系數(shù)、加權(quán)合并系數(shù)、方差、置信區(qū)間、Q 檢驗(yàn)等。其實(shí)有了公式后效應(yīng)量的合并、效應(yīng)量的方差、置信區(qū)間、顯著性檢驗(yàn)、異質(zhì)性檢驗(yàn)和發(fā)表偏倚都可以通過EXCEL 完成,而若要分析影響效應(yīng)量變異的因素則可以采用多層線性模型HLM 輕松完成。

    王沛,馮麗娟.(2005). 元分析方法評介.西北師大學(xué)報(bào)(社會科學(xué)版),42(5),65 -69.

    辛自強(qiáng),池麗萍.(2008).橫斷歷史研究:以元分析考察社會變遷中的心理發(fā)展.華東師范大學(xué)學(xué)報(bào)(教育科學(xué)版),26(2),44 -51.

    辛自強(qiáng),張梅.(2009).1992 年以來中學(xué)生心理健康的變遷:一項(xiàng)橫斷歷史研究.心理學(xué)報(bào),41(1),69 -78.

    張雷,雷靂,郭伯良.(2003).多層線性模型應(yīng)用.北京:教育科學(xué)出版社.

    Cooper,H.,Hedges,L. V.,& Valentine,J. C. (2009). Handbook of research synthesis and meta - analysis. New York:Russell Sage Foundation.

    Fisher,R. A. (1925). Statistical methods for research workers.Edinburger:Oliver and Boyd.

    Glass,G.V.,Mcgaw,B.,& Smith,M.L.(1981).Meta -analysis in social research.Beverly Hills,CA:Sage Publications.

    Hartung,J.,Knapp,G.,& Sinha,B.K.(2011).Statistical meta-analysis with applications.New Jersey:Wiley.

    Hedges,L.V.,Olkin,I.,Statistiker,M.,Olkin,I.,& Olkin,I.(1985). Statistical methods for meta -analysis. Boston:Academic Press.

    Higgins,J.,& Thompson,S.G.(2002).Quantifying heterogeneity in a meta -analysis.Statistics in Medicine,21(11),1539-1558.

    Hunter,E.J.,Schmidt,L.F.,& Jachson,B.G.(1982).Meta -analysis:Cumulating research findings across studies. Beverly Hills,CA:Sage.

    Rao,C. R. (1973). Linear statistical inference and its applications.New York:Wiley.

    Rosenthal,R. (1984). Meta - analytic procedures for social research.Beverly Hills,CA:Sage.

    Twenge,J. M. (2000). The age of anxiety?The birth cohort change in anxiety and neuroticism,1952 -1993. Journal of Personality and Social Psychology,79(6),1007 -1021.

    Twenge,J.M.(2001a). Birth cohort changes in extraversion:A cross - temporal meta - analysis,1966 - 1993. Personality and Individual Differences,30(5),735 -748.

    Twenge,J. M. (2001b). Changes in women’s assertiveness in response to status and roles:A cross-temporal meta-analysis,1931 -1993. Journal of Personality and Social Psychology,81(1),133 -145.

    Twenge,J.M.,& Campbell,W.K.(2001).Age and birth cohort differences in self-esteem:A cross -temporal meta -analysis.Personality and Social Psychology Review,5(4),321 -344.

    Twenge,J. M.,Gentile,B.,Dewall,C. N.,Ma,D.,Lacefield,K.,& Schurtz,D. R. (2010). Birth cohort increases in psychopathology among young Americans,1938 -2007:A cross-temporal meta -analysis of the MMPI.Clinical Psychology Review,30(2),145 -154.Twenge,J.M.,& Im,C.(2007).Changes in the need for social approval,1958 -2001. Journal of Research in Personality,41(1),171 -189.

    猜你喜歡
    置信區(qū)間方差公式
    方差怎么算
    組合數(shù)與組合數(shù)公式
    排列數(shù)與排列數(shù)公式
    定數(shù)截尾場合三參數(shù)pareto分布參數(shù)的最優(yōu)置信區(qū)間
    p-范分布中參數(shù)的置信區(qū)間
    概率與統(tǒng)計(jì)(2)——離散型隨機(jī)變量的期望與方差
    多個偏正態(tài)總體共同位置參數(shù)的Bootstrap置信區(qū)間
    等差數(shù)列前2n-1及2n項(xiàng)和公式與應(yīng)用
    計(jì)算方差用哪個公式
    列車定位中置信區(qū)間的確定方法
    国产爱豆传媒在线观看| 最新在线观看一区二区三区| 国产精品免费一区二区三区在线| 亚洲精品一卡2卡三卡4卡5卡| 国产视频一区二区在线看| 国产 一区精品| 亚洲综合色惰| 在线观看午夜福利视频| 欧美日韩亚洲国产一区二区在线观看| 日日摸夜夜添夜夜添小说| 午夜免费男女啪啪视频观看 | 国产淫片久久久久久久久| 成年免费大片在线观看| 国产一区二区在线av高清观看| 高清日韩中文字幕在线| 91在线精品国自产拍蜜月| 日本免费a在线| 狠狠狠狠99中文字幕| 波多野结衣高清作品| 亚洲性夜色夜夜综合| 高清毛片免费观看视频网站| 老师上课跳d突然被开到最大视频| 国产探花极品一区二区| 成人三级黄色视频| 两个人视频免费观看高清| aaaaa片日本免费| 大又大粗又爽又黄少妇毛片口| 在线观看66精品国产| 99国产极品粉嫩在线观看| 亚洲18禁久久av| 久久亚洲真实| 尤物成人国产欧美一区二区三区| av福利片在线观看| 欧美日本亚洲视频在线播放| 九九热线精品视视频播放| 成年人黄色毛片网站| 国产在视频线在精品| 日韩精品中文字幕看吧| 国产蜜桃级精品一区二区三区| 最近中文字幕高清免费大全6 | 九九在线视频观看精品| www.色视频.com| 国产黄色小视频在线观看| 欧美色视频一区免费| 九九爱精品视频在线观看| 欧美人与善性xxx| 人妻夜夜爽99麻豆av| 国产不卡一卡二| 精品久久久久久久久av| 日韩中字成人| 亚洲av五月六月丁香网| 精品福利观看| 久久久久国产精品人妻aⅴ院| 日本黄色视频三级网站网址| 国产午夜福利久久久久久| 神马国产精品三级电影在线观看| 亚洲av.av天堂| 免费大片18禁| 在现免费观看毛片| 亚洲图色成人| 窝窝影院91人妻| 日韩,欧美,国产一区二区三区 | 两个人的视频大全免费| 无遮挡黄片免费观看| 久久99热这里只有精品18| 国产一区二区亚洲精品在线观看| 亚洲国产精品成人综合色| 别揉我奶头~嗯~啊~动态视频| 亚洲欧美激情综合另类| 亚洲男人的天堂狠狠| 最近最新中文字幕大全电影3| 天堂网av新在线| 搞女人的毛片| 国产亚洲精品久久久久久毛片| 91午夜精品亚洲一区二区三区 | 日本一二三区视频观看| www.www免费av| 亚洲国产色片| 特大巨黑吊av在线直播| 国产色爽女视频免费观看| 国产精品不卡视频一区二区| 日韩人妻高清精品专区| 国产精品女同一区二区软件 | 日本 av在线| 99国产精品一区二区蜜桃av| 精品日产1卡2卡| 欧美日韩瑟瑟在线播放| 丰满的人妻完整版| 国产欧美日韩一区二区精品| 国产亚洲精品av在线| 人人妻,人人澡人人爽秒播| 噜噜噜噜噜久久久久久91| 精品无人区乱码1区二区| 久久久久久久久中文| 日韩一本色道免费dvd| 欧美一区二区国产精品久久精品| 99热6这里只有精品| 小蜜桃在线观看免费完整版高清| 自拍偷自拍亚洲精品老妇| 我要搜黄色片| 日本撒尿小便嘘嘘汇集6| 欧美潮喷喷水| 久久久久久九九精品二区国产| 免费高清视频大片| 美女 人体艺术 gogo| 真人做人爱边吃奶动态| 97人妻精品一区二区三区麻豆| 嫩草影院新地址| 极品教师在线视频| 黄色日韩在线| 99热只有精品国产| 在现免费观看毛片| a级一级毛片免费在线观看| 日韩欧美 国产精品| 亚洲av日韩精品久久久久久密| 亚洲人成伊人成综合网2020| 亚洲av五月六月丁香网| 国产精品一区二区三区四区久久| 午夜福利视频1000在线观看| 久久久久久久久中文| 欧美日本亚洲视频在线播放| 久久午夜福利片| 观看免费一级毛片| 神马国产精品三级电影在线观看| 欧美黑人巨大hd| 乱码一卡2卡4卡精品| 亚洲第一区二区三区不卡| 国产成年人精品一区二区| 1024手机看黄色片| 在线观看舔阴道视频| 美女大奶头视频| 丝袜美腿在线中文| 亚洲最大成人手机在线| 内地一区二区视频在线| 成人av一区二区三区在线看| 在线观看美女被高潮喷水网站| 女人被狂操c到高潮| 国产精品乱码一区二三区的特点| 日韩精品有码人妻一区| 99riav亚洲国产免费| 欧美极品一区二区三区四区| av.在线天堂| 国产黄a三级三级三级人| 非洲黑人性xxxx精品又粗又长| 久久久久久久久中文| 国产一区二区三区av在线 | 国产一区二区亚洲精品在线观看| 极品教师在线视频| 麻豆久久精品国产亚洲av| a级毛片a级免费在线| 国产69精品久久久久777片| 黄色一级大片看看| 久久精品影院6| x7x7x7水蜜桃| 国产探花极品一区二区| 国产免费av片在线观看野外av| 综合色av麻豆| 亚洲欧美日韩高清专用| 欧美国产日韩亚洲一区| 亚洲va日本ⅴa欧美va伊人久久| 色哟哟哟哟哟哟| eeuss影院久久| 亚洲精品粉嫩美女一区| 1024手机看黄色片| 亚洲天堂国产精品一区在线| 国产精品一区二区三区四区免费观看 | 欧美成人a在线观看| 国产美女午夜福利| 免费观看精品视频网站| 午夜福利在线观看免费完整高清在 | 97热精品久久久久久| 国产麻豆成人av免费视频| 色av中文字幕| 国产精品人妻久久久久久| 亚洲成人免费电影在线观看| 久久久久久伊人网av| 男女之事视频高清在线观看| 精品午夜福利视频在线观看一区| 日本黄大片高清| 舔av片在线| 午夜福利成人在线免费观看| 男女啪啪激烈高潮av片| 97热精品久久久久久| 99精品在免费线老司机午夜| 国产高清激情床上av| 久久亚洲真实| 可以在线观看毛片的网站| 国产午夜精品久久久久久一区二区三区 | a级毛片a级免费在线| 精品日产1卡2卡| 亚洲第一区二区三区不卡| 听说在线观看完整版免费高清| 91精品国产九色| 在线观看66精品国产| 国产精品日韩av在线免费观看| 亚洲精品456在线播放app | 乱系列少妇在线播放| 国产伦在线观看视频一区| 国产主播在线观看一区二区| 午夜爱爱视频在线播放| 免费av不卡在线播放| 床上黄色一级片| 婷婷丁香在线五月| 悠悠久久av| 国产高清有码在线观看视频| 赤兔流量卡办理| 黄片wwwwww| 日本欧美国产在线视频| 伦理电影大哥的女人| 国产精品人妻久久久影院| 97超级碰碰碰精品色视频在线观看| av天堂中文字幕网| 一级毛片久久久久久久久女| 99精品在免费线老司机午夜| 国产精品无大码| 在现免费观看毛片| 国产精品乱码一区二三区的特点| 91麻豆精品激情在线观看国产| 乱系列少妇在线播放| 免费无遮挡裸体视频| 成年女人永久免费观看视频| 91精品国产九色| 免费在线观看影片大全网站| 精品久久久久久久末码| 久久久久久久久久成人| 女生性感内裤真人,穿戴方法视频| 特大巨黑吊av在线直播| av在线观看视频网站免费| 午夜福利在线观看吧| 国产亚洲精品综合一区在线观看| 欧美黑人欧美精品刺激| 免费黄网站久久成人精品| 日韩人妻高清精品专区| 亚洲精品国产成人久久av| 国产精品永久免费网站| 大型黄色视频在线免费观看| 国内毛片毛片毛片毛片毛片| 精品日产1卡2卡| 国产成人一区二区在线| 日本 av在线| 一个人观看的视频www高清免费观看| 婷婷丁香在线五月| 国产精品亚洲一级av第二区| 成人国产麻豆网| 女人十人毛片免费观看3o分钟| 久久精品国产99精品国产亚洲性色| 91在线观看av| 午夜a级毛片| 亚洲七黄色美女视频| 国产日本99.免费观看| 国产欧美日韩精品一区二区| 日韩欧美 国产精品| 国产成人福利小说| 成人鲁丝片一二三区免费| 国产亚洲精品综合一区在线观看| av国产免费在线观看| 校园人妻丝袜中文字幕| 干丝袜人妻中文字幕| 国产亚洲精品综合一区在线观看| 美女免费视频网站| 一区二区三区免费毛片| 国产精品永久免费网站| 国产精品亚洲一级av第二区| 国产一区二区在线av高清观看| 97热精品久久久久久| 天堂影院成人在线观看| 亚洲一区二区三区色噜噜| 伦精品一区二区三区| 国产 一区精品| 午夜免费激情av| 伦精品一区二区三区| 国产免费av片在线观看野外av| 桃色一区二区三区在线观看| 日韩人妻高清精品专区| 桃红色精品国产亚洲av| 国产黄片美女视频| 精品免费久久久久久久清纯| 看片在线看免费视频| 久久久成人免费电影| 97超级碰碰碰精品色视频在线观看| av.在线天堂| 欧美激情在线99| 欧美高清成人免费视频www| 在线免费观看的www视频| 如何舔出高潮| 村上凉子中文字幕在线| 午夜激情欧美在线| 三级国产精品欧美在线观看| 俺也久久电影网| 欧美+日韩+精品| 国产国拍精品亚洲av在线观看| 日本在线视频免费播放| 3wmmmm亚洲av在线观看| 51国产日韩欧美| 国产午夜福利久久久久久| 少妇猛男粗大的猛烈进出视频 | 欧美日韩亚洲国产一区二区在线观看| 国产真实伦视频高清在线观看 | 久久国产乱子免费精品| 国内精品久久久久久久电影| 22中文网久久字幕| 男女视频在线观看网站免费| 国产毛片a区久久久久| 欧美日韩中文字幕国产精品一区二区三区| 国产精品永久免费网站| 亚洲国产精品sss在线观看| 国产精品一区www在线观看 | 男人和女人高潮做爰伦理| 久久久久国产精品人妻aⅴ院| 国产一区二区激情短视频| 最近最新中文字幕大全电影3| 午夜a级毛片| 美女高潮的动态| 色哟哟哟哟哟哟| 亚洲五月天丁香| 韩国av一区二区三区四区| 亚洲av免费在线观看| 亚洲美女搞黄在线观看 | 日本a在线网址| 国产激情偷乱视频一区二区| 国产私拍福利视频在线观看| av黄色大香蕉| 高清日韩中文字幕在线| 久久99热6这里只有精品| 国产爱豆传媒在线观看| 校园人妻丝袜中文字幕| 两性午夜刺激爽爽歪歪视频在线观看| av在线天堂中文字幕| 国产av麻豆久久久久久久| 国产精品免费一区二区三区在线| 亚洲图色成人| www.色视频.com| 中文字幕免费在线视频6| 自拍偷自拍亚洲精品老妇| 三级毛片av免费| 亚洲中文字幕一区二区三区有码在线看| 99久久无色码亚洲精品果冻| 日本熟妇午夜| 91在线精品国自产拍蜜月| 欧美日韩国产亚洲二区| 深爱激情五月婷婷| 欧美激情国产日韩精品一区| 免费看美女性在线毛片视频| 亚洲性久久影院| 亚洲狠狠婷婷综合久久图片| 久久久久久久久中文| 国产精品三级大全| 小蜜桃在线观看免费完整版高清| 国产亚洲91精品色在线| 啦啦啦韩国在线观看视频| 在线免费观看的www视频| 校园春色视频在线观看| 日本 av在线| 欧美日韩亚洲国产一区二区在线观看| 一区福利在线观看| 精品99又大又爽又粗少妇毛片 | 十八禁国产超污无遮挡网站| 99热网站在线观看| 午夜福利成人在线免费观看| 在线观看一区二区三区| 国产精品久久电影中文字幕| 搡女人真爽免费视频火全软件 | 亚洲人成网站高清观看| 波多野结衣高清作品| 99热这里只有是精品50| 长腿黑丝高跟| 美女被艹到高潮喷水动态| 亚洲熟妇熟女久久| 窝窝影院91人妻| 国产成人福利小说| 国产在线男女| 极品教师在线免费播放| 久久久久久久久久成人| 一区二区三区四区激情视频 | 国产欧美日韩精品一区二区| 欧美一区二区国产精品久久精品| 亚洲精华国产精华液的使用体验 | 亚洲av免费在线观看| 老师上课跳d突然被开到最大视频| 丰满的人妻完整版| 国产精品一区二区免费欧美| 亚洲自偷自拍三级| 日韩大尺度精品在线看网址| 国产国拍精品亚洲av在线观看| 国产成人a区在线观看| 亚洲av美国av| 久久久久久久亚洲中文字幕| 国产成年人精品一区二区| 国产综合懂色| 国产精品人妻久久久影院| 老师上课跳d突然被开到最大视频| 国内揄拍国产精品人妻在线| 久久精品国产亚洲av天美| 嫩草影视91久久| 少妇人妻精品综合一区二区 | 小蜜桃在线观看免费完整版高清| 色综合站精品国产| 91在线观看av| 狠狠狠狠99中文字幕| 国产精品国产高清国产av| 色播亚洲综合网| 国产毛片a区久久久久| 色播亚洲综合网| 黄色日韩在线| 久久国内精品自在自线图片| 我的老师免费观看完整版| 亚洲欧美日韩高清专用| 亚洲精品亚洲一区二区| 干丝袜人妻中文字幕| 97人妻精品一区二区三区麻豆| 99久国产av精品| 黄片wwwwww| 亚洲不卡免费看| 精品一区二区免费观看| 国产成人a区在线观看| АⅤ资源中文在线天堂| 亚洲精华国产精华液的使用体验 | 免费高清视频大片| 亚洲中文日韩欧美视频| 国产伦人伦偷精品视频| 少妇高潮的动态图| 男女视频在线观看网站免费| av.在线天堂| 麻豆成人午夜福利视频| 人人妻,人人澡人人爽秒播| 久久久久性生活片| www日本黄色视频网| 欧美极品一区二区三区四区| 91麻豆精品激情在线观看国产| 亚洲人成网站高清观看| 男女边吃奶边做爰视频| 成人永久免费在线观看视频| 久久6这里有精品| 三级男女做爰猛烈吃奶摸视频| 午夜老司机福利剧场| 夜夜看夜夜爽夜夜摸| 99在线视频只有这里精品首页| 男女啪啪激烈高潮av片| 男人狂女人下面高潮的视频| 桃色一区二区三区在线观看| 日韩欧美精品v在线| 精品99又大又爽又粗少妇毛片 | 免费一级毛片在线播放高清视频| 久久久精品欧美日韩精品| 特级一级黄色大片| 日本 欧美在线| 久久精品91蜜桃| 国产人妻一区二区三区在| 身体一侧抽搐| 麻豆精品久久久久久蜜桃| 亚洲成人中文字幕在线播放| 在线播放国产精品三级| 国产高清视频在线观看网站| 亚洲午夜理论影院| 日韩av在线大香蕉| 成年女人看的毛片在线观看| 三级毛片av免费| 国产精品无大码| 蜜桃久久精品国产亚洲av| 亚洲一级一片aⅴ在线观看| 成人综合一区亚洲| 国产一区二区三区在线臀色熟女| 亚洲va日本ⅴa欧美va伊人久久| 欧美成人a在线观看| 久久精品91蜜桃| 国产麻豆成人av免费视频| 亚洲精品一区av在线观看| 如何舔出高潮| 国产精品,欧美在线| 国产探花在线观看一区二区| 欧美性感艳星| 黄色日韩在线| 成人av在线播放网站| av在线蜜桃| 日韩欧美精品免费久久| 三级男女做爰猛烈吃奶摸视频| 69人妻影院| 午夜视频国产福利| 女生性感内裤真人,穿戴方法视频| 亚洲人成网站高清观看| 日韩欧美三级三区| 十八禁国产超污无遮挡网站| 丰满人妻一区二区三区视频av| 欧美国产日韩亚洲一区| 男女做爰动态图高潮gif福利片| 国产精品久久久久久久久免| 一级a爱片免费观看的视频| 少妇人妻精品综合一区二区 | 免费看美女性在线毛片视频| 久久久久久久久中文| 有码 亚洲区| 久久久精品大字幕| 91麻豆精品激情在线观看国产| 日本在线视频免费播放| 黄色女人牲交| 尤物成人国产欧美一区二区三区| www.色视频.com| 色尼玛亚洲综合影院| 草草在线视频免费看| 91麻豆av在线| 18禁黄网站禁片免费观看直播| 一级av片app| 一级a爱片免费观看的视频| 蜜桃亚洲精品一区二区三区| 3wmmmm亚洲av在线观看| 亚洲人成网站在线播| 少妇丰满av| 淫妇啪啪啪对白视频| 欧美性猛交╳xxx乱大交人| 成年版毛片免费区| 男人和女人高潮做爰伦理| 色在线成人网| 午夜久久久久精精品| 女生性感内裤真人,穿戴方法视频| 日韩,欧美,国产一区二区三区 | 日韩人妻高清精品专区| 99热这里只有精品一区| 色哟哟·www| 黄色一级大片看看| 午夜爱爱视频在线播放| avwww免费| 成人一区二区视频在线观看| 女人十人毛片免费观看3o分钟| 三级国产精品欧美在线观看| 91麻豆av在线| 亚洲熟妇熟女久久| 欧美激情久久久久久爽电影| 1024手机看黄色片| 欧美bdsm另类| 成人一区二区视频在线观看| 欧美zozozo另类| 国产高潮美女av| 如何舔出高潮| 亚洲熟妇中文字幕五十中出| 人妻制服诱惑在线中文字幕| 1024手机看黄色片| 少妇丰满av| 国产av麻豆久久久久久久| 91久久精品国产一区二区成人| 日韩欧美 国产精品| 午夜福利成人在线免费观看| 色哟哟·www| 亚洲av二区三区四区| 久久久国产成人免费| 国产一区二区在线观看日韩| 美女被艹到高潮喷水动态| 免费搜索国产男女视频| 国产乱人视频| 国内久久婷婷六月综合欲色啪| a级毛片免费高清观看在线播放| 白带黄色成豆腐渣| 午夜激情福利司机影院| 国产不卡一卡二| 大又大粗又爽又黄少妇毛片口| 久久6这里有精品| 22中文网久久字幕| 久久久久久久久久久丰满 | 最近最新中文字幕大全电影3| 狂野欧美激情性xxxx在线观看| 一级黄色大片毛片| 国产日本99.免费观看| 在线免费观看的www视频| 特级一级黄色大片| 国产淫片久久久久久久久| 久久精品夜夜夜夜夜久久蜜豆| 99久久精品一区二区三区| 69av精品久久久久久| 欧美+亚洲+日韩+国产| 级片在线观看| 午夜亚洲福利在线播放| 国产午夜福利久久久久久| 欧美3d第一页| 九色成人免费人妻av| 白带黄色成豆腐渣| 很黄的视频免费| 国产蜜桃级精品一区二区三区| 午夜免费男女啪啪视频观看 | 老女人水多毛片| 国内毛片毛片毛片毛片毛片| 亚洲中文字幕一区二区三区有码在线看| 极品教师在线视频| 久久精品综合一区二区三区| 欧美区成人在线视频| 亚洲精品456在线播放app | 看免费成人av毛片| 熟女人妻精品中文字幕| 丰满的人妻完整版| 国产精品99久久久久久久久| 别揉我奶头~嗯~啊~动态视频| 九九久久精品国产亚洲av麻豆| 欧美日本视频| 国产亚洲精品久久久com| 91av网一区二区| a级一级毛片免费在线观看| 日韩欧美精品免费久久| 日本色播在线视频| 波多野结衣巨乳人妻| 一本久久中文字幕| 少妇人妻一区二区三区视频| 免费观看精品视频网站| 国产精品久久视频播放| 亚洲欧美日韩无卡精品| 国产精品野战在线观看| 亚洲精品影视一区二区三区av| 12—13女人毛片做爰片一| 成人二区视频| 国产精品一及| 中文字幕高清在线视频| 丝袜美腿在线中文| 国产午夜福利久久久久久| 午夜激情福利司机影院| 日韩精品有码人妻一区| 免费观看精品视频网站| 午夜亚洲福利在线播放| 一区二区三区激情视频|