• <tr id="yyy80"></tr>
  • <sup id="yyy80"></sup>
  • <tfoot id="yyy80"><noscript id="yyy80"></noscript></tfoot>
  • 99热精品在线国产_美女午夜性视频免费_国产精品国产高清国产av_av欧美777_自拍偷自拍亚洲精品老妇_亚洲熟女精品中文字幕_www日本黄色视频网_国产精品野战在线观看 ?

    教師教學(xué)360度反饋評價研究回顧與展望

    2023-07-18 14:28:09吳丹英
    韓山師范學(xué)院學(xué)報 2023年2期
    關(guān)鍵詞:效度信度評價

    摘 要:梳理近30年來教師教學(xué)360度反饋評價研究成果發(fā)現(xiàn),評價價值研究停留在工具理性的判斷價值,忽視了價值理性的建構(gòu)與創(chuàng)新價值;量化研究法占大多數(shù),質(zhì)性與行動研究幾乎被埋沒;評價信度和效度受實(shí)施年限影響,且僅處于中低度水平;評價結(jié)果應(yīng)用于教師發(fā)展優(yōu)于教學(xué)績效評估;績效反饋有助于提升績效卻常被忽視?;诖?,未來研究將以重構(gòu)本土化教師教學(xué)評價價值為支點(diǎn),整合量化、質(zhì)性和行動研究方法,向構(gòu)建第三方評價機(jī)制研究延伸、向績效反饋研究拓展、向教師教學(xué)360度反饋評價大數(shù)據(jù)研究邁進(jìn)。

    關(guān)鍵詞:教師教學(xué);360度反饋評價;研究述評

    中圖分類號:G 40-058.1文獻(xiàn)標(biāo)識碼:A文章編號:1007-6883(2023)02-0101-08

    DOI:10.19986/j.cnki.1007-6883.2023.02.014

    高信度和效度的教師教學(xué)評價體系是衡量教學(xué)質(zhì)量的關(guān)鍵,也是提高教學(xué)質(zhì)量的重要保障。在企業(yè)管理領(lǐng)域備受推崇的360度績效反饋法因此得以遷移至教師教學(xué)評價領(lǐng)域。360度績效反饋法是指通過收集與受評者有密切工作關(guān)系的來自不同層面的人員的評估信息,全方位地評估反饋受評者的工作行為與表現(xiàn)的過程。[1]教師教學(xué)360度反饋評價則是指由教師教學(xué)工作的相關(guān)主體,包括教師本人、上級、督導(dǎo)、同事、教學(xué)服務(wù)對象對教師教學(xué)效果從不同的角度進(jìn)行績效評估及反饋,以提升教師教學(xué)質(zhì)量的評價方法。[2]360度反饋評價應(yīng)用研究逾30年,本文通過梳理該理論遷移的脈絡(luò)以及實(shí)踐應(yīng)用效果,探究其未來研究趨勢。

    一、國外研究現(xiàn)狀

    360度績效反饋法始于第二次世界大戰(zhàn)期間德軍采用復(fù)合源收集績效評價反饋信息的實(shí)踐。同期,某些組織通過“交朋友小組”應(yīng)用多源反饋。[3]而最早記錄利用調(diào)查法多源收集雇員績效信息的是20世紀(jì)50年代美國埃索石油研究工程公司。[4]自此,360度績效反饋法得以推廣,并獲得眾多人力資源管理和組織發(fā)展專家的認(rèn)可。2010年由《財富》雜志評選出的排名世界前1000名的企業(yè)中,有近九成已將360度反饋評價法全部或部分應(yīng)用于其公司的職業(yè)發(fā)展與績效考核中。國外研究主要集中在企業(yè),少見于教師教學(xué)評價領(lǐng)域,且基本上圍繞著兩大問題展開,一是信度和效度研究,二是評價結(jié)果的應(yīng)用研究,而引起了巨大爭議的便是360度反饋應(yīng)用于發(fā)展性目的還是是否同時也能應(yīng)用于評鑒性目的。[5]

    (一)360度績效反饋法信度與效度研究

    該方法自推廣應(yīng)用以來,便得到許多學(xué)者的推崇,普遍認(rèn)為它有助于被評價者看到自身績效的不同側(cè)面,有助于改善員工績效。[6]于教師教學(xué)效果評價方面,Ronald A. Berk研究得出:360度多元反饋模型在醫(yī)科大學(xué)教師貫徹多元評價中似乎是一個有用的框架。這個模型與單一評價來源相比,能提供更為精確、可靠、公平、公正的評價結(jié)果。[7]而在跨專業(yè)教育領(lǐng)域(IPE),Awdishu L、Zheng A、Granas A G等學(xué)者采用360度績效反饋模型,對293名醫(yī)學(xué)、護(hù)理、藥學(xué)專業(yè)的學(xué)生和108名協(xié)導(dǎo)員對個人和團(tuán)隊能力的反饋及多組比較分析,論證了在IPE中應(yīng)用360度績效模型是可行的,它提供多維、定性反饋,以促進(jìn)學(xué)生學(xué)習(xí)。[8]更多的研究則從信度和效度的不同側(cè)面展開。具體如下:

    1.不同評價主體間評價相關(guān)度研究

    如Harris等人的元分析研究也發(fā)現(xiàn),自評與上級以及同事評價之間具有中度相關(guān);同事和上級評價之間具有較高的相關(guān)。表明了同事和上級之間的評價結(jié)果一致性較高。[9]Furnham和Stringfield研究發(fā)現(xiàn),自評與上級、同事、顧問評價之間的一致性較低,上級與同事、顧問評價以及同級與顧問評價之間的一致性較高。[10]Carless 和 Wearing研究得出:上級與下屬評價之間相關(guān)系數(shù)約為0.32-0.37之間;自評與上級評價平均相關(guān)系數(shù)為0.19;自評與下屬評價相關(guān)平均值僅為0.11;而下屬之間評價的相關(guān)系數(shù)平均約為0.26。[11]Brutus等人則對個體工作績效與各評價主體的評價結(jié)果之間相關(guān)性進(jìn)行元分析,發(fā)現(xiàn):個體工作績效與上級、自評、同事、下屬評價結(jié)果的相關(guān)系數(shù)分別為0.45、0.10、0.28、0.20。[12]

    其中自我評價與他評結(jié)果、工作績效的相關(guān)度引起學(xué)者的廣泛關(guān)注。如Atwater就對此進(jìn)行了系列研究。Yammarino和Atwater研究也得出自我評價普遍且顯著高于其他評價主體給出的評價結(jié)果。[13]Atwater、 Roush和Fischthal的追蹤研究又發(fā)現(xiàn),在第一次完成評價的16周后,自評高估者的下屬評價有顯著的提高,而自評與下屬評價一致或低于下屬評分的,其下屬評價沒有顯著提高。[14] Atwater和Yammarino進(jìn)一步將評分分類,包括自評過高、過低的人,評價一致且實(shí)際上好的人以及評價一致且實(shí)際上差的人。研究得出:自評高估者可能績效較低,自評低估者的績效高低不一。[15]Greguras和Robie對評價者成員自評和他評影響反饋的可靠性進(jìn)行跟蹤研究,表明自評效度最低,因此,要得出可靠的結(jié)果要求有更多的參與。[16] Thornton在比較西方有關(guān)自我評價研究時發(fā)現(xiàn),自我評價與其他考核形式相比,易于夸大,而且這種現(xiàn)象在公共或政府部門比私營部門更為嚴(yán)重。[17] 綜上研究結(jié)果,自評與他評一致性、可靠性最低,相關(guān)度也僅是低度-中度相關(guān)。自評高估者可能績效較低,實(shí)際績效與自評得分的相關(guān)系數(shù)也僅為0.1的低度相關(guān)。自評易夸大且在公共或政府部門比私營部門更為嚴(yán)重。因此,自評應(yīng)用于公立學(xué)校教師的教學(xué)評價其信度和效度值得商榷。除自評之外,其他評價主體之間評價也僅達(dá)到中低度相關(guān),個體工作績效與上級評價接近中度相關(guān)、與同事和下級評價低度相關(guān)。

    然而,諸多學(xué)者發(fā)現(xiàn)360度反饋評價于教育領(lǐng)域應(yīng)用并不普遍,甚至Cid de León Carlos? V、González Salvador M、 Abraham E M等學(xué)者還發(fā)現(xiàn),2012-2020年期間沒有任何文章將該方法應(yīng)用于工程類教育機(jī)構(gòu)。[18]總體來說,研究尚未成體系,主要研究集中在論證其有效性及推廣應(yīng)用層面。如Mahar? J A和 Strobert B對文獻(xiàn)梳理發(fā)現(xiàn)360度反饋評價法在中小學(xué)教學(xué)領(lǐng)域的實(shí)證研究相當(dāng)有限。由此,他們采用威爾科克森配對符號秩檢驗(yàn)方法比較教師對傳統(tǒng)行政評價反饋和360度反饋質(zhì)量的看法,認(rèn)為“360反饋評價法對于教師職業(yè)發(fā)展目標(biāo)的制定、專業(yè)發(fā)展需求以及提供學(xué)生成績?yōu)橹攸c(diǎn)的反饋等許多領(lǐng)域比傳統(tǒng)方法更有幫助”。[19]Harps D W還分析了該評估法之所以未在教育部門廣泛應(yīng)用,原因在于學(xué)校需要優(yōu)先考慮傳統(tǒng)的聯(lián)邦、州和地方地區(qū)評估。于是他采用G360調(diào)查工具,以定量和定性研究方法得出“G360對教育工作者發(fā)展提供了有意義的反饋、對學(xué)校的文化和目標(biāo)產(chǎn)生積極影響”的結(jié)論。進(jìn)而建議在教育領(lǐng)域推廣360度反饋評價法。[20]Jones C A、Watkins F S和Williams J等學(xué)者則使用錄像、模擬教學(xué)練習(xí)編輯多維反饋,使教師能夠獲得對其教學(xué)的360度詳細(xì)評估,使之成為促進(jìn)教師教學(xué)技能發(fā)展的手段。[21]

    2.信度和效度與實(shí)施年限的關(guān)系研究

    Eichinger、Robert研究表明,360度績效反饋法在團(tuán)隊績效考核應(yīng)用中的精確度與應(yīng)用年限有關(guān),精確度由高到低排序是:1-3年、少于1年、3-5年、5年以上。也就是說精確率最高的是那些已熟悉個體評價,且時間足夠長,已超越了對其第一印象,但又不能長于開始順利地形成概念的應(yīng)用年限。[22]另一項長達(dá)5年的研究發(fā)現(xiàn),在應(yīng)用此方法的第1和第2年之間,全部評價者給出的評分沒有變化,但在第2-3年和3-4年之間卻獲得更高的得分。[23]Maylett和Riboldi發(fā)現(xiàn)在第1年和第2年間管理績效得到提升,且績效改進(jìn)一直持續(xù)到2年后。另外有研究表明,360度反饋可能預(yù)測未來的績效。[24]評價信度和效度受評價方法的實(shí)施年限影響,呈現(xiàn)出1-2年適應(yīng)期穩(wěn)定性高且比較精確、2-3年成熟期穩(wěn)定性高且最精確也有助于改進(jìn)和提升績效、3-5年為衰退期精確度下降的曲線波動狀態(tài)。

    3.質(zhì)疑信度和效度的研究

    一些研究者宣稱,應(yīng)用多源評價并不能改善績效。2001年的一份研究發(fā)現(xiàn),360度績效反饋的應(yīng)用與10.6%市場價值下降有關(guān)。沒有數(shù)據(jù)表明360度反饋實(shí)際上改善了生產(chǎn)率,增加盈余、減少抱怨或優(yōu)于強(qiáng)制排列法和標(biāo)準(zhǔn)績效評價體系。[25]Vinson也認(rèn)為,多源評價經(jīng)常產(chǎn)生沖突意見,可能沒法決定哪一主體反饋是準(zhǔn)確的。[26]一些學(xué)者承認(rèn),太多的潛變量與360度評價相關(guān),以至于確實(shí)對結(jié)果產(chǎn)生影響。[27]其他潛在的重要影響因素影響行為的改變,包括評價者的選擇、管理者的認(rèn)可度、設(shè)備質(zhì)量、評價者培訓(xùn)和定位,參與者培訓(xùn)、管理人員培訓(xùn)、指導(dǎo)、HR系統(tǒng)的整合以及承擔(dān)責(zé)任的程度。[28]另外的研究發(fā)現(xiàn),員工個人的多源評價分?jǐn)?shù)與個人的績效評估分?jǐn)?shù)進(jìn)行比較,發(fā)現(xiàn)幾乎沒有關(guān)聯(lián)。[29]盡管多源反饋能有效地應(yīng)用于評價,但建議在實(shí)施過程中應(yīng)慎重?;?60度反饋和績效評價產(chǎn)生不同的結(jié)果,建議360度反饋法和傳統(tǒng)績效評價均應(yīng)該應(yīng)用于集體效能評價。[30]Arreola R A也認(rèn)為,360度反饋法應(yīng)用于教師評價可能不準(zhǔn)確,因?yàn)閷W(xué)生不知道他/她的老師擁有的專業(yè)知識程度。[31]斯坦福大學(xué)莫里·佩伯爾提出四個悖論用于解釋為什么360度評價不能得出精確的數(shù)據(jù)。角色悖論:員工不可能既是被評者又是評判者;團(tuán)隊績效悖論:集中于個體評價則置整個團(tuán)隊于危險之中;管理悖論:越容易收集的反饋信息,越難應(yīng)用;獎酬悖論:當(dāng)同事評價得分最高,該評價對整個評價的幫助最少。[32]不管是四項悖論還是其他學(xué)者存在矛盾的研究結(jié)果,太多的潛在因素影響著評價結(jié)果,其中人情關(guān)系、人性等因素影響之大、評估之難是研究者和應(yīng)用者需要直面的問題。

    (二)評價結(jié)果的應(yīng)用研究

    備受爭議的研究結(jié)果出現(xiàn)在360度評價的目的與應(yīng)用方面。Farh 和Werbel的模擬研究證實(shí),學(xué)生對課堂參與的評價,用于純學(xué)術(shù)研究就比用于學(xué)生成績考核更加精確。[33]London調(diào)查發(fā)現(xiàn),34%的人認(rèn)為如果評價是為了績效評估,他們將會改變自己的評分結(jié)果[34]。Reilly研究也得出,當(dāng)360度反饋目的是個體發(fā)展性評價時,各評價主體的評價結(jié)果比較一致,而用于績效評估時,關(guān)系好或印象好的傾向給高分,反之則傾向給低分[35]。人際關(guān)系可能是影響評價信度和效度的主要原因?;诖?,Atwaer和Waldman提出360度反饋用作組織內(nèi)績效評估的步驟:實(shí)施之初只能用作個體發(fā)展性評價;經(jīng)過系統(tǒng)培訓(xùn)使全體職員領(lǐng)悟360度反饋的實(shí)質(zhì)和意義;在用于績效評估之前,仍需調(diào)查員工對此方法用于績效評估的接受程度;實(shí)施過程應(yīng)循序漸進(jìn),先試點(diǎn),再全面推廣。[36]這時,學(xué)者關(guān)注到績效反饋的重要性,如Walker對反饋過程特征研究發(fā)現(xiàn),績效反饋可能對創(chuàng)造性行為改變產(chǎn)生主要影響。[37]Goldsmith 和 Underhill報告指出,被評價者個體在與評價者討論他們的評價結(jié)果后產(chǎn)生巨大的影響。[38]總體來說,應(yīng)用于發(fā)展性評價、學(xué)術(shù)研究,其精確度比應(yīng)用于結(jié)果性績效評估要高,同時績效反饋、討論對于績效改進(jìn)和提升產(chǎn)生巨大的影響,但往往被忽視。

    二、國內(nèi)研究現(xiàn)狀

    由于理論遷移的滯后,360度績效反饋法在我國教師教學(xué)評價領(lǐng)域的應(yīng)用研究直至21世紀(jì)初才出現(xiàn)。在研究方法方面,量化研究幾乎成了唯一方法,尤其是系統(tǒng)研究的碩博論文,量化研究占主流,質(zhì)性方法、行動研究近乎被忽視。10多年來,經(jīng)歷了以下三個階段:

    (一)譯介與初步實(shí)踐研究階段

    360度績效反饋法自從遷移至我國的教師教學(xué)評價領(lǐng)域之后,長期處于譯介與初步實(shí)踐研究階段。如呂宜之、秦亮生等直接套用360度績效評價理論于教學(xué)評價之中,認(rèn)為該評價法既促進(jìn)教師專業(yè)發(fā)展又能形成公正的評價導(dǎo)向。[39-40]劉嶺也認(rèn)為,運(yùn)用此方法擴(kuò)大了考評者的范圍與類型,易于使各類考評者優(yōu)勢互補(bǔ),從多個視角對被考評者進(jìn)行綜合考評,使考評結(jié)果公正且全面,減少個人偏見及評分誤差,評價客觀、公正、說服力強(qiáng),信度和效度較高,同時又有助于教師間交流與學(xué)習(xí)。[41]而且他還通過德爾菲法確定評價指標(biāo),通過實(shí)測發(fā)現(xiàn):單純從某一個方面去評價教師與運(yùn)用360度反饋評價法測量結(jié)果不相關(guān),說明了單維評價存在片面性和不客觀性。[42]胡剛則論證此評價法結(jié)合了教師評價的理念與方法,多元的評價主體有利于遠(yuǎn)離功利, 構(gòu)建了主體間性的教師評價,促進(jìn)人的可持續(xù)發(fā)展。[43]翁吟通過介紹世界名企運(yùn)用360度績效反饋法的效果,試圖證明該方法同樣也適用于高校教師教學(xué)評價領(lǐng)域。[44]學(xué)者對高校個案實(shí)測,建構(gòu)績效評價指標(biāo)體系,證明教師教學(xué)360度績效評價法具有全面性、科學(xué)性、獨(dú)立性、具體性、可操作性的優(yōu)點(diǎn)。[45]有學(xué)者甚至將360度績效反饋法拔高到教師教學(xué)“理想的績效評估方法”的高度,試圖將軟系統(tǒng)科學(xué)分析法SSM應(yīng)用于教學(xué)評價以建構(gòu)教師自主選擇評價指標(biāo)體系。[46]但其效果仍有待驗(yàn)證。胡梅將360度績效考核法應(yīng)用于實(shí)驗(yàn)教師的績效考核,針對不同考核主體設(shè)計了考核指標(biāo),從考核周期、數(shù)據(jù)表的設(shè)計與計算、績效面談等提出實(shí)施方案,認(rèn)為能更全面、客觀地對實(shí)驗(yàn)教師績效進(jìn)行評價,起到更好的激勵作用。[47]研究總體以“褒揚(yáng)”為主,優(yōu)勢包括全面、客觀、公正、具體可操作、說服力強(qiáng)、提高實(shí)效、有助于教師間交流學(xué)習(xí)、促進(jìn)教師專業(yè)發(fā)展。

    (二)評估與反思研究階段

    經(jīng)過了初步的實(shí)踐應(yīng)用,研究進(jìn)入了評估與反思階段。一項針對我國600多家企業(yè)應(yīng)用360度反饋評價結(jié)果的調(diào)查顯示:獲得了績效的改善、沒什么改善、反而造成了一定的負(fù)面影響各占三分之一。也有學(xué)者指出:360度績效考評是美麗的陷阱,是真實(shí)的謊言。[48]可見,該評價法在國內(nèi)企業(yè)應(yīng)用中存在著一定的問題。在教師教學(xué)評價領(lǐng)域,荀振芳指出,我國高校教學(xué)評價關(guān)注的是最普遍的判斷價值功能,而發(fā)現(xiàn)價值、建構(gòu)價值的更高層次的功能并沒有過多觸及。[49]郭健認(rèn)為該方法在教師教學(xué)評價中的運(yùn)用還處于構(gòu)想階段,利弊均十分明顯,缺乏實(shí)踐操作。[50]關(guān)于利弊分析和實(shí)踐困境,馬瑾在其論文中也有涉及,但研究有待深入。[51]張家軍看到該評價法的可行性也存在一定障礙,障礙既源自于方法自身,也來自于中西方文化差異。[52]蔣金鳳等則承認(rèn)該方法在高校教師評價中“水土不服”,需采取謹(jǐn)慎路徑以規(guī)避風(fēng)險。[53]閆偉對教師績效評估的內(nèi)部等級評定模式、360度綜合評價模式及360度分類評價模式進(jìn)行了比較,試圖提出優(yōu)化路徑和方案。[54]實(shí)踐應(yīng)用與審辯式反思研究結(jié)果發(fā)現(xiàn),目前研究側(cè)重關(guān)注判斷價值、可行性障礙等水土不服等問題。

    (三)教學(xué)評價大數(shù)據(jù)研究和實(shí)踐拉開序幕

    當(dāng)教育遇見大數(shù)據(jù),學(xué)界迅速掀起一股研究的熱潮。如美國普渡大學(xué)“課程信號燈”(Course Signals)項目便是典型的運(yùn)用大數(shù)據(jù)診斷學(xué)生,為教育決策提供依據(jù)的案例。2014年7月由美國幾位老師創(chuàng)立的KickUp就是一個專注教師測評的標(biāo)準(zhǔn)化 SaaS 工具,測評數(shù)據(jù)來自教師的自查報告及學(xué)年內(nèi)的各項教學(xué)結(jié)果的反饋,這些數(shù)據(jù)可以縱向記錄教師的成長歷程,提出有待改善的地方。目前全美有超過 50 個地區(qū)的學(xué)校在使用這款測評工具。[55]李葆萍、周穎介紹了通過平板電腦、數(shù)碼筆、可穿戴設(shè)備等實(shí)現(xiàn)實(shí)時采集學(xué)生學(xué)習(xí)全過程的數(shù)據(jù),并利用各類可視化分析工具對大數(shù)據(jù)進(jìn)行過濾、挖掘、分析,研究教學(xué)評價的實(shí)現(xiàn)途徑和方法。[56]王陸自2000年以來,帶領(lǐng)科研團(tuán)隊建立“靠譜COP”項目采集課堂教學(xué)行為大數(shù)據(jù),并進(jìn)行系列研究,得出:在不同教育水平的地區(qū),教師存在顯著的教學(xué)行為差異,在教育強(qiáng)區(qū)中,課堂教學(xué)行為具有最高的問題開放性、最突出的問題解決傾向,以及課堂中普遍缺乏創(chuàng)造性問題與批判性問題等研究成果。[57-65]其大數(shù)據(jù)重點(diǎn)分析教師的課堂提問、教學(xué)行為以及學(xué)生心境狀態(tài),最終發(fā)現(xiàn)教師群體教學(xué)行為的差異、實(shí)踐性知識特征以及中小學(xué)課堂高階問題特征等教育內(nèi)隱問題及潛在的規(guī)律,為教學(xué)評價提供重要依據(jù)。

    三、研究述評與展望

    360度績效反饋法理論與實(shí)踐遷移遵循著從企業(yè)管理到政府管理再到公共事業(yè)管理的路徑,國外研究多集中在企業(yè),而對教師教學(xué)評價研究相對較少。因迎合了教學(xué)管理判斷價值的工具理性需求,我國教師教學(xué)評價實(shí)踐研究始于21世紀(jì)初,經(jīng)歷褒揚(yáng)有余而審辯不足的譯介和初步實(shí)踐階段,后期實(shí)踐遇困境,進(jìn)入辨利弊的評估與反思階段,現(xiàn)階段仍未真正完成本土化、情境化建構(gòu)。綜觀所及教師教學(xué)績效360度評價的應(yīng)用研究,梳理其演進(jìn)規(guī)律,以預(yù)示未來研究趨勢。

    (一)以道馭術(shù):研究不囿于工具理性,更在于建構(gòu)價值理性

    現(xiàn)有研究成果和實(shí)踐更多停留在譯介、褒揚(yáng)、比較、建構(gòu)指標(biāo)體系等“術(shù)”的工具理性層面,而對于評價最本質(zhì)根源的價值理性“道”這一層面的研究與認(rèn)識仍相當(dāng)欠缺,但離道之術(shù),術(shù)必衰。教師教學(xué)360度反饋評價研究不應(yīng)僅停留在判斷價值層面,而更應(yīng)該將教育教學(xué)理念置于教師學(xué)習(xí)共同體和教師專業(yè)發(fā)展的大框架之下,追索教學(xué)意向的價值理性本源,奠基于價值理性之上,論證教學(xué)中介的工具理性、教學(xué)主體的交往理性以及教學(xué)倫理的實(shí)踐理性,使評教真正成為理性探險過程,最終實(shí)現(xiàn)被評教師本人與其他各評價主體共同發(fā)現(xiàn)、建構(gòu)、生成、創(chuàng)新教學(xué)價值,這理應(yīng)成為未來研究的邏輯起點(diǎn),以道馭術(shù),術(shù)乃成。

    (二)方法融合:研究不限于量化研究,多元方法的融合更適切

    從已有的研究成果看,量化研究、量化肢解評價指標(biāo)建構(gòu)幾近成為學(xué)界的唯一方法,且評價結(jié)果信度效度偏低。一方面,各評價主體的評價結(jié)果、與個體實(shí)際績效相關(guān)度只達(dá)到中低度相關(guān),說明整體評價信度和效度至多達(dá)到中等水平,離理想狀態(tài)仍較遠(yuǎn)。特別是自評分?jǐn)?shù)虛高,自評與工作績效相關(guān)度最低,大致在0.1-0.2之間,而且績效越低的員工越容易夸大自己的績效,將評價結(jié)果應(yīng)用于教師的人力資源管理決策應(yīng)慎之又慎。另一方面,在評價實(shí)施年限與信度和效度關(guān)系上,在1-3年效度最高(即評價主體已經(jīng)超越了首因效應(yīng)的影響,且又尚未形成固化概念時,精確率最高)、1年內(nèi)次之、3-5年較低、5年以上最低??紤]到低流動率的我國教師隊伍的實(shí)際,應(yīng)用年限也是影響信度和效度的重要因素。實(shí)際上,教師教學(xué)工作過程和績效非發(fā)生于朝夕之間,其演進(jìn)和生成是一個動態(tài)情景化的過程,除了可以建構(gòu)時間序列量化追蹤研究之外,采用質(zhì)性研究和行動研究方法尤為適切,但卻幾乎被忽視。因此,未來研究應(yīng)走向量化、質(zhì)性、行動研究的互補(bǔ)與整合,這不僅可以從學(xué)校層面及時發(fā)現(xiàn)教學(xué)問題,還可以與教師個人專業(yè)發(fā)展相結(jié)合,促進(jìn)學(xué)校與教師共同成長。

    (三)反饋促發(fā)展:評價結(jié)果應(yīng)用不止于績效,更在于反饋與重建以促進(jìn)教師專業(yè)發(fā)展

    評價結(jié)果用于發(fā)展性評價、純學(xué)術(shù)研究時信度和效度較高,應(yīng)用于診斷性評價時深受人際關(guān)系好壞影響。在我國社會關(guān)系差序格局大文化背景及社會公平等問題的影響下,教師教學(xué)360度反饋評價結(jié)果實(shí)質(zhì)上折射了教師本人與上級、同事、學(xué)生等各評價主體間人際的親疏、情感與利益關(guān)系。評價主體如果僅限于校內(nèi),評價的主觀性及人際關(guān)系壓力仍是嚴(yán)重影響評價信度和效度的重要因素。同時,績效反饋對創(chuàng)造性行為改變產(chǎn)生主要影響,對提升未來績效有明顯的效用。但于我國教師教學(xué)評價中,呈現(xiàn)出重評價結(jié)果,輕評價反饋的局面,且被評教師對于結(jié)果只能“虛心”接受,于整個教學(xué)評價過程和結(jié)果幾乎沒有話語權(quán),這嚴(yán)重束縛評價核心價值的實(shí)現(xiàn)。因此,構(gòu)建獨(dú)立于學(xué)校的第三方教學(xué)評價機(jī)構(gòu)是破解此困局的出路所在,通過第三方評價對教師教學(xué)進(jìn)行診斷、評估、反饋,著重與教師一起,通過多元價值和理念的碰撞與交流,真正提升教師教學(xué)能力和水平。反過來,學(xué)校也可以對評價機(jī)構(gòu)進(jìn)行信用評級,兩者構(gòu)成一個良性循環(huán),最終推動我國教育質(zhì)量的提升、促進(jìn)教師和學(xué)生的發(fā)展。

    (四)立體360度大數(shù)據(jù):評教主體、數(shù)據(jù)信息流立體360度反饋大數(shù)據(jù)研究勢必成為未來研究的熱點(diǎn)

    隨著大數(shù)據(jù)時代的到來,教學(xué)評價等教育相關(guān)評價等世界難題有望通過大數(shù)據(jù)分析工具得到一定程度的解決。在教育學(xué)習(xí)領(lǐng)域,大數(shù)據(jù)中提取價值包含預(yù)測、聚類、相關(guān)性挖掘、升華人的判斷、用模式進(jìn)行發(fā)現(xiàn)等5種主要的技術(shù),讓真正立體的360度反饋評價理念得以實(shí)現(xiàn)。實(shí)現(xiàn)這一目標(biāo)的基礎(chǔ)性的工作是通過建設(shè)以互聯(lián)網(wǎng)、物聯(lián)網(wǎng)為依托的各評價主體交互平臺,收集與教學(xué)相關(guān)的點(diǎn)滴數(shù)據(jù)與資料,建構(gòu)360度大數(shù)據(jù)教學(xué)反饋平臺。除了量化指標(biāo)之外,學(xué)生對教師的留言、評價、互動等質(zhì)性的文字資料應(yīng)成為大數(shù)據(jù)分析的重要來源,通過數(shù)據(jù)積累與分析,在較為準(zhǔn)確地對教師教學(xué)水平加以判斷的基礎(chǔ)上,與教師自身教學(xué)反思相結(jié)合,與學(xué)生、同行、督導(dǎo)、上級等各評價主體的價值訴求相結(jié)合,彼此發(fā)現(xiàn)與重構(gòu)教學(xué)價值。而延伸出數(shù)據(jù)收集成本問題、評價指標(biāo)體系建構(gòu)、學(xué)術(shù)權(quán)力與數(shù)據(jù)壟斷、信息霸權(quán)問題、教學(xué)評價大數(shù)據(jù)的隱私權(quán)問題等等大數(shù)據(jù)時代的新生代研究熱點(diǎn)問題,呼喚著既懂教育又懂大數(shù)據(jù)技術(shù)的復(fù)合型人才突破學(xué)科壁壘、技術(shù)壁壘,使360度評價真正促進(jìn)教師自身專業(yè)發(fā)展及教學(xué)水平的提升,并在教學(xué)評價的基礎(chǔ)上實(shí)現(xiàn)教學(xué)創(chuàng)新,最終實(shí)現(xiàn)真正的因材施教,為每位學(xué)生獲得符合自身內(nèi)在特質(zhì)和節(jié)奏的成長。

    參考文獻(xiàn):

    [1]蔣蓉華.人力資源管理基礎(chǔ)[M].北京:清華大學(xué)出版社,2008:212.

    [2]吳丹英.高校教師教學(xué)360度反饋評價機(jī)制的困境與超越[J].現(xiàn)代教育科學(xué)·高教研究,2015(5):103-107.

    [3]Reference from Wikipedia[EB/OL].[2021-03-06].http://en.wikipedia.org/wiki/360-degree_feedback.

    [4]Dalessio A T.Should 360-Degree Feedback Be Used Only for Developmental Purposes?[J].Personnel Psychology,1998,51(4):1022-1026.

    [5]Bracken and Rose[EB/OL].[2021-04-07].https://en.wikipedia.org/wiki/360-degree_feedback#cite_note-2#cite_note-2.

    [6]Hazucha J F,Hezlett S A,Schneider R J.The impact of 360-degree feedback on management skills development[J].Human Resource Management,1993,32(2/3):325-351.

    [7]Berk R A.Using the 360 degrees multisource feedback model to evaluate teaching and professionalism[J].Medical Teacher,2009,31(12):1073-1080.

    [8]Awdishu L,Zheng A,Granas A G.360-degree feedback model to enhance interprofessional learning[J].MedEdPublish,2018:7(3):1-13.

    [9]Harris M M,Schaubroeck J.meta-analysis of self-supervisor,self-peers,and Peer Supervisor ratings[J].Personnel Psychology,1988,41(1):43-62.

    [10]Fumham A,Stringfield P.Congruence of self and subordinate ratings of managerial Practices as a correlate of supervisor evaluation[J].Journal of Occupational and organizational psychology,1994(1):57-67.

    [11]Carless S L,Mann L,Wearing A J.Leadership,managerial Performance and 360-degree feedback[J].Applied Psychology:An international review,1998,47(4):481-496.

    [12]Stéphane B,John W F,Manuel L.Does 360-degree feedback work in different industries?A between-industry comparison of the reliability and validity of multisource performance ratings[J].Journal of Management Development,1998,17(3):177-190.

    [13]Yammarino F J,Atwater L E.Understanding self-perception accuracy:Implications for human resource management[J].Human Resource Management,1993,32(2/3):231-247.

    [14]Atwater L,Roush P,F(xiàn)ischthal A.The influence of upward feedback on self‐and follower ratings of leadership[J].Personnel Psychology,1995,48(1):35-59.

    [15]Atwater L,Ydmmarino F.Self-other rating agreement:A review and model[J].Research in Personal and Human Resource Management,1997,15:121-174.

    [16]Greguras G J,Robie C.A new look at within-source interrater reliability of 360-degree feedback ratings[J].Journal of Applied Psychology,1998,83(6):960-968.

    [17]Thornton G C.Psychometric Properties of self-appraisal of job-performance[J].Personnel Psychology,1980,33(2):263-271.

    [18]Carlos V,Salvador M G,Abraham E M.360-degree evaluation review applied in top-level education[J].EUREKA:Social and Humanities,2020(3):27-35.

    [19]Mahar J A,Strobert B.The Use of 360-Degree Feedback Compared to Traditional Evaluative Feedback for the Professional Growth of Teachers in K-12 Education[J].Planning and Changing,2010,41(3/4):147-160.

    [20]Harps D W.The effectiveness of 360-degree feedback in public schools [D].California:Pepperdine University,2018:XIV.

    [21]Jones C A,Watkins F S,Williams J.A 360-degree assessment of teaching effectiveness using a structured-videorecorded observed teaching exercise for faculty development[J].Medical education online,2019,24(1):1-5.

    [22]Eichinger R W,Lombardo M M.Patterns of Rater Accuracy in 360-degree Feedback[J].Human Resource Planning,2004(4):23-25.

    [23]Walker A G,Smither J W.A five-year study of upward feedback:What managers do with their results matters[J].Personnel Psychology,1999,52(2):393-423.

    [24]Maylett T,Riboldi J.Using 360°Feedback to Predict Performance[J].Training and Development,2007,61(9):48-52.

    [25]Pfau B,Kay I.Does 360-degree feedback negatively affect company performance?Studies show that 360-degree feedback may do more harm than good.Whats the problem?[J].HRMagazine,2002,47(6):54-60.

    [26]Vinson M.The pros and cons of 360-degree feedback:Making it work[J].Training and Development,1996,50(4):11-12.

    [27]Smither J W,London M,Reilly R R.Does Performance Improve following multisource feedback?A theoretical model,Meta-analysis and review of empirical findings[J].Personnel Psychology,2005,58(1):33-66.

    [28]Bracken D W,Timmreck C W,F(xiàn)leenor J W.360 degree feedback from another angle[J].Human Resource Management,2001,40 (1):3-20.

    [29]Maylett T M.The Relationship Of Multi-rater Feedback To Traditional Performance Appraisal[D].Calfornia:Pepperdine University,2005:xii.

    [30]Maylett T M.360-Degree Feedback Revisited:The transition from development to appraisal[J].Compensation and Benefits Review,2009,41(5):52-59.

    [31]Arreola R A.Developing a Comprehensive Faculty Evaluation System[M].Bolton:Anker Publishing Company,Incorporated.2000:79-92.

    [32]Peiperl M A.Getting 360-Degree Feedback Right[J].Harvard Business Review,2001,79(1):142-147.

    [33]Farh J L,Werbel J D.Effect of purpose of the appraisal and expectation of validation on self-appraisal leniency[J].Journal of Applied Psyehology,1986,71(3):527-529.

    [34]Manuel L,Richard W.360 degree feedback as a competitive advantage[J].Human Resource Management,1993,32(2/3):353-372.

    [35]Brian O,Jane F.360 feedback can change your life[J].Fortune,1994,130(8):93-100.

    [36]Atwater L,Waldman D.Accountability in 360 degree feedback[J].HRMagazine,1998,43(6):96-101.

    [37]Walker A. Guidelines for multisource feedback when used for decision making[M]//Bracken D W,Timmreck C W,Church A H. The Handbook of Multisource Feedback. San Francisco: Jossey-Bass,2001:10.

    [38]Goldsmith M,Underhill B O.Multi-source feedback for executive development[M]//Bracken D W,Timmreck C W,Church A H.The Handbook of Multi-source Feedback.San Francisco:Jossey-Bass,2001:275-288.

    [39]呂宜之.360度反饋在專業(yè)教師績效評估中的運(yùn)用[J].職教論壇,2010(18):19-21.

    [40]秦亮生.試析“360度反饋評價法”在高校教師績效評價中的應(yīng)用[J].中國成人教育,2007(9):47-48.

    [41]劉嶺.高校教師教學(xué)工作績效考評體系的構(gòu)建與實(shí)踐研究[D].重慶:第三軍醫(yī)大學(xué),2007.

    [42]劉嶺,黃繼東,田懷軍,等.360度反饋評價法在高校教師教學(xué)工作績效考評中的應(yīng)用[J].重慶醫(yī)學(xué),2008(14):1619-1620.

    [43]胡剛.試論360度績效評價對當(dāng)今教師評價的啟示[J].現(xiàn)代教育科學(xué),2008(2):20-21.

    [44]翁吟.高職院校專業(yè)教師全方位績效考核體系設(shè)計——基于360度績效考核法[J].中國職業(yè)技術(shù)教育,2009(23):28-31.

    [45]李志河,趙大有,吳峰麗.XX高校教學(xué)科研人員績效考評案例研究[J].現(xiàn)代教育技術(shù),2009(8):19.

    [46]張革,李岱松.教學(xué)研究型大學(xué)教師績效評價體系研究[J].中國高教研究,2008(3):75-77.

    [47]胡梅.360°績效考核法在應(yīng)用型財經(jīng)類院校實(shí)驗(yàn)教師績效考核中應(yīng)用[J].實(shí)驗(yàn)室研究與探索,2016,35(9):281-284.

    [48]慎用360度績效考核[EB/OL].[2017-03-22].http://www.yjbys.com/hr/Jixiaokache/433285.html.

    [49]荀振芳.大學(xué)教學(xué)評價的價值反思[D].武漢:華中科技大學(xué),2005:11.

    [50]郭健.試論360度反饋在教師教學(xué)評價中的運(yùn)用[J].當(dāng)代教育科學(xué),2003(9):48-49.

    [51]馬瑾.360度反饋在高校教師教學(xué)績效評估中的應(yīng)用[D].西安:陜西師范大學(xué),2008:8-11.

    [52]張家軍.360度反饋評價應(yīng)用于我國教師評價的適切性分析[J].教育理論與實(shí)踐,2014(23):25-27.

    [53]蔣金鳳,劉建瑛.謹(jǐn)慎路徑的360度反饋在高校教師績效管理中的運(yùn)用[J].黑龍江高教研究,2014(12):49-51.

    [54]閆偉,范柏乃.我國教師績效評估模式比較分析及優(yōu)化路徑[J].中國教育學(xué)刊,2014(7):80-84.

    [55]當(dāng)教育學(xué)習(xí)遭遇大數(shù)據(jù),九大應(yīng)用案例讓你大開眼界[EB/OL].[2020-09-08].http://www.datayuan.cn/article/5871.htm.

    [56]李葆萍,周穎.基于大數(shù)據(jù)的教學(xué)評價研究[J].現(xiàn)代教育技術(shù).2016,26(6):5-12.

    [57]王陸.教師在線實(shí)踐社區(qū)COP的績效評估方法與技術(shù)[J].中國電化教育,2012(1):61-72.

    [58]楊卉,王陸.教師在線實(shí)踐社區(qū)COP助學(xué)服務(wù)質(zhì)量評價體系構(gòu)建及應(yīng)用研究[J].中國電化教育, 2015(1):131-137.

    [59]王陸,蔡榮嘯.課堂大數(shù)據(jù)視角下的提問傾向研究[J].電化教育研究,2016,37(7):82-92.

    [60]王陸,李瑤.課堂教學(xué)行為大數(shù)據(jù)透視下的教學(xué)現(xiàn)象探析[J].電化教育研究,2017,38(4): 77-85.

    [61]喬愛玲,王陸,李瑤,等.不同教師群體教學(xué)行為的差異性研究[J].電化教育研究.2018,39(4):93-100.

    [62]王陸,彭玏,李瑤,等.優(yōu)秀教師的實(shí)踐性知識特征——基于大數(shù)據(jù)的知識發(fā)現(xiàn)[J].課程·教材·教法,2019,39(2):126-131

    [63]王陸,彭玏,馬如霞,等.大數(shù)據(jù)知識發(fā)現(xiàn)的教師成長行為路徑[J].電化教育研究,2019,40(1):95-103.

    [64]王陸,彭玏.2015-2019年中小學(xué)課堂高階問題特征圖譜[J].電化教育研究,2020,41(10): 65-72.

    [65]張敏霞,王陸.基于大數(shù)據(jù)的知識發(fā)現(xiàn):不同教師群體實(shí)踐性知識的發(fā)展特征[J].電化教育研究, 2021,42(2):106-111.

    Retrospect and Prospect of Research on 360-Degree Feedback Evaluation of Teachers Teaching

    WU Dan-ying

    (College of Education Science,Hanshan Normal University,Chaozhou,Guangdong,521041)

    Abstract:Summarizing the research results of 360-degree feedback evaluation of teachers teaching in the past 30 years,it is found that: the research on evaluation value remains focused on the judgment value of instrumental rationality,neglecting the construction and innovative value of value rationality;the quantitative research method accounts for the majority,whereas qualitative research and action research are almost buried;the reliability and validity of the evaluation are affected by the years of implementation,and are only at a low to medium level;the evaluation results are better applied to teacher development than to teaching performance evaluation;performance feedback can help improve performance,but it is often overlooked. Based on this,the future research will focus on reconstructing the value of localized teacher teaching evaluation,integrating quantitative,qualitative and action research methods,extending to the research of building a third-party evaluation mechanism,expanding to performance feedback research,and advancing to big data research on 360-degree feedback evaluation of teachers teaching.

    Key words:teachers teaching;360-degree feedback evaluation;research review

    責(zé)任編輯 溫優(yōu)華

    猜你喜歡
    效度信度評價
    《廣東地區(qū)兒童中醫(yī)體質(zhì)辨識量表》的信度和效度研究
    SBR改性瀝青的穩(wěn)定性評價
    石油瀝青(2021年4期)2021-10-14 08:50:44
    慈善募捐規(guī)制中的國家與社會:兼論《慈善法》的效度和限度
    科技成果評價的信度分析及模型優(yōu)化
    體育社會調(diào)查問卷信度檢驗(yàn)的方法學(xué)探索——基于中文核心體育期刊163篇文章分析
    被看重感指數(shù)在中國大學(xué)生中的構(gòu)念效度
    外語形成性評估的效度驗(yàn)證框架
    中文版腦性癱瘓兒童生活質(zhì)量問卷的信度
    基于Moodle的學(xué)習(xí)評價
    復(fù)雜圖形測驗(yàn)對區(qū)分阿爾茨海默病與非癡呆的診斷效度
    亚洲,欧美,日韩| 久久久久久久久久久丰满| 免费黄网站久久成人精品| 国产成人午夜福利电影在线观看| 中国美白少妇内射xxxbb| 人人妻人人爽人人添夜夜欢视频 | 成人美女网站在线观看视频| 欧美日韩一区二区视频在线观看视频在线| 99热网站在线观看| 亚洲色图综合在线观看| 色视频www国产| 久久精品国产a三级三级三级| 伦精品一区二区三区| av网站免费在线观看视频| 一区二区av电影网| 精品人妻熟女av久视频| 七月丁香在线播放| 青春草视频在线免费观看| 国产探花极品一区二区| 亚洲激情五月婷婷啪啪| 精品一区二区免费观看| 久久97久久精品| 亚洲人与动物交配视频| 国产又色又爽无遮挡免| 熟女电影av网| 免费不卡的大黄色大毛片视频在线观看| 久久6这里有精品| 国产精品久久久久久精品古装| 青春草视频在线免费观看| 制服丝袜香蕉在线| 国产 一区精品| 亚洲av男天堂| 99久久精品热视频| 国产精品av视频在线免费观看| 黄片无遮挡物在线观看| 国产一区二区在线观看日韩| 丰满人妻一区二区三区视频av| 夫妻午夜视频| 亚州av有码| 黑人猛操日本美女一级片| 午夜福利视频精品| 久久久久国产精品人妻一区二区| 啦啦啦啦在线视频资源| videos熟女内射| 国产又色又爽无遮挡免| 性高湖久久久久久久久免费观看| 国产高潮美女av| 美女主播在线视频| 亚洲国产欧美在线一区| 欧美性感艳星| 超碰97精品在线观看| 午夜免费观看性视频| av在线蜜桃| 在线观看三级黄色| 欧美精品亚洲一区二区| 国产av一区二区精品久久 | 久久鲁丝午夜福利片| 1000部很黄的大片| 91久久精品国产一区二区三区| 黄色视频在线播放观看不卡| 91精品一卡2卡3卡4卡| freevideosex欧美| 嫩草影院新地址| 亚洲精品456在线播放app| 久久亚洲国产成人精品v| 欧美亚洲 丝袜 人妻 在线| 色哟哟·www| 简卡轻食公司| 国产伦理片在线播放av一区| 国产真实伦视频高清在线观看| 少妇裸体淫交视频免费看高清| 一级av片app| 欧美97在线视频| 成人毛片a级毛片在线播放| 啦啦啦在线观看免费高清www| 男人和女人高潮做爰伦理| 日韩视频在线欧美| 亚洲av中文av极速乱| 成人特级av手机在线观看| 亚洲人与动物交配视频| 十八禁网站网址无遮挡 | 国产免费视频播放在线视频| 尤物成人国产欧美一区二区三区| 大香蕉久久网| 成人国产av品久久久| 国产亚洲91精品色在线| 高清欧美精品videossex| 蜜桃久久精品国产亚洲av| 男人添女人高潮全过程视频| 日韩一本色道免费dvd| 男女国产视频网站| 干丝袜人妻中文字幕| 国产精品99久久久久久久久| 99久久精品热视频| 色婷婷久久久亚洲欧美| 午夜视频国产福利| 国产一区二区在线观看日韩| 夜夜骑夜夜射夜夜干| 欧美一级a爱片免费观看看| 人妻夜夜爽99麻豆av| 亚洲欧洲日产国产| 91精品国产九色| 九草在线视频观看| 国产精品国产三级国产av玫瑰| 亚洲四区av| 人妻 亚洲 视频| freevideosex欧美| 六月丁香七月| 老女人水多毛片| 国产免费一级a男人的天堂| 黑人猛操日本美女一级片| 美女高潮的动态| 日本黄色日本黄色录像| 99久久中文字幕三级久久日本| 国产精品熟女久久久久浪| 日韩一区二区视频免费看| 国产精品国产三级专区第一集| 欧美性感艳星| 精品亚洲成国产av| 亚洲av中文av极速乱| 日本av手机在线免费观看| 亚洲美女搞黄在线观看| 91在线精品国自产拍蜜月| 久久人人爽av亚洲精品天堂 | 免费播放大片免费观看视频在线观看| 日本一二三区视频观看| 18+在线观看网站| 91aial.com中文字幕在线观看| 女人十人毛片免费观看3o分钟| 国产日韩欧美亚洲二区| 男女啪啪激烈高潮av片| 在线观看免费高清a一片| av在线老鸭窝| 亚洲婷婷狠狠爱综合网| 特大巨黑吊av在线直播| 亚洲av日韩在线播放| 激情 狠狠 欧美| 中文字幕免费在线视频6| 精品国产露脸久久av麻豆| 久久久国产一区二区| 国产精品国产三级国产专区5o| 伊人久久精品亚洲午夜| 99久久中文字幕三级久久日本| 国产人妻一区二区三区在| 亚洲国产精品999| 男女下面进入的视频免费午夜| 欧美成人一区二区免费高清观看| kizo精华| 国产成人免费观看mmmm| 国产精品一二三区在线看| 大香蕉久久网| 黑人猛操日本美女一级片| 极品教师在线视频| 交换朋友夫妻互换小说| 国产综合精华液| 亚洲欧美一区二区三区国产| 97在线人人人人妻| 小蜜桃在线观看免费完整版高清| 成人免费观看视频高清| 亚洲精品日韩在线中文字幕| 黑人猛操日本美女一级片| 久久久久精品性色| 老师上课跳d突然被开到最大视频| 另类亚洲欧美激情| 一本久久精品| 免费黄色在线免费观看| 免费黄频网站在线观看国产| 亚洲久久久国产精品| 成人毛片60女人毛片免费| 日本wwww免费看| 久久99热这里只频精品6学生| 欧美精品亚洲一区二区| 中文在线观看免费www的网站| 看免费成人av毛片| 汤姆久久久久久久影院中文字幕| 国产亚洲欧美精品永久| 亚洲四区av| 亚洲第一av免费看| 精品国产露脸久久av麻豆| 国产伦精品一区二区三区视频9| 国产黄片视频在线免费观看| 色视频www国产| 大陆偷拍与自拍| 十分钟在线观看高清视频www | 国产高潮美女av| 国产精品爽爽va在线观看网站| 一级av片app| 九草在线视频观看| 一边亲一边摸免费视频| 国产深夜福利视频在线观看| 日本与韩国留学比较| 精品久久久精品久久久| 亚洲在久久综合| 爱豆传媒免费全集在线观看| 免费看日本二区| 美女脱内裤让男人舔精品视频| 国产亚洲最大av| 国产精品久久久久久久久免| 天天躁夜夜躁狠狠久久av| 最近中文字幕高清免费大全6| 97精品久久久久久久久久精品| 亚洲三级黄色毛片| 国产伦精品一区二区三区视频9| 简卡轻食公司| 国产男女超爽视频在线观看| 在线观看美女被高潮喷水网站| 乱码一卡2卡4卡精品| 这个男人来自地球电影免费观看 | 美女xxoo啪啪120秒动态图| 极品少妇高潮喷水抽搐| 成人黄色视频免费在线看| 日韩免费高清中文字幕av| 日日摸夜夜添夜夜添av毛片| av又黄又爽大尺度在线免费看| 建设人人有责人人尽责人人享有的 | 亚洲欧美日韩东京热| 各种免费的搞黄视频| 人妻系列 视频| 大陆偷拍与自拍| 国产精品精品国产色婷婷| 观看免费一级毛片| 亚洲美女视频黄频| 亚洲成人一二三区av| 免费观看av网站的网址| 日本爱情动作片www.在线观看| 中文字幕久久专区| 日韩精品有码人妻一区| 国产69精品久久久久777片| 欧美日韩综合久久久久久| 亚洲av电影在线观看一区二区三区| 精品亚洲成国产av| 亚洲欧美成人综合另类久久久| 51国产日韩欧美| 免费av不卡在线播放| 国产视频首页在线观看| 亚洲三级黄色毛片| 亚洲一级一片aⅴ在线观看| 国产精品久久久久久精品古装| 亚洲欧美一区二区三区黑人 | 亚洲图色成人| 精华霜和精华液先用哪个| 麻豆成人午夜福利视频| av.在线天堂| 色视频在线一区二区三区| 青春草视频在线免费观看| 国产精品福利在线免费观看| 国产成人aa在线观看| 成人亚洲欧美一区二区av| 丰满迷人的少妇在线观看| 国产精品麻豆人妻色哟哟久久| 日本色播在线视频| 日韩一区二区三区影片| 国产成人精品久久久久久| 女人十人毛片免费观看3o分钟| 久久久精品免费免费高清| 久久久久久久久大av| 韩国高清视频一区二区三区| 日韩一本色道免费dvd| 一区二区三区乱码不卡18| 高清视频免费观看一区二区| 色哟哟·www| videos熟女内射| 精华霜和精华液先用哪个| 狂野欧美激情性bbbbbb| 永久免费av网站大全| 国产免费一区二区三区四区乱码| 久久久久国产网址| 成人漫画全彩无遮挡| 欧美一级a爱片免费观看看| 男女下面进入的视频免费午夜| 一级黄片播放器| 亚洲欧美精品自产自拍| 日韩免费高清中文字幕av| 国产欧美亚洲国产| 综合色丁香网| 高清视频免费观看一区二区| 中国国产av一级| 成人一区二区视频在线观看| 啦啦啦在线观看免费高清www| 亚洲图色成人| 亚洲美女视频黄频| 如何舔出高潮| av免费观看日本| 韩国av在线不卡| 纵有疾风起免费观看全集完整版| 中文字幕精品免费在线观看视频 | 精品一区二区三区视频在线| 亚洲第一区二区三区不卡| 日日摸夜夜添夜夜爱| 国产伦理片在线播放av一区| 在线观看国产h片| 久久精品国产亚洲av天美| 在线精品无人区一区二区三 | 午夜福利在线观看免费完整高清在| 成人国产麻豆网| videossex国产| 99热这里只有是精品50| 日韩人妻高清精品专区| 18禁在线播放成人免费| 欧美成人午夜免费资源| 国产成人精品久久久久久| 中国国产av一级| 久久精品国产亚洲av天美| 精品熟女少妇av免费看| 伦理电影免费视频| 亚洲不卡免费看| 身体一侧抽搐| 天美传媒精品一区二区| 中文字幕人妻熟人妻熟丝袜美| 久久热精品热| 久久精品久久精品一区二区三区| 亚洲美女搞黄在线观看| 麻豆国产97在线/欧美| 久久久久久伊人网av| 99热这里只有是精品在线观看| 国产精品一区二区性色av| 一本久久精品| 国产视频内射| 中文字幕av成人在线电影| 国产亚洲精品久久久com| 黄色日韩在线| 丰满少妇做爰视频| 国产探花极品一区二区| 国产高清有码在线观看视频| 久久久久国产网址| 91久久精品国产一区二区成人| 国产成人一区二区在线| 日韩强制内射视频| 亚洲精品一二三| a级毛片免费高清观看在线播放| 成人综合一区亚洲| 高清av免费在线| 又黄又爽又刺激的免费视频.| 一区二区av电影网| 极品少妇高潮喷水抽搐| 18禁裸乳无遮挡动漫免费视频| 97在线人人人人妻| 一本色道久久久久久精品综合| av在线蜜桃| 国产91av在线免费观看| 亚洲在久久综合| 熟妇人妻不卡中文字幕| 天堂俺去俺来也www色官网| 亚洲av福利一区| 精品一区二区免费观看| 免费av中文字幕在线| 美女视频免费永久观看网站| 99视频精品全部免费 在线| 高清av免费在线| 在线亚洲精品国产二区图片欧美 | av在线播放精品| 欧美97在线视频| 亚洲成人中文字幕在线播放| av不卡在线播放| 亚洲成色77777| 国产亚洲欧美精品永久| 极品教师在线视频| 边亲边吃奶的免费视频| 国精品久久久久久国模美| 男女无遮挡免费网站观看| 国产精品av视频在线免费观看| 嘟嘟电影网在线观看| 国产永久视频网站| 毛片一级片免费看久久久久| av黄色大香蕉| 久久国内精品自在自线图片| 亚洲精品乱码久久久v下载方式| 我的老师免费观看完整版| 久久影院123| 色视频www国产| 大陆偷拍与自拍| 成人特级av手机在线观看| 国产v大片淫在线免费观看| 国产av码专区亚洲av| 丰满迷人的少妇在线观看| 国产人妻一区二区三区在| 热99国产精品久久久久久7| 国产成人午夜福利电影在线观看| 亚洲天堂av无毛| 国产成人a∨麻豆精品| 国产淫语在线视频| 久久99精品国语久久久| 99久久综合免费| 国产精品国产av在线观看| 99久久人妻综合| 丝袜喷水一区| 国产午夜精品久久久久久一区二区三区| 欧美精品国产亚洲| 亚洲性久久影院| 国产男人的电影天堂91| 久热久热在线精品观看| 人妻夜夜爽99麻豆av| 六月丁香七月| 色5月婷婷丁香| 色吧在线观看| 国产中年淑女户外野战色| 大陆偷拍与自拍| 亚洲国产精品一区三区| 尤物成人国产欧美一区二区三区| 国产极品天堂在线| 一本久久精品| 黄色一级大片看看| 亚洲精品国产成人久久av| 一个人免费看片子| 国产一区二区在线观看日韩| 久久精品夜色国产| 欧美日韩一区二区视频在线观看视频在线| 久久青草综合色| 日韩欧美一区视频在线观看 | 国产成人一区二区在线| 亚洲自偷自拍三级| 久久久久久久国产电影| 国产黄色免费在线视频| 2021少妇久久久久久久久久久| 99久久精品一区二区三区| 国产精品麻豆人妻色哟哟久久| 亚洲精品久久久久久婷婷小说| 日本一二三区视频观看| 亚洲在久久综合| 精品久久久久久久久亚洲| 国精品久久久久久国模美| 国产又色又爽无遮挡免| 大码成人一级视频| 久久精品国产a三级三级三级| 国产一区二区三区av在线| 精品人妻熟女av久视频| 国产av码专区亚洲av| 91精品国产国语对白视频| 人妻一区二区av| 伦理电影免费视频| 久久精品熟女亚洲av麻豆精品| 99久久中文字幕三级久久日本| 午夜精品国产一区二区电影| 亚洲精品,欧美精品| 国产美女午夜福利| av.在线天堂| 精品久久久久久久末码| 伊人久久精品亚洲午夜| 深爱激情五月婷婷| 国产成人午夜福利电影在线观看| 国产男女内射视频| 国产精品不卡视频一区二区| 午夜福利视频精品| 高清黄色对白视频在线免费看 | 亚洲欧美一区二区三区黑人 | 国产精品不卡视频一区二区| av在线播放精品| 黄色日韩在线| 男人爽女人下面视频在线观看| 久久久亚洲精品成人影院| 国产视频内射| 日韩制服骚丝袜av| 日韩一区二区视频免费看| 超碰av人人做人人爽久久| 国产成人精品福利久久| 日本欧美国产在线视频| 国产极品天堂在线| av在线蜜桃| 一区二区三区乱码不卡18| 日日摸夜夜添夜夜添av毛片| 18禁裸乳无遮挡动漫免费视频| 久久99热6这里只有精品| 亚洲av欧美aⅴ国产| 国语对白做爰xxxⅹ性视频网站| www.av在线官网国产| 欧美一区二区亚洲| 大片免费播放器 马上看| 91精品一卡2卡3卡4卡| 日日撸夜夜添| 一级二级三级毛片免费看| av线在线观看网站| www.av在线官网国产| 欧美性感艳星| 国产精品不卡视频一区二区| 国产亚洲最大av| 亚洲av中文字字幕乱码综合| 男女边吃奶边做爰视频| 丝瓜视频免费看黄片| 美女国产视频在线观看| 99久久人妻综合| 丰满人妻一区二区三区视频av| videos熟女内射| 国产精品一及| 精品亚洲成国产av| 一本色道久久久久久精品综合| 日本欧美视频一区| 五月玫瑰六月丁香| 欧美97在线视频| 麻豆国产97在线/欧美| 亚洲av成人精品一区久久| 久久久久久伊人网av| 老熟女久久久| 婷婷色综合大香蕉| 日本黄色片子视频| 亚洲精品久久久久久婷婷小说| av线在线观看网站| 只有这里有精品99| 日韩一区二区三区影片| 这个男人来自地球电影免费观看 | 成人亚洲欧美一区二区av| 一区二区三区四区激情视频| 中文资源天堂在线| 99九九线精品视频在线观看视频| 99热这里只有精品一区| 久久精品国产a三级三级三级| 在线观看免费日韩欧美大片 | 国内少妇人妻偷人精品xxx网站| 五月天丁香电影| 在线观看av片永久免费下载| 亚洲欧美中文字幕日韩二区| 乱码一卡2卡4卡精品| 边亲边吃奶的免费视频| 久久久久精品性色| 寂寞人妻少妇视频99o| 高清欧美精品videossex| 日本免费在线观看一区| 亚洲精品国产av成人精品| 美女脱内裤让男人舔精品视频| 成人无遮挡网站| 美女脱内裤让男人舔精品视频| 日韩免费高清中文字幕av| 成年av动漫网址| 国产成人精品福利久久| 性色avwww在线观看| 免费观看av网站的网址| 亚洲aⅴ乱码一区二区在线播放| 免费人成在线观看视频色| 赤兔流量卡办理| 国产精品国产三级国产av玫瑰| 国产成人a区在线观看| 亚洲av福利一区| 精品视频人人做人人爽| 欧美国产精品一级二级三级 | 国产乱人偷精品视频| 国产成人91sexporn| 欧美成人精品欧美一级黄| 欧美日韩在线观看h| 国产成人91sexporn| 亚洲欧美一区二区三区国产| av.在线天堂| 亚洲精品日本国产第一区| 一边亲一边摸免费视频| 中文字幕免费在线视频6| 国产精品av视频在线免费观看| 直男gayav资源| 18禁裸乳无遮挡动漫免费视频| 精品一区二区三卡| 久久ye,这里只有精品| 欧美人与善性xxx| 亚洲精品久久午夜乱码| 伦精品一区二区三区| 男男h啪啪无遮挡| 插逼视频在线观看| 日韩免费高清中文字幕av| 夜夜看夜夜爽夜夜摸| 久久97久久精品| 99九九线精品视频在线观看视频| 丝袜喷水一区| 日本猛色少妇xxxxx猛交久久| 久久久精品免费免费高清| 高清av免费在线| 99久久精品一区二区三区| 久久久国产一区二区| 日韩视频在线欧美| 少妇的逼好多水| 欧美高清成人免费视频www| 亚洲无线观看免费| 啦啦啦视频在线资源免费观看| 在线天堂最新版资源| 国产亚洲一区二区精品| 中文精品一卡2卡3卡4更新| 国产在线免费精品| 午夜激情福利司机影院| 日韩大片免费观看网站| 欧美xxxx性猛交bbbb| 高清在线视频一区二区三区| 高清av免费在线| 中文资源天堂在线| 国产av国产精品国产| 亚洲婷婷狠狠爱综合网| 日本黄色日本黄色录像| 亚洲精品国产色婷婷电影| 久久99热6这里只有精品| 欧美亚洲 丝袜 人妻 在线| 极品教师在线视频| 搡女人真爽免费视频火全软件| 国产日韩欧美亚洲二区| 久久人人爽人人爽人人片va| 国产av一区二区精品久久 | 一区二区三区免费毛片| 伊人久久精品亚洲午夜| 天堂中文最新版在线下载| 久久久久精品性色| 国产亚洲5aaaaa淫片| 一级av片app| 色婷婷av一区二区三区视频| 在线观看一区二区三区激情| 夜夜看夜夜爽夜夜摸| 亚洲美女视频黄频| 国产乱人偷精品视频| 亚洲av福利一区| kizo精华| 国产精品久久久久久av不卡| 夜夜看夜夜爽夜夜摸| 韩国av在线不卡| 久久久久久伊人网av| 亚洲三级黄色毛片| 国产黄片视频在线免费观看| 成人亚洲欧美一区二区av| 国产精品久久久久久精品电影小说 | 两个人的视频大全免费| 婷婷色av中文字幕| 中国三级夫妇交换| 51国产日韩欧美| 只有这里有精品99|