• <tr id="yyy80"></tr>
  • <sup id="yyy80"></sup>
  • <tfoot id="yyy80"><noscript id="yyy80"></noscript></tfoot>
  • 99热精品在线国产_美女午夜性视频免费_国产精品国产高清国产av_av欧美777_自拍偷自拍亚洲精品老妇_亚洲熟女精品中文字幕_www日本黄色视频网_国产精品野战在线观看 ?

    社交媒體中錯(cuò)誤信息的檢測方法研究述評

    2022-07-02 07:18:48吳詩苑董慶興宋志君
    情報(bào)學(xué)報(bào) 2022年6期
    關(guān)鍵詞:謠言社交特征

    吳詩苑,董慶興,宋志君,張 斌

    (1. 華中師范大學(xué)信息管理學(xué)院,武漢 430079;2. 武漢大學(xué)新聞與傳播學(xué)院,武漢 430072;3. 武漢大學(xué)大數(shù)據(jù)研究院,武漢 430072;4. 南京大學(xué)信息管理學(xué)院,南京 210023)

    1 引 言

    在“萬物皆媒”的新媒體時(shí)代,人們在社交媒體上的活動(dòng)不限于接收與傳播信息,同時(shí)也在生產(chǎn)、發(fā)布信息,其中,一些不負(fù)責(zé)任的用戶會(huì)有意無意地散布一些錯(cuò)誤信息[1]。錯(cuò)誤信息的泛濫增加了信息環(huán)境中的“噪音”和“污染”,降低了信息環(huán)境中的信噪比,給信息生態(tài)的平衡、穩(wěn)定和有序造成了嚴(yán)重的威脅[2]。然而,與生產(chǎn)和傳播錯(cuò)誤信息相比,驗(yàn)證一條信息真?zhèn)蔚某杀靖甙?,成本之間的不對稱導(dǎo)致錯(cuò)誤信息在互聯(lián)網(wǎng)上很容易蔓延開來。因此,如何利用已有的技術(shù)和方法在新媒體環(huán)境下低成本、高效率地檢測出錯(cuò)誤信息是學(xué)界和業(yè)界都廣泛關(guān)注的一個(gè)重要議題。圖書情報(bào)領(lǐng)域的學(xué)者已經(jīng)對錯(cuò)誤信息的傳播、演化和模型仿真有了深入的研究[3],近年來開始在錯(cuò)誤信息檢測這一方向上取得突破[4-6]。綜合考慮網(wǎng)絡(luò)環(huán)境、用戶和錯(cuò)誤信息的傳播機(jī)制,學(xué)者們運(yùn)用機(jī)器學(xué)習(xí)和深度學(xué)習(xí)方法提出了錯(cuò)誤信息甄別、信息危機(jī)預(yù)警和早期檢測等一系列具有實(shí)用價(jià)值的模型,并在測試中取得了不錯(cuò)的效果,給錯(cuò)誤信息的檢測提供了新思路。

    所謂錯(cuò)誤信息(misinformation)有狹義和廣義之分,如圖1 所示。狹義的錯(cuò)誤信息是指無意傳播的假的或者不準(zhǔn)確的信息[7]。這類信息的傳播動(dòng)機(jī)不是為了欺騙接收者,可能只是傳播者出于對信息源的信任,這種被信任的信息源通常是傳播者的家人、朋友或社交網(wǎng)絡(luò)上的意見領(lǐng)袖[8]。傳播者通常持分享、關(guān)心或娛樂的動(dòng)機(jī)將潛在的問題或情況告知他們的朋友,以此起到提醒和共鳴的作用[9]。因?yàn)閭鞑フ呤浅鲇诤靡猓?,這類錯(cuò)誤信息通常也被稱作“誠實(shí)的錯(cuò)誤”[10]。與狹義的錯(cuò)誤信息相對應(yīng)的一個(gè)術(shù)語叫“虛假信息(disinformation)”,也就是刻意制造并故意傳播的假的或者不準(zhǔn)確的信息[11-13],這類信息是惡意用戶為了獲得不正當(dāng)利益而故意制造的,專門用來誤導(dǎo)大眾,引起公眾的焦慮情緒[14]。雖然錯(cuò)誤信息和虛假信息都是假的、不準(zhǔn)確的,但它們之間最大的區(qū)別在于主觀意圖——虛假信息是被惡意制造并傳播的,但錯(cuò)誤信息的制造與傳播并非出于惡意[15]。而廣義的錯(cuò)誤信息則是指所有假的、不準(zhǔn)確的或未經(jīng)證實(shí)的信息[16-17]。廣義定義并不區(qū)分傳播者的動(dòng)機(jī),只要信息與真實(shí)情況不符或與現(xiàn)實(shí)證據(jù)沖突都可以被視為錯(cuò)誤信息[18]。因此,在廣義層面上,錯(cuò)誤信息作為一個(gè)總括術(shù)語包含了虛假信息在內(nèi)的謠言、假新聞、陰謀論等所有可能造成嚴(yán)重后果的不實(shí)信息[19]。錯(cuò)誤信息檢測的目的在于找到一種方法來有效地辨別信息內(nèi)容的真假,而對于傳播者的意圖,不論是研究者還是平臺(tái)管理員通常都難以確定。因此,廣義定義在錯(cuò)誤信息檢測研究中更加常用[20]。本文主要關(guān)注散布在社交媒體上的不準(zhǔn)確信息,循例使用錯(cuò)誤信息的廣義定義。

    圖1 錯(cuò)誤信息的分類

    錯(cuò)誤信息的檢測方法可以從不同的角度劃分成不同的種類。由于錯(cuò)誤信息的產(chǎn)生與傳播不僅限于信息本身,更是一個(gè)牽涉到人和環(huán)境的復(fù)雜事件,因此有必要從一個(gè)整體的框架來梳理當(dāng)前錯(cuò)誤信息的檢測方法。信息生態(tài)學(xué)則提供了在一個(gè)完整的信息生態(tài)中分析信息、信息人、信息環(huán)境三者互相影響、共同演化的視角,如圖2 所示。信息生態(tài)理論指出,信息生態(tài)是由信息、信息人和信息環(huán)境中各種要素和資源共同構(gòu)成的整體[21]。各個(gè)組成部分之間存在強(qiáng)大的相互聯(lián)系和依賴:信息在傳播時(shí),越來越多信息人的參與會(huì)不斷地向信息中加入新內(nèi)容或改變原內(nèi)容,在這個(gè)過程中,信息不僅會(huì)受到信息人的價(jià)值和偏好的影響,還會(huì)受到信息環(huán)境的干擾,使得信息量增減并存并產(chǎn)生價(jià)值變異[22];信息人在受到信息環(huán)境的刺激后通過自身的能動(dòng)性加工發(fā)生了信息的生產(chǎn)、組織、傳遞、消費(fèi)、分解等基本行為,這些行為會(huì)反過來作用于信息環(huán)境[23];信息環(huán)境是一切信息人發(fā)生信息交互行為的場所,信息環(huán)境的改變會(huì)影響信息人的行為和信息傳播的方式[24]。由此可見,信息生態(tài)中每種要素的變化都是系統(tǒng)性的,一個(gè)要素發(fā)生變化就會(huì)影響整個(gè)信息生態(tài)系統(tǒng)[25]。因此,從信息生態(tài)的角度來討論錯(cuò)誤信息檢測可以得到一個(gè)相對完整的分析框架。

    圖2 信息生態(tài)基本結(jié)構(gòu)[23]

    本文對照信息生態(tài)中的各個(gè)要素,從內(nèi)容、用戶和傳播這三個(gè)角度對錯(cuò)誤信息檢測方法進(jìn)行綜述。具體地,基于內(nèi)容的檢測方法主要從信息內(nèi)容本身入手,直接捕獲信息傳達(dá)的思想和情感,并以此為依據(jù)來進(jìn)行識(shí)別?;谟脩舻臋z測是以信息人在信息生態(tài)中扮演的角色以及信息人的行為為依據(jù)進(jìn)行檢測?;趥鞑サ臋z測則是根據(jù)錯(cuò)誤信息傳播的時(shí)間特征和網(wǎng)絡(luò)分布特征進(jìn)行檢測。這種在信息生態(tài)背景下分析錯(cuò)誤信息檢測問題的論述方式既涵蓋了信息本身,又考慮了信息人與信息環(huán)境之間的交互背景,有助于更加系統(tǒng)、全面地了解各種因素對錯(cuò)誤信息產(chǎn)生的影響,從而更有針對性地梳理當(dāng)前關(guān)于錯(cuò)誤信息檢測方法的研究。

    本文把從中國知網(wǎng)、萬方數(shù)據(jù)、Web of Sci‐ence、DBLP (DataBase Systems and Logic Program‐ming)以及Google Scholar 中檢索到的論文作為主要數(shù)據(jù)源。中文論文檢索以“錯(cuò)誤信息/虛假信息/假新聞/陰謀論/謠言”為主要關(guān)鍵詞,分別將這些關(guān)鍵詞與“檢測/識(shí)別”搭配檢索;英文論文檢索以“misinformation/disinformation/false information/fake news/conspiracy/rumor”為主要關(guān)鍵詞,并分別將這些關(guān)鍵詞與“detection/recognition/identification”搭配檢索。檢索時(shí)除了考慮關(guān)鍵詞之外,還考慮了其同義詞、近義詞、相關(guān)詞、下位詞等,不限制檢索的相關(guān)起始時(shí)間,將截止時(shí)間設(shè)定為2021 年3 月3日,綜合考慮主題相關(guān)性后共得到1012 篇文獻(xiàn)?;趦?nèi)容、基于用戶和基于傳播的三種檢測方法下的相關(guān)論文數(shù)量對比如圖3 所示。由于一些論文同時(shí)使用了多種檢測方法,因此三種檢測方法的論文數(shù)量總和大于1012 篇??傮w而言,在文獻(xiàn)數(shù)量方面,基于內(nèi)容檢測的文獻(xiàn)數(shù)量要遠(yuǎn)高于另外兩種檢測方法的文獻(xiàn)數(shù)量,這可能是因?yàn)槲谋緝?nèi)容是最直觀的,內(nèi)容特征是最容易獲取和處理的。

    2 基于內(nèi)容的錯(cuò)誤信息檢測

    在社交媒體上識(shí)別錯(cuò)誤信息的一個(gè)最直接的方法是檢測包括實(shí)體和非實(shí)體在內(nèi)的信息內(nèi)容[26]。其中,實(shí)體內(nèi)容是信息的載體和形式,包括標(biāo)題、正文、圖像等。由于實(shí)體內(nèi)容具有直觀性,它是判斷信息真實(shí)性的重要依據(jù),檢測者可以根據(jù)檢測需要對其進(jìn)行一系列的篩選、提取、編碼等操作[27]。而非實(shí)體內(nèi)容則是作者表達(dá)的觀點(diǎn)、態(tài)度和情感等隱含信息,它是判斷信息真實(shí)性的主要著力點(diǎn)[28]。錯(cuò)誤信息大多是為了誤導(dǎo)公眾和引起人們的注意而編造的,往往與真實(shí)信息有著不同的行文模式[29]。比如,內(nèi)容真實(shí)的新聞往往含有更多的鏈接且文本長度通常大于假新聞[30];假新聞中通常含有更多的否定詞、消極詞和夸張表達(dá),而內(nèi)容真實(shí)的新聞中則有更多的認(rèn)知行為詞和推斷行為詞[31]。

    圖3 三種檢測方法下的論文數(shù)量對比

    根據(jù)這些特點(diǎn),Castillo 等[29]利用統(tǒng)計(jì)特征,如標(biāo)點(diǎn)符號(hào)、表情、超鏈接等出現(xiàn)的次數(shù),使用決策樹模型來簡單評估推文的真實(shí)性??紤]到假新聞和垃圾郵件在行文模式上的相似性,使用垃圾郵件分類技術(shù)(如樸素貝葉斯分類器)也可有效檢測假新聞[32]。隨著語言特征提取技術(shù)的發(fā)展,更多精準(zhǔn)、高效的提取技術(shù)被有效地利用于該領(lǐng)域[33]。例如,Rashkin 等[34]使用一種復(fù)雜的語法信息與心理語言特 征 工 具LIWC (linguistic inquiry and word count)設(shè)計(jì)了多種語言特征,結(jié)合長短期記憶網(wǎng)絡(luò)(long short term memory,LSTM)取得了不錯(cuò)的檢測效果。Ahmed 等[35]通過TF-IDF 提取新聞文本特征并使用支持向量機(jī)(support vector machine,SVM)對社交媒體上的新聞進(jìn)行分類,準(zhǔn)確率高達(dá)92%。但是,上述模型過于依賴訓(xùn)練數(shù)據(jù)中的先驗(yàn)分布,對新話題和新事件的應(yīng)用效果不理想。針對該問題,學(xué)界開始研究更具有話題遷移性的檢測方法[36]。例如,將假新聞檢測視為一種鏈接預(yù)測任務(wù),或是通過分析知識(shí)圖上相關(guān)概念之間的路徑長度來評估陳述的真實(shí)性,兩種方法都可在新話題和新事件上正常運(yùn)行[37-38]。Guacho 等[39]則通過半監(jiān)督方法,在構(gòu)建的K-NN(k-nearest neighbor)圖上運(yùn)用FaBP(fast be‐lief propagation)傳播已知標(biāo)簽以確定未知標(biāo)簽,比完全監(jiān)督模型實(shí)現(xiàn)了更高的檢測精度。

    伴隨著深度學(xué)習(xí)的熱潮,深度學(xué)習(xí)強(qiáng)大的學(xué)習(xí)能力和特征表示能力引起了廣泛的關(guān)注,逐漸被應(yīng)用到錯(cuò)誤信息檢測中。Ma 等[40]首次使用循環(huán)神經(jīng)網(wǎng)絡(luò)(recurrent neural network,RNN)對特征進(jìn)行學(xué)習(xí),在Twitter 和Weibo 數(shù)據(jù)集上均達(dá)到80%以上的準(zhǔn)確率。樓靚[41]改進(jìn)卷積神經(jīng)網(wǎng)絡(luò)(convolutional neural network,CNN)得到TextCNN 模型,該模型可結(jié)合字粒度的文本語義向量和句粒度的文本統(tǒng)計(jì)特征,提升了模型的識(shí)別精度。針對傳統(tǒng)檢測模型需要大量統(tǒng)計(jì)特征以及難以實(shí)現(xiàn)及時(shí)檢測的問題,李悅晨等[5]使用BERT(bidirectional encoder represen‐tation from transformers)對微博原文進(jìn)行向量表示,然后將獲取的語義特征輸入RCNN (region-CNN)模型中,得到了較高的檢測速度和準(zhǔn)確率。深度學(xué)習(xí)模型在錯(cuò)誤信息自動(dòng)檢測領(lǐng)域中的應(yīng)用解決了傳統(tǒng)特征工程方法的不足,提高了檢測結(jié)果的可信度。

    然而,上述檢測方法都是針對文本的檢測,無法識(shí)別由圖像構(gòu)成的信息。在同一則消息中,圖像和文本作為不同模態(tài)的信息聯(lián)系緊密,同時(shí)使用不同模態(tài)的數(shù)據(jù)可以提高數(shù)據(jù)的利用率[42],由此產(chǎn)生了基于多模態(tài)數(shù)據(jù)的錯(cuò)誤信息檢測方法[43-46]。例如,將與事件相關(guān)的圖像特征和文本特征進(jìn)行融合檢測[47];或是將圖像映射為語義標(biāo)簽,通過計(jì)算圖像與文本的語義一致性來檢測圖文不匹配類型的謠言[48]?;诙嗄B(tài)檢測的思路,劉金碩等[49]通過提取文本、圖像和圖像內(nèi)嵌文本特征設(shè)計(jì)出多模態(tài)網(wǎng)絡(luò)謠言檢測模型MRSD,與基準(zhǔn)模型相比,該模型在準(zhǔn)確率和F1 值上都有顯著提高。然而,僅實(shí)現(xiàn)特征融合是不夠的,模型應(yīng)更具有泛化能力,可以學(xué)習(xí)與事件無關(guān)的特征。Wang 等[50]提出的基于對抗網(wǎng)絡(luò)的端到端模型將VGG19 (visual geometry group-19)提取的視覺特征和TextCNN 提取的文本特征相融合,可在判斷新聞?wù)鎸?shí)性的同時(shí)判斷新聞來自哪一類事件。為了提高模型檢測的準(zhǔn)確率,Khattar等[51]將文本、視覺的拼接特征編碼為一個(gè)中間表達(dá),利用重構(gòu)損失保證編碼后的中間表達(dá)可以解碼回原狀態(tài),并用該中間表達(dá)的向量做虛假新聞檢測。

    綜上可知,基于內(nèi)容的檢測主要是借助SVM、決策樹等判別模型以及CNN、RNN 等神經(jīng)網(wǎng)絡(luò)模型從語法和語義層面展開的[52]。與純文本的錯(cuò)誤信息相比,帶有多媒體內(nèi)容的錯(cuò)誤信息具有更快的傳播速度[53]。由此提出的多模態(tài)錯(cuò)誤信息檢測方法在提高數(shù)據(jù)利用率的同時(shí)還提高了模型的魯棒性。此外,即使其中一種模態(tài)數(shù)據(jù)缺失,多模態(tài)檢測方法仍然可以運(yùn)行。因此,在未來的研究中應(yīng)當(dāng)更加重視對多模態(tài)信息的利用并不斷提高多模態(tài)特征的提取效率和準(zhǔn)確率,以更有效地檢測錯(cuò)誤信息。

    3 基于用戶的錯(cuò)誤信息檢測

    社交媒體的開放性讓許多用戶從信息的被動(dòng)接收者變成內(nèi)容的主動(dòng)貢獻(xiàn)者。如果將用戶理解為數(shù)據(jù)感知器,那么社交媒體就是由用戶所見、所想、所聽、所說組成的[54]。因此,利用用戶畫像抽取用戶特征有利于提高錯(cuò)誤信息檢測的準(zhǔn)確率。從不同的粒度看,用戶特征可以分為兩大類:個(gè)體特征和群體特征[55]。針對錯(cuò)誤信息檢測這一特定任務(wù)來說,個(gè)體特征一般是指從單個(gè)用戶的各項(xiàng)統(tǒng)計(jì)指標(biāo)中抽取的用來分析用戶可信度的一系列特征,包括用戶的ID、性別、年齡、粉絲數(shù)、注冊時(shí)間、地理位置等[56];群體特征則是指在信息傳播的過程中具有相似屬性的用戶所擁有的整體特征,通常由個(gè)體特征聚合而來[57],如平均粉絲數(shù)、認(rèn)證用戶的比例等,群體特征的基本假設(shè)是傳播錯(cuò)誤信息的群體和傳播真實(shí)信息的群體具有不同的特點(diǎn)[31],這些特點(diǎn)主要體現(xiàn)在用戶簡檔、用戶可信度、用戶行為和情感立場四個(gè)方面[26]。

    以用戶簡檔作為輸入數(shù)據(jù)的一部分,Wang[58]使用混合CNN 模型取得了較好的檢測結(jié)果。Long等[59]將用戶簡檔和帶有注意力機(jī)制的LSTM 模型結(jié)合起來,與當(dāng)時(shí)最先進(jìn)的模型相比,準(zhǔn)確率提高了14.5%。從用戶行為的角度出發(fā),Liang 等[60]將用戶行為視為隱藏線索,以指示誰可能是謠言制造者。Yang 等[61]則將新聞可信度和用戶信譽(yù)作為潛在變量,從用戶的社會(huì)參與中提取用戶對新聞可信度的立場,以此為依據(jù)來檢測假新聞。此外,融合文本特征和用戶特征的方法備受關(guān)注。Zhang 等[62]通過融合文本流行度、文本情感極性、用戶影響力和博文轉(zhuǎn)發(fā)率等特征來構(gòu)造微博謠言檢測器。吳樹芳等[63]提出了融合微博用戶交互行為和博文內(nèi)容的用戶可信度評估算法HITS-UC(hyperlink-induced top‐ic search - user's credibility),并驗(yàn)證了算法的可行性和有效性。按照信息生態(tài)中信息、信息人、信息環(huán)境的劃分,Shu 等[64]設(shè)計(jì)的半監(jiān)督多特征融合模型結(jié)合了文本特征、相關(guān)用戶特征和媒體特征來檢測假新聞,與其他同類型半監(jiān)督模型相比,該模型獲得了更高的分類準(zhǔn)確率?;谏疃壬窠?jīng)網(wǎng)絡(luò),Xu等[65]通過RNN 對文本編碼,并通過點(diǎn)贊數(shù)進(jìn)行回復(fù)文本過濾,取得了不錯(cuò)的分類效果。柳先覺等[66]提出了結(jié)合自注意力和TextCNN 的二級編碼和個(gè)人資料信譽(yù)編碼的謠言檢測方法,發(fā)現(xiàn)文本內(nèi)容結(jié)合個(gè)人資料和微博統(tǒng)計(jì)數(shù)據(jù)構(gòu)成的特征取得了非常好的檢測結(jié)果。受此啟發(fā),尹鵬博等[67]通過對用戶歷史行為特征進(jìn)行分析并結(jié)合用戶屬性和微博文本,使用C-LSTM(convolution - long short-term memory)深度學(xué)習(xí)模型實(shí)現(xiàn)了微博謠言的早期檢測。由于該方法不使用評論轉(zhuǎn)發(fā)信息,能在謠言產(chǎn)生之初將其識(shí)別出來,因此,可以比現(xiàn)有的方法在更“早”的階段實(shí)現(xiàn)檢測。

    上述方法都是基于真實(shí)用戶的檢測,但是社交媒體上還充斥著大量的電子人和社交機(jī)器人,其中一些機(jī)器人是專門用來傳播謠言、陰謀論等網(wǎng)絡(luò)噪音的[68]。從發(fā)布的內(nèi)容來看,與人類用戶相比,社交機(jī)器人產(chǎn)生的推文缺乏原創(chuàng)性,轉(zhuǎn)發(fā)的推文占比很高,而且推文中含有更多的外部鏈接[69];從發(fā)文時(shí)間來看,社交機(jī)器人發(fā)文時(shí)間不規(guī)律,短時(shí)間內(nèi)發(fā)文數(shù)量多,但長時(shí)間來看不活躍[70]。根據(jù)這些特征,Khaund 等[71]提出了一種基于圖的檢測方法,該方法的基本假設(shè)是社交機(jī)器人也有集群的特點(diǎn),他們彼此交互緊密而與人類交互有限,可利用這個(gè)特點(diǎn)檢測出網(wǎng)絡(luò)上的社交機(jī)器人。

    此外,近年來一些基于眾包和群體智慧的檢測方法也不斷涌現(xiàn)。Wang 等[72]設(shè)計(jì)了一個(gè)可擴(kuò)展的檢測系統(tǒng)來識(shí)別惡意用戶,該系統(tǒng)的眾包層標(biāo)注經(jīng)過過濾層過濾得到的可疑用戶,在合理的成本下實(shí)現(xiàn)了準(zhǔn)確性和可擴(kuò)展性。Wu 等[73]從歷史眾包數(shù)據(jù)中獲得用戶信息,通過建立稀疏表示模型選擇共享特征來訓(xùn)練事件無關(guān)分類器。Cai 等[74]則從群眾響應(yīng)的角度出發(fā)抽取了轉(zhuǎn)發(fā)和評論中的文本特征,使用分層聚類算法來發(fā)現(xiàn)樣本中更多的謠言。為應(yīng)對傳統(tǒng)謠言檢測中因人力資源不足而帶來的檢測周期過長的問題,楊文太等[75]利用群眾智慧挖掘和度量待檢測信息和微博用戶的領(lǐng)域相關(guān)性,把待檢測謠言推送給領(lǐng)域最相關(guān)的微博用戶(即領(lǐng)域?qū)<遥┳餍畔⒄鎸?shí)性甄別;該方法不僅縮短了檢測時(shí)間,還能夠較好地應(yīng)用于實(shí)際的微博謠言檢測。為實(shí)現(xiàn)假新聞檢測的自動(dòng)化,Qian 等[76]提出了一種生成式條件變分自動(dòng)編碼器,該編碼器可以從歷史用戶對真假新聞的評論中獲取用戶響應(yīng)模式,進(jìn)而在假新聞傳播的早期階段,當(dāng)用戶與文章的交互數(shù)據(jù)不可用時(shí),利用群體智慧來生成對新文章的響應(yīng),以提高模型的檢測能力。

    總體來說,基于用戶的檢測方法主要是尋找在社交媒體上高度活躍、帶有明顯傾向性的惡意賬號(hào),這些惡意賬號(hào)既包括真實(shí)用戶,也包括偽裝成真實(shí)用戶的社交機(jī)器人,成功識(shí)別這類用戶有助于提高錯(cuò)誤信息的檢測效率,降低錯(cuò)誤信息的干預(yù)成本。

    4 基于傳播的錯(cuò)誤信息檢測

    網(wǎng)絡(luò)是錯(cuò)誤信息滋生的溫床和傳播的渠道,了解網(wǎng)絡(luò)特征有助于從傳播的角度對錯(cuò)誤信息進(jìn)行檢測。網(wǎng)絡(luò)特征是通過在發(fā)布相關(guān)帖子的用戶之間構(gòu)建特定的網(wǎng)絡(luò)來提取的[55],可分為分布特征和時(shí)間特征。分布特征有助于捕捉網(wǎng)絡(luò)信息的獨(dú)特傳播模式,可以通過構(gòu)建一棵傳播樹來描述[77]。例如,基于核函數(shù)的傳播樹檢測模型對微博帖子的傳播過程進(jìn)行建模,通過評估傳播樹結(jié)構(gòu)之間的相似性來區(qū)分不同類型的謠言[78-79]。時(shí)間特征則是以時(shí)間序列的方式描述網(wǎng)絡(luò)信息各項(xiàng)指標(biāo)的變化情況,是可以用于檢測可疑發(fā)布行為的良好屬性[80]。常用的時(shí)間特征包括兩個(gè)帖子發(fā)布的時(shí)間間隔、某個(gè)帳戶的發(fā)布、回復(fù)和評論的頻率、在固定時(shí)間內(nèi)帖子被重新發(fā)布和轉(zhuǎn)發(fā)的頻率等[81]。研究發(fā)現(xiàn),未經(jīng)證實(shí)的新聞極有可能被重新報(bào)道,隨著時(shí)間的推移會(huì)出現(xiàn)周期性的討論高峰,而已經(jīng)證實(shí)的新聞往往只有一個(gè)顯著的高峰[82]。對比真新聞的傳播過程,假新聞?wù)w上要傳播得更遠(yuǎn)、更快、更廣,因?yàn)橄嗤瑫r(shí)間里假新聞的級聯(lián)深度更深,最大寬度更大,且假新聞級聯(lián)達(dá)到任何深度和寬度所需的時(shí)間均小于真新聞,這一點(diǎn)在政治類假新聞上表現(xiàn)得尤為明顯[83]。

    基于上述特點(diǎn),Kwon 等[31]提出時(shí)序、結(jié)構(gòu)、語言三類特征,將謠言和非謠言的數(shù)目-時(shí)間圖與傳播網(wǎng)絡(luò)圖之間的差異作為檢測特征,在隨機(jī)森林算法上得到了92%的精確率。Ma 等[40]將事件的數(shù)據(jù)流根據(jù)時(shí)間算法進(jìn)行切片后得到的數(shù)據(jù)通過RNN進(jìn)行學(xué)習(xí),并將學(xué)習(xí)結(jié)果與傳統(tǒng)的謠言分類結(jié)果進(jìn)行比較,發(fā)現(xiàn)使用神經(jīng)網(wǎng)絡(luò)可以大大提高謠言檢測的準(zhǔn)確性。與上述兩種方法類似,任文靜等[84]將帖子的評論信息按照時(shí)間節(jié)點(diǎn)展開后利用注意力機(jī)制衡量每個(gè)時(shí)間節(jié)點(diǎn)對最終語義表示的重要程度,發(fā)現(xiàn)在加入評論信息和注意力機(jī)制后,準(zhǔn)確率可以達(dá)到92.66%。

    隨著研究的深入,特征組合檢測的方式漸漸成為主流。最常見的做法是從總體數(shù)據(jù)中挖掘文本、用戶、傳播結(jié)構(gòu)特征的動(dòng)態(tài)時(shí)序模型以捕捉這些特征隨時(shí)間的變化[85]。毛二松等[86]據(jù)此提出了微博情感傾向性特征、意見領(lǐng)袖影響力特征、轉(zhuǎn)發(fā)數(shù)差值和評論數(shù)差值等特征,并使用集成分類器來檢測微博上的謠言;結(jié)果表明,分類特征和集成分類器都有效地提高了謠言檢測的準(zhǔn)確率。針對假新聞檢測模型的檢測性能與泛化性能無法兼顧的問題,何韓森等[87]提出了一種基于特征聚合的假新聞檢測器CCNN(center cluster neural network),與傳統(tǒng)的SVM、樸素貝葉斯和隨機(jī)森林模型相比,該模型的整體性能有明顯優(yōu)勢。劉勘等[88]則提出了一種基于深度遷移網(wǎng)絡(luò)的跨領(lǐng)域謠言檢測模型,在源領(lǐng)域擁有標(biāo)注數(shù)據(jù)、目標(biāo)領(lǐng)域無標(biāo)注數(shù)據(jù)的情況下,通過雙層雙向LSTM實(shí)現(xiàn)對文本特征的深度提取,并與用戶特征及傳播特征相融合,結(jié)果證明,深度遷移網(wǎng)絡(luò)能夠有效遷移源領(lǐng)域標(biāo)注數(shù)據(jù),幫助目標(biāo)領(lǐng)域構(gòu)建謠言檢測模型,顯著提升目標(biāo)領(lǐng)域謠言的檢測準(zhǔn)確率。

    此外,一些學(xué)者根據(jù)信息傳播和傳染病傳播之間的相似性,把SI、SIS 和SIR(S=susceptible,I=in‐fectious,R=recovered) 等傳染病模型運(yùn)用到謠言傳播模型的構(gòu)建中[89]。其中,Zanette[90]使用SI 模型模擬了小世界網(wǎng)絡(luò)中謠言傳播的動(dòng)態(tài)過程,以定量的方法證實(shí)網(wǎng)絡(luò)謠言的傳播過程可被SI 模型解釋。Nekovee 等[91]通過SIR 模型和馬爾可夫鏈建立了平均場方程來研究網(wǎng)絡(luò)拓?fù)浣Y(jié)構(gòu)中的謠言傳播過程;陳一新等[92]在SIR 模型的基礎(chǔ)上加入“辟謠者”狀態(tài)構(gòu)建了基于社交網(wǎng)絡(luò)中節(jié)點(diǎn)交互作用 的SIDR (susceptible infected denied removal) 模型,利用Beam Search 搜索算法在謠言傳播初期Top 5 節(jié)點(diǎn)的識(shí)別上達(dá)到了83%的準(zhǔn)確率。

    錯(cuò)誤信息檢測的最終目的是及時(shí)找到并有效阻斷錯(cuò)誤信息的傳播,防止其可能對社會(huì)造成的不良影響。上述基于傳播的檢測方法可以滿足該需求,但是,由于許多新聞在發(fā)布的時(shí)候只有有限的,甚至根本沒有社會(huì)語境信息,導(dǎo)致這類方法在沒有良好輸入的情況下準(zhǔn)確率很難得到保證,優(yōu)勢難以發(fā)揮。

    5 總結(jié)與展望

    5.1 已有研究述評總結(jié)

    檢測出社交媒體中的錯(cuò)誤信息是凈化網(wǎng)絡(luò)環(huán)境、維護(hù)信息生態(tài)平衡的關(guān)鍵。鑒于信息生態(tài)是由信息、信息人、信息環(huán)境組成的一個(gè)密不可分的整體,本文在整理和分析相關(guān)文獻(xiàn)后,對照信息生態(tài)的三個(gè)組成要素將檢測方法從內(nèi)容、用戶和傳播三個(gè)方面進(jìn)行了闡述,如圖4 所示。從當(dāng)前的研究趨勢看,在檢測方法上,研究者們從早期的人工檢測、實(shí)證研究向人工智能和機(jī)器學(xué)習(xí)轉(zhuǎn)變;訓(xùn)練數(shù)據(jù)正在從靜態(tài)、滯后、小規(guī)模數(shù)據(jù)向動(dòng)態(tài)、早期、大規(guī)模數(shù)據(jù)轉(zhuǎn)變,但是這種轉(zhuǎn)變對模型的遷移能力、特征提取技術(shù)和數(shù)據(jù)集規(guī)模提出了較高的要求。尤其是早期檢測,相關(guān)數(shù)據(jù)的稀缺、用戶數(shù)據(jù)的提取困難導(dǎo)致效果不夠理想。為了充分滿足錯(cuò)誤信息檢測的需求,需要對各項(xiàng)檢測特征進(jìn)行深度挖掘,對檢測方法進(jìn)行進(jìn)一步探索和優(yōu)化,從而設(shè)計(jì)出更加準(zhǔn)確、高效、可解釋、可擴(kuò)展的模型。

    圖4 基于信息生態(tài)理論的錯(cuò)誤信息檢測框架

    5.2 未來研究展望

    首先,當(dāng)前的錯(cuò)誤信息檢測主要依賴機(jī)器學(xué)習(xí)和深度學(xué)習(xí)技術(shù)[93-94],并由大規(guī)模文本數(shù)據(jù)集訓(xùn)練而來。而在某一特定的錯(cuò)誤信息傳播過程中,與其相關(guān)的數(shù)據(jù)是隨著事態(tài)發(fā)展而增多的,傳統(tǒng)模型只有在積累到一定量的數(shù)據(jù)以后才能進(jìn)行有效訓(xùn)練,這就導(dǎo)致檢測方法的開發(fā)滯后于檢測需求。因此,在數(shù)據(jù)匱乏的情況下完成早期檢測是一個(gè)亟待解決的任務(wù)。其次,無論是為了更有效地評價(jià)錯(cuò)誤信息檢測模型還是提升模型的遷移能力,當(dāng)前都需要構(gòu)建規(guī)模更大、更全面的數(shù)據(jù)集。此外,通過分析用戶的簡檔和歷史行為來提取用戶畫像是檢測錯(cuò)誤信息的重要手段。但是,不少惡意用戶會(huì)刻意偽裝成正常用戶,且用戶特征一般具有無序性和復(fù)雜性,這給用戶信息挖掘帶來了困難。面對當(dāng)前業(yè)界實(shí)踐以及科學(xué)研究中的具體難題,錯(cuò)誤信息檢測領(lǐng)域存在以下幾個(gè)方面的挑戰(zhàn)。

    1)錯(cuò)誤信息早期檢測

    錯(cuò)誤信息早期檢測是一個(gè)極具社會(huì)現(xiàn)實(shí)意義的研究方向。從信息生態(tài)的角度看,在錯(cuò)誤信息傳播早期,信息大多分布在位于信息生態(tài)鏈上游的生產(chǎn)者以及與這些生產(chǎn)者聯(lián)系較為密切的小部分傳播者之間。如果能在錯(cuò)誤信息到達(dá)中下游之前將其識(shí)別出來并加以控制,那么會(huì)大幅降低錯(cuò)誤信息的治理成本和可能產(chǎn)生的負(fù)面影響?,F(xiàn)有的檢測模型在特征提取方面已表現(xiàn)得較為出色,但仍需要大量特征信息作為輸入。在錯(cuò)誤信息傳播的早期,文本信息、用戶評論、傳播信息等相關(guān)特征非常少,并不能滿足基于多特征檢測模型的需要,即早期檢測存在“冷啟動(dòng)”問題。此外,現(xiàn)有的檢測方法更傾向于學(xué)習(xí)特定事件的特征,而這些特征在不同的事件之間往往不能遷移。因此,基于這種不可遷移性,對暫未發(fā)生的事件目前還很難做到有效的早期檢測。

    2)大規(guī)模基準(zhǔn)數(shù)據(jù)集構(gòu)建

    錯(cuò)誤信息檢測模型的開發(fā)和測評都需要依賴數(shù)據(jù)輸入。雖然當(dāng)下已有許多公開的數(shù)據(jù)集可供開發(fā)和檢驗(yàn)錯(cuò)誤信息檢測模型,但這些數(shù)據(jù)集都存在一定程度上的不足,如表1 所示。

    表1 現(xiàn)有的主要公開數(shù)據(jù)集

    隨著相關(guān)研究的深入,學(xué)界需要建立更全面的大規(guī)?;鶞?zhǔn)數(shù)據(jù)集以便更好地構(gòu)建和測試錯(cuò)誤信息的檢測模型。首先,就數(shù)據(jù)獲取方法來說,目前錯(cuò)誤信息數(shù)據(jù)的來源主要有社交媒體平臺(tái)提供的API(application programming interface)、通用爬蟲、第三方公開數(shù)據(jù)集。然而,由于社交媒體平臺(tái)對本平臺(tái)的數(shù)據(jù)都有相應(yīng)的保護(hù)策略,通過平臺(tái)API 獲取數(shù)據(jù)在爬取速度和數(shù)量上都受到嚴(yán)格控制,無法滿足檢測的需求。基于爬蟲的方式不僅技術(shù)復(fù)雜,還可能面臨法律風(fēng)險(xiǎn)。第三方公開數(shù)據(jù)雖然容易獲得,但這些數(shù)據(jù)是由數(shù)據(jù)提供者根據(jù)自己的需要收集后公開的,顯然無法滿足所有用戶的需求[95]。上述三種方式都是以研究人員為中心的數(shù)據(jù)獲取。為了提高錯(cuò)誤信息檢測問題的研究效率,將研究者從瑣碎繁重的數(shù)據(jù)收集工作中解放出來,政府、社交平臺(tái)與學(xué)術(shù)界應(yīng)當(dāng)協(xié)同合作,共同構(gòu)建大規(guī)模數(shù)據(jù)集,這可以讓研究者把更多的精力放在檢測方法的探索上。其次,就數(shù)據(jù)標(biāo)記來說,許多數(shù)據(jù)集通常是通過手工標(biāo)記的,這種標(biāo)記方式成本高昂且需要從業(yè)人員具有豐富經(jīng)驗(yàn)。因此,如何準(zhǔn)確、高效地構(gòu)建大規(guī)模數(shù)據(jù)集是一大挑戰(zhàn)。此外,錯(cuò)誤信息的產(chǎn)生往往來源于最新事件,新事件的特點(diǎn)就是缺乏確鑿的證據(jù),現(xiàn)有的數(shù)據(jù)庫無法對這些新事件進(jìn)行及時(shí)的檢驗(yàn)與核實(shí),導(dǎo)致無法獲取完全有效的特征并影響模型建立。因此,建立一個(gè)全面、大規(guī)模、實(shí)時(shí)更新的基準(zhǔn)數(shù)據(jù)集對推動(dòng)錯(cuò)誤信息檢測方法的開發(fā)與測試有著巨大的幫助。

    3)惡意用戶識(shí)別

    錯(cuò)誤信息泛濫與網(wǎng)絡(luò)上充斥著大量的惡意賬戶密切相關(guān)。水軍、社交機(jī)器人等在社交媒體上開展輿論引導(dǎo)、惡意評論、誹謗和意識(shí)形態(tài)滲透等一系列活動(dòng),這一小部分惡意用戶是網(wǎng)絡(luò)中大部分錯(cuò)誤信息的貢獻(xiàn)者,他們的存在是網(wǎng)絡(luò)環(huán)境和信息生態(tài)面臨的最大威脅,較早識(shí)別出惡意用戶對錯(cuò)誤信息檢測具有重要意義。但是,由于用戶是否存在惡意很難有一個(gè)明確的判斷標(biāo)準(zhǔn),這類惡意用戶不僅特征復(fù)雜,還會(huì)偽裝成正常用戶以避免被發(fā)現(xiàn)?,F(xiàn)有的許多研究只從單一的角度提取社交機(jī)器人的特征,并不能得到相對詳細(xì)的惡意用戶的畫像。所以如何全面、有效地捕獲惡意用戶的特征仍是一個(gè)有待解決的問題。此外,不同的社交媒體平臺(tái)在語言、功能、特性方面存在差異,適用于某一社交媒體平臺(tái)的惡意用戶識(shí)別技術(shù)不一定適用于另一個(gè)社交媒體平臺(tái)。因此,這種難移植性對基于用戶信息的錯(cuò)誤信息檢測方法提出了很高的要求。

    猜你喜歡
    謠言社交特征
    社交之城
    英語世界(2023年6期)2023-06-30 06:28:28
    社交牛人癥該怎么治
    意林彩版(2022年2期)2022-05-03 10:25:08
    中國使館駁斥荒謬謠言
    社交距離
    如何表達(dá)“特征”
    不忠誠的四個(gè)特征
    當(dāng)謠言不攻自破之時(shí)
    你回避社交,真不是因?yàn)閮?nèi)向
    文苑(2018年17期)2018-11-09 01:29:28
    抓住特征巧觀察
    謠言
    亚洲成av人片在线播放无| 丰满的人妻完整版| 亚洲七黄色美女视频| 狂野欧美白嫩少妇大欣赏| 亚洲在线自拍视频| 在线a可以看的网站| 亚洲乱码一区二区免费版| 亚洲熟妇熟女久久| 操出白浆在线播放| 欧美高清成人免费视频www| 一级黄色大片毛片| 99热只有精品国产| 91国产中文字幕| 熟女少妇亚洲综合色aaa.| 久久精品国产综合久久久| 12—13女人毛片做爰片一| 美女高潮喷水抽搐中文字幕| 日韩大码丰满熟妇| 亚洲在线自拍视频| 色哟哟哟哟哟哟| 久久精品国产清高在天天线| 丝袜人妻中文字幕| 50天的宝宝边吃奶边哭怎么回事| 悠悠久久av| 日本精品一区二区三区蜜桃| 午夜精品在线福利| 最新美女视频免费是黄的| 亚洲一区中文字幕在线| 亚洲国产看品久久| 欧美黑人巨大hd| 老司机福利观看| 人人妻人人看人人澡| 三级国产精品欧美在线观看 | 日日干狠狠操夜夜爽| 夜夜夜夜夜久久久久| 免费一级毛片在线播放高清视频| 精品电影一区二区在线| av在线天堂中文字幕| 精品一区二区三区四区五区乱码| 国产伦在线观看视频一区| 欧美又色又爽又黄视频| 极品教师在线免费播放| 亚洲欧美精品综合久久99| 一本大道久久a久久精品| 国产三级在线视频| 国产伦人伦偷精品视频| 婷婷丁香在线五月| 国产黄片美女视频| 中文字幕人妻丝袜一区二区| 国产麻豆成人av免费视频| 久久 成人 亚洲| 一区二区三区高清视频在线| a级毛片a级免费在线| 国产精品美女特级片免费视频播放器 | 国产成人欧美在线观看| 手机成人av网站| 男女下面进入的视频免费午夜| 精品免费久久久久久久清纯| 国产精品久久电影中文字幕| 午夜两性在线视频| 国产精品免费一区二区三区在线| 1024手机看黄色片| 人人妻人人看人人澡| av天堂在线播放| 嫩草影院精品99| 两人在一起打扑克的视频| 色综合婷婷激情| 97碰自拍视频| 国产精品自产拍在线观看55亚洲| 精品欧美一区二区三区在线| 中文亚洲av片在线观看爽| 亚洲成人国产一区在线观看| 成年人黄色毛片网站| 国产精品美女特级片免费视频播放器 | e午夜精品久久久久久久| 看黄色毛片网站| 日本五十路高清| 黄色视频,在线免费观看| 在线看三级毛片| 久久精品亚洲精品国产色婷小说| 国产一区二区在线观看日韩 | 久久婷婷人人爽人人干人人爱| 最近最新免费中文字幕在线| 一本精品99久久精品77| 日韩免费av在线播放| 久久久久久国产a免费观看| 三级毛片av免费| 波多野结衣巨乳人妻| 又粗又爽又猛毛片免费看| 亚洲精品美女久久av网站| 久99久视频精品免费| 成人精品一区二区免费| 国产一区二区在线观看日韩 | 国产精品一及| 日韩高清综合在线| 亚洲中文日韩欧美视频| 久久久国产欧美日韩av| 精品久久久久久久末码| 日日摸夜夜添夜夜添小说| 此物有八面人人有两片| 精品国产乱码久久久久久男人| 又爽又黄无遮挡网站| 欧美日韩瑟瑟在线播放| 精品乱码久久久久久99久播| 国产av又大| 中文字幕高清在线视频| 国产在线观看jvid| 桃红色精品国产亚洲av| 日日爽夜夜爽网站| 村上凉子中文字幕在线| 国模一区二区三区四区视频 | 麻豆久久精品国产亚洲av| 国产精品九九99| 午夜激情福利司机影院| 激情在线观看视频在线高清| 久久久久久久久久黄片| 日本撒尿小便嘘嘘汇集6| 一本大道久久a久久精品| 久久精品夜夜夜夜夜久久蜜豆 | 757午夜福利合集在线观看| 男女下面进入的视频免费午夜| 国产精品影院久久| 夜夜爽天天搞| 亚洲精品av麻豆狂野| 午夜免费成人在线视频| 搡老妇女老女人老熟妇| 一本精品99久久精品77| 日韩欧美 国产精品| or卡值多少钱| 成人18禁在线播放| 久久久久久免费高清国产稀缺| 变态另类丝袜制服| 婷婷丁香在线五月| 12—13女人毛片做爰片一| 最近视频中文字幕2019在线8| 特大巨黑吊av在线直播| 一二三四在线观看免费中文在| 欧美黑人欧美精品刺激| 性欧美人与动物交配| 欧美高清成人免费视频www| 国产精品久久久av美女十八| 又大又爽又粗| 亚洲一区二区三区不卡视频| 欧美黑人欧美精品刺激| 久久精品国产99精品国产亚洲性色| 国产精品国产高清国产av| 宅男免费午夜| 国产精品亚洲av一区麻豆| 午夜激情av网站| 丰满的人妻完整版| 男女视频在线观看网站免费 | 宅男免费午夜| 国产精品日韩av在线免费观看| 高清毛片免费观看视频网站| 女人被狂操c到高潮| 高清在线国产一区| 又黄又粗又硬又大视频| 免费在线观看影片大全网站| 久久99热这里只有精品18| 久久久精品欧美日韩精品| 久久性视频一级片| 亚洲男人的天堂狠狠| 亚洲中文日韩欧美视频| 国产一级毛片七仙女欲春2| 国产在线观看jvid| 91成年电影在线观看| 别揉我奶头~嗯~啊~动态视频| 最新美女视频免费是黄的| 老汉色∧v一级毛片| 国产精品日韩av在线免费观看| 亚洲欧美激情综合另类| 成人精品一区二区免费| 18禁国产床啪视频网站| 免费看日本二区| 夜夜看夜夜爽夜夜摸| 久久久久久久午夜电影| 人妻久久中文字幕网| 妹子高潮喷水视频| 色综合站精品国产| √禁漫天堂资源中文www| 免费在线观看影片大全网站| 国产高清有码在线观看视频 | 亚洲国产看品久久| av福利片在线| 99国产精品一区二区三区| 国产91精品成人一区二区三区| 国产成人av教育| 白带黄色成豆腐渣| 中文字幕熟女人妻在线| 夜夜躁狠狠躁天天躁| 色在线成人网| 国产成人影院久久av| 欧美久久黑人一区二区| 国产乱人伦免费视频| 99热只有精品国产| 美女扒开内裤让男人捅视频| 国产精品影院久久| 国模一区二区三区四区视频 | 一区二区三区高清视频在线| 午夜福利在线观看吧| 黄色毛片三级朝国网站| 久久精品国产清高在天天线| 亚洲欧美精品综合久久99| 色哟哟哟哟哟哟| а√天堂www在线а√下载| 国产成人av激情在线播放| 国产三级在线视频| 亚洲欧美日韩高清专用| 国产精品亚洲美女久久久| 国产不卡一卡二| 可以在线观看的亚洲视频| 国内精品一区二区在线观看| 欧美日韩中文字幕国产精品一区二区三区| 观看免费一级毛片| 一a级毛片在线观看| 操出白浆在线播放| 在线观看www视频免费| 男女之事视频高清在线观看| 欧美久久黑人一区二区| 草草在线视频免费看| bbb黄色大片| av免费在线观看网站| av有码第一页| 亚洲天堂国产精品一区在线| 国产精品久久久av美女十八| 老司机午夜十八禁免费视频| 不卡一级毛片| 日韩大码丰满熟妇| 老司机在亚洲福利影院| 俄罗斯特黄特色一大片| xxx96com| 男女做爰动态图高潮gif福利片| 可以在线观看的亚洲视频| 亚洲精品一卡2卡三卡4卡5卡| 亚洲av电影在线进入| 正在播放国产对白刺激| 99re在线观看精品视频| 好男人在线观看高清免费视频| 亚洲一区中文字幕在线| 免费观看人在逋| 日本一本二区三区精品| 亚洲片人在线观看| 精品一区二区三区四区五区乱码| 一区二区三区高清视频在线| 91国产中文字幕| 岛国在线观看网站| 最近视频中文字幕2019在线8| 男女那种视频在线观看| 国内揄拍国产精品人妻在线| 国产区一区二久久| 日韩欧美国产一区二区入口| 99精品久久久久人妻精品| 白带黄色成豆腐渣| а√天堂www在线а√下载| 免费一级毛片在线播放高清视频| 亚洲18禁久久av| 亚洲精品国产一区二区精华液| 精品电影一区二区在线| 欧美色视频一区免费| 国产精品一区二区精品视频观看| 午夜亚洲福利在线播放| 91在线观看av| videosex国产| 丁香六月欧美| 国产欧美日韩精品亚洲av| 午夜成年电影在线免费观看| 啦啦啦免费观看视频1| 一进一出抽搐动态| 身体一侧抽搐| 成在线人永久免费视频| 成人亚洲精品av一区二区| 色尼玛亚洲综合影院| 夜夜夜夜夜久久久久| 欧美大码av| 国产高清视频在线播放一区| 99国产综合亚洲精品| 成人18禁在线播放| 国产亚洲精品久久久久久毛片| 亚洲av成人av| 非洲黑人性xxxx精品又粗又长| 欧美 亚洲 国产 日韩一| 午夜福利欧美成人| 91国产中文字幕| 中文字幕av在线有码专区| 国产精品久久久av美女十八| 欧美成人一区二区免费高清观看 | 日韩欧美国产在线观看| 我的老师免费观看完整版| 亚洲狠狠婷婷综合久久图片| 色综合欧美亚洲国产小说| 国产乱人伦免费视频| 国产精品九九99| 精品午夜福利视频在线观看一区| 777久久人妻少妇嫩草av网站| 亚洲,欧美精品.| 热99re8久久精品国产| 亚洲国产欧美网| www日本黄色视频网| 18美女黄网站色大片免费观看| 日日夜夜操网爽| 久久久久久免费高清国产稀缺| 亚洲精品粉嫩美女一区| 欧美丝袜亚洲另类 | 亚洲成人中文字幕在线播放| 亚洲成人精品中文字幕电影| 91成年电影在线观看| 国产成人一区二区三区免费视频网站| 亚洲一区二区三区不卡视频| 婷婷精品国产亚洲av在线| 国产成人精品无人区| 两个人看的免费小视频| 成人av一区二区三区在线看| 亚洲九九香蕉| 欧美国产日韩亚洲一区| 精品一区二区三区视频在线观看免费| 欧美日韩中文字幕国产精品一区二区三区| 久久草成人影院| 一级黄色大片毛片| a级毛片a级免费在线| 法律面前人人平等表现在哪些方面| 麻豆久久精品国产亚洲av| 丝袜美腿诱惑在线| 色尼玛亚洲综合影院| 国产精品综合久久久久久久免费| 亚洲一码二码三码区别大吗| 欧美最黄视频在线播放免费| 国产一区在线观看成人免费| 成人三级做爰电影| 中文字幕人成人乱码亚洲影| 精品久久蜜臀av无| 欧美在线黄色| 少妇的丰满在线观看| 国产精品影院久久| 最新在线观看一区二区三区| 久久国产乱子伦精品免费另类| 国产日本99.免费观看| 国内少妇人妻偷人精品xxx网站 | 老司机福利观看| 少妇人妻一区二区三区视频| 国产成人欧美在线观看| 国产真人三级小视频在线观看| 欧美黄色淫秽网站| 巨乳人妻的诱惑在线观看| 夜夜夜夜夜久久久久| 久久久久亚洲av毛片大全| 亚洲成人久久爱视频| 人妻夜夜爽99麻豆av| 亚洲精品久久国产高清桃花| 国产精品亚洲一级av第二区| 男人的好看免费观看在线视频 | 亚洲人与动物交配视频| 亚洲av成人不卡在线观看播放网| 免费在线观看亚洲国产| 欧美日本亚洲视频在线播放| 中出人妻视频一区二区| 久久精品夜夜夜夜夜久久蜜豆 | 久久久国产欧美日韩av| 又爽又黄无遮挡网站| 亚洲真实伦在线观看| x7x7x7水蜜桃| 色在线成人网| 欧美极品一区二区三区四区| 一区福利在线观看| 丰满人妻熟妇乱又伦精品不卡| 男女做爰动态图高潮gif福利片| 午夜成年电影在线免费观看| 18禁国产床啪视频网站| 一级毛片女人18水好多| 国产一区二区激情短视频| 国产探花在线观看一区二区| 国产精品日韩av在线免费观看| 国产1区2区3区精品| 欧美日韩中文字幕国产精品一区二区三区| 亚洲成av人片在线播放无| 最近视频中文字幕2019在线8| 亚洲成av人片在线播放无| 99精品欧美一区二区三区四区| www国产在线视频色| 精品国产亚洲在线| 亚洲av日韩精品久久久久久密| www国产在线视频色| 亚洲中文字幕一区二区三区有码在线看 | 欧美又色又爽又黄视频| 久久精品成人免费网站| 黑人操中国人逼视频| 国产精品久久久人人做人人爽| 成年免费大片在线观看| 动漫黄色视频在线观看| 亚洲av第一区精品v没综合| 日日夜夜操网爽| 一进一出好大好爽视频| 99久久精品国产亚洲精品| 午夜两性在线视频| 岛国在线免费视频观看| 99国产精品99久久久久| 国产私拍福利视频在线观看| 久久草成人影院| 日韩欧美国产一区二区入口| 午夜精品在线福利| 亚洲欧美精品综合一区二区三区| 久久人妻福利社区极品人妻图片| 久久久久久久久免费视频了| 亚洲精品国产精品久久久不卡| 丁香六月欧美| 香蕉丝袜av| 超碰成人久久| 老鸭窝网址在线观看| 在线观看66精品国产| 日本一二三区视频观看| ponron亚洲| 非洲黑人性xxxx精品又粗又长| 男女午夜视频在线观看| 校园春色视频在线观看| 欧美午夜高清在线| 一本精品99久久精品77| 亚洲精品粉嫩美女一区| 亚洲一区二区三区不卡视频| 啪啪无遮挡十八禁网站| 欧美三级亚洲精品| 亚洲人与动物交配视频| 在线视频色国产色| 国产片内射在线| 国产精品免费一区二区三区在线| 看免费av毛片| 欧美日韩亚洲综合一区二区三区_| 特级一级黄色大片| 色精品久久人妻99蜜桃| 免费在线观看影片大全网站| 老司机午夜十八禁免费视频| 国产在线观看jvid| 中文在线观看免费www的网站 | 91在线观看av| 亚洲国产精品成人综合色| 国语自产精品视频在线第100页| 中国美女看黄片| 一个人观看的视频www高清免费观看 | 美女扒开内裤让男人捅视频| 美女黄网站色视频| 亚洲中文日韩欧美视频| 成人午夜高清在线视频| 一区二区三区激情视频| 日韩有码中文字幕| 久久久水蜜桃国产精品网| 丁香六月欧美| 一夜夜www| 午夜激情av网站| 青草久久国产| 好男人电影高清在线观看| 欧美色欧美亚洲另类二区| 国产高清视频在线播放一区| 1024手机看黄色片| 村上凉子中文字幕在线| 国产av一区在线观看免费| 一二三四社区在线视频社区8| 在线国产一区二区在线| 狠狠狠狠99中文字幕| 小说图片视频综合网站| 一级作爱视频免费观看| 少妇人妻一区二区三区视频| 亚洲天堂国产精品一区在线| videosex国产| 色老头精品视频在线观看| 男插女下体视频免费在线播放| 日韩免费av在线播放| 欧美中文日本在线观看视频| 1024香蕉在线观看| 国产1区2区3区精品| 一个人免费在线观看电影 | 女人高潮潮喷娇喘18禁视频| 午夜成年电影在线免费观看| 床上黄色一级片| 搞女人的毛片| 午夜福利视频1000在线观看| 婷婷精品国产亚洲av在线| 成熟少妇高潮喷水视频| 欧美黑人欧美精品刺激| 国产亚洲精品一区二区www| 亚洲五月天丁香| 色哟哟哟哟哟哟| 亚洲成a人片在线一区二区| 久久亚洲精品不卡| 欧美最黄视频在线播放免费| 性色av乱码一区二区三区2| 久久国产精品影院| 热99re8久久精品国产| 美女午夜性视频免费| 男女那种视频在线观看| 久久中文字幕人妻熟女| 欧美成人午夜精品| 亚洲人成伊人成综合网2020| 久久这里只有精品中国| 久久 成人 亚洲| 国产成人精品久久二区二区91| 一区二区三区激情视频| 国产亚洲欧美98| 国产精品av视频在线免费观看| 看免费av毛片| 最近最新中文字幕大全免费视频| 亚洲一区二区三区色噜噜| 国产69精品久久久久777片 | 嫁个100分男人电影在线观看| 又粗又爽又猛毛片免费看| 中出人妻视频一区二区| 五月玫瑰六月丁香| 一本综合久久免费| 桃红色精品国产亚洲av| 国产亚洲精品第一综合不卡| 国产久久久一区二区三区| 国产精品九九99| 日韩精品中文字幕看吧| 国产精华一区二区三区| 午夜影院日韩av| 制服人妻中文乱码| 俄罗斯特黄特色一大片| 日韩中文字幕欧美一区二区| 国产日本99.免费观看| 国产精品久久久久久精品电影| 波多野结衣巨乳人妻| 亚洲黑人精品在线| 日韩欧美 国产精品| 人妻久久中文字幕网| 国产av不卡久久| 成人高潮视频无遮挡免费网站| 18禁裸乳无遮挡免费网站照片| 男人舔奶头视频| www.熟女人妻精品国产| 亚洲国产欧美人成| 亚洲精品一卡2卡三卡4卡5卡| bbb黄色大片| 久久这里只有精品中国| 国产成人精品久久二区二区免费| 99久久无色码亚洲精品果冻| 亚洲专区中文字幕在线| 亚洲avbb在线观看| 亚洲精品粉嫩美女一区| 亚洲国产精品合色在线| 日韩高清综合在线| 亚洲美女黄片视频| 日本在线视频免费播放| 国产一区二区激情短视频| 老熟妇乱子伦视频在线观看| 黄色片一级片一级黄色片| 久久婷婷人人爽人人干人人爱| 精品高清国产在线一区| 欧美日韩亚洲综合一区二区三区_| 国产精品久久久久久久电影 | 最近在线观看免费完整版| 欧美av亚洲av综合av国产av| 久久久久久久久免费视频了| 国内毛片毛片毛片毛片毛片| 亚洲国产高清在线一区二区三| 午夜激情福利司机影院| 黄色女人牲交| 成人精品一区二区免费| 99riav亚洲国产免费| av天堂在线播放| 精品第一国产精品| 一夜夜www| 在线观看66精品国产| 免费在线观看黄色视频的| 两个人免费观看高清视频| 99国产精品99久久久久| 这个男人来自地球电影免费观看| 精品人妻1区二区| 黑人欧美特级aaaaaa片| 国产高清有码在线观看视频 | 免费看十八禁软件| 村上凉子中文字幕在线| 免费在线观看日本一区| 国产精品久久久久久人妻精品电影| 天天躁夜夜躁狠狠躁躁| 中文字幕最新亚洲高清| 在线观看美女被高潮喷水网站 | 亚洲成人国产一区在线观看| 成人欧美大片| 黄色视频,在线免费观看| 亚洲自偷自拍图片 自拍| 国产伦人伦偷精品视频| 手机成人av网站| 国产精品 国内视频| 女同久久另类99精品国产91| 欧美色视频一区免费| 国语自产精品视频在线第100页| 97碰自拍视频| 99热6这里只有精品| 日本五十路高清| 精品欧美一区二区三区在线| 两个人免费观看高清视频| 国内久久婷婷六月综合欲色啪| 在线免费观看的www视频| 一级毛片精品| 久久中文字幕一级| 国产精品免费视频内射| 两性夫妻黄色片| 亚洲av成人不卡在线观看播放网| 中出人妻视频一区二区| 国产欧美日韩一区二区三| 看免费av毛片| 91成年电影在线观看| 成人国产综合亚洲| 欧美成人一区二区免费高清观看 | 亚洲午夜理论影院| 99国产精品一区二区蜜桃av| 久久久久久免费高清国产稀缺| 免费在线观看成人毛片| 一a级毛片在线观看| 国产成人av激情在线播放| 欧美性猛交╳xxx乱大交人| 欧美 亚洲 国产 日韩一| 久久久久国内视频| 日韩欧美国产一区二区入口| 少妇的丰满在线观看| 视频区欧美日本亚洲| 午夜两性在线视频| 女人被狂操c到高潮|