• <tr id="yyy80"></tr>
  • <sup id="yyy80"></sup>
  • <tfoot id="yyy80"><noscript id="yyy80"></noscript></tfoot>
  • 99热精品在线国产_美女午夜性视频免费_国产精品国产高清国产av_av欧美777_自拍偷自拍亚洲精品老妇_亚洲熟女精品中文字幕_www日本黄色视频网_国产精品野战在线观看 ?

    數(shù)據(jù)保護(hù)的集體維度

    2022-02-17 18:30:23戴藝晗華東政法大學(xué)國際法學(xué)院
    圖書館理論與實(shí)踐 2022年2期
    關(guān)鍵詞:畫像集體權(quán)利

    戴藝晗(華東政法大學(xué)國際法學(xué)院)

    20世紀(jì)70年代,隨著計(jì)算機(jī)技術(shù)的興起,法律越來越關(guān)注個(gè)人隱私保護(hù)。1980年,經(jīng)濟(jì)發(fā)展與合作組織(Organization for Economic Cooperation and Development,OECD)發(fā)布的《隱私保護(hù)與個(gè)人數(shù)據(jù)跨境流通指南》普及了這樣一種觀念,即個(gè)人應(yīng)該對任何用于自己和關(guān)于自己的信息擁有知情同意權(quán)[1]。1978年,法國頒布了數(shù)據(jù)保護(hù)法,規(guī)定必須為了特定、明確和合法的目的,在本人(“數(shù)據(jù)主體”)同意的情況下,以公平、合法的方式收集和處理個(gè)人數(shù)據(jù)[2]。受法國數(shù)據(jù)保護(hù)法等相關(guān)法律的啟發(fā),歐盟分別于1995年和2018年頒布《個(gè)人數(shù)據(jù)保護(hù)指令》[3]和《通用數(shù)據(jù)保護(hù)條例》(General Data Protection Regulation,GDPR)[4]。如今數(shù)據(jù)權(quán)利被視為“個(gè)人權(quán)利”,數(shù)據(jù)權(quán)利的個(gè)體化已成為世界各國數(shù)據(jù)保護(hù)法的基石。當(dāng)政府和法律將重點(diǎn)放在保護(hù)個(gè)人數(shù)據(jù)權(quán)利時(shí),科技公司卻從分析個(gè)人行為轉(zhuǎn)向分析群體行為,有效地讓個(gè)人的拒絕或同意變得毫無意義:即使某人拒絕使用Facebook、Twitter或亞馬遜的服務(wù),但其周圍的每個(gè)人都加入并使用,意味著此人的目標(biāo)數(shù)據(jù)點(diǎn)和沒有拒絕使用服務(wù)的人一樣多。

    1 數(shù)據(jù)侵權(quán)的集體維度

    數(shù)據(jù)和信息基于個(gè)人或者單位產(chǎn)生,兼具私人與公共屬性,是數(shù)字經(jīng)濟(jì)時(shí)代維持運(yùn)轉(zhuǎn)不可或缺的資源[5]。以海量數(shù)據(jù)為基礎(chǔ)的大數(shù)據(jù)算法分析能洞察市場的新興趨勢,指導(dǎo)新產(chǎn)品和服務(wù)的開發(fā),預(yù)測個(gè)體偏好,為消費(fèi)者提供個(gè)性化的產(chǎn)品和服務(wù)。大數(shù)據(jù)的生命周期可以分為收集、編制與整理、數(shù)據(jù)挖掘與分析和使用四個(gè)階段[6]。

    在大數(shù)據(jù)生命周期的編制、整理階段,不同來源的數(shù)據(jù)被組合起來,用于構(gòu)建單個(gè)消費(fèi)者的畫像[7]。大數(shù)據(jù)分析將具有某方面共同特征的人歸結(jié)到一個(gè)群組中,如,每周去三次西式快餐店的人、一周有三次以上晨間運(yùn)動(dòng)習(xí)慣的人。在市場環(huán)境下,數(shù)據(jù)挖掘與分析的共同目的之一是預(yù)測消費(fèi)者的選擇。利用數(shù)據(jù)預(yù)測事件或行為是機(jī)器學(xué)習(xí)和人工智能發(fā)展的結(jié)果,隨著數(shù)據(jù)可用性和使用范圍的擴(kuò)大,做決策變得越來越容易,人類傳統(tǒng)做決策的過程有時(shí)甚至?xí)耆凰^的預(yù)測建模方法(通常稱為“算法的使用”)所取代。正如一個(gè)硬幣有兩面,大數(shù)據(jù)算法分析帶來便利性的同時(shí),也可能會(huì)合并甚至強(qiáng)化歧視性的刻板印象,從而損害用戶和系統(tǒng)本身的效率。牛津詞典將歧視定義為不公平對待社會(huì)中某個(gè)人或某一群體的行為[8]。歧視有三個(gè)特點(diǎn):存在非合理的不公平對待,此種不公平對待是法律所禁止的,會(huì)造成不公平、不公正的后果[9]。現(xiàn)代社會(huì)的一個(gè)核心原則是,按照某種類型的標(biāo)準(zhǔn)對不同群體的人進(jìn)行歧視在道德上是錯(cuò)誤的[10]。歧視可能有意,也可能無意。機(jī)器學(xué)習(xí)系統(tǒng)依靠人類創(chuàng)造的算法處理來自人類的數(shù)據(jù),因此這種數(shù)據(jù)處理的最終結(jié)果會(huì)帶有人類固有的偏見。聯(lián)合國《世界人權(quán)宣言》第2條明確規(guī)定:“人人有資格享有本宣言所載的一切權(quán)利和自由,不分種族、膚色、性別、語言、宗教、政治或其他見解、國籍或社會(huì)出身、財(cái)產(chǎn)、出生或其他身份等任何區(qū)別。并且不得因一人所屬的國家或領(lǐng)土的政治的、行政的或者國際的地位之不同而有所區(qū)別,無論該領(lǐng)土是獨(dú)立領(lǐng)土、托管領(lǐng)土、非自治領(lǐng)土或者處于其他任何主權(quán)受限制的情況之下?!保?1]由此可見,歧視基于的要素不僅包括種族、性別等客觀要素,還包括政治見解等主觀要素,不論是對個(gè)體的歧視還是對集體的歧視皆違反現(xiàn)代法律精神。

    當(dāng)今社會(huì),數(shù)據(jù)和信息已經(jīng)成為每個(gè)人不可分割的組成部分,它描繪和構(gòu)建了人的自然本性、社會(huì)角色和個(gè)性特征,表現(xiàn)了人的人格尊嚴(yán)和主體價(jià)值[5]。隨著人工智能技術(shù)的進(jìn)一步發(fā)展及運(yùn)用,算法帶來的歧視已經(jīng)不限于傳統(tǒng)的種族、性別等人口統(tǒng)計(jì)因素,而是滲透到日常生活和社會(huì)事務(wù)中,并開始以越來越隱蔽的方式逐步影響人類社會(huì)制度和經(jīng)濟(jì)發(fā)展的方方面面[12]。算法歧視可以分為偏見代理的算法歧視,即客觀中立的基礎(chǔ)性數(shù)據(jù)組合產(chǎn)生了歧視性的后果;特征選擇的算法歧視,即輸入系統(tǒng)本身帶有偏見,從而構(gòu)成歧視性的看法;大數(shù)據(jù)殺熟,即同一時(shí)段提供的商品或者服務(wù),面對不同的客戶采取不同的對待模式[13]。大數(shù)據(jù)算法歧視和一般歧視相比,所依據(jù)的因素更為多樣化和不確定,如對消費(fèi)者信用的評估不是基于將消費(fèi)者的已知信用特征(如過去的逾期付款記錄)與歷史數(shù)據(jù)進(jìn)行比較,而是基于這些客戶的郵政編碼、社交媒體的使用情況或購物歷史。

    如果數(shù)據(jù)收集的過程反映了個(gè)人偏好或者受到了某種客觀條件的限制,那么由數(shù)據(jù)揭示的一些統(tǒng)計(jì)關(guān)系可能會(huì)產(chǎn)生偏見,導(dǎo)致不準(zhǔn)確的預(yù)測和分析。如,美國波士頓市開發(fā)了一款名為Street Bump的手機(jī)應(yīng)用程序,利用智能手機(jī)的一些功能來采集和發(fā)送道路情況,因?yàn)榈褪杖肴巳簲y帶智能手機(jī)的比例較低,所以這些數(shù)據(jù)不能完全代表所有的道路狀況,偏差的數(shù)據(jù)有可能使道路服務(wù)向高收入社區(qū)傾斜[6]。歧視一般源于主觀偏見或偏好,但更看重客觀所造成的不良社會(huì)影響[12]。2017年,斯坦福大學(xué)的研究人員詳細(xì)介紹了一種人臉識別算法,該算法能夠以驚人的準(zhǔn)確性預(yù)測一個(gè)人的性取向[14]。這項(xiàng)研究受到了廣泛批評,理由是其創(chuàng)造了一個(gè)收集數(shù)據(jù)的工具從而根據(jù)性取向?qū)€(gè)體進(jìn)行分類,分類結(jié)果有可能被用來排除或歧視整個(gè)階級的個(gè)體。

    數(shù)據(jù)是數(shù)據(jù)主體的“生命密碼”,與數(shù)據(jù)主體的隱私、情感以及社會(huì)評價(jià)息息相關(guān)[15]。大數(shù)據(jù)分析被廣泛用于理解用戶通過與網(wǎng)絡(luò)設(shè)備、平臺和組織互動(dòng)而產(chǎn)生的數(shù)據(jù)軌跡。大數(shù)據(jù)算法分析將個(gè)人歸結(jié)到不同的群體中,歸類到一個(gè)群體中的數(shù)據(jù)并不一定涉及能識別到特定個(gè)人的事實(shí)或信息;由于不具有可識別性,不一定構(gòu)成對個(gè)人隱私和個(gè)人數(shù)據(jù)保護(hù)的違反。保險(xiǎn)公司在提供汽車、健康、家庭或人壽保險(xiǎn)之前,可能會(huì)根據(jù)目標(biāo)客戶對生活方式的選擇、閱讀的期刊、居住地、未決或已了結(jié)的刑事或民事訴訟、教育水平和就業(yè)情況來提取與客戶細(xì)分相關(guān)的風(fēng)險(xiǎn)預(yù)測信息,如,住在高檔社區(qū)A的住戶與住在普通小區(qū)B的住戶在同一時(shí)期購買同一種保險(xiǎn),前者所支付的保費(fèi)比后者要低得多,保險(xiǎn)公司對應(yīng)繳保費(fèi)的評估和判斷不是基于個(gè)人,而是基于個(gè)人作為該小區(qū)的一分子。

    隨著網(wǎng)絡(luò)和智能技術(shù)的飛速發(fā)展,企業(yè)和政府將收集更多個(gè)人信息并可能傾向于使用自動(dòng)化決策方法,隨著自動(dòng)化程度的提高,對公平的影響將會(huì)更大。在大數(shù)據(jù)時(shí)代,數(shù)據(jù)交易和生產(chǎn)過程呈現(xiàn)出“參與主體多元化、權(quán)利歸屬復(fù)雜化”的特點(diǎn)[16]。被歸類到一個(gè)群體中的數(shù)據(jù)涉及多個(gè)個(gè)體作為一個(gè)整體的利益,而不僅僅是許多單個(gè)個(gè)體利益的總和以及簡單疊加。集體維度的重要性取決于這樣一個(gè)事實(shí),即用現(xiàn)代算法進(jìn)行分類的方法不僅關(guān)注個(gè)人,還關(guān)注具有某些共同行為特征(如,十一點(diǎn)以前上床睡覺、每天乘坐地鐵上班、每周喝咖啡超過三杯)的群體。大數(shù)據(jù)收集者從研究和預(yù)測群體行為的層面出發(fā),而非對單個(gè)用戶進(jìn)行分析,在此種情況下,基于相關(guān)關(guān)系的預(yù)測不僅會(huì)影響個(gè)體,而且還會(huì)影響整個(gè)群體,使其有別于社會(huì)的其他群體[17]。數(shù)據(jù)驅(qū)動(dòng)的決策涉及由單個(gè)個(gè)體組成的集群,并且直接地影響這些群組里的成員,這就需要在集體層面保護(hù)群體以及群體中的個(gè)體免受侵入性和歧視性數(shù)據(jù)處理造成的潛在傷害。

    2 個(gè)人采取救濟(jì)的困難性

    相對于侵犯個(gè)人隱私而言,個(gè)人為集體損害尋求救濟(jì)非常困難。目前的數(shù)據(jù)保護(hù)框架以數(shù)據(jù)控制者、數(shù)據(jù)處理者和數(shù)據(jù)主體之間的關(guān)系為前提,隨著技術(shù)的發(fā)展,這些關(guān)系變得越來越復(fù)雜和不穩(wěn)定:很難分清楚誰是數(shù)據(jù)控制者,誰的數(shù)據(jù)權(quán)利受到了傷害。

    21世紀(jì)的數(shù)據(jù)隱私和歧視問題在于公眾不再知道自己屬于或不屬于哪個(gè)群體,只有算法知道。數(shù)據(jù)主體不了解數(shù)據(jù)處理的具體運(yùn)作與過程。個(gè)人和使用個(gè)人數(shù)據(jù)的組織之間經(jīng)常存在信息不對稱現(xiàn)象,用戶可能知道他的數(shù)據(jù)被收集和存儲,但卻不知道這些數(shù)據(jù)將被如何使用[18],也不清楚經(jīng)營者和網(wǎng)絡(luò)提供者實(shí)行的政策可能對其數(shù)據(jù)或者隱私造成的影響,如網(wǎng)絡(luò)用戶瀏覽網(wǎng)頁時(shí)勾選Cookies同意的預(yù)選框可能產(chǎn)生什么樣的具體后果。在大數(shù)據(jù)背景下,單個(gè)數(shù)據(jù)主體對集體的認(rèn)知有限,他們可能并不知道自己已經(jīng)被大數(shù)據(jù)歸類到某個(gè)群體中,或?qū)θ后w中其他成員的身份一無所知[19],數(shù)據(jù)主體也很難意識到可能存在的潛在集體偏見[20]。在大數(shù)據(jù)分析領(lǐng)域,數(shù)據(jù)集體侵權(quán)事件由于流程的部分隱蔽性和復(fù)雜性更難被察覺,如數(shù)據(jù)挖掘使那些希望對受保護(hù)階層采取歧視措施的雇主可以在第一時(shí)間否認(rèn)對受保護(hù)階層的任何了解[21],這使得及時(shí)地發(fā)起訴訟十分困難。另外,網(wǎng)絡(luò)提供者與作為消費(fèi)者的用戶之間權(quán)利懸殊,個(gè)人信息的價(jià)值包括自主價(jià)值和使用價(jià)值,以確保個(gè)人信息的獨(dú)立使用,信息劣勢方(網(wǎng)絡(luò)用戶)的自由意志和自由發(fā)展很可能受到信息優(yōu)勢方(網(wǎng)絡(luò)提供者)的影響,最終導(dǎo)致?lián)p害[22]。

    數(shù)據(jù)侵權(quán)行為不僅可能構(gòu)成指向性侵害,即某一民事主體指向性地侵害其他民事主體(可以是一人也可以是多人)的人身、財(cái)產(chǎn)權(quán)利或者法益;還可能構(gòu)成社會(huì)侵害,即對特定集體(又被稱為“社會(huì)共同體”“集團(tuán)”或“群”)的社會(huì)權(quán)益即集體權(quán)益形成發(fā)散性侵害[23]。數(shù)據(jù)保護(hù)司法困難重重的根源在于傳統(tǒng)賦權(quán)模式過于籠統(tǒng)、抽象,數(shù)據(jù)權(quán)利缺乏制衡導(dǎo)致數(shù)據(jù)主體處于弱勢地位,只能被動(dòng)地承受數(shù)據(jù)被分析、被使用甚至被披露等一系列后果,在維權(quán)時(shí),由于證據(jù)收集能力有限,容易陷入證據(jù)不能或證據(jù)不足的困境[23-24]。如今政府—平臺—商戶(消費(fèi)者)、公權(quán)利—社會(huì)權(quán)利—私權(quán)利的三元結(jié)構(gòu)和公、私并存的雙重權(quán)利生態(tài)的生成,面對技術(shù)霸權(quán)和算法決策,私權(quán)利更為弱勢,被困于“數(shù)字鴻溝”、算法霸權(quán)和監(jiān)控社會(huì)中[5]。這就要求在數(shù)據(jù)和信息在公共性與私密性之間,在政府部門、業(yè)務(wù)平臺、技術(shù)公司與消費(fèi)者之間,在公法保護(hù)與私法保護(hù)之間,形成多元、平衡、互動(dòng)、共享的數(shù)字人權(quán)保護(hù)機(jī)制[5]。個(gè)人尋求救濟(jì)的前提是數(shù)據(jù)集體利益的確立。

    3 數(shù)據(jù)集體利益權(quán)利化的提出

    大數(shù)據(jù)滋生了三個(gè)悖論:①透明度悖論,即大數(shù)據(jù)廣泛收集各種私人信息的同時(shí),大數(shù)據(jù)本身的運(yùn)作幾乎完全被法律和商業(yè)秘密所掩蓋;②同一性悖論,即大數(shù)據(jù)試圖以犧牲個(gè)人和集體身份為代價(jià)進(jìn)行識別;③權(quán)利悖論,即大數(shù)據(jù)以犧牲普通個(gè)人為代價(jià),為大型政府和企業(yè)提供特權(quán)[25]。同時(shí),大數(shù)據(jù)具有四大特點(diǎn):大量(Volume)、高速(Velocity)、多樣性(Variety)、價(jià)值性(Value)[26]。在大數(shù)據(jù)時(shí)代,單個(gè)自然人的個(gè)人數(shù)據(jù)本身沒有價(jià)值,真正蘊(yùn)含巨大經(jīng)濟(jì)價(jià)值的是政府和數(shù)據(jù)從業(yè)者收集、存儲的海量個(gè)人數(shù)據(jù)[27]。大數(shù)據(jù)中的大多數(shù)人不是被描述為個(gè)體,而是被描述為一個(gè)特定群體的成員,因此數(shù)據(jù)主體不再是一個(gè)特定的個(gè)人或少數(shù)群體,而是數(shù)量龐大的未定義群體[28]。

    牛津互聯(lián)網(wǎng)研究所研究員Brent Mittelstadt將群體分為三種形式:①集體群體,即因集體利益、共同背景或其他明確的共同特征和目的而有意加入的群體(如工會(huì));②先賦性群體,即由遺傳或偶然發(fā)展的特征所決定的群體,此群體通常不能在不重新定義群體邊界的情況下被有意加入或離開(如種族群體、遺傳病群體);③特別小組,即根據(jù)成員之間的聯(lián)系,為第三方利益而組織成立的團(tuán)體,通常在一段時(shí)間或基于特定目的而組成,成員資格要求不穩(wěn)定[29]。從Brent Mittelstadt的研究可以得知,前兩種形式已經(jīng)得到法律認(rèn)可,而特別小組還未被法律承認(rèn)為合法的權(quán)利擁有者,群組用戶畫像是特別小組的典型代表[29]。GDPR將畫像定義為為了評估自然人的某些條件,通過自動(dòng)化方式對個(gè)人數(shù)據(jù)進(jìn)行處理,特別是為了評估自然人的工作表現(xiàn)、經(jīng)濟(jì)狀況、健康、個(gè)人偏好、興趣、可靠性、行為方式、位置或行蹤而進(jìn)行的處理[4]。我國法律尚未對用戶畫像進(jìn)行明確的定義,但在《信息安全技術(shù) 個(gè)人信息安全規(guī)范》(GB/T 35273-2020)中將用戶畫像定義為“通過收集、匯聚、分析個(gè)人信息,對某特定自然人個(gè)人特征,如其職業(yè)、經(jīng)濟(jì)、健康、教育、個(gè)人喜好、信用、行為等方面作出分析或預(yù)測,形成其個(gè)人特征模型的過程”[30]。并且在注解中還進(jìn)一步將用戶畫像分為直接用戶畫像和間接用戶畫像:直接用戶畫像是指直接使用特定自然人的個(gè)人信息形成該自然人的特征模型;間接用戶畫像是指使用來源于特定自然人以外的信息,如所在群體的數(shù)據(jù)從而形成該自然人的特征模型[30]。畫像是一個(gè)模式識別問題,與分類、概括和刻板印象相似[31]。畫像不限于收集個(gè)人數(shù)據(jù),還包括利用這些數(shù)據(jù)來評估與個(gè)人有關(guān)的某些方面,其目的是識別和預(yù)測客戶的行為并據(jù)此做出決策。具體而言,畫像包括三個(gè)元素:①一種自動(dòng)化的處理形式;②針對個(gè)人數(shù)據(jù)進(jìn)行;③目的是評估自然人的某些個(gè)人方面,預(yù)測他們的行為并就此作出決定。根據(jù)GDPR,如數(shù)據(jù)當(dāng)事人要求停止畫像,處理工作必須停止,除非數(shù)據(jù)控制者證明該反對凌駕于數(shù)據(jù)當(dāng)事人的利益、權(quán)利及自由之上[4]。

    企業(yè)為了自身發(fā)展越來越注重為客戶提供個(gè)性化的定制服務(wù),科技的進(jìn)步和廉價(jià)的數(shù)據(jù)存儲更是使得這一目標(biāo)具有前所未有的可能性。從零售到出版、從公共服務(wù)到健康,我們在與組織互動(dòng)的任何地方都留下了數(shù)字指紋和活動(dòng)痕跡。這些組織熱衷于利用這些信息,通過創(chuàng)建用戶畫像為我們提供更好的服務(wù),或者為我們提供對他們而言更有利的服務(wù)。如,仲量聯(lián)行公司與亞歷山大·巴貝奇公司曾合作開發(fā)了一款名為Pinpoint的新工具來監(jiān)控購物中心內(nèi)的消費(fèi)者,并向百貨公司業(yè)主和零售商提供購物者的相關(guān)信息,包括客戶來自哪里、他們習(xí)慣去什么樣的商店以及他們會(huì)在那里停留多長時(shí)間等,以方便零售商進(jìn)一步挖掘那些頻繁到訪的客戶[32]。這些信息可被用于多種目的,包括評估廣告是否有效地定位到目標(biāo)客戶,預(yù)測客戶的未來購買行為等。畫像可以通過描繪一個(gè)人的外在形象和內(nèi)在偏好從而將其歸入算法所創(chuàng)造的數(shù)字范疇中[5],即使跟蹤和描述的是個(gè)體消費(fèi)者的行為,這些組織也會(huì)將其推廣到多個(gè)個(gè)體,并將多個(gè)個(gè)體看作一個(gè)整體,如“商店顧客”這一群體從而進(jìn)行預(yù)測。這剛好印證了信息哲學(xué)家盧西亞諾·弗洛里迪的說法,即大多數(shù)畫像不是基于個(gè)體,而是基于個(gè)體作為一個(gè)特定群體的成員[33]。

    群組用戶畫像被定義為“對個(gè)體用戶畫像進(jìn)行聚類分析,采用不同的模型、算法與技術(shù),從多個(gè)維度發(fā)現(xiàn)規(guī)模較大的用戶群體,或?qū)⑻卣黝愃频挠脩魵w為一類,從而在提供服務(wù)時(shí)可以優(yōu)先滿足核心群體的需求”[34]。大數(shù)據(jù)分析所運(yùn)用的數(shù)字集體標(biāo)識符破壞了個(gè)人、身份和隱私之間長期存在的聯(lián)系,被算法分組的個(gè)人在描述所在群體的信息如何生成和使用方面擁有共同利益[29]。這類分組方法的特點(diǎn)在于決策者對屬于同一個(gè)由分析生成的群組里的個(gè)體采取通用的解決方案,決策過程并不考慮個(gè)體本身,而是將其作為具有一些共同定性因素的一群人或一個(gè)群組的一部分,并由此產(chǎn)生了社會(huì)中以前不存在的新群體,即各種個(gè)體的可變集合,這些群體的不同起源和形態(tài)使得有必要從集體維度對隱私和數(shù)據(jù)保護(hù)權(quán)利進(jìn)行考察[17]。大數(shù)據(jù)時(shí)代的關(guān)注點(diǎn)不能只放在單個(gè)個(gè)體的隱私保護(hù)上,也要重視大數(shù)據(jù)分析技術(shù)帶來的群體隱私威脅和保護(hù)問題[35]。

    盧西亞諾·弗洛里迪認(rèn)為,只要群體本身被視為一個(gè)個(gè)體(參見法人),那么按照權(quán)利歸屬于個(gè)人的邏輯,群體也可以成為權(quán)利所有者,如民族自決權(quán)就是由國家作為一個(gè)整體享有[33]。按照他的說法,在涉及信息交換的互動(dòng)中,群體扮演著與個(gè)體相同的角色,權(quán)利可以同時(shí)由個(gè)人和個(gè)人組成的群體持有,只要在這兩個(gè)層面上都存在形成身份的互動(dòng)且這些相互作用構(gòu)成了群體的身份(與個(gè)人情況一致),那么群體就可以被認(rèn)為對控制這種身份感興趣,這種利益就可以被正式承認(rèn)為一個(gè)群體身份不受侵犯的權(quán)利[36]。因此,在評估分析平臺的倫理可接受性時(shí),“群體隱私”概念作為“平衡個(gè)人隱私和社會(huì)、商業(yè)以及認(rèn)知利益”的第三個(gè)利益被提出[28]。盧西亞諾·弗洛里迪將群體隱私定義為作為一個(gè)群體整體持有的權(quán)利,而不是由其成員各自持有的權(quán)利[33]。群體隱私的概念挑戰(zhàn)了社會(huì)、法律和倫理實(shí)踐的基本基礎(chǔ),也挑戰(zhàn)了傳統(tǒng)的以個(gè)人為中心構(gòu)建的隱私理論體系和實(shí)踐[26]。

    雖然法律致力于使個(gè)人權(quán)利和權(quán)利的補(bǔ)救措施更有效,但卻忽視了保護(hù)個(gè)人信息的集體利益和確保這些利益之間的相互協(xié)作[37]。集體權(quán)利的主體不能被簡單定義為個(gè)體的簡單聯(lián)合,集體權(quán)利的前提條件是必須適用于作為整體的集體。數(shù)據(jù)保護(hù)不僅關(guān)乎個(gè)人利益,而且影響整個(gè)社會(huì)的質(zhì)量以及民主和多元主義等價(jià)值觀,如限制不成比例的監(jiān)視行為、防止基于敏感個(gè)人數(shù)據(jù)的歧視等[17]。然而,在相關(guān)權(quán)利被侵犯時(shí),法院只有接收到權(quán)利所有者的投訴時(shí)才能處理案件,權(quán)利人可能對將這些問題訴諸法庭并不感興趣,抑或壓根不知道自己擁有的權(quán)益,抑或由于數(shù)據(jù)所有者和使用者權(quán)利的不平衡,無力對其利益可能受到的威脅作出有力的回?fù)襞c反應(yīng)。被大數(shù)據(jù)歸類的群組由于缺乏集體代理和自我意識,無法采取行動(dòng)保護(hù)自己的利益,因此,相關(guān)法律和監(jiān)管制度應(yīng)該作出相應(yīng)改變,以符合市場的邏輯。

    4 改變法律以符合市場邏輯

    20世紀(jì)70年代發(fā)展起來的法律和思想已不再適合處理今天的現(xiàn)實(shí)。這里的問題是市場邏輯和法律邏輯之間根本不匹配。當(dāng)代技術(shù)市場從集體數(shù)據(jù)中提取價(jià)值,然而我們的法律只對個(gè)人受到的傷害作出反應(yīng),并沒有隨著技術(shù)的變化而改變。傷害越是集體性,人們受到的保護(hù)就越少,也就越不明顯;個(gè)人受害越多,其影響就越明顯,受到法律保護(hù)的人也就越多。如果一個(gè)人因其年齡、性別或族裔等遭受歧視,他們本人非常清楚并且能夠?qū)で蠓裳a(bǔ)救;當(dāng)一個(gè)人由于算法決策而受到歧視時(shí),這種歧視很可能不那么明顯,而且目前很難尋求法律補(bǔ)救。其解決方案在于為代表集體利益的群體賦權(quán)、推行嚴(yán)格的問責(zé)制以及制定算法影響評估機(jī)制。

    (1)權(quán)利的懸殊在大數(shù)據(jù)環(huán)境中表現(xiàn)得尤為明顯,數(shù)據(jù)主體很難反對數(shù)據(jù)收集者對其信息的歧視性使用以及針對其數(shù)據(jù)的非法處理,而代表集體利益的實(shí)體(如消費(fèi)者權(quán)益保護(hù)協(xié)會(huì))不太容易受到權(quán)利不平衡的影響。消費(fèi)者協(xié)會(huì)作為聯(lián)系廣大消費(fèi)者的紐帶,能夠?qū)蝹€(gè)的用戶連接起來,消除搭便車心理[38],還能夠在核實(shí)事實(shí)的基礎(chǔ)上,努力解決糾紛,糾正互聯(lián)網(wǎng)企業(yè)威脅或損害數(shù)據(jù)主體利益的行為[39]。在環(huán)境保護(hù)、勞動(dòng)等其他領(lǐng)域,基于權(quán)利不平衡影響直接相關(guān)一方如雇員或公民的現(xiàn)實(shí),也都采用了這種共同利益的集體代表方式。最后,基于個(gè)體的法律補(bǔ)救措施可能面臨因賠償數(shù)額低而導(dǎo)致缺乏起訴動(dòng)力的問題。單個(gè)的信息可能不具備足夠的訴訟價(jià)值,使得具備有限理性的互聯(lián)網(wǎng)用戶缺乏訴訟的動(dòng)力[40]。此外,由大數(shù)據(jù)算法塑造的群體具有可變的幾何形狀,個(gè)體可以是多個(gè)群體的成員,個(gè)體也可以從一個(gè)群體轉(zhuǎn)移到另一個(gè)群體,這種原子性的維度使得對集體表征的需求更為迫切[17]。

    (2)要確保嚴(yán)格的問責(zé)制,需要具備以下要素。①確保關(guān)于大數(shù)據(jù)自動(dòng)決策發(fā)生的地點(diǎn)和時(shí)間及其對個(gè)人和群體的影響是清晰以及透明的;②廣泛聽取公眾意見和要求當(dāng)權(quán)者為公眾決定辯護(hù)的權(quán)利;③執(zhí)行制裁的能力[41]。首先,政策制定者不應(yīng)該只監(jiān)管人們?yōu)榱吮Wo(hù)隱私而同意如何使用他們的數(shù)據(jù),而是應(yīng)該監(jiān)管自動(dòng)化決策,從收集、排序和分類數(shù)據(jù)的黑盒算法開始。這需要一種全新的監(jiān)管方法,重點(diǎn)應(yīng)該放在對自動(dòng)決策的公眾監(jiān)督和透明度的類型上,包括揭示算法背后的現(xiàn)有數(shù)據(jù)和源代碼、訓(xùn)練數(shù)據(jù)的目的以及對哪些群體產(chǎn)生哪些具體影響,這些操作需要確保在高危人工智能部署之前進(jìn)行并定期更新。其次,明確而有針對性的透明度有助于揭示算法的影響和評估部署算法的機(jī)構(gòu)是否正確使用數(shù)據(jù),并清楚地說明由誰來收集使用數(shù)據(jù)并用于評估什么。此外,公眾有基本權(quán)利要求當(dāng)權(quán)者為他們的決定辯護(hù),包括授權(quán)參與。最后,制裁權(quán)利是這些改革取得成功和實(shí)現(xiàn)問責(zé)制的關(guān)鍵,需要用法律來限制數(shù)據(jù)的使用和自動(dòng)化,而不僅僅是對個(gè)人數(shù)據(jù)使用的限制。為此,社會(huì)還需要更新相關(guān)法律,如勞動(dòng)法、未成年人保護(hù)法、生物安全法、環(huán)境法等,使其與社會(huì)發(fā)展相適應(yīng)。

    (3)企業(yè)和政府要制定算法影響評估機(jī)制,評估算法對群體的處理結(jié)果以及任何由數(shù)據(jù)驅(qū)動(dòng)的集體傷害,確保這些評估的結(jié)果公開公布,并使公眾有可能對自動(dòng)決策的使用提供有意義的投入,將這種評估擴(kuò)展為社區(qū)驅(qū)動(dòng)決策的工具[41]。

    大數(shù)據(jù)算法造就的歧視和差異性的影響越來越普遍,保護(hù)大數(shù)據(jù)環(huán)境下的數(shù)據(jù)利益,需要制定原則、規(guī)則和針對其損害性質(zhì)的特別補(bǔ)救措施,關(guān)鍵的一步是將關(guān)注的焦點(diǎn)從對個(gè)人的侵犯和傷害轉(zhuǎn)向?qū)w的侵犯和傷害。個(gè)人信息受隱私和數(shù)據(jù)相關(guān)法律法規(guī)的規(guī)制和保護(hù)。隱私權(quán)和個(gè)人數(shù)據(jù)得到保護(hù)的權(quán)利作為個(gè)人權(quán)利,無法覆蓋數(shù)據(jù)集體維度的保護(hù)。解決方案在于為代表集體利益的群體賦權(quán)、推行嚴(yán)格的問責(zé)制以及制定算法影響評估機(jī)制。

    猜你喜歡
    畫像集體權(quán)利
    威猛的畫像
    我為集體獻(xiàn)一計(jì)
    “00后”畫像
    我們的權(quán)利
    畫像
    論不存在做錯(cuò)事的權(quán)利
    法大研究生(2018年2期)2018-09-23 02:19:50
    警犬集體過生日
    動(dòng)物集體賣萌搞笑秀
    權(quán)利套裝
    Coco薇(2015年12期)2015-12-10 02:43:39
    QQ群在線集體備課的探討
    国产一区二区激情短视频| 国产精品永久免费网站| 国产伦在线观看视频一区| 国产视频一区二区在线看| 日本五十路高清| 亚洲精品粉嫩美女一区| 麻豆成人午夜福利视频| 人妻丰满熟妇av一区二区三区| 日韩精品中文字幕看吧| 日韩成人在线观看一区二区三区| 日本a在线网址| av片东京热男人的天堂| 国产成人精品久久二区二区免费| www.自偷自拍.com| 俄罗斯特黄特色一大片| 久久草成人影院| 人人妻人人看人人澡| 一区二区三区高清视频在线| 国产精品免费一区二区三区在线| 午夜精品在线福利| 日日夜夜操网爽| 午夜福利在线观看免费完整高清在 | 精品免费久久久久久久清纯| 特大巨黑吊av在线直播| 成年版毛片免费区| 国产又色又爽无遮挡免费看| 亚洲欧美日韩卡通动漫| 亚洲第一电影网av| 老熟妇乱子伦视频在线观看| 男人舔女人下体高潮全视频| 久久精品91无色码中文字幕| 久久午夜综合久久蜜桃| 亚洲成人免费电影在线观看| 十八禁网站免费在线| 亚洲七黄色美女视频| 又爽又黄无遮挡网站| 国产熟女xx| 午夜福利在线在线| 亚洲精品中文字幕一二三四区| 色视频www国产| 亚洲av片天天在线观看| 少妇人妻一区二区三区视频| 国产精品女同一区二区软件 | 欧美在线黄色| 精品久久久久久久末码| 日本一本二区三区精品| 老熟妇仑乱视频hdxx| 亚洲精品美女久久av网站| 久久九九热精品免费| 国产aⅴ精品一区二区三区波| 国产精品98久久久久久宅男小说| 国产精品,欧美在线| a在线观看视频网站| 久久久久精品国产欧美久久久| 国产黄片美女视频| 一区福利在线观看| 禁无遮挡网站| 高清在线国产一区| 国内久久婷婷六月综合欲色啪| 国产 一区 欧美 日韩| 黄色丝袜av网址大全| 可以在线观看毛片的网站| 99视频精品全部免费 在线 | www.www免费av| 欧美色视频一区免费| 亚洲天堂国产精品一区在线| 午夜两性在线视频| 女生性感内裤真人,穿戴方法视频| 国产欧美日韩一区二区精品| 91在线观看av| 午夜影院日韩av| 性色av乱码一区二区三区2| 国产av一区在线观看免费| 9191精品国产免费久久| 亚洲精品在线观看二区| 99国产精品一区二区蜜桃av| 亚洲第一电影网av| 一进一出抽搐gif免费好疼| 亚洲精品美女久久av网站| 欧美日韩福利视频一区二区| 国产av麻豆久久久久久久| 亚洲精品在线美女| 亚洲精品美女久久久久99蜜臀| 香蕉国产在线看| 国产探花在线观看一区二区| 久久精品人妻少妇| 俄罗斯特黄特色一大片| 色尼玛亚洲综合影院| 小说图片视频综合网站| 久久香蕉国产精品| 欧美日韩福利视频一区二区| 熟妇人妻久久中文字幕3abv| 一级a爱片免费观看的视频| 搡老妇女老女人老熟妇| 日韩欧美国产在线观看| 1000部很黄的大片| 观看美女的网站| 精品午夜福利视频在线观看一区| 超碰成人久久| 国产精品,欧美在线| 最近在线观看免费完整版| 成人欧美大片| 啦啦啦免费观看视频1| 啪啪无遮挡十八禁网站| 最新美女视频免费是黄的| 精品一区二区三区视频在线观看免费| 欧美性猛交╳xxx乱大交人| 国产单亲对白刺激| 亚洲成人免费电影在线观看| 亚洲性夜色夜夜综合| 国产69精品久久久久777片 | 后天国语完整版免费观看| 欧美一级a爱片免费观看看| 久久久久久人人人人人| 亚洲av第一区精品v没综合| 欧美中文综合在线视频| 熟女电影av网| 叶爱在线成人免费视频播放| 亚洲第一电影网av| 波多野结衣高清无吗| 少妇裸体淫交视频免费看高清| 人妻久久中文字幕网| 又黄又爽又免费观看的视频| 免费电影在线观看免费观看| 亚洲人成伊人成综合网2020| 在线a可以看的网站| 亚洲av免费在线观看| 午夜精品久久久久久毛片777| 久久久久久久久中文| 村上凉子中文字幕在线| 俺也久久电影网| 国产伦精品一区二区三区四那| 女人高潮潮喷娇喘18禁视频| 两个人视频免费观看高清| 欧洲精品卡2卡3卡4卡5卡区| 一区二区三区高清视频在线| 亚洲aⅴ乱码一区二区在线播放| 精品久久久久久久久久久久久| 亚洲精品在线美女| 国产黄色小视频在线观看| 午夜成年电影在线免费观看| ponron亚洲| 免费看美女性在线毛片视频| 天堂影院成人在线观看| 女人高潮潮喷娇喘18禁视频| 国产精华一区二区三区| 男女之事视频高清在线观看| 国产又黄又爽又无遮挡在线| 国产乱人视频| 最近最新免费中文字幕在线| 一级毛片高清免费大全| 国产蜜桃级精品一区二区三区| 香蕉国产在线看| 9191精品国产免费久久| 国产精品,欧美在线| 黄色片一级片一级黄色片| 欧美绝顶高潮抽搐喷水| 亚洲av美国av| 国产单亲对白刺激| 久久久久久人人人人人| 日本 欧美在线| 一级毛片女人18水好多| 国产不卡一卡二| 禁无遮挡网站| 国产毛片a区久久久久| 宅男免费午夜| 亚洲精品456在线播放app | 男人和女人高潮做爰伦理| 国产成人精品久久二区二区免费| 香蕉av资源在线| 精品熟女少妇八av免费久了| 国产乱人伦免费视频| 亚洲av免费在线观看| 国产日本99.免费观看| www日本在线高清视频| 丰满人妻一区二区三区视频av | 婷婷丁香在线五月| 国产精品综合久久久久久久免费| 一个人观看的视频www高清免费观看 | 全区人妻精品视频| 黄频高清免费视频| 成人欧美大片| 丰满的人妻完整版| 亚洲精品456在线播放app | 狂野欧美白嫩少妇大欣赏| 亚洲最大成人中文| 国产精品九九99| 免费看日本二区| 中文亚洲av片在线观看爽| 久久久国产精品麻豆| 亚洲avbb在线观看| 波多野结衣高清无吗| 夜夜爽天天搞| 久久久久免费精品人妻一区二区| 波多野结衣高清作品| 亚洲一区高清亚洲精品| 九九在线视频观看精品| 精品免费久久久久久久清纯| 99国产精品99久久久久| 国产精品免费一区二区三区在线| 亚洲第一欧美日韩一区二区三区| 久久久久久九九精品二区国产| 91在线精品国自产拍蜜月 | 1000部很黄的大片| 免费看十八禁软件| 不卡av一区二区三区| 亚洲精品色激情综合| 亚洲成a人片在线一区二区| 亚洲欧美精品综合一区二区三区| av在线天堂中文字幕| 天堂影院成人在线观看| 中文字幕人成人乱码亚洲影| 很黄的视频免费| 黄色成人免费大全| 日本免费a在线| 久久人妻av系列| 国产精品亚洲美女久久久| 1024香蕉在线观看| 婷婷丁香在线五月| 亚洲真实伦在线观看| 性色avwww在线观看| 亚洲成av人片在线播放无| 国产欧美日韩一区二区三| 很黄的视频免费| 亚洲熟女毛片儿| 叶爱在线成人免费视频播放| 国产伦精品一区二区三区四那| www日本黄色视频网| 最近在线观看免费完整版| 成人永久免费在线观看视频| 久久精品影院6| 精品99又大又爽又粗少妇毛片 | 中出人妻视频一区二区| 又粗又爽又猛毛片免费看| 母亲3免费完整高清在线观看| 国产成人av激情在线播放| 搡老岳熟女国产| 真人一进一出gif抽搐免费| 欧美日本视频| 男女床上黄色一级片免费看| 99久久成人亚洲精品观看| 午夜影院日韩av| 亚洲色图 男人天堂 中文字幕| 搞女人的毛片| 国产一区二区三区在线臀色熟女| 国产探花在线观看一区二区| 丰满人妻一区二区三区视频av | 真实男女啪啪啪动态图| 国产精品av视频在线免费观看| 国产成人av教育| 黑人巨大精品欧美一区二区mp4| 免费大片18禁| 在线国产一区二区在线| 天堂√8在线中文| 亚洲国产精品久久男人天堂| 日本五十路高清| 久久午夜亚洲精品久久| 亚洲精品一卡2卡三卡4卡5卡| 亚洲狠狠婷婷综合久久图片| 成人欧美大片| 亚洲av成人av| 伦理电影免费视频| 在线观看一区二区三区| 首页视频小说图片口味搜索| 日韩欧美国产一区二区入口| 十八禁人妻一区二区| 无限看片的www在线观看| 老汉色av国产亚洲站长工具| 真实男女啪啪啪动态图| 亚洲激情在线av| 少妇的丰满在线观看| 两个人的视频大全免费| 国产亚洲av嫩草精品影院| 婷婷亚洲欧美| 日韩欧美免费精品| 99久久99久久久精品蜜桃| 99精品欧美一区二区三区四区| 熟女少妇亚洲综合色aaa.| 嫩草影视91久久| 欧美乱妇无乱码| h日本视频在线播放| 国产精品女同一区二区软件 | 91在线精品国自产拍蜜月 | 日本与韩国留学比较| 国产欧美日韩一区二区精品| 国产午夜福利久久久久久| 免费搜索国产男女视频| 香蕉久久夜色| 国产精品自产拍在线观看55亚洲| 啦啦啦韩国在线观看视频| 日韩欧美一区二区三区在线观看| 欧美极品一区二区三区四区| 国产成人系列免费观看| 美女高潮的动态| 欧美一区二区精品小视频在线| 亚洲精品久久国产高清桃花| 国产精品98久久久久久宅男小说| 91久久精品国产一区二区成人 | av福利片在线观看| 免费搜索国产男女视频| 老熟妇乱子伦视频在线观看| 69av精品久久久久久| 看黄色毛片网站| 亚洲熟妇中文字幕五十中出| 亚洲欧美日韩高清在线视频| 国产精品,欧美在线| 日韩欧美在线二视频| 亚洲国产精品sss在线观看| 亚洲人与动物交配视频| 伊人久久大香线蕉亚洲五| 给我免费播放毛片高清在线观看| 中文亚洲av片在线观看爽| 免费搜索国产男女视频| 欧美日韩精品网址| 99久久无色码亚洲精品果冻| 国产精品99久久99久久久不卡| 日日干狠狠操夜夜爽| 亚洲一区二区三区不卡视频| 精品国产乱码久久久久久男人| 国产1区2区3区精品| 国产精品久久久人人做人人爽| 老司机福利观看| 无遮挡黄片免费观看| 成人av在线播放网站| 夜夜看夜夜爽夜夜摸| 最近最新免费中文字幕在线| 在线观看66精品国产| 欧美zozozo另类| 超碰成人久久| 岛国在线免费视频观看| 国产精品一区二区三区四区免费观看 | 色播亚洲综合网| 国产成+人综合+亚洲专区| 视频区欧美日本亚洲| 啦啦啦韩国在线观看视频| 亚洲18禁久久av| 国产aⅴ精品一区二区三区波| 婷婷六月久久综合丁香| 亚洲国产精品久久男人天堂| 日韩欧美一区二区三区在线观看| 国产人伦9x9x在线观看| 国产精品一及| 淫妇啪啪啪对白视频| 久久精品国产清高在天天线| 级片在线观看| 国产91精品成人一区二区三区| 日本三级黄在线观看| 少妇丰满av| 欧美极品一区二区三区四区| 久久精品aⅴ一区二区三区四区| 精品午夜福利视频在线观看一区| 在线观看一区二区三区| 日本在线视频免费播放| 国产欧美日韩一区二区三| 国产精品永久免费网站| 美女黄网站色视频| 夜夜躁狠狠躁天天躁| 99精品欧美一区二区三区四区| 男女那种视频在线观看| 国产高清视频在线观看网站| 99热精品在线国产| 成人特级av手机在线观看| 精品久久久久久久人妻蜜臀av| 国产精品九九99| 日日摸夜夜添夜夜添小说| 亚洲精品美女久久av网站| 中文字幕久久专区| 亚洲精品国产精品久久久不卡| 亚洲欧美日韩高清在线视频| 女生性感内裤真人,穿戴方法视频| 99精品在免费线老司机午夜| 亚洲中文av在线| 一级毛片精品| 最近视频中文字幕2019在线8| 91在线观看av| 51午夜福利影视在线观看| 国产精品乱码一区二三区的特点| 久久亚洲真实| 在线观看免费视频日本深夜| tocl精华| 成年女人看的毛片在线观看| 成人性生交大片免费视频hd| 人人妻,人人澡人人爽秒播| 很黄的视频免费| 国产男靠女视频免费网站| 99久久精品国产亚洲精品| 日本五十路高清| e午夜精品久久久久久久| 丰满人妻一区二区三区视频av | 亚洲中文日韩欧美视频| 亚洲性夜色夜夜综合| 91九色精品人成在线观看| 国产精品精品国产色婷婷| 好看av亚洲va欧美ⅴa在| 国产精品女同一区二区软件 | 日本一二三区视频观看| 黄色 视频免费看| av女优亚洲男人天堂 | 国产真实乱freesex| ponron亚洲| 可以在线观看的亚洲视频| 老熟妇乱子伦视频在线观看| 精品国产乱码久久久久久男人| 欧美乱色亚洲激情| 成在线人永久免费视频| 国产伦精品一区二区三区四那| 亚洲精品色激情综合| 两个人看的免费小视频| 天堂动漫精品| 小蜜桃在线观看免费完整版高清| 叶爱在线成人免费视频播放| 亚洲午夜精品一区,二区,三区| 母亲3免费完整高清在线观看| 三级男女做爰猛烈吃奶摸视频| 久久久久九九精品影院| 国产精品综合久久久久久久免费| 桃色一区二区三区在线观看| 18禁黄网站禁片免费观看直播| 欧美成人免费av一区二区三区| 亚洲片人在线观看| 久久热在线av| 女生性感内裤真人,穿戴方法视频| 日韩欧美在线乱码| 欧美成人性av电影在线观看| 变态另类成人亚洲欧美熟女| 亚洲欧美日韩高清专用| 成人国产一区最新在线观看| 免费看日本二区| 久久精品夜夜夜夜夜久久蜜豆| 天堂影院成人在线观看| 亚洲精品粉嫩美女一区| 国产成+人综合+亚洲专区| 欧美zozozo另类| 女同久久另类99精品国产91| 麻豆成人午夜福利视频| 午夜影院日韩av| 一卡2卡三卡四卡精品乱码亚洲| 动漫黄色视频在线观看| 精品一区二区三区视频在线 | a级毛片a级免费在线| 中文资源天堂在线| 免费人成视频x8x8入口观看| 精品国产超薄肉色丝袜足j| 精品熟女少妇八av免费久了| 日韩欧美精品v在线| 亚洲国产中文字幕在线视频| 在线免费观看的www视频| 99精品在免费线老司机午夜| 国产精品自产拍在线观看55亚洲| 亚洲av五月六月丁香网| 久久性视频一级片| www.自偷自拍.com| 欧美日韩亚洲国产一区二区在线观看| 亚洲av美国av| 99久久99久久久精品蜜桃| 亚洲七黄色美女视频| 在线观看66精品国产| 后天国语完整版免费观看| 波多野结衣高清无吗| 亚洲欧美精品综合久久99| 国产精品久久久人人做人人爽| 欧美一级a爱片免费观看看| 午夜福利免费观看在线| 欧美精品啪啪一区二区三区| 久久性视频一级片| 99国产极品粉嫩在线观看| 亚洲av电影不卡..在线观看| 88av欧美| 好看av亚洲va欧美ⅴa在| 一个人观看的视频www高清免费观看 | 亚洲,欧美精品.| 日日摸夜夜添夜夜添小说| 少妇裸体淫交视频免费看高清| 婷婷精品国产亚洲av| 国产亚洲精品久久久com| 日韩精品青青久久久久久| 欧美成人免费av一区二区三区| 91麻豆精品激情在线观看国产| 亚洲欧美日韩高清在线视频| 叶爱在线成人免费视频播放| 一级黄色大片毛片| 亚洲人成电影免费在线| 美女免费视频网站| 国产精品一区二区免费欧美| 亚洲性夜色夜夜综合| h日本视频在线播放| 麻豆国产av国片精品| 女人高潮潮喷娇喘18禁视频| 亚洲第一电影网av| 色综合站精品国产| 日韩精品中文字幕看吧| 欧美色视频一区免费| 午夜福利18| 日韩欧美国产在线观看| 亚洲av电影在线进入| 亚洲色图av天堂| 99在线视频只有这里精品首页| 色在线成人网| 制服人妻中文乱码| 淫秽高清视频在线观看| 亚洲精品一卡2卡三卡4卡5卡| 别揉我奶头~嗯~啊~动态视频| 亚洲自拍偷在线| 国产高清videossex| 久久久久久久午夜电影| 激情在线观看视频在线高清| 一级作爱视频免费观看| 国产一区二区在线观看日韩 | 好看av亚洲va欧美ⅴa在| 午夜福利在线观看吧| 一区二区三区高清视频在线| 特大巨黑吊av在线直播| 亚洲熟妇中文字幕五十中出| 两性午夜刺激爽爽歪歪视频在线观看| 给我免费播放毛片高清在线观看| 村上凉子中文字幕在线| xxx96com| 日本免费a在线| 一区二区三区激情视频| 亚洲一区高清亚洲精品| 岛国视频午夜一区免费看| 久久久久免费精品人妻一区二区| 国产成人影院久久av| 男人舔奶头视频| 国产成人啪精品午夜网站| 麻豆国产97在线/欧美| 国产伦在线观看视频一区| 高清毛片免费观看视频网站| 最好的美女福利视频网| 观看免费一级毛片| 免费观看人在逋| 精品国产亚洲在线| 国产精品亚洲av一区麻豆| 丰满人妻一区二区三区视频av | 小说图片视频综合网站| 国产日本99.免费观看| 亚洲激情在线av| 在线观看舔阴道视频| 久久久久九九精品影院| 亚洲自拍偷在线| 久久久久久久久免费视频了| 黄频高清免费视频| 999精品在线视频| 亚洲欧美精品综合久久99| АⅤ资源中文在线天堂| 手机成人av网站| 久99久视频精品免费| 精品国产三级普通话版| 人人妻人人看人人澡| 免费看十八禁软件| 国产野战对白在线观看| 黑人欧美特级aaaaaa片| 我要搜黄色片| 亚洲一区二区三区色噜噜| 又爽又黄无遮挡网站| 国产精品一区二区三区四区久久| 国产精品乱码一区二三区的特点| 精品一区二区三区视频在线 | 一个人观看的视频www高清免费观看 | 亚洲国产欧美人成| 亚洲精品一卡2卡三卡4卡5卡| x7x7x7水蜜桃| 亚洲,欧美精品.| 一个人看视频在线观看www免费 | 免费一级毛片在线播放高清视频| 国产精品久久久久久人妻精品电影| 老熟妇仑乱视频hdxx| 国产久久久一区二区三区| 亚洲av电影在线进入| 亚洲熟女毛片儿| 免费看日本二区| 国产av不卡久久| 国产乱人伦免费视频| 免费在线观看成人毛片| 宅男免费午夜| 免费看光身美女| 久99久视频精品免费| 日韩欧美一区二区三区在线观看| 好看av亚洲va欧美ⅴa在| 一本一本综合久久| 99re在线观看精品视频| 天堂av国产一区二区熟女人妻| 成人无遮挡网站| 午夜福利18| 99精品在免费线老司机午夜| 中亚洲国语对白在线视频| 精品人妻1区二区| 夜夜躁狠狠躁天天躁| 国产精品久久久久久人妻精品电影| 国产精品久久久久久亚洲av鲁大| 观看免费一级毛片| 欧美成人性av电影在线观看| 成人国产一区最新在线观看| 最新美女视频免费是黄的| 日本a在线网址| 久久精品人妻少妇| 九色国产91popny在线| 两个人视频免费观看高清| 伊人久久大香线蕉亚洲五| 观看免费一级毛片| 99国产精品一区二区蜜桃av| 神马国产精品三级电影在线观看| 亚洲人成网站高清观看| 色播亚洲综合网| 国产三级在线视频| 国产久久久一区二区三区| 久久中文字幕一级| 成人av一区二区三区在线看| 日本在线视频免费播放| 日韩欧美免费精品| 久久久久久九九精品二区国产| 天堂影院成人在线观看| а√天堂www在线а√下载| 国产爱豆传媒在线观看| 国产人伦9x9x在线观看|