• <tr id="yyy80"></tr>
  • <sup id="yyy80"></sup>
  • <tfoot id="yyy80"><noscript id="yyy80"></noscript></tfoot>
  • 99热精品在线国产_美女午夜性视频免费_国产精品国产高清国产av_av欧美777_自拍偷自拍亚洲精品老妇_亚洲熟女精品中文字幕_www日本黄色视频网_国产精品野战在线观看 ?

    基于CUDA的RS糾刪碼性能優(yōu)化

    2016-03-25 06:13:48戴世航李小勇
    微型電腦應(yīng)用 2016年1期

    戴世航,李小勇

    ?

    基于CUDA的RS糾刪碼性能優(yōu)化

    戴世航,李小勇

    摘 要:目前分布式存儲系統(tǒng)中保證數(shù)據(jù)可用性的常用方法有多副本技術(shù)和糾刪碼技術(shù)。與多副本技術(shù)相比,糾刪碼技術(shù)有更高的存儲空間利用率,但附加的編碼流程不可避免地帶來了較高的時(shí)間延遲,影響了系統(tǒng)的實(shí)時(shí)性,限制了糾刪碼的應(yīng)用。為了提高糾刪碼的編碼效率,對開源代碼庫Jerasure提供的RS糾刪碼進(jìn)行優(yōu)化,利用CUDA對其進(jìn)行加速。實(shí)驗(yàn)結(jié)果顯示,相對于原始算法,該方法將編碼速度提高了約20倍,為糾刪碼技術(shù)應(yīng)用于實(shí)時(shí)系統(tǒng)提供了可能。

    關(guān)鍵詞:RS糾刪碼;CUDA;GPU加速

    0 引言

    如今,人類社會已經(jīng)進(jìn)入了大數(shù)據(jù)時(shí)代。隨著各種新興媒體、數(shù)據(jù)倉庫、社交網(wǎng)絡(luò)的飛速發(fā)展,預(yù)計(jì)2020年數(shù)據(jù)總量將達(dá)到35萬ZB。為存儲數(shù)量如此巨大的數(shù)據(jù),各種分布式存儲系統(tǒng)應(yīng)用而生。

    分布式存儲系統(tǒng)往往建立在大量廉價(jià)機(jī)器上,系統(tǒng)中節(jié)點(diǎn)故障不可避免,如何才能在這樣的環(huán)境下保證存儲數(shù)據(jù)的高可用性得到了廣泛的研究。實(shí)踐中最常用的方法是多副本技術(shù),通過將文件以多個(gè)副本的形式存入存儲系統(tǒng)中以實(shí)現(xiàn)冗余容錯(cuò),只要其中一個(gè)副本沒有損壞,用戶就可以正常訪問到文件。但多副本技術(shù)存儲冗余度高這一缺點(diǎn)也隨著數(shù)據(jù)規(guī)模增大而日益突出,而糾刪碼技術(shù)在這一方面則具有明顯優(yōu)勢。不過由于糾刪碼的運(yùn)算開銷較大,實(shí)時(shí)性差,因此可應(yīng)用的場景受到限制。

    本文針對糾刪碼技術(shù)的這一缺點(diǎn),在開源糾刪碼庫Jerasure[1]提供的RS糾刪碼reed_sol_r6_op算法(后文簡稱為r6算法)的基礎(chǔ)上,利用GPU強(qiáng)大的并行計(jì)算能力,使用CUDA對其進(jìn)行加速,獲得了很好的加速效果,速度可達(dá)原始算法的20倍,為糾刪碼技術(shù)在對實(shí)時(shí)性要求較高的存儲系統(tǒng)中應(yīng)用提供了可能。

    1 RS糾刪碼

    糾刪碼技術(shù)的基本思想是:首先將文件分割成k個(gè)數(shù)據(jù)塊,然后依照特定的糾刪碼算法對這k個(gè)數(shù)據(jù)塊進(jìn)行計(jì)算得到m個(gè)編碼塊,這一過程被稱為編碼。編碼完成后,在存儲系統(tǒng)中分布式存儲這這k+m個(gè)文件塊。當(dāng)有任何文件塊出現(xiàn)錯(cuò)誤時(shí),利用其他文件塊來恢復(fù)它的信息,這一過程被稱為重構(gòu)或者解碼。一般而言,一組文件塊最多可以容忍m個(gè)文件塊出錯(cuò)。

    和多副本技術(shù)相比,糾刪碼技術(shù)的最大特點(diǎn)是大大降低了數(shù)據(jù)冗余度,提高了存儲空間的利用率,減少了存儲成本。舉例來說,常用的多副本技術(shù)一般為每個(gè)文件提供3個(gè)副本,數(shù)據(jù)冗余度為300%,存儲空間的利用率僅為三分之一;而常用4+2糾刪碼(為每4個(gè)數(shù)據(jù)塊計(jì)算得到2個(gè)編碼塊),將數(shù)據(jù)冗余度降至150%,存儲空間的利用率翻了一倍達(dá)到了三分之二。糾刪碼技術(shù)在這方面的優(yōu)異性能也是它得到越來越多關(guān)注的原因。

    RS糾刪碼,全稱為Reed-Solomon編碼,是目前應(yīng)用最廣的糾刪碼算法,使用特定的生成矩陣計(jì)算得到編碼塊,過程如圖1所示:

    圖1 RS糾刪碼編碼過程

    RS糾刪碼最大的特點(diǎn)在于它可以適用于任意k+m的組合。根據(jù)生成矩陣的不同RS糾刪碼被分為兩類:一類是范德蒙RS糾刪碼,另一類是柯西RS糾刪碼。范德蒙RS糾刪碼是以范德蒙矩陣為生成矩陣的,而柯西RS糾刪碼則是以柯西矩陣為生成矩陣的。但無論是哪一種,編碼原理都是在有限域上的多項(xiàng)式運(yùn)算,而有限域上乘法運(yùn)算極其復(fù)雜,這導(dǎo)致其編解碼運(yùn)算速度很慢,時(shí)間開銷很高。由于這樣的原因,RS糾刪碼在實(shí)踐中一般用在對實(shí)時(shí)性要求不高,或者是更新頻率較低的云存儲系統(tǒng)中[2]。

    2 基于CUDA加速的r6算法

    2.1 GPU計(jì)算優(yōu)勢

    GPU最初用于3D圖形處理,但經(jīng)過不斷的發(fā)展,GPGPU(General Purpose GPU,通用計(jì)算GPU)技術(shù)得到了不斷發(fā)展。相對于CPU使用大量晶體管用作復(fù)雜的控制單元和緩存以提高少量執(zhí)行單元的執(zhí)行效率,GPU將更多的晶體管用作執(zhí)行單元,因此GPU在處理能力和存儲器帶寬上有明顯優(yōu)勢。同時(shí)由于GPU中可以同時(shí)運(yùn)行大量的線程,在并行計(jì)算上有著先天的優(yōu)勢。另外,GPU的造價(jià)和功耗相對于相同計(jì)算能力的CPU要低很多,在一定程度上滿足了無法使用高端主機(jī)卻需要處理海量數(shù)據(jù)的用戶的需求。

    2.2 CUDA編程模型

    2007年NVDIA公司推出了CUDA(Compute Unified Device Architecture,統(tǒng)一計(jì)算設(shè)備架構(gòu)),這是一種將GPU作為數(shù)據(jù)并行計(jì)算設(shè)備的軟硬件體系,為開發(fā)人員有效利用GPU的強(qiáng)大性能提供了條件。

    CUDA編程模型采用單指令流多數(shù)據(jù)流(Single Instruction Multiple Data)執(zhí)行模式。在這個(gè)模型中,CPU 和GPU協(xié)同工作,CPU稱為主機(jī)(Host),負(fù)責(zé)進(jìn)行邏輯性強(qiáng)的事務(wù)處理和串行計(jì)算,GPU作為設(shè)備(Device),負(fù)責(zé)執(zhí)行高度線程化并行處理任務(wù)。運(yùn)行在GPU上的CUDA計(jì)算函數(shù)被稱為kernel(內(nèi)核函數(shù)),一個(gè)完整的CUDA程序時(shí)由一系列的設(shè)備端kernel并行步驟和主機(jī)端的串行步驟共同組成的,如圖2所示:

    圖2 CUDA編程模型

    一個(gè)CUDA程序中,基本的主機(jī)端代碼主要完成以下功能:啟動(dòng)CUDA,為數(shù)據(jù)分配內(nèi)存和顯存空間,將內(nèi)存中數(shù)據(jù)拷貝到顯存,調(diào)用設(shè)備端的kernel進(jìn)行計(jì)算,將顯存中的結(jié)果拷貝到內(nèi)存中,執(zhí)行串行代碼,釋放內(nèi)存和顯存空間,退出CUDA;基本的設(shè)備端代碼主要完成以下功能:從顯存讀數(shù)據(jù)到GPU片中,對數(shù)據(jù)進(jìn)行處理,將處理后的數(shù)據(jù)寫回顯存[3]。

    CUDA通過將計(jì)算任務(wù)映射成大量的可以并行執(zhí)行的線程,并由硬件動(dòng)態(tài)調(diào)度和執(zhí)行這些線程來提供給使用者GPU強(qiáng)大的計(jì)算能力。為了便于使用和管理這些線程,CUDA將這些線程在2個(gè)層次上組織起來,分別是grid中block間的并行和block中thread間的并行,如圖3所示:

    圖3 CUDA線程組織形式

    kernel實(shí)質(zhì)上是以block為單位執(zhí)行的,block之間無法通信,也沒有執(zhí)行順序,但同一block中的thread可以通過共享存儲器(shared memory)交換數(shù)據(jù),同時(shí)每個(gè)thread都有獨(dú)立的register和local memory用于儲存計(jì)算時(shí)所需數(shù)據(jù)。在kernel運(yùn)行時(shí),使用者可以通過相應(yīng)的索引準(zhǔn)確定位到grid中的每一個(gè)block和block中的每一個(gè)thread,進(jìn)而為每一個(gè)線程分配獨(dú)立的計(jì)算任務(wù)。從宏觀上看,同時(shí)可以能有成千上萬個(gè)線程正在工作,這也是GPU強(qiáng)大計(jì)算能力的體現(xiàn)[3]。

    2.3 r6算法

    傳統(tǒng)的RS糾刪碼能夠滿足任一k、m的組合,因而有很好的適用性,但正如前文所介紹的,由于在有限域上的乘法復(fù)雜度較高,性能不能令人滿意,雖然柯西RS糾刪碼可以可以將有限域上的乘法運(yùn)算轉(zhuǎn)換成異或運(yùn)算,但性能提升也比較有限,而且本身的運(yùn)算依然比較復(fù)雜,不易使用GPU運(yùn)算來進(jìn)行加速。而r6算法借鑒了陣列糾刪碼的思想,不再使用矩陣乘法來得到編碼塊,而是通過對數(shù)據(jù)塊進(jìn)行異或運(yùn)算來得到編碼塊。與陣列糾刪碼不同的是,r6算法中一個(gè)文件的編碼塊僅由自己的數(shù)據(jù)塊計(jì)算得到,而不是跨文件編碼。由于不再使用靈活的生成矩陣,r6算法無法應(yīng)用于任一k、m組合,而是像raid-6一樣,將m的值固定為2。算法流程如下:

    1)將文件劃分成為多個(gè)數(shù)據(jù)塊d0、d1、d2、…、dk-1;

    2)將d0、d1、d2、…、dk-1通過異或運(yùn)算得到第一個(gè)編碼塊c0;

    3)對每一個(gè)數(shù)據(jù)塊進(jìn)行變換得到d0’、d1’、d2’、…、dk-1’,這里di'= 2i * di,其中0≤i≤k-1;

    4)對d0’、d1’、d2’、…、dk-1’通過異或運(yùn)算得到第二個(gè)編碼塊c1;

    本文使用CUDA對步驟2、3、4進(jìn)行加速,如圖4所示:

    圖4 r6算法編碼示意圖

    在r6算法的編碼過程中,不再需要生成生成矩陣,也回避了邏輯復(fù)雜的有限域上的矩陣乘法,算法實(shí)現(xiàn)邏輯簡單,大大減少了使用CUDA編程時(shí)的工作量。當(dāng)由于數(shù)據(jù)丟失需要重構(gòu)時(shí),該算法與傳統(tǒng)k+2 RS糾刪碼一樣,可以在至多兩個(gè)文件塊損壞的情況下恢復(fù)出原數(shù)據(jù)。

    雖然在r6算法中,m被指定為2,失去了一定的靈活性。但在實(shí)踐中依然可以通過調(diào)整k值來滿足特定的場景需求,比如如果數(shù)據(jù)比較重要,可以采用4+2的編碼方式,而如果存儲的是冷數(shù)據(jù),可以使用12+2的編碼方式,同時(shí)還可以通過調(diào)整編碼時(shí)的其他參數(shù)來優(yōu)化編碼性能,這些手段也使得該算法在實(shí)踐中依然具有一定的適用性。

    2.4 CUDA加速策略

    在編碼步驟2、3、4中,需要對待編碼的文件塊進(jìn)行規(guī)模巨大、但邏輯簡單的算術(shù)運(yùn)算,在CPU中,這些無所謂先后順序運(yùn)算在循環(huán)中串行執(zhí)行,時(shí)間開銷巨大,因此對這里使用CUDA進(jìn)行加速。為充分運(yùn)用GPU的性能,設(shè)定每個(gè)block維護(hù)1024個(gè)線程,這也是一個(gè)block最多能夠維護(hù)的線程數(shù)量,然后根據(jù)每次處理的數(shù)據(jù)大小,動(dòng)態(tài)設(shè)定grid中維護(hù)的block數(shù)量。通過這樣的修改,將原來由CPU進(jìn)行的串行運(yùn)算轉(zhuǎn)換成為由GPU中大量線程同時(shí)執(zhí)行的并行運(yùn)算,大大減少了時(shí)間開銷。

    在實(shí)驗(yàn)過程中,發(fā)現(xiàn)雖然單純的計(jì)算過程中使用CUDA加速的代碼有著明顯的計(jì)算優(yōu)勢,但是一旦考慮到申請內(nèi)存、顯存,數(shù)據(jù)在內(nèi)存、顯存之間傳遞等操作帶來的時(shí)間開銷,GPU的執(zhí)行效率便大打折扣。因此如何減少申請內(nèi)存、顯存和數(shù)據(jù)在內(nèi)存、顯存中傳遞帶來的時(shí)間開銷成為了優(yōu)化算法的關(guān)鍵。為此本算法使用了zero-copy技術(shù),使用CUDA提供的API cudaHostAlloc()直接申請不會被換入低速虛擬內(nèi)存的頁鎖定內(nèi)存,并通過cudaHostGetDevicePointer()將頁鎖定內(nèi)存映射到設(shè)備地址空間,這樣GPU便可以直接訪問內(nèi)存中的數(shù)據(jù),無須分配顯存空間,也不必在內(nèi)存和顯存之間進(jìn)行數(shù)據(jù)拷貝,也就是達(dá)到了zero-copy的效果,申請空間和數(shù)據(jù)傳輸?shù)臅r(shí)間延遲得以回避,使得性能得到了極大的提升。

    3 實(shí)驗(yàn)與性能分析

    實(shí)驗(yàn)的環(huán)境如下:

    CPU:Intel(R) Pentium(R) G630,主頻為2.70GHz;

    內(nèi)存:6G;

    顯卡:GTX 660,顯存為2G;

    操作系統(tǒng):Ubuntu 14.04.2。

    實(shí)驗(yàn)中,使用的糾刪碼模式為4+2,分別使用大小為154.3MB(文件1)和2.1G(文件2)的文件進(jìn)行測試,測試結(jié)果如圖5所示:

    圖5 CPU/GPU編碼速度測試結(jié)果

    為排除偶然因素帶來的誤差,每個(gè)數(shù)據(jù)都是測試10次之后取平均得到的。圖中buff_size為每次處理的數(shù)據(jù)大小。

    從實(shí)驗(yàn)結(jié)果可以看出,無論測試文件大小,使用CUDA加速后的代碼編碼速度都有大幅度的提升,原r6算法編碼速度基本在500MB/s上下,而在CUDA加速后,雖然性能隨參數(shù)變化有較大波動(dòng),但最低也能達(dá)到4GB/s,平均速度在10GB/s左右,速度提高了接近20倍。特別是當(dāng)文件比較大時(shí),如果參數(shù)選擇合適甚至可以達(dá)到16GB/s,達(dá)到30倍的加速比。同時(shí)從圖5中可以看出,隨著buff_size的不斷增大,編碼速度呈現(xiàn)出先增后減的趨勢,這是因?yàn)殡m然在編碼時(shí)每次并行處理的數(shù)據(jù)越多,編碼越快,但是維護(hù)較大內(nèi)存、顯存的開銷也會比較大,所以在具體實(shí)踐中時(shí)仍需要根據(jù)操作環(huán)境的不同,在并行度和內(nèi)存、顯存的維護(hù)之間做出適當(dāng)?shù)恼壑校x擇合適的參數(shù)以保證系統(tǒng)有較高的效率。從實(shí)驗(yàn)結(jié)果可以看出,對于大文件,buff_size選擇64MB或者128MB時(shí)性能較優(yōu)。

    4 總結(jié)

    本文以開源糾刪碼庫Jerasure中提供的r6算法為原型,利用CUDA對其代碼進(jìn)行加速,并通過申請、使用頁鎖定內(nèi)存,回避了數(shù)據(jù)在內(nèi)存和顯存中來回拷貝帶來的時(shí)間開銷。經(jīng)實(shí)驗(yàn)測試,經(jīng)加速后的r6算法編碼速度平均可達(dá)10GB/s,相當(dāng)于原r6算法的20倍,為糾刪碼在實(shí)時(shí)性要求比較高的分布式存儲系統(tǒng)中的應(yīng)用提供了可能。

    參考文獻(xiàn)

    [9] Plank J S, Simmerman S, Schuman C D. Jerasure: A library in C/C++ facilitating erasure coding for storage applications-Version 1.2[R]. Technical Report CS-08-627, University of Tennessee, 2008.

    [10] 羅象宏,舒繼武.存儲系統(tǒng)中的糾刪碼研究綜述[J].計(jì)算機(jī)研究與發(fā)展,2012,01:1-11.

    [11] Nvidia Corporation. NVIDIA CUDA Programming Guide[M]. Santa Clara, USA: Nvidia Corporation, 2011.

    CUDA-based Performance Optimization of RS Erasure Coding

    Dai Shihang, Li Xiaoyong
    (College of Information Security, Shanghai Jiao Tong University, Shanghai 200240, China)

    Abstract:At present, the ways used by distributed storage system to ensure the availability of data mainly have multi-replicate and erasure coding technologies. Compared with multi-replicate, erasure coding saves more storage space, however, it takes more time in encoding, which has a bad effect in speed, and limits its application. In order to improve the encoding efficiency of erasure coding, an algorithm provided in the open-source library Jerasure is accelerated by CUDA in this paper. The test result shows that the accelerated algorithm is about 20 times faster than the original one.

    Key words:RS Erasure Coding; CUDA; GPU Acceleration

    收稿日期:(2015.09.21)

    作者簡介:戴世航(1991-),男,吉林延邊,上海交通大學(xué),信息安全工程學(xué)院,碩士研究生,研究方向:云存儲、糾刪碼,上海,200240李小勇(1972-),男,甘肅天水,上海交通大學(xué),信息安全工程學(xué)院,副教授,博士,研究方向:海量存儲、高性能網(wǎng)絡(luò)、嵌入式系統(tǒng)、上海,200240

    文章編號:1007-757X(2016)01-0070-03

    中圖分類號:TP311

    文獻(xiàn)標(biāo)志碼:A

    人妻丰满熟妇av一区二区三区| 国产精品免费一区二区三区在线| 一级,二级,三级黄色视频| 精品一区二区三区四区五区乱码| 久久人人爽av亚洲精品天堂| 亚洲色图av天堂| 国产野战对白在线观看| or卡值多少钱| 日本一区二区免费在线视频| 精品一区二区三区av网在线观看| 亚洲三区欧美一区| 日本免费一区二区三区高清不卡 | 在线天堂中文资源库| 亚洲精华国产精华精| 久久久久国产一级毛片高清牌| 久久久久久久久中文| 丝袜在线中文字幕| 国产午夜精品久久久久久| 午夜精品在线福利| 人人澡人人妻人| 久热爱精品视频在线9| 国产一区在线观看成人免费| 嫩草影院精品99| 操出白浆在线播放| 看片在线看免费视频| 在线观看www视频免费| 巨乳人妻的诱惑在线观看| 国产精品av久久久久免费| 久99久视频精品免费| 最新在线观看一区二区三区| 国产精品亚洲美女久久久| 亚洲专区中文字幕在线| 露出奶头的视频| 99精品久久久久人妻精品| 亚洲在线自拍视频| 久久香蕉精品热| 日韩欧美一区视频在线观看| www.www免费av| 成人18禁在线播放| 侵犯人妻中文字幕一二三四区| 国产又色又爽无遮挡免费看| 久久久久久久精品吃奶| 国产av一区在线观看免费| 97人妻天天添夜夜摸| 久久狼人影院| www.www免费av| 久久久久精品国产欧美久久久| 精品福利观看| 精品一品国产午夜福利视频| 亚洲国产欧美一区二区综合| 九色国产91popny在线| 精品少妇一区二区三区视频日本电影| 成人国产一区最新在线观看| 中文字幕人成人乱码亚洲影| 在线天堂中文资源库| av有码第一页| 一级片免费观看大全| 操美女的视频在线观看| 天堂影院成人在线观看| 丝袜美足系列| 国产亚洲精品一区二区www| 女同久久另类99精品国产91| 天堂动漫精品| 一进一出抽搐动态| 一区二区三区国产精品乱码| 最好的美女福利视频网| 日韩欧美免费精品| 老司机福利观看| 亚洲av五月六月丁香网| 日韩欧美三级三区| 一进一出抽搐动态| 欧美国产精品va在线观看不卡| 天天躁狠狠躁夜夜躁狠狠躁| 亚洲五月天丁香| 日韩欧美在线二视频| 国产精品98久久久久久宅男小说| 亚洲熟妇中文字幕五十中出| 国产欧美日韩一区二区精品| 黑人操中国人逼视频| 亚洲精品一区av在线观看| 大陆偷拍与自拍| e午夜精品久久久久久久| 麻豆一二三区av精品| www.自偷自拍.com| 人成视频在线观看免费观看| 欧美久久黑人一区二区| 亚洲精品国产区一区二| 国产一区二区三区在线臀色熟女| 免费在线观看亚洲国产| 亚洲av五月六月丁香网| 91精品三级在线观看| 在线观看日韩欧美| 丝袜美足系列| 亚洲片人在线观看| tocl精华| 美国免费a级毛片| 搡老岳熟女国产| 人成视频在线观看免费观看| 免费观看精品视频网站| 999久久久国产精品视频| 久久久久久大精品| 午夜久久久在线观看| 麻豆成人av在线观看| 久久中文看片网| 如日韩欧美国产精品一区二区三区| 国内精品久久久久精免费| 午夜福利高清视频| 午夜亚洲福利在线播放| 亚洲avbb在线观看| 亚洲精品国产区一区二| 国产一区二区三区在线臀色熟女| 中出人妻视频一区二区| 亚洲色图av天堂| 91麻豆精品激情在线观看国产| 成人手机av| 日日夜夜操网爽| 人人妻,人人澡人人爽秒播| 欧美激情高清一区二区三区| 欧美成人免费av一区二区三区| 免费无遮挡裸体视频| 久久天堂一区二区三区四区| 亚洲色图 男人天堂 中文字幕| 日日夜夜操网爽| 亚洲精品一区av在线观看| 日本a在线网址| 日本三级黄在线观看| 亚洲电影在线观看av| 亚洲精品国产精品久久久不卡| 国产麻豆69| 亚洲最大成人中文| 亚洲成av片中文字幕在线观看| 亚洲人成电影免费在线| 女人爽到高潮嗷嗷叫在线视频| 一级a爱片免费观看的视频| 最近最新免费中文字幕在线| 午夜日韩欧美国产| 国产真人三级小视频在线观看| 久久天躁狠狠躁夜夜2o2o| 人人澡人人妻人| 黑人巨大精品欧美一区二区蜜桃| 性色av乱码一区二区三区2| 国内久久婷婷六月综合欲色啪| 日本黄色视频三级网站网址| 亚洲九九香蕉| 久久影院123| 国产高清视频在线播放一区| 亚洲av熟女| 中文字幕最新亚洲高清| 此物有八面人人有两片| 午夜福利在线观看吧| 精品国产乱子伦一区二区三区| 自线自在国产av| 18禁美女被吸乳视频| 丰满人妻熟妇乱又伦精品不卡| 国产一级毛片七仙女欲春2 | 女人精品久久久久毛片| 精品国产超薄肉色丝袜足j| 国产精品爽爽va在线观看网站 | 制服人妻中文乱码| 国产av在哪里看| 啪啪无遮挡十八禁网站| 男男h啪啪无遮挡| 搡老岳熟女国产| 男人的好看免费观看在线视频 | 久久久久久久久免费视频了| 日本五十路高清| 亚洲av成人av| 精品日产1卡2卡| 亚洲三区欧美一区| 性色av乱码一区二区三区2| 久久影院123| 神马国产精品三级电影在线观看 | 国产av精品麻豆| 美女扒开内裤让男人捅视频| 黑人巨大精品欧美一区二区蜜桃| 18美女黄网站色大片免费观看| 亚洲 欧美一区二区三区| 村上凉子中文字幕在线| tocl精华| av免费在线观看网站| 国产午夜精品久久久久久| 大码成人一级视频| 亚洲国产欧美日韩在线播放| 国产精品久久久久久人妻精品电影| 久久人妻av系列| 最好的美女福利视频网| 国产欧美日韩一区二区精品| 亚洲精品一卡2卡三卡4卡5卡| 黄色视频不卡| av天堂久久9| 韩国精品一区二区三区| 国产精华一区二区三区| 一边摸一边抽搐一进一出视频| 欧美激情 高清一区二区三区| 国产成人一区二区三区免费视频网站| 黑人巨大精品欧美一区二区mp4| 久久久久久大精品| 久久久久久久久免费视频了| 午夜a级毛片| 亚洲人成电影免费在线| 久久香蕉精品热| 大陆偷拍与自拍| 天堂影院成人在线观看| 国产真人三级小视频在线观看| 制服诱惑二区| 少妇 在线观看| videosex国产| 黄片播放在线免费| 男女下面进入的视频免费午夜 | 真人一进一出gif抽搐免费| 久久午夜综合久久蜜桃| 亚洲中文字幕日韩| 性色av乱码一区二区三区2| 黄色a级毛片大全视频| 无遮挡黄片免费观看| 在线观看免费日韩欧美大片| 欧美激情久久久久久爽电影 | 天天一区二区日本电影三级 | 免费在线观看视频国产中文字幕亚洲| 一二三四社区在线视频社区8| 精品欧美一区二区三区在线| 好男人电影高清在线观看| 一级片免费观看大全| 热re99久久国产66热| 久久精品国产亚洲av香蕉五月| 国产精品秋霞免费鲁丝片| 久热爱精品视频在线9| or卡值多少钱| 窝窝影院91人妻| 国产精品香港三级国产av潘金莲| 女人精品久久久久毛片| 久久人人97超碰香蕉20202| 久久精品91无色码中文字幕| 色婷婷久久久亚洲欧美| 天天添夜夜摸| 99精品在免费线老司机午夜| 国产主播在线观看一区二区| 在线av久久热| 妹子高潮喷水视频| 在线观看午夜福利视频| 国产免费男女视频| 午夜福利免费观看在线| 脱女人内裤的视频| 人人妻人人爽人人添夜夜欢视频| 成人18禁在线播放| 一a级毛片在线观看| 日本一区二区免费在线视频| 国产一区二区三区视频了| 最近最新中文字幕大全免费视频| 91在线观看av| 亚洲中文av在线| 国产精品永久免费网站| 中文字幕人成人乱码亚洲影| 国产精品亚洲av一区麻豆| 亚洲人成网站在线播放欧美日韩| 久久人妻熟女aⅴ| 日日摸夜夜添夜夜添小说| 日本 av在线| x7x7x7水蜜桃| 午夜精品国产一区二区电影| 亚洲成av人片免费观看| 黑人巨大精品欧美一区二区mp4| 制服丝袜大香蕉在线| 国产99久久九九免费精品| 男女做爰动态图高潮gif福利片 | 女人高潮潮喷娇喘18禁视频| 99香蕉大伊视频| 一级a爱视频在线免费观看| 天天添夜夜摸| 色综合婷婷激情| 亚洲,欧美精品.| 精品午夜福利视频在线观看一区| 男女午夜视频在线观看| 免费在线观看亚洲国产| www.自偷自拍.com| 操出白浆在线播放| 每晚都被弄得嗷嗷叫到高潮| 国产精品久久久人人做人人爽| 免费在线观看亚洲国产| 999精品在线视频| 日本 欧美在线| 老司机深夜福利视频在线观看| 亚洲中文av在线| 欧美久久黑人一区二区| 1024香蕉在线观看| 在线播放国产精品三级| 国产主播在线观看一区二区| 国产亚洲欧美精品永久| 搡老岳熟女国产| 很黄的视频免费| 亚洲精品国产区一区二| 两性夫妻黄色片| 变态另类成人亚洲欧美熟女 | 黄网站色视频无遮挡免费观看| 亚洲aⅴ乱码一区二区在线播放 | 看黄色毛片网站| 亚洲男人天堂网一区| 国产成人啪精品午夜网站| 91成人精品电影| 欧美日韩一级在线毛片| 欧美亚洲日本最大视频资源| 久久精品91无色码中文字幕| 老熟妇乱子伦视频在线观看| 最近最新中文字幕大全免费视频| 国产精品乱码一区二三区的特点 | 国产精品98久久久久久宅男小说| 人成视频在线观看免费观看| 激情在线观看视频在线高清| 亚洲一码二码三码区别大吗| 不卡av一区二区三区| 露出奶头的视频| 欧美最黄视频在线播放免费| 长腿黑丝高跟| 怎么达到女性高潮| 久久久水蜜桃国产精品网| 久久影院123| 男女做爰动态图高潮gif福利片 | 搡老岳熟女国产| 性少妇av在线| 午夜免费成人在线视频| 性少妇av在线| 91成人精品电影| 精品一区二区三区四区五区乱码| 人人妻,人人澡人人爽秒播| 可以在线观看的亚洲视频| 妹子高潮喷水视频| 99在线视频只有这里精品首页| 亚洲成人免费电影在线观看| 丝袜人妻中文字幕| 午夜两性在线视频| 最近最新免费中文字幕在线| 免费在线观看视频国产中文字幕亚洲| 精品免费久久久久久久清纯| 91在线观看av| 日韩欧美免费精品| 亚洲va日本ⅴa欧美va伊人久久| 黑丝袜美女国产一区| 窝窝影院91人妻| 99国产精品免费福利视频| 中文字幕最新亚洲高清| 少妇被粗大的猛进出69影院| 在线播放国产精品三级| 国产91精品成人一区二区三区| 多毛熟女@视频| 午夜a级毛片| 色av中文字幕| 久久亚洲精品不卡| 日本三级黄在线观看| 日韩精品免费视频一区二区三区| 国产精品 欧美亚洲| 国产又色又爽无遮挡免费看| 午夜成年电影在线免费观看| 国产精品久久久久久精品电影 | 在线观看66精品国产| 男女下面插进去视频免费观看| 色婷婷久久久亚洲欧美| 久久久久久久久久久久大奶| 欧美日韩精品网址| 亚洲精品久久国产高清桃花| 国产亚洲精品久久久久久毛片| 国产精品 国内视频| 免费无遮挡裸体视频| 人成视频在线观看免费观看| 一级a爱视频在线免费观看| 一级片免费观看大全| 欧美精品亚洲一区二区| 一边摸一边抽搐一进一小说| 国产亚洲精品久久久久久毛片| 日韩高清综合在线| 中文亚洲av片在线观看爽| 十八禁人妻一区二区| 亚洲人成网站在线播放欧美日韩| 给我免费播放毛片高清在线观看| 999精品在线视频| 国产熟女午夜一区二区三区| 天天躁夜夜躁狠狠躁躁| 97超级碰碰碰精品色视频在线观看| av天堂在线播放| 亚洲免费av在线视频| 伊人久久大香线蕉亚洲五| 无人区码免费观看不卡| 午夜福利18| 久久久久久亚洲精品国产蜜桃av| 搡老岳熟女国产| 成人三级做爰电影| 国产精品久久久人人做人人爽| 亚洲精品国产色婷婷电影| 免费av毛片视频| 成人18禁高潮啪啪吃奶动态图| 国产一卡二卡三卡精品| 一级毛片女人18水好多| 90打野战视频偷拍视频| 老司机深夜福利视频在线观看| 日本a在线网址| 国产精品国产高清国产av| 免费搜索国产男女视频| 欧美成人午夜精品| 久9热在线精品视频| 午夜精品国产一区二区电影| 97超级碰碰碰精品色视频在线观看| 欧美日本亚洲视频在线播放| 亚洲av电影不卡..在线观看| 精品国产美女av久久久久小说| 亚洲精品国产色婷婷电影| 亚洲,欧美精品.| 怎么达到女性高潮| or卡值多少钱| 久久久久国产精品人妻aⅴ院| 满18在线观看网站| 国产亚洲av高清不卡| 国产色视频综合| 一区二区三区高清视频在线| 国产麻豆69| 久久久国产欧美日韩av| 法律面前人人平等表现在哪些方面| 国产免费av片在线观看野外av| 91大片在线观看| 人人妻人人澡欧美一区二区 | 色综合亚洲欧美另类图片| 制服人妻中文乱码| 欧美激情极品国产一区二区三区| 99国产精品99久久久久| 亚洲av电影在线进入| 在线观看舔阴道视频| 一夜夜www| 美女国产高潮福利片在线看| 十八禁人妻一区二区| 黄色 视频免费看| 国产欧美日韩综合在线一区二区| 无遮挡黄片免费观看| 欧美另类亚洲清纯唯美| 国产91精品成人一区二区三区| 国内精品久久久久精免费| videosex国产| 久久精品亚洲熟妇少妇任你| 18美女黄网站色大片免费观看| 妹子高潮喷水视频| 免费在线观看亚洲国产| av在线播放免费不卡| 国产av一区在线观看免费| 国产精品二区激情视频| 精品国产国语对白av| 亚洲av第一区精品v没综合| 国产精品一区二区精品视频观看| tocl精华| 国产亚洲精品第一综合不卡| 校园春色视频在线观看| 国产精品,欧美在线| 免费久久久久久久精品成人欧美视频| 亚洲精品一区av在线观看| 自拍欧美九色日韩亚洲蝌蚪91| 丰满的人妻完整版| 亚洲精品av麻豆狂野| 久久中文字幕一级| 变态另类成人亚洲欧美熟女 | 日韩成人在线观看一区二区三区| 亚洲第一电影网av| 亚洲精品美女久久av网站| 国产亚洲精品av在线| 国产高清有码在线观看视频 | 9色porny在线观看| or卡值多少钱| 午夜激情av网站| 在线观看免费日韩欧美大片| 国产精品影院久久| 欧美中文综合在线视频| 久久精品影院6| 女人爽到高潮嗷嗷叫在线视频| 免费搜索国产男女视频| 免费在线观看影片大全网站| 亚洲成a人片在线一区二区| 精品一品国产午夜福利视频| 日韩大尺度精品在线看网址 | 亚洲欧美日韩另类电影网站| 99香蕉大伊视频| 在线视频色国产色| 成人18禁高潮啪啪吃奶动态图| 女性生殖器流出的白浆| 国产免费男女视频| 在线观看免费日韩欧美大片| 此物有八面人人有两片| 欧美中文综合在线视频| 在线天堂中文资源库| 熟妇人妻久久中文字幕3abv| 嫁个100分男人电影在线观看| 每晚都被弄得嗷嗷叫到高潮| www国产在线视频色| 久久中文看片网| 真人做人爱边吃奶动态| 人成视频在线观看免费观看| 99久久久亚洲精品蜜臀av| x7x7x7水蜜桃| 黄色女人牲交| 91精品国产国语对白视频| 两个人视频免费观看高清| 一区二区三区激情视频| 性少妇av在线| 亚洲视频免费观看视频| 色播在线永久视频| 久久天躁狠狠躁夜夜2o2o| 国产欧美日韩一区二区三区在线| 老司机福利观看| 天堂动漫精品| 不卡av一区二区三区| 久久性视频一级片| 精品久久久久久,| 亚洲天堂国产精品一区在线| 色综合站精品国产| 九色亚洲精品在线播放| 国产极品粉嫩免费观看在线| 精品一品国产午夜福利视频| 成人欧美大片| 亚洲九九香蕉| 一区二区三区激情视频| 久久久久久亚洲精品国产蜜桃av| 久久中文看片网| 亚洲国产日韩欧美精品在线观看 | 黑人欧美特级aaaaaa片| 午夜福利免费观看在线| 亚洲欧美精品综合一区二区三区| 好男人在线观看高清免费视频 | а√天堂www在线а√下载| 女人爽到高潮嗷嗷叫在线视频| 色精品久久人妻99蜜桃| 亚洲av成人不卡在线观看播放网| 国产精品 欧美亚洲| 成人免费观看视频高清| av免费在线观看网站| 国产麻豆成人av免费视频| 国产真人三级小视频在线观看| 日韩大尺度精品在线看网址 | 妹子高潮喷水视频| 少妇的丰满在线观看| 午夜福利,免费看| 美国免费a级毛片| 亚洲五月婷婷丁香| 亚洲伊人色综图| www国产在线视频色| 男人舔女人下体高潮全视频| 日本在线视频免费播放| 91字幕亚洲| 亚洲,欧美精品.| 亚洲欧洲精品一区二区精品久久久| 一区二区日韩欧美中文字幕| 亚洲精品国产一区二区精华液| 精品人妻在线不人妻| 亚洲中文av在线| 真人做人爱边吃奶动态| 欧美日韩中文字幕国产精品一区二区三区 | 日韩欧美国产一区二区入口| 国产国语露脸激情在线看| 亚洲少妇的诱惑av| 两人在一起打扑克的视频| 午夜福利18| 精品午夜福利视频在线观看一区| 久热这里只有精品99| 亚洲欧洲精品一区二区精品久久久| 88av欧美| 波多野结衣巨乳人妻| 免费高清在线观看日韩| 搞女人的毛片| 一级片免费观看大全| 亚洲电影在线观看av| 日韩有码中文字幕| 国产亚洲精品第一综合不卡| 精品午夜福利视频在线观看一区| 男女做爰动态图高潮gif福利片 | 国产精品综合久久久久久久免费 | 不卡av一区二区三区| av超薄肉色丝袜交足视频| 一边摸一边做爽爽视频免费| 国产欧美日韩一区二区精品| 自线自在国产av| 可以免费在线观看a视频的电影网站| 在线观看免费视频网站a站| 最新美女视频免费是黄的| videosex国产| 亚洲成人免费电影在线观看| 中出人妻视频一区二区| 国产精品日韩av在线免费观看 | 人人妻人人澡人人看| 久久婷婷人人爽人人干人人爱 | 日韩大码丰满熟妇| 国产在线观看jvid| 日日爽夜夜爽网站| 亚洲精华国产精华精| 国产三级在线视频| 我的亚洲天堂| 免费人成视频x8x8入口观看| av天堂在线播放| 午夜免费鲁丝| 亚洲国产欧美一区二区综合| 最好的美女福利视频网| 脱女人内裤的视频| 麻豆av在线久日| 亚洲国产毛片av蜜桃av| 99精品在免费线老司机午夜| 1024视频免费在线观看| 亚洲欧美日韩无卡精品| 黄色毛片三级朝国网站| 日本 欧美在线| 久久国产乱子伦精品免费另类| 日日夜夜操网爽| 99riav亚洲国产免费| 国产xxxxx性猛交| 丝袜美足系列| 好男人在线观看高清免费视频 | 亚洲人成电影观看| 免费少妇av软件| 亚洲av成人一区二区三| tocl精华| 丰满的人妻完整版| 少妇熟女aⅴ在线视频| 亚洲人成伊人成综合网2020| 91精品三级在线观看|