• <tr id="yyy80"></tr>
  • <sup id="yyy80"></sup>
  • <tfoot id="yyy80"><noscript id="yyy80"></noscript></tfoot>
  • 99热精品在线国产_美女午夜性视频免费_国产精品国产高清国产av_av欧美777_自拍偷自拍亚洲精品老妇_亚洲熟女精品中文字幕_www日本黄色视频网_国产精品野战在线观看 ?

    基于RISC-V向量指令的稀疏矩陣向量乘法實(shí)現(xiàn)與優(yōu)化*

    2022-01-24 02:20:56趙銀亮
    關(guān)鍵詞:壓縮率指針閾值

    顧 越,趙銀亮

    (西安交通大學(xué)計(jì)算機(jī)學(xué)院,陜西 西安 710049)

    1 引言

    隨著云計(jì)算與物聯(lián)網(wǎng)浪潮的興起,人們對(duì)可定制、低功耗和高性價(jià)比CPU的需求日漸增加。最初由加州大學(xué)伯克利分校研究人員開發(fā)的開源指令集架構(gòu)RISC-V,憑借其可伸縮、可擴(kuò)展和模塊化的特性[1 - 3],在相關(guān)領(lǐng)域的影響力逐漸擴(kuò)大。該指令集由整數(shù)基本指令和多個(gè)拓展指令集組成[4],拓展指令集中包括了用于向量處理的V指令集——RV32V。RV32V目前仍在GitHub上開發(fā)[5],最新穩(wěn)定版本為v0.9。與傳統(tǒng)SIMD向量架構(gòu)不同的地方在于,RISC-V向量指令集具有向量寄存器可配置的特性,解決了向量計(jì)算中向量長(zhǎng)度不可知的問題[6,7]。

    向量計(jì)算中的稀疏矩陣與向量乘法SpMV(Sparse Matrix-Vector multiplication),常用于科學(xué)計(jì)算和工程應(yīng)用問題中的大規(guī)模稀疏線性系統(tǒng)求解[8],其實(shí)現(xiàn)與優(yōu)化一直是高性能計(jì)算領(lǐng)域的研究重點(diǎn)。因稀疏矩陣具有非零元素占比少的特性,研究人員常采用壓縮存儲(chǔ)格式來(lái)提高存儲(chǔ)效率,又因非零元素分布和硬件設(shè)備的多樣性,其存儲(chǔ)格式也具有多樣性[9]。如COO(COOrdinate list format)[10]格式以行坐標(biāo)、列坐標(biāo)和值組成的三元組對(duì)稀疏矩陣中非零元素進(jìn)行存儲(chǔ),簡(jiǎn)單直觀靈活,但不利于計(jì)算和向量化。另一種常用的存儲(chǔ)格式CSR(Compress Sparse Row format)格式,將所有非零元素的值和列索引按行順序存儲(chǔ)在2個(gè)單獨(dú)的數(shù)組中,第3個(gè)數(shù)組保留指向這些數(shù)組中每一行的起始位置的指針。它的主要優(yōu)點(diǎn)是對(duì)任何類型的矩陣元素分布都有很好的壓縮比,其主要缺點(diǎn)為數(shù)據(jù)局部性差,存在寫沖突、負(fù)載不均衡等問題[11]。ELLPACK(format used by ELLPACK system)格式可在GPU和矢量體系結(jié)構(gòu)中高效運(yùn)算,但需要付出額外的存儲(chǔ)代價(jià)[12]。它以m*k的矩陣存儲(chǔ)數(shù)據(jù),其中k的大小取決于每行非零元素個(gè)數(shù)中的最大值。面對(duì)不規(guī)則矩陣時(shí),其存儲(chǔ)和計(jì)算效率都會(huì)退化。HYB(HYBrid format)格式[13]結(jié)合了ELLPACK格式和COO格式,對(duì)每行中超過(guò)閾值的非零元素使用COO格式存儲(chǔ),以減少ELLPACK格式中零元素的填充,兼顧計(jì)算效率的同時(shí)節(jié)約了存儲(chǔ)空間。

    SELLPACK(Sliced ELLPACK format)[14]格式是基于ELLPACK格式的改進(jìn)。通過(guò)將矩陣行向量按照其非零元素?cái)?shù)量排序,以固定行數(shù)對(duì)矩陣分片,對(duì)得到的矩陣塊分別使用ELLPACK格式存儲(chǔ),提高了存儲(chǔ)不規(guī)則矩陣的效率和吞吐量。更進(jìn)一步地,SELL-C-σ(Sliced ELLPACK format with parameterC,σ)格式[15]通過(guò)限制排序窗口避免了重新排列整個(gè)矩陣的高昂代價(jià),同時(shí)充分利用了矩陣相鄰行與被乘向量x相乘時(shí),對(duì)向量x訪問的局部性。針對(duì)Intel 公司設(shè)計(jì)的異構(gòu)眾核處理器Xeon Phi,Liu等人[16]提出了ESB(ELLPACK Sparse Block)格式,該格式引入了位數(shù)組編碼和列分塊技術(shù),以降低帶寬需求,進(jìn)一步提高了向量訪問的局部性。而Liu 等人[17]提出的CSR5存儲(chǔ)格式,易于從傳統(tǒng)的CSR格式轉(zhuǎn)換得到,對(duì)輸入稀疏矩陣的非零元素分布不敏感。通過(guò)采用一種改進(jìn)的分段求和算法實(shí)現(xiàn)了基于CSR5的SpMV算法,在跨平臺(tái)測(cè)試中得到了較高的吞吐量。

    RISC-V向量指令集作為向量指令家族中的新晉成員,方興未艾。相關(guān)研究尚處于起步階段,基于RISC-V向量指令實(shí)現(xiàn)和優(yōu)化SpMV算法的工作還未有報(bào)道,開展此項(xiàng)工作具有重要意義。

    本文基于RISC-V向量指令集RV32V,利用其向量寄存器可配置及尋址特性,實(shí)現(xiàn)了基于CSR、ELLPACK和HYB壓縮格式的SpMV算法,比較了在稀疏矩陣非零元素不同分布情況下各個(gè)算法的計(jì)算與存儲(chǔ)效率的變化。同時(shí),針對(duì)極度稀疏矩陣每行非零元素?cái)?shù)量波動(dòng)較大的情況,通過(guò)壓縮非零元素密度低的行向量的存儲(chǔ)、調(diào)整HYB分割閾值等手段,改進(jìn)了HYB存儲(chǔ)格式并實(shí)現(xiàn)了對(duì)應(yīng)的SpMV算法,顯著改善了計(jì)算效率和存儲(chǔ)效率。

    2 稀疏矩陣存儲(chǔ)格式

    2.1 CSR格式

    CSR格式是一種比較標(biāo)準(zhǔn)的稀疏矩陣存儲(chǔ)格式,使用3類數(shù)據(jù)來(lái)表示:數(shù)值val、列號(hào)col和行偏移row。其中,數(shù)值val為非零元素的值,列號(hào)col為非零元素的列號(hào),行偏移row表示某行的第1個(gè)非零元素在數(shù)值val中的起始偏移位置。對(duì)于如式(1)所示的矩陣A,采用CSR格式存儲(chǔ)的結(jié)果如式(2)所示:

    (1)

    (2)

    CSR格式的主要優(yōu)點(diǎn)是對(duì)規(guī)則與不規(guī)則稀疏矩陣的存儲(chǔ)都具有穩(wěn)定良好的壓縮比,主要缺點(diǎn)是基于此實(shí)現(xiàn)的SpMV算法存在數(shù)據(jù)訪問局部性差、寫沖突和負(fù)載不均衡等問題。

    2.2 ELLPACK格式

    ELLPACK格式是一種易于向量化的稀疏矩陣存儲(chǔ)格式,使用2個(gè)和原始矩陣行數(shù)相同的矩陣來(lái)表示:第1個(gè)矩陣val存的是數(shù)值,第2個(gè)矩陣col存的是列號(hào),行號(hào)用自身所在的行來(lái)表示。對(duì)于行中存在的零元素,可以在val矩陣中填充零元素、在col矩陣中填充11來(lái)表示。對(duì)于如式(1)所示的矩陣A,采用ELLPACK格式存儲(chǔ)的結(jié)果如式(3)所示:

    (3)

    當(dāng)矩陣中某行的非零元素個(gè)數(shù)很多時(shí),ELLPACK格式的存儲(chǔ)效率將急劇下降。

    2.3 HYB格式

    HYB格式對(duì)ELLPACK格式的缺點(diǎn)進(jìn)行改進(jìn),采用COO格式與ELLPACK格式混合的方式對(duì)稀疏矩陣壓縮存儲(chǔ)。對(duì)每行元素個(gè)數(shù)小于閾值的部分采用ELLPACK格式,超過(guò)閾值的部分采用COO格式。其中,ELLPACK格式如上所述,需要數(shù)值矩陣val和列號(hào)矩陣col存儲(chǔ),而COO格式使用coo_r、coo_c和coo_v分別存儲(chǔ)元素的行號(hào)、列號(hào)和值。對(duì)于如式(4)所示的矩陣B,采用HYB格式存儲(chǔ)的結(jié)果如式(5)所示:

    (4)

    coo_r=(0),

    coo_c=(2),

    coo_v=(9)

    (5)

    矩陣B中第1行第3列的元素值為9,行號(hào)為0,列號(hào)為2,分別存儲(chǔ)于coo_v、coo_r和coo_c中。因此,當(dāng)每行非零元素?cái)?shù)量相差較大時(shí),采用HYB格式可節(jié)約存儲(chǔ)空間,提高存儲(chǔ)效率。

    3 SpMV描述、實(shí)現(xiàn)與優(yōu)化

    3.1 SpMV描述

    SpMV可用式(6)描述:

    y=A*x

    (6)

    其中,A為m*n維的稀疏矩陣,x為n* 1維的乘數(shù)向量,y為m* 1維的結(jié)果向量。

    為了更好地描述稀疏矩陣,假設(shè)矩陣中每行元素?cái)?shù)量呈正態(tài)分布,正態(tài)分布標(biāo)準(zhǔn)差為σ,均值為μ。

    為了表征稀疏矩陣中非零元素的分布特征,使用空行率、稠密度和波動(dòng)度3個(gè)指標(biāo),其定義如式(7)~式(9)所示:

    空行率=矩陣全零行數(shù)/矩陣總行數(shù)

    (7)

    稠密度=非零元素?cái)?shù)/矩陣元素總數(shù)

    (8)

    波動(dòng)度=標(biāo)準(zhǔn)差σ/均值μ

    (9)

    為了表征基于某特定壓縮存儲(chǔ)格式的SpMV算法性能,使用壓縮率和加速比2個(gè)指標(biāo),其定義如式(10)和式(11)所示:

    壓縮率=壓縮后數(shù)據(jù)大小/原始矩陣大小

    (10)

    加速比=基于該壓縮格式的SpMV執(zhí)行時(shí)間/非壓縮的SpMV執(zhí)行時(shí)間

    (11)

    壓縮率與壓縮效率成反比,壓縮率越小,說(shuō)明該壓縮存儲(chǔ)格式的壓縮效率越高。

    其中,非壓縮的SpMV偽代碼如下所示:

    for(inti= 0;i

    for(intj=0;j

    y[i]+=A[i*m+j] *x[j];

    }

    }

    加速比與計(jì)算效率成正比,加速比越大,說(shuō)明所執(zhí)行的算法計(jì)算效率越高。

    3.2 RISC-V向量指令集RV32V

    RISC-V指令集采用模塊化的方式組織,使用一個(gè)英文字母表示一個(gè)模塊。其中向量指令部分使用“V”表示,32位的RISC-V向量模塊簡(jiǎn)記為RV32V。對(duì)于32位的RISC-V向量架構(gòu),在執(zhí)行向量乘操作的for循環(huán)時(shí),可以用設(shè)置向量寄存器組的操作作為循環(huán)判斷條件,每次循環(huán)后將當(dāng)前剩余向量長(zhǎng)度減去設(shè)置結(jié)果,發(fā)揮向量寄存器可配置的特性,避免了傳統(tǒng)SIMD指令面對(duì)計(jì)算向量長(zhǎng)度非架構(gòu)所支持的向量數(shù)的整數(shù)倍時(shí),需要對(duì)剩余尾向量進(jìn)行額外的循環(huán)操作的缺點(diǎn)。例如,對(duì)于傳統(tǒng)的擁有固定128位向量寄存器的處理器而言,在處理包含41個(gè)32位整型元素的向量時(shí),每次循環(huán)能夠處理的元素個(gè)數(shù)為4。10次循環(huán)之后,需要額外循環(huán)處理剩余的1個(gè)元素。而在RV32V體系結(jié)構(gòu)中,向量寄存器長(zhǎng)度可通過(guò)類似vsetvl_e32m8的接口靈活配置,開始待處理向量較長(zhǎng)時(shí),使用大的向量寄存器位數(shù),最后向量長(zhǎng)度不足時(shí),將向量寄存器長(zhǎng)度設(shè)置為合適值,充分簡(jiǎn)化了代碼編寫,提高了程序效率。

    在實(shí)現(xiàn)矩陣運(yùn)算時(shí),常用的向量操作包括間隔向量尋址、索引向量尋址、向量乘加和向量標(biāo)量乘等,如圖1所示。

    Figure 1 Vector operations of RV32V圖1 RV32V向量操作示意圖

    3.3 基于RV32V與傳統(tǒng)壓縮格式的SpMV實(shí)現(xiàn)

    基于RV32V,充分利用RISC-V向量寄存器可配置和尋址的特點(diǎn),本文分別實(shí)現(xiàn)CSR、ELLPACK和HYB存儲(chǔ)格式的SpMV算法。向量化SpMV算法實(shí)現(xiàn)總體可分為索引計(jì)算、乘數(shù)加載、向量相乘、結(jié)果回寫和指針偏移這幾個(gè)步驟,下面結(jié)合偽代碼分別描述各壓縮格式的RISC-V向量化SpMV實(shí)現(xiàn)。

    基于CSR格式的RISC-V向量化SpMV偽代碼如下所示:

    輸入行偏移指針row_p;row_p數(shù)組長(zhǎng)度m;坐標(biāo)指針col_idx;值指針val;向量指針x。

    輸出結(jié)果向量指針y。

    1:vfloat32m8_tvec_a,vec_b,vec_c;

    2:vuint32m8_tindex;

    3:float *a=val,*b=x,*c=y;

    4:whilevl=vsetvl_e32m8(col)do

    5:vec_a=*(vfloat32m8_t *)a;

    6:index=*(vuint32m8_t *)col_idx;

    7:index=vfmul_vf_f32m8(index,4);

    8:vec_b=vlxe_v_f32m8(b,index);

    9:vec_c=*(vfloat32m8_t *)c;

    10:vec_c=vfmadd_vv_f32m8(vec_a,vec_b,vec_c)

    11: *(vfloat32m8_t *) c=vec_c;

    12:c+=vl;a+=vl;b+=vl;

    13:col_idx+=vl;col-=vl;

    14:endwhile

    15:returny.

    首先對(duì)列號(hào)col_idx數(shù)組進(jìn)行順序?qū)ぶ罚?jì)算出索引,如第6、7行所示;然后根據(jù)計(jì)算出的索引,在乘數(shù)向量x中進(jìn)行索引尋址,加載第1個(gè)向量乘數(shù),并對(duì)數(shù)值val數(shù)組順序?qū)ぶ?,加載第2個(gè)向量乘數(shù),如第8、9行所示;最后2個(gè)向量乘數(shù)中各元素依次相乘,結(jié)果回寫暫存,如第10、11行所示。進(jìn)行指針偏移準(zhǔn)備下一輪計(jì)算,如第12、13行所示。依次循環(huán)往復(fù)直到計(jì)算完成。

    基于ELLPACK格式的RISC-V向量化SpMV偽代碼如下所示:

    輸入坐標(biāo)指針col_idx;值指針val;值矩陣長(zhǎng)度m;值矩陣寬度col;向量指針x。

    輸出結(jié)果向量指針y。

    1:vfloat32m8_tvec_a,vec_b,vec_c;

    2:vuint32m8_tindex;

    3:float *a=val,*b=x,*c=y;

    4:fori=0 tocoldo

    5:num=m;a=val+i*col;

    6:b=x;c=y+i*col;

    7:col_idx=col_idx+i*col;

    8:whilevl=vsetvl_e32m8(num)do

    9:vec_a=*(vfloat32m8_t *)a;

    10:index=vlse_v_f32m8(col_idx,col*4);

    11:index=vfmul_vf_f32m8(index,4);

    12:vec_b=vlxe_v_f32m8(b,index);

    13:vec_c=*(vfloat32m8_t *)c;

    14:vec_c=vfmadd_vv_f32m8(vec_a,vec_b,vec_c);

    15: *(vfloat32m8_t *)c=vec_c;

    16:c+=vl;a+=vl;b+=vl;

    17:col_idx+=vl;num-=vl;

    18:endwhile

    19:endfor

    20:returny.

    向量化計(jì)算過(guò)程中,首先對(duì)列號(hào)col數(shù)組間隔尋址,間隔為每行字節(jié)數(shù),按列順序獲取向量,如第10行。對(duì)得到的向量值做向量標(biāo)量乘法,轉(zhuǎn)化為字節(jié)數(shù),計(jì)算出索引,如第11行;然后根據(jù)計(jì)算出的索引,在乘數(shù)向量x中進(jìn)行索引尋址,加載第1個(gè)向量乘數(shù),如第12行;接著對(duì)數(shù)值val數(shù)組順序?qū)ぶ?,加載第2個(gè)向量乘數(shù),如第13行;最后向量元素依次相乘,如第14行,結(jié)果回寫暫存,如第15行。指針偏移準(zhǔn)備下一輪計(jì)算,如第16、17行,依次循環(huán)往復(fù)直到計(jì)算完成。

    對(duì)基于HYB格式的向量化SpMV可以分為ELLPACK和COO 2部分,其中ELLPACK部分與上述基于ELLPACK格式的RISC-V向量化過(guò)程相同,COO部分的向量化過(guò)程與CSR格式的類似。

    基于HYB格式的RISC-V向量化SpMV偽代碼(COO部分)如下所示:

    輸入行坐標(biāo)指針col_r;列坐標(biāo)指針coo_c;值指針val;長(zhǎng)度num;向量指針x。

    輸出結(jié)果向量指針y。

    1:whilevl=vsetvl_e32m8(num)do

    2:vec_a=*(vfloat32m8_t *)a;

    3:index=*(vuint32m8_t *)coo_c;

    4:index=vfmul_vf_f32m8(index,4);

    5:vec_b=vlxe_v_f32m8(b,index);

    6:vec_c=*(vfloat32m8_t *)c;

    7:vec_c=vfmadd_vv_f32m8(vec_a,vec_b,vec_c);

    8: *(vfloat32m8_t *) c=vec_c;

    9:c+=vl;a+=vl;b+=vl;

    10:col_index+=vl;num-=vl;

    11:endwhile

    12:returny.

    首先對(duì)列號(hào)col數(shù)組順序?qū)ぶ罚绲?行,得到的向量值做向量標(biāo)量乘法,如第4行,計(jì)算出索引;然后在乘數(shù)向量x中進(jìn)行索引尋址,加載第1個(gè)向量乘數(shù),如第5行;接著對(duì)數(shù)值val數(shù)組順序?qū)ぶ?,加載第2個(gè)向量乘數(shù),如第6行;最后向量元素依次相乘,如第7行,結(jié)果回寫暫存,如第8行。指針偏移準(zhǔn)備下一輪計(jì)算,如第9、10行。依次循環(huán)往復(fù)直到計(jì)算完成。

    3.4 基于 HYB格式的改進(jìn)

    HYB格式使用ELLPACK格式和COO格式混合的方式,以更緊湊的方式存儲(chǔ)擁有非零元素密度大的行的稀疏矩陣,提升了存儲(chǔ)效率。圖2給出了矩陣C的HYB格式存儲(chǔ)結(jié)果。將第1行和第2行的元素5存儲(chǔ)為COO格式,使所需的存儲(chǔ)空間從60(6*5*2)個(gè)整型大小降低到54(6*4*2+6)個(gè)整型大小。

    Figure 2 Storage diagram based on HYB format圖2 基于HYB格式的存儲(chǔ)示意圖

    但是,行之間非零元素相差很大的情況不僅表現(xiàn)在擁有非零元素密度大的行,同時(shí)也體現(xiàn)在擁有非零元素密度小的行?;谶@一點(diǎn),本文提出改進(jìn)的HYB格式IHYB(Improved HYB format)。IHYB格式對(duì)非零元素密度低于IHYB分割閾值的行也使用COO格式存儲(chǔ)。此時(shí)ELLPACK格式所存儲(chǔ)元素的行號(hào)不能用自身所在的行來(lái)表示,于是引入bitarray數(shù)組記錄ELLPACK格式中每行元素在原始矩陣中的行號(hào)。對(duì)于HYB格式,在假設(shè)完全填充的ELLPACK格式計(jì)算速度比COO格式快3倍的情況下,通過(guò)經(jīng)驗(yàn)法則選擇數(shù)值K作為ELLPACK和COO之間的分割值,使得矩陣中具有K個(gè)以上非零元素?cái)?shù)的行數(shù)不少于M/3,其中M是矩陣總行數(shù)[13]。而對(duì)于IHYB格式,參照類似規(guī)則,閾值的確定使用迭代算法1。

    算法1確定IHYB分割閾值的算法

    輸入:稀疏矩陣每行非零元素?cái)?shù)。

    輸出:IHYB分割閾值。

    Step1對(duì)稀疏矩陣每行元素?cái)?shù)中的非零值從小到大排序,找到2/3分位點(diǎn)作為HYB閾值。

    Step2將HYB閾值/4作為IHYB分割閾值。

    Step3去除非零元素?cái)?shù)低于IHYB分割閾值的行,按照Step 1更新HYB閾值。

    Step4將更新后的HYB閾值/4作為最終的IHYB分割閾值。

    如HYB使用的經(jīng)驗(yàn)參數(shù),IHYB閾值中使用的參數(shù)2/3,1/4等,也是通過(guò)經(jīng)驗(yàn)法則確定。閾值的兩步迭代求解操作開銷包括對(duì)稀疏矩陣的2次遍歷(統(tǒng)計(jì)每行非零元素?cái)?shù)時(shí))和每行非零元素?cái)?shù)大小的排序。矩陣遍歷可以在壓縮存儲(chǔ)格式的轉(zhuǎn)換過(guò)程中完成,并不增加額外開銷。假設(shè)稀疏矩陣有m行k列,排序的復(fù)雜度為m*logm,一般而言不會(huì)超過(guò)矩陣元素?cái)?shù)m*k,可以忽略。因此,通常來(lái)說(shuō),閾值求解過(guò)程的開銷并不會(huì)影響算法性能。

    圖3給出了圖2中矩陣C的IHYB格式存儲(chǔ)結(jié)果。第6行的元素1也存儲(chǔ)為COO格式,同時(shí)bitarray數(shù)組指示了矩陣value中每行元素的行號(hào),使所需的存儲(chǔ)空間從HYB的54(6*4*2+6)個(gè)整型大小進(jìn)一步降低到45(4*4*2+4+9)個(gè)整型大小。

    Figure 3 Storage diagram based on IHYB format圖3 基于IHYB格式的存儲(chǔ)示意圖

    4 算法測(cè)試與分析

    本文實(shí)驗(yàn)使用Spike模擬器[18]環(huán)境,其中DCache設(shè)置大小為32 KB,ICache大小為32 KB,L2 Cache大小為128 KB,CPU主頻1 GHz,內(nèi)存使用4 GB。限定矩陣規(guī)模為4 KB,矩陣每行非零元素個(gè)數(shù)滿足正態(tài)分布,以空行率、稠密度和波動(dòng)度控制稀疏矩陣非零元素分布特性,以壓縮率和加速比衡量算法的空間效率和時(shí)間效率。

    4.1 稠密度的影響

    固定空行率為0.3,波動(dòng)度為0,改變稠密度觀察稀疏矩陣稠密度對(duì)SpMV算法性能的影響。隨著稠密度增加,非零元素?cái)?shù)量也增加,各算法所需存儲(chǔ)空間增加,計(jì)算時(shí)間增多,因此,加速比減小,壓縮率升高。整體上由加速比衡量的計(jì)算效率由高到低為CSR、IHYB、HYB和ELLPACK,如圖4所示。由壓縮率衡量的存儲(chǔ)效率由高到低為IHYB、CSR、HYB和ELLPACK,如圖5所示。由圖4可知,當(dāng)稠密度超過(guò)0.08時(shí),CSR的計(jì)算效率降低,IHYB的加速比反超CSR。原因在于CSR的段累加求和部分難以被向量化,當(dāng)非零元素?cái)?shù)量較多時(shí),計(jì)算效率受到影響開始下降。得益于較高的壓縮效率和較好的向量化程度,IHYB的加速比表現(xiàn)優(yōu)異。而ELLPACK中存儲(chǔ)了大量零元素,導(dǎo)致整體計(jì)算效率較低。

    Figure 4 Effect of density on speedup圖4 稠密度對(duì)加速比的影響

    Figure 5 Effect of density on compressibility圖5 稠密度對(duì)壓縮率的影響

    4.2 波動(dòng)度的影響

    固定空行率為0.3,稠密度為0.08,改變波動(dòng)度觀察稀疏矩陣波動(dòng)度對(duì)SpMV算法性能的影響。圖6和圖7別顯示了波動(dòng)度對(duì)加速比和壓縮率的影響。隨著波動(dòng)度增大,IHYB、HYB和ELLPACK的壓縮率不同程度增大,加速比不同程度減小,而CSR的壓縮率和加速比基本保持穩(wěn)定。由圖6可知,隨著波動(dòng)度增大,ELLPACK的加速比迅速降低。原因在于波動(dòng)度的增大導(dǎo)致ELLPACK格式壓縮率迅速升高,存儲(chǔ)效率降低,這點(diǎn)由圖7也可以看出。存儲(chǔ)的無(wú)效零元素大量增加,進(jìn)一步導(dǎo)致ELLPACK格式的計(jì)算效率下降,加速比走低。與ELLPACK格式不同的是,其他3種格式壓縮率較為穩(wěn)定。由圖7可知,CSR的壓縮率最為穩(wěn)定,基本不受波動(dòng)度影響,HYB和IHYB的壓縮率隨著波動(dòng)度增大緩慢增加,并且IHYB在壓縮效果上好于HYB格式。波動(dòng)度低于0.2時(shí),IHYB的存儲(chǔ)效率表現(xiàn)甚至好于CSR。由圖6可知,很大程度得益于此,在波動(dòng)度低于0.2時(shí),IHYB的計(jì)算效率也高于CSR。

    Figure 6 Effect of volatility on speedup圖6 波動(dòng)度對(duì)加速比的影響

    Figure 7 Effect of volatility on compressibility圖7 波動(dòng)度對(duì)壓縮率的影響

    圖8和圖9分別進(jìn)行了HYB格式和基于HYB格式改進(jìn)的IHYB在不同波動(dòng)度下,加速比和壓縮率的對(duì)比。平均而言,相比HYB格式,IHYB格式在加速比上提升了13%,壓縮率上降低了6%。壓縮率的降低趨勢(shì)和加速比的提升趨勢(shì)一致,從而體現(xiàn)了壓縮效率的提高導(dǎo)致計(jì)算效率隨之提高的規(guī)律。

    Figure 8 Comparison of speedup between HYB and IHYB圖8 HYB和IHYB的加速比對(duì)比

    Figure 9 Comparison of compressibility between HYB and IHYB圖9 HYB和IHYB的壓縮率對(duì)比

    5 結(jié)束語(yǔ)

    SpMV算法在科學(xué)計(jì)算中占有重要地位,實(shí)現(xiàn)并優(yōu)化基于RISC-V向量指令的SpMV算法也具有重要價(jià)值。本文首次利用RISC-V向量寄存器可配置性和向量尋址模式,結(jié)合CSR、ELLPACK和HYB存儲(chǔ)格式的特點(diǎn),實(shí)現(xiàn)了對(duì)應(yīng)的SpMV算法。在仿真環(huán)境下比較了各SpMV算法面對(duì)不同非零元素分布的稀疏矩陣,表現(xiàn)出的計(jì)算效率和存儲(chǔ)效率差異。同時(shí),針對(duì)HYB格式,提出了更為緊湊、穩(wěn)定的改進(jìn)格式IHYB。實(shí)驗(yàn)顯示,在非零元素分布變化時(shí),基于IHYB格式實(shí)現(xiàn)的SpMV表現(xiàn)出更為優(yōu)異的存儲(chǔ)效率和計(jì)算效率。但是,目前實(shí)現(xiàn)的算法都是基于單個(gè)RISC-V核心的。面對(duì)更為復(fù)雜的RISC-V多核處理器或異構(gòu)計(jì)算環(huán)境,如何充分發(fā)掘算法中的并行性,提高并行度,將是一個(gè)更為復(fù)雜深刻的挑戰(zhàn)和命題。

    猜你喜歡
    壓縮率指針閾值
    小波閾值去噪在深小孔鉆削聲發(fā)射信號(hào)處理中的應(yīng)用
    偷指針的人
    基于自適應(yīng)閾值和連通域的隧道裂縫提取
    水密封連接器尾部接電纜的優(yōu)化設(shè)計(jì)
    纏繞墊片產(chǎn)品質(zhì)量控制研究
    為什么表的指針都按照順時(shí)針方向轉(zhuǎn)動(dòng)
    比值遙感蝕變信息提取及閾值確定(插圖)
    河北遙感(2017年2期)2017-08-07 14:49:00
    多載波通信系統(tǒng)中CQI無(wú)損壓縮法研究
    分布式多視點(diǎn)視頻編碼在應(yīng)急通信中的應(yīng)用
    室內(nèi)表面平均氡析出率閾值探討
    老熟女久久久| 在线永久观看黄色视频| 欧美精品av麻豆av| 久久久久精品人妻al黑| 巨乳人妻的诱惑在线观看| 色尼玛亚洲综合影院| 丝袜人妻中文字幕| 女人高潮潮喷娇喘18禁视频| 天天躁日日躁夜夜躁夜夜| 一进一出抽搐gif免费好疼 | 国产一区二区三区综合在线观看| 99国产极品粉嫩在线观看| 欧美乱色亚洲激情| 制服人妻中文乱码| 女人精品久久久久毛片| 中文字幕人妻熟女乱码| 丰满饥渴人妻一区二区三| 一本大道久久a久久精品| 欧美大码av| 欧美日韩亚洲国产一区二区在线观看 | 香蕉国产在线看| 俄罗斯特黄特色一大片| 国产不卡一卡二| 精品人妻1区二区| 亚洲午夜精品一区,二区,三区| 久久人妻av系列| 大片电影免费在线观看免费| 国产区一区二久久| 女人精品久久久久毛片| 国产成人av教育| 欧美乱妇无乱码| 国产成人影院久久av| 啪啪无遮挡十八禁网站| 人妻一区二区av| 天堂俺去俺来也www色官网| av线在线观看网站| 国产不卡av网站在线观看| 一二三四社区在线视频社区8| av有码第一页| 国产精品.久久久| 国产黄色免费在线视频| 日本一区二区免费在线视频| av片东京热男人的天堂| 美女扒开内裤让男人捅视频| 日韩一卡2卡3卡4卡2021年| 黄片播放在线免费| 欧美激情久久久久久爽电影 | 欧美日韩成人在线一区二区| 99精品久久久久人妻精品| 欧美精品av麻豆av| 中文字幕最新亚洲高清| 精品欧美一区二区三区在线| 人人妻人人添人人爽欧美一区卜| 老汉色∧v一级毛片| 国产精品二区激情视频| 久久九九热精品免费| 亚洲情色 制服丝袜| 久久香蕉精品热| 1024香蕉在线观看| 国产成人影院久久av| 成人影院久久| 黄网站色视频无遮挡免费观看| 国产精品国产av在线观看| av网站免费在线观看视频| 欧美日韩亚洲国产一区二区在线观看 | 超碰成人久久| 久久精品熟女亚洲av麻豆精品| 国产成人精品无人区| 大码成人一级视频| 国产精品一区二区精品视频观看| 在线永久观看黄色视频| 国产精华一区二区三区| 人人妻人人添人人爽欧美一区卜| 午夜精品国产一区二区电影| 亚洲精品粉嫩美女一区| 视频区图区小说| 99国产精品99久久久久| 亚洲美女黄片视频| 黄频高清免费视频| 久久久国产一区二区| 成年版毛片免费区| 91麻豆精品激情在线观看国产 | 国产精品欧美亚洲77777| 下体分泌物呈黄色| 黄片小视频在线播放| 久久九九热精品免费| 午夜免费鲁丝| 天天躁夜夜躁狠狠躁躁| 久久中文字幕一级| 亚洲精品国产一区二区精华液| a级毛片黄视频| 国产精品影院久久| 精品免费久久久久久久清纯 | 99精国产麻豆久久婷婷| 99热国产这里只有精品6| 精品一区二区三区av网在线观看| 国产精品久久久久久精品古装| 黄色视频不卡| 国产精品秋霞免费鲁丝片| 热re99久久国产66热| 国产在线一区二区三区精| 黄色视频,在线免费观看| 国产亚洲欧美98| 亚洲自偷自拍图片 自拍| 国产精品1区2区在线观看. | 亚洲av成人不卡在线观看播放网| 免费在线观看影片大全网站| 法律面前人人平等表现在哪些方面| 国产高清videossex| 国产男女内射视频| 老司机深夜福利视频在线观看| 大型黄色视频在线免费观看| 少妇裸体淫交视频免费看高清 | 国产成人av教育| 9191精品国产免费久久| av中文乱码字幕在线| 精品国产乱码久久久久久男人| 可以免费在线观看a视频的电影网站| 一边摸一边抽搐一进一出视频| 日韩欧美一区视频在线观看| 一区二区三区精品91| 午夜免费鲁丝| 日本五十路高清| 亚洲欧美一区二区三区黑人| 亚洲精品国产色婷婷电影| 在线观看www视频免费| 天堂√8在线中文| x7x7x7水蜜桃| 亚洲一区中文字幕在线| 亚洲精品一二三| 一级作爱视频免费观看| 女人爽到高潮嗷嗷叫在线视频| 亚洲第一av免费看| 日韩大码丰满熟妇| 在线观看免费高清a一片| 天天躁狠狠躁夜夜躁狠狠躁| 夜夜爽天天搞| 人人妻人人添人人爽欧美一区卜| 精品人妻1区二区| 满18在线观看网站| 91老司机精品| 婷婷精品国产亚洲av在线 | 激情视频va一区二区三区| 亚洲欧美色中文字幕在线| 在线看a的网站| 国产人伦9x9x在线观看| 久久久久久人人人人人| 亚洲九九香蕉| 高清在线国产一区| 亚洲 国产 在线| 狠狠婷婷综合久久久久久88av| 国产男女内射视频| 精品一区二区三区视频在线观看免费 | av天堂在线播放| 久久人妻熟女aⅴ| 成人18禁在线播放| 日韩免费av在线播放| 久久人妻福利社区极品人妻图片| 色尼玛亚洲综合影院| 老司机在亚洲福利影院| 国产在线观看jvid| 久久狼人影院| 极品教师在线免费播放| 电影成人av| 国产成人免费观看mmmm| 国产精品电影一区二区三区 | 亚洲aⅴ乱码一区二区在线播放 | 日韩一卡2卡3卡4卡2021年| 欧美性长视频在线观看| 高清视频免费观看一区二区| 性少妇av在线| 国产乱人伦免费视频| 天堂√8在线中文| 夜夜夜夜夜久久久久| 国产精品99久久99久久久不卡| 99re6热这里在线精品视频| e午夜精品久久久久久久| 香蕉久久夜色| 久久中文看片网| 极品人妻少妇av视频| 欧美日韩瑟瑟在线播放| 亚洲熟妇中文字幕五十中出 | 丝袜美足系列| 日韩 欧美 亚洲 中文字幕| 中文欧美无线码| 国产成人精品久久二区二区免费| 国产不卡一卡二| 国产欧美日韩一区二区精品| 国产成+人综合+亚洲专区| 国产主播在线观看一区二区| 麻豆国产av国片精品| 不卡av一区二区三区| 精品国产美女av久久久久小说| 中文字幕人妻熟女乱码| 美女国产高潮福利片在线看| 亚洲熟妇熟女久久| 国产精品亚洲av一区麻豆| 女人爽到高潮嗷嗷叫在线视频| 欧美 日韩 精品 国产| 19禁男女啪啪无遮挡网站| 在线av久久热| 老汉色∧v一级毛片| 丝袜美腿诱惑在线| 国产高清videossex| 乱人伦中国视频| 一级,二级,三级黄色视频| 免费一级毛片在线播放高清视频 | 午夜精品国产一区二区电影| 亚洲一码二码三码区别大吗| 国产激情欧美一区二区| 80岁老熟妇乱子伦牲交| 免费在线观看亚洲国产| 麻豆成人av在线观看| 亚洲人成77777在线视频| 在线播放国产精品三级| 免费看a级黄色片| 这个男人来自地球电影免费观看| 美国免费a级毛片| 国产一卡二卡三卡精品| 最新在线观看一区二区三区| 欧美亚洲日本最大视频资源| av网站免费在线观看视频| 少妇猛男粗大的猛烈进出视频| 久久精品aⅴ一区二区三区四区| 18禁裸乳无遮挡免费网站照片 | 满18在线观看网站| 女警被强在线播放| 黄色丝袜av网址大全| 国产精品1区2区在线观看. | 19禁男女啪啪无遮挡网站| 亚洲avbb在线观看| 91字幕亚洲| 亚洲国产欧美一区二区综合| 精品卡一卡二卡四卡免费| 1024香蕉在线观看| 亚洲综合色网址| 老司机靠b影院| 国产成人精品久久二区二区91| 久久人人爽av亚洲精品天堂| 美女午夜性视频免费| 国产精品美女特级片免费视频播放器 | 男人操女人黄网站| 午夜91福利影院| 国产一卡二卡三卡精品| 老司机福利观看| 久久久久久人人人人人| a在线观看视频网站| 国产精品久久久久成人av| 99国产精品免费福利视频| 一级片'在线观看视频| 国产精品综合久久久久久久免费 | 一进一出好大好爽视频| 日本撒尿小便嘘嘘汇集6| 亚洲成人免费电影在线观看| 日本a在线网址| 国产激情欧美一区二区| 18禁国产床啪视频网站| 久久久国产成人精品二区 | 欧美激情 高清一区二区三区| 在线av久久热| 嫩草影视91久久| 国产黄色免费在线视频| 欧美人与性动交α欧美软件| 五月开心婷婷网| 在线播放国产精品三级| 久久国产精品男人的天堂亚洲| 一级作爱视频免费观看| 777久久人妻少妇嫩草av网站| 国产精品偷伦视频观看了| 两性午夜刺激爽爽歪歪视频在线观看 | 精品久久久久久久毛片微露脸| 欧美久久黑人一区二区| 久久精品熟女亚洲av麻豆精品| 极品人妻少妇av视频| 精品一区二区三区视频在线观看免费 | 女人久久www免费人成看片| 在线播放国产精品三级| av在线播放免费不卡| 后天国语完整版免费观看| 怎么达到女性高潮| 国产高清激情床上av| 亚洲人成电影观看| 在线av久久热| 窝窝影院91人妻| 美女视频免费永久观看网站| 日韩欧美三级三区| 母亲3免费完整高清在线观看| 国产国语露脸激情在线看| 在线国产一区二区在线| 91成人精品电影| 国产成人精品久久二区二区91| 丰满迷人的少妇在线观看| 久久久精品区二区三区| 母亲3免费完整高清在线观看| 国精品久久久久久国模美| 精品亚洲成国产av| 最新的欧美精品一区二区| 成人影院久久| 亚洲欧美激情在线| 91精品三级在线观看| 国产精品秋霞免费鲁丝片| 国产精品乱码一区二三区的特点 | 看黄色毛片网站| 午夜福利视频在线观看免费| 国产麻豆69| 国产精品久久久久久精品古装| 日韩人妻精品一区2区三区| 欧美性长视频在线观看| 午夜亚洲福利在线播放| 亚洲一区二区三区不卡视频| 老司机影院毛片| 怎么达到女性高潮| 天堂动漫精品| 欧美另类亚洲清纯唯美| 久久狼人影院| 亚洲avbb在线观看| 亚洲国产看品久久| 久久久久久亚洲精品国产蜜桃av| 999久久久国产精品视频| 成年人黄色毛片网站| 国产亚洲av高清不卡| 天天操日日干夜夜撸| 亚洲一区二区三区不卡视频| 亚洲九九香蕉| 国产成+人综合+亚洲专区| 一个人免费在线观看的高清视频| 美女福利国产在线| 国产精品.久久久| 一级毛片女人18水好多| 亚洲av成人av| 亚洲色图综合在线观看| 岛国毛片在线播放| 窝窝影院91人妻| 亚洲av成人av| 亚洲色图综合在线观看| 国产欧美日韩精品亚洲av| 最新美女视频免费是黄的| 午夜福利乱码中文字幕| 国产精品免费大片| 人妻 亚洲 视频| 悠悠久久av| 久久人妻福利社区极品人妻图片| 午夜91福利影院| 捣出白浆h1v1| 亚洲色图综合在线观看| 大香蕉久久网| 一级毛片精品| 美女高潮到喷水免费观看| 亚洲欧美日韩高清在线视频| 99精品欧美一区二区三区四区| 黄色丝袜av网址大全| 在线观看免费视频网站a站| 精品欧美一区二区三区在线| 亚洲国产看品久久| 夫妻午夜视频| 久久精品国产清高在天天线| 亚洲欧洲精品一区二区精品久久久| 成年动漫av网址| 精品欧美一区二区三区在线| 久久久国产欧美日韩av| 三级毛片av免费| 三上悠亚av全集在线观看| 中文字幕人妻熟女乱码| 国产精品亚洲一级av第二区| 捣出白浆h1v1| 一级片'在线观看视频| 精品久久久精品久久久| 在线免费观看的www视频| 免费不卡黄色视频| 超碰成人久久| 中文字幕人妻丝袜一区二区| 少妇的丰满在线观看| 午夜两性在线视频| 黄色 视频免费看| 18在线观看网站| 久久久久久亚洲精品国产蜜桃av| 免费黄频网站在线观看国产| 国产成人av教育| 亚洲精品在线美女| 一区在线观看完整版| 亚洲精品国产区一区二| 精品熟女少妇八av免费久了| 嫩草影视91久久| 很黄的视频免费| 亚洲精品在线观看二区| 老司机午夜福利在线观看视频| 日韩成人在线观看一区二区三区| 国产亚洲欧美精品永久| 一进一出好大好爽视频| 精品国产乱子伦一区二区三区| 欧美黑人欧美精品刺激| 夜夜躁狠狠躁天天躁| 高清视频免费观看一区二区| 啦啦啦视频在线资源免费观看| 五月开心婷婷网| 色播在线永久视频| 国产av精品麻豆| 国产在视频线精品| 交换朋友夫妻互换小说| 国产亚洲精品久久久久久毛片 | 久久久久久人人人人人| 性少妇av在线| 美女午夜性视频免费| www.精华液| 亚洲视频免费观看视频| 最近最新中文字幕大全电影3 | 亚洲国产中文字幕在线视频| 国产精品国产av在线观看| xxx96com| 国产精品.久久久| 精品国产乱子伦一区二区三区| 19禁男女啪啪无遮挡网站| 热re99久久国产66热| 99国产综合亚洲精品| 又黄又粗又硬又大视频| a级毛片在线看网站| 在线观看66精品国产| 18禁裸乳无遮挡免费网站照片 | 国产精品 国内视频| 欧美成人午夜精品| 一区在线观看完整版| 自线自在国产av| 极品人妻少妇av视频| 欧美av亚洲av综合av国产av| 亚洲国产中文字幕在线视频| 一本一本久久a久久精品综合妖精| 看免费av毛片| 久久中文字幕人妻熟女| 手机成人av网站| 又大又爽又粗| 欧美 日韩 精品 国产| 美女 人体艺术 gogo| 波多野结衣av一区二区av| av网站在线播放免费| 国产蜜桃级精品一区二区三区 | 亚洲精品国产精品久久久不卡| 精品高清国产在线一区| 亚洲国产精品一区二区三区在线| 国产亚洲av高清不卡| 欧美色视频一区免费| 国产深夜福利视频在线观看| 99久久综合精品五月天人人| 在线永久观看黄色视频| 国产激情欧美一区二区| 国产亚洲精品久久久久5区| 欧美日韩瑟瑟在线播放| 国产精品成人在线| 国产在线一区二区三区精| 中出人妻视频一区二区| 80岁老熟妇乱子伦牲交| 久久人妻av系列| 精品国产一区二区三区四区第35| 69av精品久久久久久| 中文字幕av电影在线播放| 国产又爽黄色视频| 一夜夜www| 国产成人av激情在线播放| 80岁老熟妇乱子伦牲交| av福利片在线| 老熟妇仑乱视频hdxx| 操美女的视频在线观看| 精品视频人人做人人爽| 精品久久久久久久久久免费视频 | 在线看a的网站| 亚洲欧美日韩另类电影网站| 久久香蕉激情| 国产野战对白在线观看| www.精华液| 天堂动漫精品| 国产亚洲精品一区二区www | ponron亚洲| 女人被狂操c到高潮| 日韩欧美一区二区三区在线观看 | 两个人免费观看高清视频| 久久热在线av| 黄色视频,在线免费观看| 9热在线视频观看99| 亚洲五月婷婷丁香| 国产高清视频在线播放一区| 久久久久久亚洲精品国产蜜桃av| 国产精品久久久人人做人人爽| 亚洲在线自拍视频| 天天添夜夜摸| 久热爱精品视频在线9| 欧美日韩视频精品一区| videos熟女内射| 男女高潮啪啪啪动态图| 国产精品.久久久| 欧美精品啪啪一区二区三区| 香蕉国产在线看| 大型黄色视频在线免费观看| 大片电影免费在线观看免费| 十八禁网站免费在线| av电影中文网址| 免费看十八禁软件| 一边摸一边做爽爽视频免费| 免费看十八禁软件| 在线观看66精品国产| 欧美精品人与动牲交sv欧美| 热99国产精品久久久久久7| 国产av精品麻豆| 9191精品国产免费久久| 国产三级黄色录像| av线在线观看网站| 桃红色精品国产亚洲av| 国产精品亚洲一级av第二区| 午夜福利在线观看吧| 成年人午夜在线观看视频| 免费女性裸体啪啪无遮挡网站| 老司机深夜福利视频在线观看| 91av网站免费观看| 欧美人与性动交α欧美软件| 国产精品久久久久久人妻精品电影| 国产精品久久久久久精品古装| 欧美黄色淫秽网站| 亚洲av美国av| 日韩免费高清中文字幕av| 中国美女看黄片| 午夜精品国产一区二区电影| 国产激情久久老熟女| 亚洲精品美女久久av网站| 免费在线观看视频国产中文字幕亚洲| 久久精品亚洲av国产电影网| 午夜福利视频在线观看免费| 国产在线精品亚洲第一网站| 久久中文字幕人妻熟女| 亚洲成人免费电影在线观看| 欧美丝袜亚洲另类 | 日韩免费高清中文字幕av| 久久中文字幕一级| 高清欧美精品videossex| 少妇裸体淫交视频免费看高清 | 中文字幕另类日韩欧美亚洲嫩草| 色综合婷婷激情| 国产精品av久久久久免费| 亚洲专区字幕在线| 中文字幕人妻丝袜制服| 午夜福利影视在线免费观看| 国产有黄有色有爽视频| 欧美性长视频在线观看| 男女下面插进去视频免费观看| 精品福利观看| 亚洲一区二区三区欧美精品| 麻豆乱淫一区二区| 欧美精品一区二区免费开放| 久久久久久久精品吃奶| 色老头精品视频在线观看| 久久亚洲真实| 老熟妇乱子伦视频在线观看| 1024视频免费在线观看| 午夜两性在线视频| 久久久国产成人免费| av线在线观看网站| 成年女人毛片免费观看观看9 | 啪啪无遮挡十八禁网站| 97人妻天天添夜夜摸| 欧美日韩成人在线一区二区| 午夜两性在线视频| 国产色视频综合| 婷婷成人精品国产| 一进一出抽搐动态| 午夜福利视频在线观看免费| 欧美另类亚洲清纯唯美| 午夜福利一区二区在线看| xxx96com| 国产三级黄色录像| 黑人操中国人逼视频| 久久精品国产亚洲av高清一级| 9热在线视频观看99| 这个男人来自地球电影免费观看| 久久香蕉精品热| 亚洲色图 男人天堂 中文字幕| 一进一出抽搐gif免费好疼 | 日韩有码中文字幕| av天堂在线播放| 两个人看的免费小视频| 亚洲七黄色美女视频| 日韩免费av在线播放| 在线播放国产精品三级| 丝袜美腿诱惑在线| 黄色 视频免费看| 欧美中文综合在线视频| 亚洲性夜色夜夜综合| 亚洲精品在线美女| 国产亚洲欧美精品永久| 国产免费现黄频在线看| 黄网站色视频无遮挡免费观看| 狂野欧美激情性xxxx| 久久久水蜜桃国产精品网| 国产精品1区2区在线观看. | 国产欧美日韩一区二区三区在线| 黑人猛操日本美女一级片| 叶爱在线成人免费视频播放| 欧美亚洲日本最大视频资源| 欧美中文综合在线视频| 精品国产一区二区三区久久久樱花| 热re99久久精品国产66热6| 人妻久久中文字幕网| 色94色欧美一区二区| 久久久精品区二区三区| 国产亚洲欧美精品永久| 免费高清在线观看日韩| 不卡一级毛片| 多毛熟女@视频| 国产精品自产拍在线观看55亚洲 | 日本撒尿小便嘘嘘汇集6| 亚洲久久久国产精品| 国产精品国产高清国产av | 人妻 亚洲 视频| 一本综合久久免费| av福利片在线| 18禁国产床啪视频网站| 亚洲国产精品合色在线| 久久久国产成人免费| 他把我摸到了高潮在线观看|