• <tr id="yyy80"></tr>
  • <sup id="yyy80"></sup>
  • <tfoot id="yyy80"><noscript id="yyy80"></noscript></tfoot>
  • 99热精品在线国产_美女午夜性视频免费_国产精品国产高清国产av_av欧美777_自拍偷自拍亚洲精品老妇_亚洲熟女精品中文字幕_www日本黄色视频网_国产精品野战在线观看 ?

    GF-4大氣校正并行算法研究

    2021-06-08 03:54:18王子翔李正強(qiáng)光潔佘璐
    關(guān)鍵詞:氣溶膠線程反射率

    王子翔,李正強(qiáng)?,光潔,佘璐

    (1中國科學(xué)院空天信息創(chuàng)新研究院,國家環(huán)境保護(hù)衛(wèi)星遙感重點(diǎn)實驗室,北京 100101;2中國科學(xué)院大學(xué),北京 100049;3寧夏大學(xué)資源環(huán)境學(xué)院,寧夏 銀川 750021)

    0 引言

    高分辨率對地觀測系統(tǒng)是國務(wù)院確定的中長期科學(xué)和技術(shù)發(fā)展規(guī)劃重大專項之一[1],2013年4月,高分一號衛(wèi)星成功發(fā)射,拉開了高分系列衛(wèi)星發(fā)射的序幕[2]。高分四號衛(wèi)星(GF-4)于2015年12月29日在西昌衛(wèi)星發(fā)射中心成功發(fā)射,是我國第一顆地球同步軌道遙感衛(wèi)星,搭載了一臺可見光50 m、紅外波段400 m分辨率、大于400 km幅寬的凝視相機(jī),具備可見光和紅外成像能力,通過指向控制實現(xiàn)對中國及周邊地區(qū)的觀測,在民用衛(wèi)星遙感方面具有劃時代的意義[3]。

    GF-4數(shù)據(jù)應(yīng)用的關(guān)鍵是快速、精確地進(jìn)行大氣校正,得到地表反射率(Surface reflection,SR)產(chǎn)品,保證數(shù)據(jù)產(chǎn)品及時應(yīng)用于各個行業(yè)部門[4],產(chǎn)品生產(chǎn)效率與精度影響到數(shù)據(jù)應(yīng)用水平和使用價值。GF-4衛(wèi)星數(shù)據(jù)波段較少,空間分辨率與時間分辨率較高,可見光近紅外通道單景影像數(shù)據(jù)量達(dá)到GB級別,整軌數(shù)據(jù)量有上百GB,隨著GF-4數(shù)據(jù)廣泛應(yīng)用于局地精準(zhǔn)天氣預(yù)報、減災(zāi)救災(zāi)、森林與農(nóng)作物監(jiān)測等領(lǐng)域[5]。GF-4等衛(wèi)星數(shù)據(jù)的串行處理算法無法滿足在應(yīng)急與應(yīng)用領(lǐng)域的快速處理需求,考慮反演算法通常有較高的計算復(fù)雜性,遙感反演結(jié)合圖形處理器(GPU)加速的并行處理方法已成為當(dāng)前研究熱點(diǎn)。

    國內(nèi)外已有較多關(guān)于GPU結(jié)合遙感計算的研究,周海芳等[6]選取GPU程序面向存儲級的優(yōu)化策略并結(jié)合遙感圖像配準(zhǔn)程序,提出并行設(shè)計模型與面向存儲級的優(yōu)化策略,適用于遙感圖像配準(zhǔn)領(lǐng)域,最大加速比達(dá)到了19.9倍;肖聆元等[7]基于CUDA架構(gòu)的快速正射糾正算法,在GPU設(shè)備上并行運(yùn)算并利用DOM和DEM對RPC模型進(jìn)行精化處理;Song等[8]基于GPU實現(xiàn)從地形圖的掃描彩色圖像重新連接輪廓線的方法,具有更好的性能和更高的連接速率;王化喆等[9]為解決遙感圖像前期處理算法計算時間較長的問題,開展了基于RPC模型實現(xiàn)遙感處理幾何校正的并行加速與基于SIFT特征提取的并行加速研究,基于數(shù)據(jù)的并行劃分實現(xiàn)了遙感圖像的幾何校正和SIFT特征提取算法的加速;湯媛媛等[10]構(gòu)建CPU/GPU異構(gòu)模式,對高光譜遙感影像MNF降維并行加速實現(xiàn)了異構(gòu)模式在遙感高光譜領(lǐng)域的并行優(yōu)化。以上結(jié)合GPU并行算法的遙感研究一定程度上提高了遙感計算的效率,但目前結(jié)合GF-4等國產(chǎn)高分辨率衛(wèi)星的GPU并行加速應(yīng)用研究較少。

    大氣校正方法主要包括基于圖像特征模型、地表實測線性回歸模型和輻射傳輸模型等。其中輻射傳輸模型反演地物反射率可描述大氣散射、吸收等過程[11]。目前大氣校正處理應(yīng)用較廣泛的6 S模型是美國馬里蘭大學(xué)地理系在5 S[12]模型基礎(chǔ)上研發(fā)的,該模型在氣體透過率、瑞利散射及氣溶膠光學(xué)厚度的計算等方面進(jìn)行了改進(jìn),在MODIS產(chǎn)品大氣校正計算方面表現(xiàn)尤為突出[13]。2005年6SV較之前的模型主要增加了輻射極化的計算[14]。國內(nèi)外相關(guān)研究中,Sever等[15]利用大氣校正的多角度實現(xiàn)(MAIAC)是通過使用地表雙向反射系數(shù)(BRF)的解析計算而使用格林函數(shù)的半解析算法;Wang等[16]使用MODIS日地表反射產(chǎn)品(MOD09GA)作為評估Landsat地表反射產(chǎn)品準(zhǔn)確性的參考,證明MODIS SR(Surface reflectance)產(chǎn)品和Landsat SR產(chǎn)品具有很強(qiáng)的一致性;Eric等[17]提出MODIS表觀反射率乘積計算出的OLI儀器的1/2通道和4通道的地表反射率的算法;簡化的高分辨率MODIS氣溶膠檢索算法(SARA)[18]利用(AERONET)站的氣溶膠特性以及MOD09GA level-2的每日地表反射率產(chǎn)品進(jìn)行參數(shù)化,驗證具有足夠本地先驗信息的高分辨率大氣校正。

    針對GF-4等國產(chǎn)衛(wèi)星的大氣校正產(chǎn)品快速生產(chǎn)需求,與國產(chǎn)高分辨率衛(wèi)星結(jié)合GPU加速的應(yīng)用研究較少的現(xiàn)狀,本文基于GPU對GF-4大氣校正進(jìn)行并行算法設(shè)計,大氣校正算法參考輻射傳遞方程參數(shù)化的先驗知識,針對算法可并行步驟完成基于CUDA-C的內(nèi)核設(shè)計與映射,對線程、寄存器等進(jìn)行性能優(yōu)化。GF-4大氣校正算法原理:利用MODIS DT算法所使用的氣溶膠類型[19],考慮輻射傳遞方程的參數(shù)化與地表類型參數(shù)化,基于MODIS地表反射率數(shù)據(jù)產(chǎn)品獲得不同地表類型的GF-4可見光通道(0.47μm和0.67μm)與0.87μm瑞利校正大氣層頂(TOA)反射率之間的統(tǒng)計關(guān)系,使用Levenberg-Marquardt算法進(jìn)行迭代得到最佳氣溶膠光學(xué)厚度(AOD)[20],基于AOD結(jié)果與構(gòu)建的6SV模型LUT(查找表)計算地表反射率,并利用Landsat-8地表反射率產(chǎn)品對GF-4產(chǎn)品進(jìn)行精度驗證。

    1 GF-4數(shù)據(jù)及大氣校正算法簡介

    1.1 GF-4數(shù)據(jù)

    GF-4數(shù)據(jù)包括可見光、近紅外與中紅外6個波段,其中可見光及近紅外波段的空間分辨率為50 m,中紅外波段空間分辨率400 m,波段信息如表1所示??紤]GF-4搭載全色多光譜傳感器(PMS)與紅外傳感器(IRS)兩個有效載荷,測試數(shù)據(jù)選擇2016年6、7月份的GF-4 PMS數(shù)據(jù),研究區(qū)域為中國長江中下游地區(qū),如圖1所示。表1也給出了MODIS的可見光及近紅外波段的波段信息,包含250 m分辨率的近紅外與紅色波段,以及500 m分辨率的藍(lán)綠波段。

    圖1 GF-4研究區(qū)域長江中下游地區(qū)Fig.1 GF-4 study area in the middle and lower reaches of the Yangtze River

    表1 GF-4數(shù)據(jù)波段與分辨率Table 1 Band and resolution of GF-4 data

    1.2 大氣校正算法

    GF-4大氣校正算法主要包括三個功能步驟,分別是估計地表反射率、反演AOD與計算地表反射率,大氣校正算法的流程圖如圖2所示。

    圖2 GF-4大氣校正算法流程圖Fig.2 flowchart of GF-4 surface reflectance calculation

    (1)估計地表反射率

    TOA表觀反射率的計算,需要輸入估計的地表反射率,以及氣溶膠類型等參數(shù)。已有研究基于MODIS DB的氣溶膠反演算法[21],通過計算不同波長之間表觀反射率的統(tǒng)計關(guān)系,準(zhǔn)確估計地表反射率,證明MODIS數(shù)據(jù)產(chǎn)品進(jìn)行地表參數(shù)化、氣溶膠光學(xué)厚度反演與地表反射率計算的可行性[22]??紤]GF-4數(shù)據(jù)的可見光、近紅外波段信息以及MODIS數(shù)據(jù)相近的可見光、近紅外波段信息,基于MODIS數(shù)據(jù)作為先驗知識進(jìn)行地表反射率估算。先前研究驗證了地表覆蓋類型受歸一化植被指數(shù)(Normalized difference vegetation index,NDVI)的影響,可見光波段(0.67μm和0.47μm)與近紅外、紅外波段(0.86、1.6、2.1、3.75μm)的地表反射率存在一定線性關(guān)系[18]。拓展考慮GF-4數(shù)據(jù),歸一化植被指數(shù)計算公式為

    式中:C0.86和C0.67是近紅外與可見光波段的瑞利散射校正TOA反射率。

    R0.67和R0.47為估計的地表反射率,其分別為

    式中:s0.67/0.86和s0.47/0.86分別是0.67μm與0.86μm、0.47μm與0.86μm的回歸方程斜率,y0.67/0.86與y0.47/0.86是回歸方程偏移量,Ψ 是散射角,a0、a1、a2、b0、b1、c0、c1、c2、d0、d1等系數(shù)為最小二乘方法擬合真實地表反射率確定的回歸系數(shù),對于每種土地覆蓋類型,在MODIS DB的算法基礎(chǔ)上,將其分為三個NDVI組的四個季節(jié)的回歸系數(shù),分別為:0.10

    針對TOA表觀反射率計算的氣溶膠類型輸入部分,地表反射率與氣溶膠的耦合關(guān)系使得在進(jìn)行大氣校正時,氣溶膠的剝離存在一定難度,常用大氣校正算法根據(jù)地理位置與時間選擇一個限定緯度、地表的氣溶膠模式,地表類型基于MODIS土地覆蓋產(chǎn)品(MCD12C1)對70°E~130°E,15°N~55°N地區(qū)進(jìn)行統(tǒng)計分析。氣溶膠類型包含三個可見光波段的氣溶膠模型,根據(jù)MODIS C6 Dark-Target氣溶膠光學(xué)厚度反演算法設(shè)置,包括弱吸收、中吸收和強(qiáng)吸收三種,其中不對稱因子g和單次散射反照率(SSA)被進(jìn)一步參數(shù)化為不同的氣溶膠類型,經(jīng)過數(shù)值計算的多項式形式,通過0.55μm的AOD來設(shè)置g、SSA和Angstrom系數(shù)。

    (2)氣溶膠光學(xué)厚度反演算法

    假設(shè)地表為均勻朗伯面,大氣中分子與氣溶膠散射及氣體吸收水平一致,衛(wèi)星傳感器接收到的輻射由大氣路徑輻射、透過大氣的目標(biāo)地物直接反射輻射、經(jīng)由大氣散射的目標(biāo)地物反射輻射、背景地物散射輻射以及背景地物多次地表散射輻射構(gòu)成。

    TOA表觀反射率受到來自氣溶膠的影響與地表反射率的影響??紤]GF-4大氣校正算法,GF-4波段數(shù)據(jù)為可見光與近紅外波段,通過瑞利反射率“ρRay”和氣溶膠反射率“ρa(bǔ)er”計算大氣路徑反射率,考慮偏振效應(yīng)時的瑞利散射,與散射角及入射方向有關(guān),瑞利光學(xué)厚度(ROD)取決于入射波長和地表高程。在不考慮地表高程和壓強(qiáng)影響時,Liang等[23]提出的瑞利光學(xué)厚度近似公式可滿足精度需求。研究區(qū)域長江中下游地區(qū)高程較小,根據(jù)之前的研究基礎(chǔ),參考瑞利光學(xué)厚度求解的近似公式,氣溶膠散射可參數(shù)化為氣溶膠單次散射反照率、氣溶膠相函數(shù)的函數(shù),其中氣溶膠相位函數(shù)使用了Henyey-Greenstein氣溶膠相位函數(shù)。通過Levenberg-Marquardt迭代算法計算AOD,即

    尋找使得衛(wèi)星觀測的TOA表觀反射率與計算TOA表觀反射率之間殘差最小的AOD值,在0.47μm和0.67μm之間的價值函數(shù)最小化來獲得最佳AOD,基于此計算AOD結(jié)果。

    (3)計算地表反射率

    基于AOD輸出結(jié)果,將其作為地表反射率查找的已知輸入數(shù)據(jù),對AOD結(jié)果數(shù)據(jù)進(jìn)行空間插值,結(jié)合GF-4 TOA反射率數(shù)據(jù)以及6SV查找表計算地表反射率。大氣輻射傳輸模型計算速度較為緩慢,為提高反演速度,使用6SV矢量輻射傳遞模型建立查找表。6SV模型包含三個可見光波段(0.46,0.55,0.64μm)的氣溶膠類型。GF-4是靜止軌道衛(wèi)星,衛(wèi)星角度與成像區(qū)域經(jīng)緯度相關(guān),中國區(qū)域觀測天頂角范圍約0°~70°),方位角范圍約70°~90°。查找表中設(shè)置15個太陽天頂角和觀測天頂角(0°~84°,Δ=6°),16個相對方位角(0°~180°,Δ=12°),高程設(shè)置為0,氣溶膠模式設(shè)置的類型選擇取決于研究區(qū)域的地理位置,通過線性插值計算不存在的幾何角度。

    1.3 GF-4地表反射率產(chǎn)品精度驗證

    選擇高空間分辨率、高精度的USGS Landsat-8 SR產(chǎn)品和GF-4 SR產(chǎn)品進(jìn)行比較,兩種SR產(chǎn)品具有綠、紅和藍(lán)三個可見光波段。為了地表反射率SR產(chǎn)品比較的精確性,糾正由不同的光譜響應(yīng)函數(shù)引起的誤差[24]。精準(zhǔn)比較GF-4 PMS產(chǎn)品的反射率,考慮光譜差異并使用光譜匹配因子,光譜匹配因子的計算公式為

    式中:fpms(λ)和fOLI(λ)分別是GF-4 PMS和Landsat-8 OLI的相對光譜響應(yīng)函數(shù)。λ1~λ2是GF-4 PMS的光譜范圍;λ3~λ4是Landsat-8 OLI的光譜范圍。GF-4 PMS和Landsat-8 OLI之間的光譜匹配因子a如表2所示。

    表2 可見光波段的光譜匹配因子Table 2 Spectral matching factor in the visible light band

    Landsat-8 SR數(shù)據(jù)日期為2016年7月30日,GF-4數(shù)據(jù)日期為2016年7月23日,通過裁剪得到相同經(jīng)緯度范圍的數(shù)據(jù),選擇的數(shù)據(jù)具有良好的時空匹配且受云影響較小,考慮Landsat-8 SR產(chǎn)品的空間分辨率為30 m,GF-4 SR產(chǎn)品的空間分辨率為50 m,對GF-4 SR產(chǎn)品和Landat-8 SR產(chǎn)品進(jìn)行時空匹配,將數(shù)據(jù)重新采樣到相同的分辨率,對數(shù)據(jù)進(jìn)行定量分析和驗證,分別對三個可見光波段(紅、綠、藍(lán))的地表反射率結(jié)果逐次隨機(jī)選擇1000~10000個像元進(jìn)行對比分析,如圖3所示,圖中每個圓圈代表一個像元點(diǎn),對RMSE進(jìn)行計算得到結(jié)果分別為0.02、0.01和0.02。與Landsat-8 SR產(chǎn)品相比,基于GF-4的地表反射率結(jié)果,在三個可見光波段的對比中RMSE均小于0.02,具有較好的精度。

    圖3 GF-4 SR產(chǎn)品與Landsat-8 SR產(chǎn)品在三個可見光波段紅(a)、綠(b)、藍(lán)(c)的對比結(jié)果Fig.3 Comparison of GF-4 SR product and Landsat-8 SR product in visible light bands of red(a),green(b)and blue(c)

    2 并行計算分析與設(shè)計

    遙感數(shù)據(jù)具有多波段的特性與幾何特性,遙感數(shù)據(jù)處理流程一般包含原始數(shù)據(jù)讀取、數(shù)據(jù)預(yù)處理、數(shù)據(jù)深加工處理及遙感專題信息提取等。基于GPU的遙感計算流程為:將遙感影像讀入CPU主機(jī)內(nèi)存;CPU端將數(shù)據(jù)拷貝至GPU全局內(nèi)存;CPU端指令啟動kernel內(nèi)核函數(shù),GPU端多線程并行處理;將GPU處理結(jié)果拷貝至CPU主機(jī)內(nèi)存;CPU端將處理結(jié)果輸出為影像。

    遙感并行計算為基于遙感數(shù)據(jù)提取基本遙感參數(shù),結(jié)合知識庫信息等對一定空間、時間尺度的數(shù)據(jù)進(jìn)行計算。以GF-4地表反射率計算作為遙感任務(wù)實例,結(jié)合遙感計算并行模型,探討GF-4地表反射率計算的并行加速實現(xiàn)。

    2.1 GF-4計算流程并行特征

    GF-4地表反射率計算的C++程序包含5個功能步驟,分別為數(shù)據(jù)讀取、云掩膜、估計地表反射率、AOD計算、地表反射率計算,針對各步驟進(jìn)行并行特征的執(zhí)行時間與數(shù)據(jù)I/O分析。數(shù)據(jù)讀取步驟為讀取GF-4原始影響數(shù)據(jù)信息;云掩膜步驟中逐像元計算3×3窗口的絕對標(biāo)準(zhǔn)差,以識別是否是云像元;地表反射率估計步驟包括瑞利校正計算、NDVI計算、基于地表類型與NDVI值計算0.67μm和0.47μm波段的地表反射率等;AOD計算步驟實現(xiàn)TOA表觀反射率計算、Levenberg-Marquardt最優(yōu)估計等功能,得到空間分辨率為1 km的AOD結(jié)果產(chǎn)品;地表反射率計算步驟實現(xiàn)AOD結(jié)果插值、基于查找表計算等,得到空間分辨率為50 m的地表反射率產(chǎn)品。

    計算環(huán)境為Intel(R)Xeon E5-1650 at 3.5GHz Workstation工作站系統(tǒng),測試數(shù)據(jù)為2016年7月23日的GF-4 PMS數(shù)據(jù)“GF4PMSE111.3N28.820160723L1A0000122970”。統(tǒng)計5次測試數(shù)據(jù)執(zhí)行時間的平均值,得到各步驟的執(zhí)行時間與數(shù)據(jù)I/O分析分別如圖4(a)、(b)所示。圖4(a)中執(zhí)行時間最長的是計算地表反射率步驟,其執(zhí)行占比為56.4%,數(shù)據(jù)讀取步驟執(zhí)行時間占比為1.8%,云掩膜執(zhí)行步驟的時間占比為4.5%,估計地表反射率的執(zhí)行時間占比為12.6%,AOD計算步驟執(zhí)行時間占比為24.7%。圖4(b)中云掩膜、估計地表反射率(SR)步驟的計算占比高,對其進(jìn)行并行優(yōu)化;計算AOD、計算SR步驟的執(zhí)行時間長且屬于計算密集型步驟,需要進(jìn)行算法并行設(shè)計及優(yōu)化。對于數(shù)據(jù)讀取步驟,其數(shù)據(jù)I/O占比極高,對其進(jìn)行串行執(zhí)行不做具體探討。

    圖4 GF-4計算各步驟執(zhí)行時間(a)及數(shù)據(jù)I/O情況(b)Fig.4 Runtime(a)and I/O(b)of GF-4 calculation steps

    2.2 GF-4算法并行設(shè)計

    基于GF-4地表反射率計算流程各步驟執(zhí)行時間、數(shù)據(jù)I/O的分析,其中云掩膜、估計SR、計算AOD、計算SR等步驟基于GPU進(jìn)行并行優(yōu)化。

    考慮遙感計算的空間域并行分析的三個主要類別為基于點(diǎn)或像元的計算、局部計算以及非局部或不規(guī)則計算等,AOD反演的可并行步驟細(xì)粒度計算特征及其內(nèi)核映射方式如表3所示。

    表3 GF-4可并行步驟內(nèi)核映射方式Table 3 GF-4 parallel step kernel mapping method

    空間域分解依據(jù)反演各步驟的輸入數(shù)據(jù),選擇基于單個像元、鄰域或不規(guī)則區(qū)域的計算。其中云掩膜步驟,算法參考基于暗像元的方法,每個像元的3×3窗口進(jìn)行絕對標(biāo)準(zhǔn)差計算,屬于局部計算的方式且其計算單位為逐像元方式;估計SR步驟包括瑞利校正計算、NDVI計算、估計地表反射率等功能,屬于逐像元計算的方式;AOD計算步驟為逐像元的計算TOA表觀反射率并進(jìn)行迭代計算得到AOD結(jié)果,屬于點(diǎn)計算的方式;計算SR步驟為逐像元基于查找表進(jìn)行計算等?;贕PU的并行計算設(shè)計和實現(xiàn),將單個像元的所有計算分配到對應(yīng)的一個GPU線程。

    對于可并行步驟,影像數(shù)據(jù)采用一維數(shù)組存儲,通過全局內(nèi)存實現(xiàn)合并訪問,所有線程訪問連續(xù)對齊的內(nèi)存塊,對全局內(nèi)存的連續(xù)對齊訪問,能夠基于線程束的方式將多個線程的訪問地址合并,從而減少內(nèi)存的獲取次數(shù),提高吞吐量。

    針對估計SR、AOD計算等兩個計算內(nèi)核的步驟,在計算時會將部分結(jié)果存儲于全局內(nèi)存,后續(xù)內(nèi)核計算的時候可以調(diào)用,從而減少了總線PCIe(Peripheral component interface express)的CPU-GPU數(shù)據(jù)傳輸。

    對于云掩膜步驟的鄰域計算,像元計算需要訪問鄰近像元值,全局內(nèi)存的訪問延遲為400~600 cycles,而共享內(nèi)存同一線程塊的所有線程都可對進(jìn)行訪問并讀寫操作,其訪問速度快于全局內(nèi)存,因此將重復(fù)訪問的數(shù)據(jù)存儲于共享內(nèi)存中。云掩膜為逐像元基于3×3滑動窗口計算絕對標(biāo)準(zhǔn)差,當(dāng)線程塊包含M×N個線程時,其所需訪問的數(shù)據(jù)包含(M+2)×(N+2)個像元,頻繁的全局內(nèi)存訪問降低計算效率,采用數(shù)據(jù)復(fù)制策略,利用共享內(nèi)存存儲每個線程塊所需的(M+2)×(N+2)像元。

    3 算法實現(xiàn)與分析

    基于GPU并行加速的地表反射率計算,計算環(huán)境包括CPU與GPU配置如表4所示。

    表4 CPU-GPU計算環(huán)境Table 4 CPU-GPU computing environment

    選擇2016年7月23日的GF-4原始數(shù)據(jù),其像元數(shù)為10240×10240個。對實驗數(shù)據(jù)進(jìn)行裁剪,分別獲得 1000×1000、2560×2560、5120×2560、5120×5120、10240×5120、10240×10240 六組不同大小的遙感數(shù)據(jù),基于六組數(shù)據(jù)對反演算法進(jìn)行實驗與分析。

    3.1 AOD反演并行算法實現(xiàn)

    考慮AOD反演流程中可并行處理步驟與串行處理步驟,基于GPU并行加速實現(xiàn)完整的AOD反演執(zhí)行流程如圖5所示。

    圖5 GPU-CPU執(zhí)行步驟情況Fig.5 GPU-CPU performance steps

    主要步驟包括從遙感影像數(shù)據(jù)存儲設(shè)備讀取MODIS數(shù)據(jù)至CPU主機(jī)內(nèi)存;CPU端執(zhí)行AOD反演串行步驟,同時初始化GPU變量,開辟GPU端內(nèi)存;遙感數(shù)據(jù)從CPU內(nèi)存拷貝至GPU端全局內(nèi)存;定義GPU端的線程組織;GPU設(shè)備啟動線程執(zhí)行計算內(nèi)核;將存儲于GPU全局內(nèi)存的計算結(jié)果拷貝至CPU端內(nèi)存;CPU端結(jié)果數(shù)據(jù)寫入輸出文件并輸出至存儲設(shè)備。對于估計SR、計算AOD等包含多個計算內(nèi)核的步驟,重復(fù)中間步驟,針對不同計算內(nèi)核進(jìn)行對應(yīng)數(shù)據(jù)準(zhǔn)備和拷貝,啟動計算內(nèi)核并完成計算過程;輸入和輸出圖像步驟,數(shù)據(jù)存儲在GPU全局內(nèi)存。

    3.2 性能分析與優(yōu)化

    基于GPU的AOD反演算法,從GPU線程、寄存器兩個方面進(jìn)行性能分析并優(yōu)化。

    (1)GPU線程

    以計算SR步驟為例,研究GPU線程組織即線程塊與線程網(wǎng)格的設(shè)置對計算性能的影響,選取最佳的線程設(shè)置,線程塊設(shè)置與對應(yīng)數(shù)據(jù)執(zhí)行時間如圖6所示。

    圖6 各組影像基于不同線程塊設(shè)置的執(zhí)行時間Fig.6 Each group of images is based on the runtime set by different thread blocks

    計算環(huán)境的Tesla K40 GPU上每個線程塊最大線程數(shù)為256(每個線程使用編譯器默認(rèn)的114個寄存器),將GPU線程塊設(shè)置為2維,在1×1、2×2、4×4、8×8和16×16線程塊上執(zhí)行6組不同大小的影像數(shù)據(jù)計算時,線程塊8×8時各組遙感影像獲得最佳計算性能,8×8為最優(yōu)線程設(shè)置。

    (2)寄存器使用

    設(shè)置最優(yōu)線程塊8×8,調(diào)用nvcc使得線程寄存器數(shù)量在50~255之間變動,得到相對性能如圖7所示。

    圖7 各組影像基于不同寄存器設(shè)置的執(zhí)行時間Fig.7 Each group of images is based on the runtime set by different register

    編譯器默認(rèn)每個線程使用114個寄存器,當(dāng)設(shè)置寄存器數(shù)量大于114時,各組遙感數(shù)據(jù)執(zhí)行性能隨寄存器數(shù)量的增加而呈現(xiàn)下降趨勢;寄存器數(shù)量小于114時,除1000×1000大小的數(shù)據(jù)相對性能隨寄存器增加而增加,其余大小數(shù)據(jù)相對性能隨寄存器增加呈現(xiàn)先減后增的趨勢。

    減少每個線程的寄存器數(shù)量可允許更多并行執(zhí)行的線程。如將每個線程使用的寄存器數(shù)量減少至57寄存器/線程,每個線程塊可以設(shè)置為32×32線程,增加并行性但部分?jǐn)?shù)據(jù)需要從比寄存器有更長延遲訪問的存儲器讀取,相比最優(yōu)8×8線程配置性能降低30%~40%,因此選擇不手動設(shè)置每個線程的最大寄存器數(shù)目,使用編譯器默認(rèn)的114寄存器。

    3.3 性能比較

    對6組不同大小影像數(shù)據(jù)進(jìn)行了完整的地表反射率計算,其中串行執(zhí)行的數(shù)據(jù)讀取步驟在CPU端實現(xiàn),使用GNU編譯器gcc和編譯優(yōu)化選項“-O2”?;贕PU的并行算法通過CUDA-C實現(xiàn)。為保證遙感反演的精度,未使用“-use_fast_math”等編譯選項。CPU串行執(zhí)行和GPU并行加速執(zhí)行的運(yùn)行結(jié)果如表5所示。六組影像基于CPU串行執(zhí)行與GPU加速執(zhí)行的執(zhí)行時間比較如圖8所示。

    表5 各組影像分別基于CPU與GPU的執(zhí)行時間與加速比Table 5 Each group of images based on the runtime and speed-up ratio of CPU and GPU

    圖8 各組影像的基于CPU與GPU的執(zhí)行時間Fig.8 Each group of images based on the runtime of CPU and GPU

    GPU總執(zhí)行時間包括GPU驅(qū)動程序啟動、數(shù)據(jù)輸入、主機(jī)到設(shè)備的數(shù)據(jù)傳輸、GPU計算、從設(shè)備到主機(jī)的數(shù)據(jù)傳輸以及數(shù)據(jù)輸出的總和。CPU順序執(zhí)行僅包括數(shù)據(jù)輸入、計算以及數(shù)據(jù)輸出,沒有其他數(shù)據(jù)傳輸與驅(qū)動啟動。由圖8可知相比順序執(zhí)行,GPU端計算時長與總時長大幅縮短。

    針對加速比(Speedup)對性能提升進(jìn)行分析,其中加速比是同一個任務(wù)在單處理器系統(tǒng)和并行處理器系統(tǒng)中運(yùn)行消耗的時間的比值,用來衡量并行系統(tǒng)或程序并行化的性能和效果,加速比計算公式為

    式中:T1指順序執(zhí)行的時間,Tp為并行算法執(zhí)行時間。GPU端的計算加速比為計算時長與順序執(zhí)行時長的比值,總加速比為基于GPU計算的總時長包括了CPU-GPU之間數(shù)據(jù)傳輸與順序執(zhí)行時長的比值。GPU端的總加速比與計算加速比結(jié)果如圖9所示。

    圖9 各組影像的基于CPU與GPU的加速比Fig.9 Each group of images based on the speedup of GPU all and calculation

    對于六組不同大小的遙感數(shù)據(jù),隨著影像數(shù)據(jù)的增大,基于GPU并行算法的計算加速比可達(dá)到49.8??紤]數(shù)據(jù)I/O時,總執(zhí)行時間隨影像像元數(shù)的增多而增大,影像的平均總加速比為31.0??偧铀俦入S影像增大而增大,當(dāng)影像計算規(guī)模增大時,GPU啟動、CPU和GPU端的數(shù)據(jù)傳輸?shù)葧r間開銷在總執(zhí)行時間中的占比降低,隨著影像規(guī)模增大到一定程度,額外的時間開銷可忽略,此時GPU遙感反演并行算法的總加速比趨于穩(wěn)定。當(dāng)影像范圍較小如共有1000×1000像元數(shù)時,額外開銷占比過大,此時GPU計算的加速比最低。

    考慮遙感反演流程關(guān)鍵步驟的執(zhí)行時間與加速比情況,對10240×10240像元數(shù)的GF-4數(shù)據(jù)進(jìn)行如表6所示。

    表6 各步驟分別基于CPU與GPU的執(zhí)行時間與加速比Table 6 Each steps based on the runtime and speed-up ratio of CPU and GPU

    分析GF-4大氣校正算法可并行步驟的加速比,云掩膜、估計SR、AOD計算、計算SR等步驟分別獲得了28.7、45.0、60.7、94.6的計算加速比,各步驟的平均加速比為57.3,均取得較高性能提升。

    3.4 GPU功耗與能耗

    功耗是遙感數(shù)據(jù)反演計算時要重點(diǎn)考慮的指標(biāo),通常GPU具有極高的能耗而不適于遙感在軌處理和分析。采用功耗測量儀Christ CLM1000 Professional(Plus)對應(yīng)用運(yùn)行時的功率進(jìn)行采樣測量如表7所示,選擇10240×10240的一景GF-4 PMS遙感影像進(jìn)行地表反射率計算。

    表7 不同計算環(huán)境能耗情況Table 7 Energy consumption of different computing environments

    表7中,CPU多核執(zhí)行在1、2、4、8、16個線程時的最大記錄功率分別為34.9、55.1、66.5、93.4、137.7 W,當(dāng)服務(wù)更多線程時,運(yùn)行時間將大大減少。GPU的平均功耗約為101.3 W,其范圍分別相當(dāng)于CPU上的八個線程版本,并未達(dá)到其峰值功率220 W。對于所有測試,在統(tǒng)計信息中都排除了CPU主機(jī)端的功耗,多核與GPU加速的該部分功耗相等,而GPU閑置功耗僅存在于GPU節(jié)點(diǎn)中。GPU執(zhí)行的平均功耗為80 W,接近于8線程多核的功耗開銷。能耗基于功耗的運(yùn)行時間積分,對功耗逐秒采樣累加得到近似的執(zhí)行能耗,如圖10所示。

    圖10 不同計算環(huán)境能耗情況Fig.10 Energy consumption of different computing environments

    GPU并行執(zhí)行的1、2、4、8、16線程時的能耗分別為67.7、59.9、47.2、41.4、39.1 kJ,而GPU并行執(zhí)行的AOD反演模型計算因執(zhí)行時間較短,總能耗僅為6.4 kJ,僅占能耗最低的8線程多核并行的15.5%。

    4 結(jié)論

    針對GF-4衛(wèi)星實現(xiàn)高效率大氣校正、快速得到地表反射率產(chǎn)品的需求,對GF-4大氣校正并行算法進(jìn)行研究,大氣校正算法基于輻射傳輸模型,在MODIS DT、DB算法基礎(chǔ)上考慮地表參數(shù)化與氣溶膠參數(shù)等,對最優(yōu)AOD進(jìn)行計算并作為6SV查找表輸入得到地表反射率產(chǎn)品。針對反演流程的可并行步驟,基于CUDA-C完成內(nèi)核的設(shè)計與實現(xiàn),針對線程組織、寄存器使用等進(jìn)行了分析與優(yōu)化,詳細(xì)分析了GPU并行加速的結(jié)果精度、計算性能、能耗等問題。結(jié)果表明基于GPU加速的地表反射率計算結(jié)果在可見光波段的典型地物類型對比中精度高,在執(zhí)行性能與計算能耗上顯示出優(yōu)勢,單景實驗數(shù)據(jù)取得57.3的加速比,總體能耗僅占CPU多核并行的15.5%。GF-4地表反射率并行算法,產(chǎn)品取得較高精度,算法具有較好加速效果,后續(xù)工作還需進(jìn)一步針對GF-4等國產(chǎn)衛(wèi)星的其他專題產(chǎn)品應(yīng)用進(jìn)行相關(guān)并行優(yōu)化。

    猜你喜歡
    氣溶膠線程反射率
    影響Mini LED板油墨層反射率的因素
    近岸水體異源遙感反射率產(chǎn)品的融合方法研究
    海洋通報(2022年4期)2022-10-10 07:40:26
    具有顏色恒常性的光譜反射率重建
    氣溶膠傳播之謎
    氣溶膠中210Po測定的不確定度評定
    化學(xué)腐蝕硅表面結(jié)構(gòu)反射率影響因素的研究*
    電子器件(2017年2期)2017-04-25 08:58:37
    淺談linux多線程協(xié)作
    四川盆地秋季氣溶膠與云的相關(guān)分析
    大氣氣溶膠成核監(jiān)測
    Linux線程實現(xiàn)技術(shù)研究
    久久精品夜夜夜夜夜久久蜜豆| 99久久九九国产精品国产免费| 久久精品国产99精品国产亚洲性色| 99久久精品国产亚洲精品| 亚洲av电影不卡..在线观看| www国产在线视频色| 亚洲第一电影网av| 国产又黄又爽又无遮挡在线| 亚洲国产欧美网| 国产亚洲精品久久久久久毛片| 色噜噜av男人的天堂激情| 18禁在线播放成人免费| 欧美一级毛片孕妇| 在线观看舔阴道视频| 久久久久久九九精品二区国产| 丰满人妻一区二区三区视频av | 在线观看日韩欧美| 人妻丰满熟妇av一区二区三区| 九九在线视频观看精品| 国产精品一区二区三区四区久久| 在线观看日韩欧美| 一级毛片高清免费大全| 久久久久免费精品人妻一区二区| 国产一区二区三区在线臀色熟女| 中文字幕av成人在线电影| 国产精品综合久久久久久久免费| 国产精品99久久99久久久不卡| 免费无遮挡裸体视频| 网址你懂的国产日韩在线| 亚洲一区二区三区色噜噜| 成人av一区二区三区在线看| 国产成人系列免费观看| 波多野结衣高清作品| 制服丝袜大香蕉在线| 日韩高清综合在线| 老司机午夜十八禁免费视频| 蜜桃亚洲精品一区二区三区| 精品国内亚洲2022精品成人| 激情在线观看视频在线高清| ponron亚洲| 精品国产三级普通话版| 国产欧美日韩一区二区三| 国产精品一区二区三区四区久久| 丰满乱子伦码专区| 天天躁日日操中文字幕| 99久久成人亚洲精品观看| 国语自产精品视频在线第100页| 日韩 欧美 亚洲 中文字幕| 日本a在线网址| 99久久精品国产亚洲精品| 国产亚洲精品综合一区在线观看| av国产免费在线观看| 51午夜福利影视在线观看| 久久久国产成人精品二区| 国产亚洲精品av在线| 99国产极品粉嫩在线观看| a级毛片a级免费在线| 国产精品美女特级片免费视频播放器| 脱女人内裤的视频| 午夜福利在线在线| 99国产精品一区二区蜜桃av| 国产 一区 欧美 日韩| 熟女电影av网| 国产黄a三级三级三级人| 别揉我奶头~嗯~啊~动态视频| 看免费av毛片| 久久欧美精品欧美久久欧美| 亚洲性夜色夜夜综合| 久久久久性生活片| 伊人久久精品亚洲午夜| 18禁黄网站禁片免费观看直播| 69人妻影院| 精品午夜福利视频在线观看一区| 黄色成人免费大全| 十八禁网站免费在线| 欧美色视频一区免费| 啦啦啦观看免费观看视频高清| 悠悠久久av| 琪琪午夜伦伦电影理论片6080| 无人区码免费观看不卡| 久久久久久久久中文| 国产精品影院久久| 欧美成人性av电影在线观看| 亚洲第一电影网av| 国产爱豆传媒在线观看| 999久久久精品免费观看国产| 在线观看免费视频日本深夜| 波多野结衣高清无吗| 日韩欧美一区二区三区在线观看| 国产一区二区激情短视频| 亚洲av熟女| 精品熟女少妇八av免费久了| 狂野欧美激情性xxxx| 制服人妻中文乱码| 亚洲无线观看免费| 亚洲国产高清在线一区二区三| 美女免费视频网站| 99精品欧美一区二区三区四区| eeuss影院久久| 成人一区二区视频在线观看| 舔av片在线| 色播亚洲综合网| 日韩有码中文字幕| 亚洲av电影不卡..在线观看| 免费一级毛片在线播放高清视频| 成年版毛片免费区| 国产乱人视频| 在线观看一区二区三区| 免费高清视频大片| 免费人成视频x8x8入口观看| 精品熟女少妇八av免费久了| 国产在视频线在精品| 国产黄片美女视频| 亚洲精品粉嫩美女一区| 人妻久久中文字幕网| 一个人看的www免费观看视频| 一进一出好大好爽视频| 非洲黑人性xxxx精品又粗又长| 搡老熟女国产l中国老女人| 亚洲自拍偷在线| 岛国在线免费视频观看| 看免费av毛片| 无遮挡黄片免费观看| 91在线精品国自产拍蜜月 | 国产午夜精品久久久久久一区二区三区 | 久久精品国产亚洲av香蕉五月| 国产成人影院久久av| 夜夜躁狠狠躁天天躁| 国产乱人视频| 老鸭窝网址在线观看| 久久人妻av系列| 99久久久亚洲精品蜜臀av| 久久久精品欧美日韩精品| 亚洲av不卡在线观看| 三级男女做爰猛烈吃奶摸视频| 99精品欧美一区二区三区四区| 无人区码免费观看不卡| 波野结衣二区三区在线 | 日本三级黄在线观看| 夜夜看夜夜爽夜夜摸| 亚洲内射少妇av| 在线观看日韩欧美| 亚洲欧美日韩高清在线视频| 制服人妻中文乱码| 制服丝袜大香蕉在线| 中亚洲国语对白在线视频| av女优亚洲男人天堂| 精品99又大又爽又粗少妇毛片 | 国产一区二区激情短视频| 高清毛片免费观看视频网站| 国产单亲对白刺激| 丁香六月欧美| 日韩免费av在线播放| 噜噜噜噜噜久久久久久91| 欧美成人免费av一区二区三区| 国产视频一区二区在线看| 国产国拍精品亚洲av在线观看 | 国产午夜福利久久久久久| 亚洲av日韩精品久久久久久密| 国产精品亚洲av一区麻豆| 一级黄色大片毛片| 国内毛片毛片毛片毛片毛片| 观看免费一级毛片| 亚洲精品成人久久久久久| 十八禁人妻一区二区| 国产精品野战在线观看| 男女下面进入的视频免费午夜| 桃红色精品国产亚洲av| 老司机深夜福利视频在线观看| 他把我摸到了高潮在线观看| 夜夜夜夜夜久久久久| 亚洲精品一卡2卡三卡4卡5卡| 久久精品影院6| 夜夜夜夜夜久久久久| 变态另类成人亚洲欧美熟女| 乱人视频在线观看| 国产在线精品亚洲第一网站| 人人妻人人澡欧美一区二区| 久久午夜亚洲精品久久| 国产免费男女视频| 九色成人免费人妻av| 久久精品国产99精品国产亚洲性色| 日本成人三级电影网站| 深爱激情五月婷婷| 两个人看的免费小视频| 少妇丰满av| 欧美乱妇无乱码| 国产伦在线观看视频一区| 久久99热这里只有精品18| 成人av在线播放网站| 两性午夜刺激爽爽歪歪视频在线观看| АⅤ资源中文在线天堂| 日韩欧美在线二视频| 国内少妇人妻偷人精品xxx网站| 性色av乱码一区二区三区2| 国产综合懂色| eeuss影院久久| 99在线视频只有这里精品首页| 久久精品亚洲精品国产色婷小说| 哪里可以看免费的av片| 亚洲第一电影网av| 成人三级黄色视频| 国产成人aa在线观看| 色老头精品视频在线观看| 久久精品影院6| 欧美日韩亚洲国产一区二区在线观看| av中文乱码字幕在线| 色精品久久人妻99蜜桃| 两性午夜刺激爽爽歪歪视频在线观看| 久久久久久国产a免费观看| 精品久久久久久成人av| 在线观看av片永久免费下载| 午夜免费激情av| 香蕉久久夜色| 国产一区二区在线av高清观看| 亚洲av电影不卡..在线观看| 国产在视频线在精品| 网址你懂的国产日韩在线| 免费av毛片视频| 国产精品 国内视频| 国产精品久久电影中文字幕| 欧美日韩瑟瑟在线播放| 91av网一区二区| 一个人免费在线观看电影| 国产视频内射| 免费av观看视频| 午夜福利在线在线| 精品免费久久久久久久清纯| 亚洲不卡免费看| 九九在线视频观看精品| 亚洲av免费在线观看| 女警被强在线播放| 一本综合久久免费| 精华霜和精华液先用哪个| 中亚洲国语对白在线视频| 国产成人a区在线观看| 大型黄色视频在线免费观看| 超碰av人人做人人爽久久 | 欧美日韩综合久久久久久 | 麻豆一二三区av精品| 国产野战对白在线观看| 一进一出抽搐动态| av在线蜜桃| 欧美在线一区亚洲| 久久精品国产亚洲av涩爱 | 国产成人av教育| 一级黄色大片毛片| 99久久无色码亚洲精品果冻| 国产精品亚洲美女久久久| 亚洲精品美女久久久久99蜜臀| 99热这里只有精品一区| 美女大奶头视频| 别揉我奶头~嗯~啊~动态视频| 亚洲av二区三区四区| 噜噜噜噜噜久久久久久91| 国产在线精品亚洲第一网站| 国产精品久久久人人做人人爽| e午夜精品久久久久久久| 国产一级毛片七仙女欲春2| 女人十人毛片免费观看3o分钟| 看片在线看免费视频| 久久久成人免费电影| 国产97色在线日韩免费| 国产精品影院久久| 51国产日韩欧美| 全区人妻精品视频| 亚洲精品久久国产高清桃花| 少妇熟女aⅴ在线视频| 欧美日韩中文字幕国产精品一区二区三区| 精品久久久久久久久久免费视频| 香蕉av资源在线| 首页视频小说图片口味搜索| 99国产极品粉嫩在线观看| 日韩亚洲欧美综合| 午夜福利在线观看免费完整高清在 | 亚洲精品影视一区二区三区av| 欧美日本视频| 午夜福利免费观看在线| 99久久精品一区二区三区| 一进一出好大好爽视频| 国产精品永久免费网站| 搡女人真爽免费视频火全软件 | 亚洲精品在线美女| 国产欧美日韩精品亚洲av| 久久午夜亚洲精品久久| 亚洲欧美日韩高清在线视频| 老汉色∧v一级毛片| 亚洲无线在线观看| 欧美丝袜亚洲另类 | 成人av在线播放网站| 欧美+日韩+精品| ponron亚洲| 九九在线视频观看精品| 91字幕亚洲| 国产黄a三级三级三级人| 午夜精品久久久久久毛片777| 国产伦一二天堂av在线观看| 97人妻精品一区二区三区麻豆| 免费人成视频x8x8入口观看| 国产成人a区在线观看| 人人妻人人澡欧美一区二区| 99热6这里只有精品| 麻豆久久精品国产亚洲av| 国模一区二区三区四区视频| 波野结衣二区三区在线 | 丰满人妻熟妇乱又伦精品不卡| 亚洲国产精品sss在线观看| 无人区码免费观看不卡| 亚洲精品亚洲一区二区| 国产成人av教育| 日韩欧美 国产精品| 男人的好看免费观看在线视频| 网址你懂的国产日韩在线| 一夜夜www| 久久久久免费精品人妻一区二区| 欧美性猛交╳xxx乱大交人| 可以在线观看毛片的网站| 欧美黑人欧美精品刺激| 99热这里只有是精品50| 中文字幕人妻丝袜一区二区| 夜夜躁狠狠躁天天躁| 18禁国产床啪视频网站| 国产av一区在线观看免费| 国产不卡一卡二| 国产69精品久久久久777片| 97碰自拍视频| 国产日本99.免费观看| 精品电影一区二区在线| 18禁黄网站禁片午夜丰满| 身体一侧抽搐| 亚洲国产色片| 中文字幕av成人在线电影| 亚洲国产色片| 中文字幕av成人在线电影| 国产真实乱freesex| 精品一区二区三区视频在线观看免费| 毛片女人毛片| 悠悠久久av| 亚洲欧美日韩高清专用| ponron亚洲| 午夜精品久久久久久毛片777| 国产一区二区三区视频了| 十八禁人妻一区二区| 变态另类成人亚洲欧美熟女| 俺也久久电影网| 女同久久另类99精品国产91| 日韩高清综合在线| 动漫黄色视频在线观看| tocl精华| 久久久久久九九精品二区国产| 午夜精品久久久久久毛片777| 精品一区二区三区人妻视频| 在线观看免费午夜福利视频| 国产精品久久久久久亚洲av鲁大| 夜夜夜夜夜久久久久| 国产男靠女视频免费网站| 99热6这里只有精品| 亚洲av成人不卡在线观看播放网| 亚洲人成伊人成综合网2020| 国产av在哪里看| x7x7x7水蜜桃| 亚洲乱码一区二区免费版| av片东京热男人的天堂| 国产真实伦视频高清在线观看 | 热99re8久久精品国产| 成人国产一区最新在线观看| 久久久久性生活片| 三级国产精品欧美在线观看| 亚洲av一区综合| 亚洲精品日韩av片在线观看 | 欧美日韩黄片免| 天堂√8在线中文| 狂野欧美激情性xxxx| 午夜福利高清视频| 少妇人妻精品综合一区二区 | 国产真人三级小视频在线观看| 亚洲精品456在线播放app | 亚洲精品一区av在线观看| 国产日本99.免费观看| 亚洲真实伦在线观看| 夜夜夜夜夜久久久久| 久久国产乱子伦精品免费另类| 国产单亲对白刺激| 亚洲美女视频黄频| 久久国产精品人妻蜜桃| 九色成人免费人妻av| 成人一区二区视频在线观看| 噜噜噜噜噜久久久久久91| 国产熟女xx| 国产精品女同一区二区软件 | 中文字幕av在线有码专区| a级毛片a级免费在线| 好看av亚洲va欧美ⅴa在| 偷拍熟女少妇极品色| 欧美乱色亚洲激情| 亚洲国产精品成人综合色| 亚洲精品一卡2卡三卡4卡5卡| 亚洲黑人精品在线| 夜夜看夜夜爽夜夜摸| 国产精品嫩草影院av在线观看 | 久9热在线精品视频| 欧美日韩黄片免| 91久久精品国产一区二区成人 | 琪琪午夜伦伦电影理论片6080| 波多野结衣巨乳人妻| 天天添夜夜摸| 成人国产综合亚洲| 国产成人影院久久av| 亚洲一区二区三区色噜噜| 可以在线观看的亚洲视频| 欧美又色又爽又黄视频| 狂野欧美激情性xxxx| 一a级毛片在线观看| 高清在线国产一区| 久久精品影院6| 午夜免费男女啪啪视频观看 | 欧美最新免费一区二区三区 | 两人在一起打扑克的视频| 亚洲成人精品中文字幕电影| 亚洲国产精品久久男人天堂| 美女高潮喷水抽搐中文字幕| 一区二区三区国产精品乱码| 少妇裸体淫交视频免费看高清| 国内精品一区二区在线观看| 高清毛片免费观看视频网站| 日本免费一区二区三区高清不卡| 国产亚洲欧美98| 五月伊人婷婷丁香| 国产aⅴ精品一区二区三区波| 久久精品国产亚洲av香蕉五月| www国产在线视频色| 天堂影院成人在线观看| 99国产精品一区二区三区| 久久久久久久久久黄片| 国产不卡一卡二| 三级毛片av免费| 国产精品亚洲一级av第二区| 国产一区二区亚洲精品在线观看| 亚洲第一欧美日韩一区二区三区| 成人av一区二区三区在线看| 在线观看午夜福利视频| 亚洲欧美日韩东京热| 九九热线精品视视频播放| 国产在线精品亚洲第一网站| 久久精品国产亚洲av香蕉五月| 成年女人毛片免费观看观看9| av中文乱码字幕在线| 熟女人妻精品中文字幕| 国产99白浆流出| 18禁裸乳无遮挡免费网站照片| 婷婷亚洲欧美| 欧美日韩乱码在线| 18+在线观看网站| 19禁男女啪啪无遮挡网站| 制服人妻中文乱码| 久久这里只有精品中国| 成年女人毛片免费观看观看9| 亚洲真实伦在线观看| 日本撒尿小便嘘嘘汇集6| 久久精品国产自在天天线| 国产又黄又爽又无遮挡在线| 九九热线精品视视频播放| 少妇熟女aⅴ在线视频| 日韩欧美精品免费久久 | 一a级毛片在线观看| 久久国产精品人妻蜜桃| 噜噜噜噜噜久久久久久91| 岛国在线观看网站| 久久九九热精品免费| 久久欧美精品欧美久久欧美| 99热这里只有精品一区| 长腿黑丝高跟| 成人永久免费在线观看视频| 欧美成人一区二区免费高清观看| 亚洲专区中文字幕在线| 成熟少妇高潮喷水视频| 国产高清视频在线观看网站| 免费一级毛片在线播放高清视频| 欧美成人性av电影在线观看| 欧美日韩黄片免| e午夜精品久久久久久久| 婷婷六月久久综合丁香| 国产精品野战在线观看| 欧美zozozo另类| 成人特级黄色片久久久久久久| 黄色片一级片一级黄色片| av国产免费在线观看| 国产色爽女视频免费观看| 亚洲av日韩精品久久久久久密| 757午夜福利合集在线观看| 日本一二三区视频观看| 精品人妻1区二区| 亚洲精品乱码久久久v下载方式 | 亚洲国产精品合色在线| 久久久色成人| 美女免费视频网站| 久久久精品大字幕| 午夜亚洲福利在线播放| 亚洲 欧美 日韩 在线 免费| 两人在一起打扑克的视频| 黄色女人牲交| 看黄色毛片网站| 夜夜爽天天搞| 日韩人妻高清精品专区| 欧美中文综合在线视频| 19禁男女啪啪无遮挡网站| 国产精品乱码一区二三区的特点| 一本一本综合久久| 亚洲精品日韩av片在线观看 | 黄色女人牲交| 真人做人爱边吃奶动态| 欧美黑人巨大hd| 国产爱豆传媒在线观看| 精品久久久久久成人av| 成年女人永久免费观看视频| 成年版毛片免费区| 18禁黄网站禁片午夜丰满| 男女下面进入的视频免费午夜| 精品国内亚洲2022精品成人| 成人午夜高清在线视频| 两个人的视频大全免费| 精品日产1卡2卡| 亚洲国产欧洲综合997久久,| 日本熟妇午夜| 国产淫片久久久久久久久 | www.999成人在线观看| 又黄又粗又硬又大视频| 成年人黄色毛片网站| 亚洲美女黄片视频| 国产成人a区在线观看| 免费观看人在逋| 国产极品精品免费视频能看的| av片东京热男人的天堂| 日韩欧美精品v在线| 狂野欧美激情性xxxx| 午夜福利在线在线| 婷婷丁香在线五月| 91av网一区二区| 久久草成人影院| 美女免费视频网站| 国产精品久久电影中文字幕| 久久99热这里只有精品18| 高潮久久久久久久久久久不卡| 亚洲av第一区精品v没综合| 人妻夜夜爽99麻豆av| 成人亚洲精品av一区二区| 少妇的逼好多水| 99久久九九国产精品国产免费| 日韩有码中文字幕| 亚洲成人中文字幕在线播放| 中文字幕久久专区| 91久久精品国产一区二区成人 | 俄罗斯特黄特色一大片| 午夜福利在线观看免费完整高清在 | 亚洲久久久久久中文字幕| 成年女人永久免费观看视频| av福利片在线观看| 国产视频内射| 国产高清视频在线观看网站| 国产伦精品一区二区三区四那| 日本 欧美在线| 99国产极品粉嫩在线观看| 最近最新中文字幕大全电影3| 欧美日韩乱码在线| 每晚都被弄得嗷嗷叫到高潮| 亚洲国产中文字幕在线视频| 中文字幕熟女人妻在线| 一区二区三区激情视频| 亚洲欧美精品综合久久99| 国产精品三级大全| 在线观看66精品国产| 最新在线观看一区二区三区| 一二三四社区在线视频社区8| 激情在线观看视频在线高清| 在线免费观看不下载黄p国产 | 色噜噜av男人的天堂激情| 真人做人爱边吃奶动态| 十八禁人妻一区二区| 亚洲精品日韩av片在线观看 | 美女高潮喷水抽搐中文字幕| 国内精品一区二区在线观看| 无人区码免费观看不卡| 在线免费观看的www视频| 内射极品少妇av片p| 欧美日韩福利视频一区二区| 男女做爰动态图高潮gif福利片| 欧美乱码精品一区二区三区| 成年人黄色毛片网站| 男女下面进入的视频免费午夜| 中文字幕av在线有码专区| 美女cb高潮喷水在线观看| 久久精品国产自在天天线| 欧美高清成人免费视频www| 美女cb高潮喷水在线观看| 一a级毛片在线观看| 9191精品国产免费久久| 欧美乱妇无乱码| 国产主播在线观看一区二区| 国产熟女xx| av女优亚洲男人天堂| 他把我摸到了高潮在线观看| 日韩国内少妇激情av| 狂野欧美白嫩少妇大欣赏| 欧美黄色片欧美黄色片| 99久久九九国产精品国产免费| 在线看三级毛片| 天堂√8在线中文| 欧美日韩综合久久久久久 | 一个人观看的视频www高清免费观看| 人人妻,人人澡人人爽秒播| 日本一本二区三区精品| 久久亚洲真实| 日韩成人在线观看一区二区三区| a级一级毛片免费在线观看| 亚洲五月婷婷丁香|