胡 煒,劉 永 學(xué),李 滿 春,陳 潔 麗,毛 鹍
基于局部相關(guān)分析法的ETM+影像修復(fù)方法研究
胡 煒,劉 永 學(xué),李 滿 春,陳 潔 麗,毛 鹍
(南京大學(xué)地理與海洋科學(xué)學(xué)院,江蘇 南京 210093)
Landsat-7上搭載的專題掃描儀(ETM+)上的掃描行校正器(SLC)在2003年發(fā)生故障,導(dǎo)致影像出現(xiàn)壞行,丟失了約25%的數(shù)據(jù)。由于數(shù)據(jù)本身仍保持了良好的輻射和幾何特性,且同一區(qū)域不同時相影像上壞行出現(xiàn)的位置具有隨機性,使得使用同一區(qū)域不同時相的ETM+影像進(jìn)行交叉修復(fù)成為可能。該文在總結(jié)現(xiàn)有修復(fù)方法的基礎(chǔ)上,提出了一種采用相近時相、相同位置影像對ETM+影像進(jìn)行修復(fù)的方法。首先利用兩景影像中的準(zhǔn)不變特征點(PIFs),以待修復(fù)影像為目標(biāo),對待填充影像進(jìn)行相對輻射校正,消除不同時相影像間由于大氣狀況等“外源差異”導(dǎo)致的像元亮度值差異。然后運用局部相關(guān)分析法對待填充影像進(jìn)行變換:構(gòu)建一種同時考慮光譜距離和空間距離的權(quán)重系數(shù),根據(jù)鄰近光譜相似點在兩個時相上的變化量對待填充影像進(jìn)行變換。實驗證明,該方法修復(fù)效果優(yōu)于傳統(tǒng)的局部回歸法。
局部相關(guān)分析;影像修復(fù);ETM+
1994年4月美國發(fā)射的Landsat-7上搭載了專題掃描儀(ETM+),其空間分辨率為30 m,掃幅寬為185 km。由于其出色的影像質(zhì)量,Landsat-7的數(shù)據(jù)被15個地面站所接收,廣泛應(yīng)用于評估與監(jiān)測、農(nóng)業(yè)和地質(zhì)調(diào)查、全球變化檢測、測繪及考古和規(guī)劃管理等領(lǐng)域[1]。2003年5月31日,Landsat-7 ETM+機載掃描行校正器(Scan Lines Corrector,SLC)突然發(fā)生故障,導(dǎo)致獲取的圖像出現(xiàn)數(shù)據(jù)重疊和約1/4的數(shù)據(jù)丟失[2,3]。盡管如此,ETM+數(shù)據(jù)仍然具有不可替代的價值:一方面,SLC故障不影響傳感器的輻射和幾何性質(zhì)[4],在一些領(lǐng)域,由SLC異常造成的影響較小或者在容忍的范圍內(nèi);另一方面,SLC-off數(shù)據(jù)中仍然保留著許多有用的信息。通過選擇適當(dāng)?shù)膱D像處理方法,仍然可以將SLC異常數(shù)據(jù)成功地運用到很多科學(xué)應(yīng)用領(lǐng)域,如熱帶雨林監(jiān)測、農(nóng)作物定性評估、大面積土地覆蓋類型變化以及全球變化監(jiān)測等。因此,研究如何修復(fù)由于SLC故障造成的數(shù)據(jù)壞行,成為國際遙感研究的熱點。本文在探討已有修復(fù)方法的基礎(chǔ)上,提出一種對SLC-off數(shù)據(jù)進(jìn)行修復(fù)的有效方法。
對影像縫隙進(jìn)行修復(fù)的方法可分為兩類:一類是直接插值法,即根據(jù)影像自身在壞行周邊的像元對壞行處進(jìn)行空間插值,不需要借助外源影像;另一類是利用另外一景或多景ETM+影像對待修復(fù)影像的壞行進(jìn)行填充。直接插值填充法利用縫隙周邊的有效像元進(jìn)行最鄰近插值、雙線性插值或三次卷積插值等,對壞行部分進(jìn)行填充,原理簡單且較容易實現(xiàn),但是插值修復(fù)的效果很差,存在著明顯的填充邊界。另外,由于填充像元是根據(jù)影像壞行周邊的像元亮度值計算得出的,并非地表信息的真實反映,而ETM+影像壞行最大寬度為14個像元,通過這種方法得到的填充像元無法替代真實地物,故修復(fù)結(jié)果的真實性無法得到保證。
利用外源影像填充是利用位置相同、成像時刻相近的ETM+影像對影像壞行進(jìn)行填充。外源影像可以是沒有發(fā)生故障的SLC-on數(shù)據(jù),也可以是SLC-off數(shù)據(jù)。因為掃描儀校正器異常導(dǎo)致的圖像壞行是隨機分布的,所以利用兩景以上的ETM+SLC-off數(shù)據(jù)完成一幅影像的填充具有可行性[5]。該方法又包括:全景直方圖匹配(Global Histogram Match)、局 部 直 方 圖 匹 配 (Local Histogram Match)、自適應(yīng)局部回歸(Adaptive Local Regression)等[1,2]。但是這些方法都存在著缺陷:全景直方圖匹配法由于將一幅影像整體考慮而忽略了不同位置的空間分異,難以取得好的效果;而局部直方圖匹配法和自適應(yīng)局部回歸法均針對一個窗口內(nèi)的所有像元進(jìn)行分析,忽略了不同地物在兩景影像上的變化模式差異,因此也不能有效地解決問題。
本文提出的基于局部相關(guān)分析法的ETM+影像修復(fù)方法包括以下步驟:1)針對t1時刻的待修復(fù)影像(以下稱為目標(biāo)影像),選擇位置相同、成像時刻相近(兩景影像之間的地物類型變化可忽略)的另一景t0時刻的ETM+影像作為待填充影像(以下稱源影像),若源影像也為SLC-off數(shù)據(jù),則需要考慮兩景影像壞行分布的互補性,并以目標(biāo)影像為基準(zhǔn),對源影像進(jìn)行幾何精校正,誤差須保證在0.5個像元以內(nèi)。2)從源影像上提取與目標(biāo)影像壞行區(qū)域?qū)?yīng)的部分,形成填充影像,并從源影像上提取與目標(biāo)影像有值區(qū)域?qū)?yīng)的部分,形成匹配影像。3)根據(jù)相同地物由匹配影像到目標(biāo)影像的變換規(guī)律,對填充影像進(jìn)行匹配處理,得到匹配后的填充影像,并將其填充到目標(biāo)影像。以上步驟中,前兩步借助常用的遙感影像處理軟件即可實現(xiàn),而第三步則是決定修復(fù)效果的關(guān)鍵。
由于源影像與目標(biāo)影像時間間隔較小,可以忽略地物類型的變化,故兩景影像上對應(yīng)像元在亮度值上的差異主要來自于兩方面:一是大氣、光照、傳感器狀態(tài)等成像條件的變化;二是土壤濕度、植被氣候等差異導(dǎo)致的地物輻射率變化[6]。對填充影像的匹配處理需要同時消除這兩方面的影響。本研究首先通過相對輻射校正消除相同地物(反射率未發(fā)生變化)在不同時相遙感影像上輻射亮度的差異,然后逐一遍歷填充影像上的像元,根據(jù)相似地物的局部變換規(guī)律對其進(jìn)行匹配處理。
相對輻射校正采取基于地物波譜“準(zhǔn)”不變特征點(Pseudo-Invariant Features,PIFs)的方法。在兩幅影像中選取地物性質(zhì)沒有發(fā)生改變的點對(如建筑物、水體等),通過PIFs質(zhì)量控制方法[7]對PIFs進(jìn)行篩選。對每個波段,分別建立線性回歸方程:
將通過篩選的PIFs帶入式(1),得到a、b的值,并據(jù)此對源影像進(jìn)行變換,完成相對輻射校正。此時,兩景影像相同位置上像元亮度值的變化可認(rèn)為是由地物本身反射率發(fā)生變化導(dǎo)致,如植被生長狀況、土壤含水量等的變化。下一步需要將填充影像上的柵格由t0時刻變換到t1時刻,即對于填充影像上的每個像元,得到其由t0到t1的像元亮度值變化量。
空間上鄰近的地物在性質(zhì)上往往存在密切關(guān)聯(lián),且相同地物(如某種植被)在不同時相間的光譜性質(zhì)變化也應(yīng)類似,基于這種考慮,可將填充影像上一點在t0和t1間的像元亮度值變化量近似地表達(dá)為其周邊相似像元點變化量的加權(quán)和。權(quán)重需要同時考慮目標(biāo)點與鄰近相似點的空間距離與光譜距離。填充影像上待變換柵格點(x,y)與一個鄰近相似點(xi,yi)的空間距離可以表示為:
其中:L(t0,b,x,y)、L(t0,b,xi,yi)分別為源影像上兩點(x,y)和(xi,yi)在波段b的像元亮度值,n為波段總數(shù)。進(jìn)一步定義綜合距離:
鄰近相似點權(quán)重與空間距離和光譜距離均呈負(fù)相關(guān),故可定義為:
式中:m為鄰近相似點個數(shù),這里對權(quán)重值進(jìn)行了歸一化處理,目的是使鄰近相似點像元亮度值的加權(quán)和與待變換點具有可比性并能夠作為t1時刻處(x,y)的像元亮度值。根據(jù)之前的分析,填充影像上(x,y)處b波段的像元亮度值由t0到t1的變化量為鄰近相似像元點的加權(quán)和,因此填充影像(x,y)處b波段在t1時刻的像元亮度值可表示為[8]:
根據(jù)式(6)遍歷填充影像上每個波段的所有柵格點即可得到匹配后的填充影像。對于鄰近相似像元點的確定,可以通過計算空間距離和光譜距離并設(shè)定閾值得到。為了降低算法的時間復(fù)雜度,提高效率,這里采用正方形搜索窗口篩選空間鄰近點,并設(shè)定像元亮度值差異閾值進(jìn)一步篩選光譜相似點。位于正方形窗口內(nèi)且與待處理像元每個波段的差值均小于差異閾值的點被選為鄰近相似點。初始窗口寬度為20個像元,初始各波段像元亮度值差異閾值為1。若得到的鄰近相似像元點數(shù)量小于10,則可能由于樣本過少導(dǎo)致計算結(jié)果不可信,須擴大搜索窗口并增大閾值,每次循環(huán)窗口寬度增加10個像元,像元亮度值差異閾值加1,直到獲得足夠的點為止。算法流程見圖1。
圖1 算法流程Fig.1 The algorithm flow chart
選取安徽省合肥市兩景ETM+影像進(jìn)行修復(fù)實驗,軌道號為121/38,成像時間分別為2011-01-09和2010-12-08,實驗將前者作為源影像,后者作為待修復(fù)的目標(biāo)影像。待修復(fù)波段為空間分辨率30 m的1~5,7波段。
為了能夠?qū)⑿迯?fù)結(jié)果與真實影像進(jìn)行直接對比,首先在兩景影像的無壞行部分(中部區(qū)域)上設(shè)計人工壞行。分別從兩景影像上裁取700×700像元的正方形區(qū)域作為實驗數(shù)據(jù)源(圖2a、圖2b),分別采用傳統(tǒng)的局部回歸法和本研究所提出的局部相關(guān)分析法對目標(biāo)影像進(jìn)行修復(fù),修復(fù)結(jié)果如圖2c、圖2d。傳統(tǒng)局部回歸法的結(jié)果中存在明顯的填充邊界,填充像元點與周圍像元色調(diào)不一致;而局部相關(guān)分析法所得到的填充條帶與周圍像元能夠有效融合,修復(fù)影像與原始影像在視覺效果上保持一致。
圖2 兩種修復(fù)方法在模擬影像上實驗結(jié)果對比(R4G3B2)Fig.2 The experiment results of the two restoration approaches(R4G3B2)
為了進(jìn)一步驗證實驗結(jié)果,分別計算兩種修復(fù)方式所得的填充影像的均值、中值、方差及與原始影像的協(xié)方差,并采用通用影像評價指標(biāo)(UIQI)[9]評價兩種修復(fù)方式所得結(jié)果與原始影像的相似性(表1),UIQI值越接近1,說明兩景影像越相似,填充數(shù)據(jù)越真實可信。UIQI定義如下式:
式中:x、y分別為待比較的兩幅圖像;、分別是x、y的方差;σxy是x與y的協(xié)方差。
從表1中可以看出,局部相關(guān)分析法得到的填充影像與原始影像在均值上非常接近,最大差值出現(xiàn)在第7波段,僅0. 098;中值與原始影像保持一致,UIQI最小為0.864,與原始影像的相似度在各個波段上均高于局部回歸法。
表1 兩種修復(fù)方法所得填充影像與原影像統(tǒng)計對比Table 1 Comparisons of the filler image with the real image of two approaches
為了驗證本研究所提出方法在處理實際壞行時的效果,裁取源影像中的壞行部分,用待填充影像的相應(yīng)區(qū)域進(jìn)行填充修復(fù),區(qū)域大小仍為700×700像元。修復(fù)結(jié)果(圖3)影像中不存在填充邊界,對于影像下方的高值區(qū)域(建筑物)及右上角的低值區(qū)域(水體)均能夠得到很好的修復(fù)效果,且保持了植被的空間連續(xù)性和局部相似性。以上這些特性保證了運用該影像進(jìn)一步分類處理的準(zhǔn)確性和穩(wěn)定性。
圖3 局部相關(guān)分析法對真實壞行影像的修復(fù)結(jié)果(R4G3B2)Fig.3 The restoration result of the proposed approach(R4G3B2)
利用外源影像對ETM+SLC-off影像進(jìn)行修復(fù)的關(guān)鍵在于解決待修復(fù)影像與待填充影像色調(diào)不一致問題。本文首先分析了造成兩景影像不一致的原因,針對這兩方面原因,分別使用相對輻射校正和局部相關(guān)分析法對待填充影像進(jìn)行處理,得到匹配后的待填充影像。經(jīng)過模擬壞行影像和真實壞行影像實驗,發(fā)現(xiàn)該方法的修復(fù)效果很好,從視覺和統(tǒng)計兩方面均優(yōu)于傳統(tǒng)的局部回歸法,修復(fù)所得到的影像能夠直接用于影像分類。由于該方法對待填充影像的處理是逐像元進(jìn)行的,且對每個填充像元亮度值的計算均依賴于鄰近相似像元在兩景影像上的差值,因此對于無法找到條帶完全互補的ETM+SLC-off影像,可以使用多景時間間隔較小的影像對一景影像進(jìn)行填充。
[1]壽敬文,陳雪,馬建文,等.采用ALR算法對Landsat-7圖像缺行修復(fù)的應(yīng)用研究[J].光電子·激光,2006,17(3):368-371.
[2]田曉紅,林有明.Landsat-7縫隙數(shù)據(jù)恢復(fù)的算法研究[J].計算機仿真,2007,24(12):59-61.
[3]ARVIDSON T,GOWARD S,GASCH J,et al.Landsat-7 long term acquisition plan:Development and validation[J].Photogrammetric Engineering and Remote Sensing,2006,72(10):1137-1146.
[4]WILLIAMS D L,GOWARD S,ARVIDSON T.Landsat:Yesterday,today,and tomorrow[J].Photogrammetric Engineering and Remote Sensing,2006,72(10):1171-1178.
[5]朱長明,沈占鋒,駱劍承,等.基于 MODIS數(shù)據(jù)的 Landsat-7 SLC-off影像修復(fù)方法研究[J].測繪學(xué)報,2010,39(3):251-256.
[6]張鵬強,余旭初,劉智,等.多時相遙感圖像相對輻射校正[J].遙感學(xué)報,2006,10(3):339-344.
[7]張友水,馮學(xué)智,周成虎.多時相TM影像相對輻射校正研究[J].測繪學(xué)報,2006,35(2):122-127.
[8]CHEN J,ZHU X L,VOGELMANN J E,et al.A simple and effective method for filling gaps in Landsat ETM+ SLC-off images[J].Remote Sensing of Environment,2011,115(4):1053-1064.
[9]WALD L.Quality of high resolution synthesised images:Is there a simple criterion[A].Proc.Int.Conf.Fusion of Earth Data[C].France,2000.99-105.
Research on ETM+I(xiàn)mage Restoration Method Based on Local Correlation Analysis
HU Wei,LIU Yong-xue,LI Man-chun,CHEN Jie-li,MAO Kun
(DepartmentofGeographicInformationScience,SchoolofGeographicand OceanographicSciences,NanjingUniversity,Nanjing210093,China)
The Landsat-7 image data has been widely applied in environment assessment and inspection,global change detection,agriculture,geography research,mapping,archeology and also become popular RS data in China.An instrument malfunction occurred on Enhanced Thematic Mapper(ETM+)of Landsat-7 in 2003,which was caused by failure of the scan line corrector(SLC).Regular bad lines present on the SLC-off scenes and about 25%data is lost.Because the data itself preserves good radicalization and geometry performances,and bad lines occurred randomly in different images,it′s possible for cross restoration by using images with the same extent and different temporal phases.At the basis of summarization of present restoration methods,a new method to restore the SLC-off data using another ETM+image with near time and same extent is proposed.The first step is to eliminate the affection of"foreign difference"(atmospheric condition,weather,etc)of the two images(image needs to be restored and image for filling).Set the image needs to be restored as target,select pseudo-invariant features(PIFs)in two images,and execute local relative radiometric normalization for the image for filling.Convert the image for filling according to nearby spectral-similar pixels by constructing a weight that considers both spectral and spatial distance.Experiment results indicates that the method is an effective method for recovering ETM+images and is superior to traditional local regression match method.
local correlation analysis;image restoration;ETM+
TP751
A
1672-0504(2011)05-0029-04
2011-05- 09;
2011-07-28
國家自然科學(xué)基金項目(40701117、41171325)
胡煒(1988-),男,碩士研究生,主要研究方向為遙感信息分析與應(yīng)用模型。E-mail:have211@163.com