• <tr id="yyy80"></tr>
  • <sup id="yyy80"></sup>
  • <tfoot id="yyy80"><noscript id="yyy80"></noscript></tfoot>
  • 99热精品在线国产_美女午夜性视频免费_国产精品国产高清国产av_av欧美777_自拍偷自拍亚洲精品老妇_亚洲熟女精品中文字幕_www日本黄色视频网_国产精品野战在线观看 ?

    基于雙目內窺鏡的散斑三維重建系統(tǒng)研究

    2022-06-01 02:31:34郭俊廣谷飛飛葉于平
    集成技術 2022年1期
    關鍵詞:極線雙目內窺鏡

    郭俊廣 谷飛飛 葉于平 宋 展,3*

    1(中國科學院深圳先進技術研究院 深圳 518055)

    2(中國科學院大學 北京 100039)

    3(粵港澳人機智能協(xié)同系統(tǒng)聯(lián)合實驗室 深圳 518055)

    1 引 言

    內窺鏡是一種集傳統(tǒng)光學、人體工程學、精密器械、現(xiàn)代電子、數(shù)學和軟件為一體的新型無損檢測儀器[1],可以擴大視距和視野,提高觀察分辨率。內窺鏡由于可以在受限的空間(如人體)及高溫、高壓、有毒有害的環(huán)境中工作,所以在醫(yī)療診斷和工業(yè)檢測中成為非常重要的成像工具[2]。在工業(yè)領域,內窺鏡在發(fā)動機、齒輪箱等機械不拆卸的情況下,就可以準確、清晰地檢測其內部情況;在醫(yī)療領域,醫(yī)生可以通過內窺鏡對病人病患處進行檢查,也可以將電子內窺鏡作為圖像采集設備來輔助微創(chuàng)手術。隨著三維測量技術的不斷發(fā)展,三維測量與三維重建在工業(yè)和醫(yī)療領域有著越來越重要的意義[3],三維測量內窺鏡成為了一個熱門研究課題[4]。2006 年,Hayashibe等人研究了一種基于激光掃描三維技術的內窺鏡系統(tǒng)[5],實現(xiàn)了內窺鏡的立體成像;2015 年,Yang 等人提出了一種融合三維超聲波掃描技術的內窺鏡手術跟蹤系統(tǒng)[6],將超聲構造的場景幾何與內窺鏡視覺結合,解決了尺度模糊和特征點不足的問題;2016 年,F(xiàn)urukawa 等人設計了一種內置衍射光學元件(DOE)投影儀的內窺鏡[7],并提出了一種基于網格線的網格模式與間隙編碼,成功地重建了人體的軟組織形狀;2017 年,周亭亭提出了基于散斑結構光的雙目電子內窺鏡技術[8],針對腹腔弱紋理真實場景,解決了被測物體表面弱紋理導致誤匹配問題,并實現(xiàn)了較高分辨率的測量精度。

    目前,美國和日本對內窺鏡的研究在全球處于領先地位,美國韋林公司的 Mentor Visual iQTM系列[9]內窺鏡產品和日本奧林巴斯公司的 EVIS LUCERA ELITE 電子內窺鏡系統(tǒng)[10],基本壟斷了國內外電子內窺鏡的高端市場。這些產品都具有測量長度、深度、周長和面積的功能,但不具備稠密重建的能力,且產品價格不菲,售后服務費用高昂。以上海澳華內鏡股份有限公司和北京愛迪泰克科技有限公司等為代表的國內企業(yè),其內窺鏡直徑可以做到 1~10 mm,但不具備立體重建測量功能。2019 年,沈陽沈大內窺鏡有限公司和北京德朗檢視科技有限公司分別推出了一款具有三維測量功能的內窺鏡產品,其探頭外徑分別為 6 mm 和 8 mm,與國際高端三維內窺鏡相比,探頭尺寸偏大,一定程度上限制了應用場景。因此,研發(fā)一款小尺寸且具備三維重建功能的電子內窺鏡具有重要意義。

    本文提出一種小尺寸探頭(探頭直徑為3.9 mm),其包含兩個分辨率為 640×360(23 萬)像素的 CMOS 攝像機,基于散斑結構光的高精度 3D 內窺鏡系統(tǒng)。該內窺鏡探頭可以進入狹小空間觀測目標物體,滿足大部分應用場景。由于雙目內窺鏡的基線較窄(基線為 3.5 mm),使用光學微型孔徑鏡頭會使拍攝出來的圖片存在大畸變、清晰度不足等不利情況。為此,本文提出一種雙目標定參數(shù)優(yōu)化方法,來降低圖片畸變的影響,提高了雙目內窺鏡的標定精度;針對左右像素的匹配精度直接影響內窺鏡測量精度的問題,本文提出一種沿著左右相機坐標軸分別旋轉兩次的極線校正算法,可以實現(xiàn)左右圖像共面行對準,進而達到像素的精確匹配;針對實際場景中的弱紋理或無紋理區(qū)域,本文提出了基于散斑結構光的半全局立體匹配方法,即將散斑圖案投射到目標物體表面來增加特征信息后,利用半全局立體匹配算法獲取所拍攝圖像的視差圖,并通過三角測量原理獲取三維點云數(shù)據,實現(xiàn)三維重建。

    2 系統(tǒng)工作原理

    本文采用基于散斑結構光的雙目內窺鏡系統(tǒng),其硬件主要包括散斑照明系統(tǒng)和雙目內窺鏡系統(tǒng)。其中,散斑照明系統(tǒng)采用的投影儀是安華公司生產的 M8M-NIR 投射模組,顯示芯片為DLP4500NIR,物理分辨率為 912×1 140,最大投射頻率為 4 225 fps;雙目攝像頭所使用的圖像傳感器為 OmniVision 公司的 OVM9724 圖像傳感器,有 GND、VDD、P-(負極信號線)、D+(正極信號線)4 個引腳,光學尺寸為 1/9 in,分辨率為 640×360,幀率最高為 30 fps,內窺鏡探頭直徑為 3.9 mm,相應基線為 3.5 mm,探頭的兩個攝像頭旁各有一個發(fā)光二極管作為冷光源進行照明。使用過程中,散斑照明系統(tǒng)首先將散斑圖案投射到待測目標物體表面,然后對雙目內窺鏡拍攝帶有散斑圖案的圖片進行處理。

    采用散斑結構光技術進行雙目三維重建的步驟包括:雙目相機標定、極線校正、立體匹配和三維重建。其中,立體標定、極線校正和立體匹配準確性會影響三維重建精度,且高精度的立體標定和極線校正是實現(xiàn)雙目左右圖像特征匹配的前提。因此,本文著重研究高精度的雙目標定算法和極線校正算法。雙目內窺鏡系統(tǒng)示意圖如圖 1所示。系統(tǒng)算法流程主要分為以下 4 個步驟:

    圖1 系統(tǒng)示意圖Fig. 1 System diagram

    (1)系統(tǒng)標定,通過對雙目內窺鏡系統(tǒng)進行立體標定,得到左右攝像頭各自的內參數(shù)和兩者之間的外參數(shù);

    (2)非線性標定優(yōu)化,將(1)中得到的立體標定參數(shù)作為初始值,在傳統(tǒng)方法所定義的重投影誤差目標函數(shù)基礎上,增加定義平面度、距離、角度 3 個度量誤差函數(shù),通過構建多目標非線性優(yōu)化函數(shù),求解雙目系統(tǒng)的最優(yōu)標定參數(shù);

    (3)極線校正,為了提升立體匹配的速度和準確率,提出一種沿著左右相機坐標軸分別旋轉兩次的極線校正方法;

    (4)立體匹配和三維重建,根據(1)~(3)得到最優(yōu)的雙目內窺鏡內部和外部參數(shù),沿著校正后的極線進行特征匹配,利用三角測量原理重建目標物體的三維信息。

    2.1 系統(tǒng)標定

    圖2 雙目成像幾何模型Fig. 2 Geomagic model of binocular imaging

    由于相機鏡頭的制作、安裝等工藝問題會導致圖像發(fā)生畸變,所以需在雙目成像幾何模型中加入非線性畸變校正項,鏡頭畸變校正公式如公式(2)所示:

    其中,xd,yd為畸變的位置;r2為畸變位置到畸變中心徑向距離的平方;k1,k2,k3為徑向畸變系數(shù);p1,p2為切向畸變系數(shù);xp,xp為畸變校正后的新位置。如果有n幅標定圖像,每幅標定圖像上可以提取m個特征點,那么加入畸變系數(shù)后,使用 LM(Levenberg-Maquardt)優(yōu)化算法[14]對包含所有參數(shù)的目標函數(shù)進行優(yōu)化求解,最終得到優(yōu)化的相機參數(shù)。以左相機為例,構造的非線性目標函數(shù)如公式(3)所示:

    其中, 為左相機拍攝第i幅圖像中的第j個特征角點的像素坐標; 為左相機的鏡頭畸變系數(shù), , 為左相機所拍攝的第i幅圖像的相機坐標系對應于世界坐標系之間的旋轉矩陣和平移向量;為第i幅圖像中空間坐標點Mj在圖像上的重投影。右相機的標定方法與之相同,標定后可以分別得到內部參數(shù)AR和外部參數(shù)RR,TR。

    聯(lián)立左右相機標定后的內部參數(shù)及相對于世界坐標系的外部參數(shù),求得左右相機之間的旋轉平移關系,以左相機坐標系為參考坐標系,雙目系統(tǒng)的旋轉矩陣R和平移向量T表述如下:

    該標定方法通過最小化參考點的二維重投影誤差來優(yōu)化標定結果,但最小重投影誤差并不等于最小重建誤差[15],因為雙目內窺鏡的基線窄,立體像對視差小[16],標定的微小誤差就會引起很大的重建誤差。為了提高三維重建精度,在 Nie 等人提出的針對單目結構光系統(tǒng)的標定優(yōu)化算法[17]的基礎上,本文研究了一種基于三維的標定優(yōu)化方法。該方法將基于雙目內窺鏡系統(tǒng)的所有標定參數(shù)作為全局優(yōu)化問題來處理:將初始標定的結果作為初值,通過構造一些目標函數(shù),達到最小化三維測量誤差、實現(xiàn)最優(yōu)標定結果的目的。

    2.2 標定優(yōu)化

    為了保證物體的平整度,采用一種反射率均勻的平面棋盤格玻璃板進行優(yōu)化,如圖 3 所示。平面棋盤格玻璃板上標記點之間的距離L非常精確,其以基準面為基礎,定義了平面度誤差、距離誤差和角度誤差 3 種三維測量誤差準則。將雙目內窺鏡系統(tǒng)通過第 2.1 節(jié)得到的所有標定參數(shù)作為變量,可以建立一個多目標非線性優(yōu)化問題,以初始標定結果作為初始值,求解出三維測量誤差最小的最佳標定參數(shù),標定優(yōu)化工作流程圖如圖 4 所示。

    系統(tǒng)根據棋盤格亞像素角點檢測算法[18],首先提取棋盤格玻璃板上的亞像素角點坐標,獲得一組圖像點(cp),同理,根據亞像素精度檢測算法得到圖 3 上所標注的標記點cm;然后根據初始標定參數(shù)和雙目三維重建算法[19],cp和cm的三維坐標可以表示為Cp和Cm;最后在三維重建點Cp和Cm的基礎上,通過構造 3 個度量誤差目標函數(shù),構造出多目標優(yōu)化問題,用于精確地估計系統(tǒng)標定參數(shù)。3 個目標函數(shù)定義如下:

    圖3 用于系統(tǒng)參數(shù)優(yōu)化的棋盤格玻璃板Fig. 3 Illustration of checkboard glass plate used for system parameters optimization

    (1)平面度誤差:將用于重建的參考平面看作是一個完美的平面,即在不考慮標定誤差和重建誤差的情況下,Cp的平面度誤差為 0。在此基礎上,提出了最小二乘擬合法[20],假設參考平面提取角點的數(shù)目為N,第i個點到擬合平面的距離為gi,則平面度誤差Dp可以表示為:

    (2)距離誤差:對于每個標記點 ,它與所有相鄰標記點在水平和垂直方向上的平面距離表示為lj,參考平面有 4 個角,那么,距離誤差函數(shù)Dd可以表示為:

    其中,L為參考平面相鄰兩個標記點之間的長度。

    (3)角度誤差:平面度誤差和距離誤差仍然不足以保證很好的重構參考面,考慮到仿射變換可能是由于初始標定參數(shù)不準確引起的,因此,構造一個目標誤差函數(shù)來評價標記點(圖 4 已標出)之間的角度。對于每個標記點 ,通過相鄰的標記點連接起來,可以計算角度θj。θ的理論參考值為 90°,那么,角度誤差函數(shù)Dθ可以表示為:

    圖4 標定參數(shù)優(yōu)化流程圖Fig. 4 Flow chart of the calibration parameters optimization

    綜上所述,共需優(yōu)化 30 個參數(shù),包含 8 個內參數(shù)(左右相機各 4 個),12 個外參數(shù)(左右相機之間旋轉矩陣R中有 9 個,平移向量T中有 3 個)和 10 個鏡頭畸變參數(shù)(左右相機各有 5個)。若在優(yōu)化過程中不考慮相機傳感器的傾斜因子 ,那么所有需要優(yōu)化的參數(shù)用向量Q表示為:

    通過常規(guī)的標定程序[21-23]得到的初始值Q0,可建立一個多目標優(yōu)化問題,如公式(9)所示:

    其中,第一約束 用來確保旋轉矩陣R的正交性,第二約束用來設置參數(shù)的取值范圍。下邊界系數(shù)lb和上邊界系數(shù)ub按照經驗值設置為 [0.9,1.1],使用權重因子 和 來平衡 3 個誤差函數(shù)的影響,這 3 個誤差函數(shù)可以通過經驗來實際調整權重因子的大小,使其滿足。在實際實驗中, 通常設置為 1, 設置為 1.44[17]。

    本研究中使用 MATLAB 優(yōu)化工具箱中提供的優(yōu)化函數(shù)“fmincon”,用以求解多目標優(yōu)化問題,該函數(shù)基于序列二次規(guī)劃方法[24]求解。本實驗用三維度量代替了二維重投影,實驗結果表明,前者測量結果準確性更高。

    2.3 極線校正

    雙目攝像機系統(tǒng)的立體匹配是在左右相機嚴格對齊的理想情況下進行的,因此需在立體匹配前進行極線校正,即將左右相機成像平面校正成共面行對準。立體圖像極線校正示意圖如圖 5 所示。

    圖5 立體圖像極線校正Fig. 5 Epipolar rectification of stereoimages

    以左相機坐標系為參考坐標系,在進行極線校正前,右相機坐標系對左相機坐標系的相對變換為。為了使所有的極線平行以輔助立體匹配,校正后的左右相機坐標系應水平對齊,即它們之間只有平移關系[25]。

    本文提出一種左右相機坐標軸雙次旋轉的極線校正方法,具體過程如圖 6 所示。假設左右相機光軸之間形成的角度為 ,為了最小限度地旋轉左右相機并使其坐標系具有相同的方向,那么把左右相機沿相反方向都旋轉 ,這正好是左右相機之間旋轉關系R的一半。引入旋轉向量om,把R和 聯(lián)系起來,其中,om是一個3×1 的向量,可以將 3×3 的矩陣R描述得更加緊湊些。向量om的方向為旋轉軸,om的模為繞旋轉軸旋轉的角度。因此,向量om與旋轉角度 的關系為,根據羅德里格斯(Rodrigues)變換公式得到左相機的旋轉矩陣,如公式 10 所示:

    圖6 極線校正的兩次旋轉Fig. 6 Epipolar rectification by two rotations

    經第一次旋轉后,雖然左右相機的新光軸是平行的,但是它們與OL和OR連線所構成的軸不垂直(圖6)。因此,需要對左右相機坐標軸再進行一次角度為 的旋轉,令,使軸和平移向量對齊。新旋轉軸的方向可以用和計算得到:

    第二次旋轉的角度 可以通過下式得到:

    通過上述兩次旋轉,可以得到極線校正后左右相機的旋轉和平移關系:

    其中,rec表示經過極線校正后的參數(shù)。

    對于雙目相機的成像中心,通常選取左右相機的成像中心的平均值作為校正后的雙目相機中心位置,但是這在實際中并不準確[26]。這是因為校正后的圖像或多或少受到旋轉和扭曲的影響,成像中心的位置也可能隨之受到影響。所以,在確定了其他內、外參數(shù)后,可以根據已知參數(shù)求解矯正后的圖像中心位置。首先,假設校正后的成像中位在[0,0]T處,如圖 7 所示,將原始圖像的 4 個頂點{v1,v2,v3,v4}投影到極線校正后的坐標系中,得到校正后的圖像中心k0:

    圖7 極線校正后圖像中心的確定Fig. 7 Determination in imaging center after epipolar rectification

    2.4 立體匹配和 3D 重建

    精確的特征匹配在三維重建中起到至關重要的作用。根據第 2.1~2.3 節(jié),首先得到優(yōu)化的左右像機的內外參數(shù),其次沿著校正后的極線進行特征匹配,再次基于三角測量原理計算場景的視差信息,最后經過三角重建即可進行三維場景的測量。與局部匹配算法和全局匹配算法相比,半全局立體匹配算法可以實現(xiàn)獲得高質量深度圖和運行效率之間的平衡[27],但針對紋理稀疏或無紋理區(qū)域容易出現(xiàn)錯誤匹配,本文利用散斑結構光的特征信息,通過將散斑投射到缺乏紋理特征信息的目標物體表面,基于半全局立體匹配算法完成對缺乏紋理特征表面的三維重建目標。本文采用相同的重建方法分別對無散斑投射和有散斑投射的棋子進行三維重建,實驗結果如圖 8 所示。通過對圖 8 分析可得,經散斑投射的棋子重建出的點云更加稠密,具有更好的重建效果。

    圖8 有無散斑條件下的重建點云結果Fig. 8 Point cloud reconstruction results of with or without speckles

    左右雙目相機都可看作是水平放置的針孔相機,其光圈中心都位于x軸上,兩中心之間的距離稱為雙目相機的基線。三角測量原理的幾何模型如圖 9 所示,OL和OR分別為左右相機的光圈中心,f為焦距,uL和uR為成像平面的坐標,按照坐標系方向,圖中標出的距離為-uR。將左相機坐標系與世界坐標系重合,假設空間有一點,在左相機和右相機上的投影點分別為和,根據透視投影變換和圖 9 中與的相似關系,有:

    圖9 三角測量幾何模型Fig. 9 Geometric model of triangulation

    3 實驗結果

    3.1 實驗設備

    本實驗裝置由雙目模塊和散斑光源組成。其中,雙目模塊由兩個定焦 RGB 相機(分辨率640×360,USB2.0 接口,幀率 30 fps,焦距 5 cm)和一臺 DLP4500 光機(分辨率 912×1 140,投射比 1:1.2)組成,實驗平臺放置方式如圖 10 所示。

    圖10 實驗平臺搭建Fig. 10 The experimental setup

    3.2 雙目內窺鏡系統(tǒng)標定結果與分析

    雙目內窺鏡系統(tǒng)利用張氏標定法[12]標定初始參數(shù),通過改變棋盤格(角點 7×7,每個方格大小 3 mm×3 mm)的擺放姿態(tài)獲得 23 組不同的視圖,如圖 11 所示。

    圖11 左右相機獲得不同位姿標定圖像Fig. 11 Calibration images with diあerent orientation captured by left and right camera

    雙目內窺鏡系統(tǒng)初始標定參數(shù)如表 1 所示。初始標定之后,根據第 2.2 節(jié)提出的首先利用基于三維的標定優(yōu)化算法對初始標定后的參數(shù)進行非線性優(yōu)化,通過對比標定優(yōu)化前后的兩組參數(shù)計算出該節(jié)所述的 3 個度量誤差函數(shù),如表 2 所示。然后將雙目內窺鏡系統(tǒng)進行沿左右相機坐標軸旋轉兩次的極線校正操作,其極線校正后的標定參數(shù)如表 3 所示。

    表1 系統(tǒng)初始標定參數(shù)Table 1 Initial calibration parameters of the system

    表3 系統(tǒng)優(yōu)化后的標定參數(shù)Table 3 Calibration parameters after system optimization

    用于標定優(yōu)化的平面棋盤格玻璃板(圖 3)還可用于評估標定參數(shù)的精度,即通過優(yōu)化前后的標定參數(shù)提取平面棋盤格的角點,提取角點擬合平面誤差如圖 12 所示。由圖 12(a)和圖 12(b)可知(R-square 的范圍為[0,1],值越接近 1,表示平面擬合程度越好),優(yōu)化前后的平面度誤差分別為 0.845 3 mm 和 0.999 2 mm,優(yōu)化后的標定參數(shù)使角點平面擬合度精度提高近 18.21%。其中,對第 2.2 節(jié)所建立的 3 個度量誤差函數(shù)的優(yōu)化結果對比見表 2。

    圖12 棋盤格角點擬合平面誤差Fig. 12 Chessboard cornor fitting plane error

    表2 系統(tǒng)優(yōu)化前后的度量誤差Table 2 Metric errors with and without system optimization

    標定優(yōu)化是在離線情況下進行的,從輸入初始標定參數(shù)作為初始值開始,到迭代次數(shù)大于最大迭代次數(shù)停止,求解最優(yōu)標定參數(shù)的整個過程耗時 55 s,因為目標優(yōu)化函數(shù)公式(9)中所含的3 個誤差函數(shù)在參考平面(圖 3)中提取的點的數(shù)量較少,計算過程中計算量較小,因此整個標定優(yōu)化時間也較短;三維重建是在線進行的,在對圖 8 中的棋子進行三維重建時,系統(tǒng)首先讀取雙目內窺鏡拍攝帶散斑圖案的二維圖片,然后利用最優(yōu)標定參數(shù)進行圖像極線校正、半全局立體匹配,最后進行三維重建,圖 8 中棋子的三維重建過程運行時間約為 1.042 s,而在實際中,三維重建的時間與待重建場景的紋理豐富度、立體匹配算法選擇的關系很大。

    3.3 對比實驗

    為了測試本文雙目內窺鏡系統(tǒng)的重建精度,將基于三維的標定優(yōu)化方法和沿坐標軸旋轉兩次的極線校正算法得到的標定優(yōu)化參數(shù),與傳統(tǒng)標定方法[12]得到的標定優(yōu)化參數(shù)分別進行三維重建并作對比。本文采用球體、圓錐體和標準平面作為重建對象,其中,球體直徑為 20 mm,加工精度 ±20 μm;圓錐體直徑為 20 mm,加工精度 ±10 μm;標準平面 25 mm×35 mm,加工精度 ±10 μm。重建結果如圖 13 所示,圖中從上到下分別對應圓錐體、球體和標準平面重建的結果。精度對比如表 4 所示,由表 4 可知,本文系統(tǒng)對圓錐體的三維測量誤差為 0.098 mm,而傳統(tǒng)方法重建的誤差為 0.145 mm,重建誤差比本文系統(tǒng)高出 48.0%;對于球體,本文三維測量誤差為 0.112 mm,而傳統(tǒng)方法三維測量誤差為 0.124 mm,重建誤差比本文系統(tǒng)高出 10.7%;對于標準平面,本文三維測量誤差為 0.270 mm,而傳統(tǒng)方法三維測量的誤差為0.361 mm,重建誤差比本文系統(tǒng)高出 33.7%。綜上所述,雙目內窺鏡散斑系統(tǒng)有較高的三維測量精度。

    圖13 本文方法與傳統(tǒng)方法三維重建精度比較Fig. 13 Comparison of 3D reconstruction by the traditional and proposed method

    表4 三維測量精度對比Table 4 Comparison of 3D measurement accuracy

    3.4 實際應用場景三維重建

    為了評估本文基于雙目內窺鏡的散斑三維重建系統(tǒng)的有效性和準確性,分別對豬小腸內壁和牙齒的立體圖像進行三維重建,其原始圖像、散斑投射圖、深度圖、帶紋理點云圖及重建的 3D模型如圖 14 所示。

    由圖 14 可知,圖像紋理信息越豐富,其表面形狀恢復的越好。重建模型圖與原圖相比,雖然出現(xiàn)殘缺,但是其完成重建部分的整體形狀符合人們的視覺直觀感受,滿足部分應用場景。如在醫(yī)療領域,通過基于雙目內窺鏡的散斑三維重建系統(tǒng)可完成體內三維場景深度圖的構建,幫助醫(yī)生在某些復雜病變情況下完成對病人精確診斷治療。

    圖14 本文系統(tǒng)對豬小腸內壁和真實牙齒的重建結果Fig. 14 Reconstruction result of porcine small intestine and real teeth by using the proposed system

    4 討論與分析

    本文提出了一種基于雙目內窺鏡的散斑三維重建系統(tǒng),在雙目內窺鏡基線較窄的條件下,仍具有較高的測量精度和較好的重建效果。具體地,本文系統(tǒng)采用基于三維的標定優(yōu)化方法實現(xiàn)了雙目內窺鏡系統(tǒng)的高精度標定,同時采用基于左右相機坐標軸旋轉兩次的極線校正方法,顯著提高了左右圖像共面行對齊的精度。本文提出的極線校正方法具有以下優(yōu)勢:

    (1)雙目內窺鏡的兩個攝像機繞坐標軸旋轉同一個角度,以最小限度旋轉就可具有相同的方向,這樣使左右相機圖像之間的特征差異最小化;

    (2)校正后的圖像與原始圖像保持相同的分辨率,方便立體匹配,因為稠密匹配算法都需要相同大小的左右圖像;

    (3)最大化左右視圖的公共視野,在校正后的圖像中保證最大的可見圖像面積,從而使校正過程中圖像信息損失最小。

    相較于傳統(tǒng)標定方法[12],本文提出的雙目內窺鏡系統(tǒng)通過對棋盤格提取角點擬合平面誤差分析和對標準體進行精度測試,結果表明本文提出的雙目內窺鏡散斑系統(tǒng)在三維測量精度上具有較明顯的優(yōu)勢。

    由于雙目內窺鏡散斑系統(tǒng)真實應用在受限空間內,所以需要在保證高分辨率的情況下,將散斑光源縮小到雙目內窺鏡的探頭上,而這對光學及材料提出了更高要求,需要進一步的研究。

    5 結 論

    本文基于立體視覺原理,搭建了一套基于散斑編碼的雙目內窺鏡系統(tǒng)。為了提高系統(tǒng)的測量精度,本文著重針對雙目內窺鏡的標定和左右視圖極線校正進行研究,提出了一種基于三維的非線性全局優(yōu)化的標定方法和相機坐標軸旋轉兩次的極線校正算法。經過對棋盤格提取角點擬合平面的分析和對圓球、圓錐體及標準平面的精度測量,本文提出系統(tǒng)的測量精度相較于傳統(tǒng)標定方法有顯著提升。并且,對于實際應用場景中不同紋理對象目標的重建,如表面較為光滑的豬小腸內壁和紋理較少的且是非朗伯表面的高仿真牙齒,本文系統(tǒng)均取得了較好的重建效果。

    猜你喜歡
    極線雙目內窺鏡
    一種具有附加內窺鏡功能的醫(yī)療管
    電子內窺鏡臨床評價要求探討
    內窺鏡技術研究進展
    破解定值有妙法,極點極線顯神威
    基于雙目測距的卡爾曼濾波船舶軌跡跟蹤
    電子制作(2019年20期)2019-12-04 03:51:38
    一道高考試題的背景簡介
    基于雙目視覺圖像的長度測量方法
    鼻內窺鏡在分泌性中耳炎治療中的作用
    基于雙目視覺的接觸線幾何參數(shù)測量方法
    機械與電子(2014年2期)2014-02-28 02:07:46
    簡述與圓錐曲線的極點和極線有關的性質
    国产精品女同一区二区软件| 久久精品熟女亚洲av麻豆精品| 一级黄片播放器| 高清欧美精品videossex| 国产1区2区3区精品| 日日摸夜夜添夜夜爱| 亚洲精品视频女| 国产探花极品一区二区| 少妇的逼水好多| 亚洲国产成人一精品久久久| 国产亚洲精品久久久com| 亚洲精品久久午夜乱码| 欧美性感艳星| 97在线视频观看| 国产精品免费大片| 国产熟女午夜一区二区三区| 国产免费福利视频在线观看| 国产男女超爽视频在线观看| 看免费成人av毛片| 一区二区日韩欧美中文字幕 | 九色亚洲精品在线播放| 亚洲四区av| 美女内射精品一级片tv| 校园人妻丝袜中文字幕| 搡老乐熟女国产| 97在线视频观看| av一本久久久久| 国产一区亚洲一区在线观看| 各种免费的搞黄视频| 日韩三级伦理在线观看| 日韩大片免费观看网站| 中国三级夫妇交换| 久久这里只有精品19| 国产极品粉嫩免费观看在线| av免费观看日本| 黄片无遮挡物在线观看| 欧美精品一区二区免费开放| 久久99一区二区三区| 亚洲欧美一区二区三区黑人 | 少妇的逼水好多| 秋霞伦理黄片| av在线老鸭窝| 久久久久久久国产电影| 欧美成人精品欧美一级黄| 另类精品久久| 999精品在线视频| 99热6这里只有精品| 人妻系列 视频| 又黄又粗又硬又大视频| 久久人人爽av亚洲精品天堂| √禁漫天堂资源中文www| 精品午夜福利在线看| 亚洲av成人精品一二三区| 中文欧美无线码| 一级,二级,三级黄色视频| 母亲3免费完整高清在线观看 | 精品亚洲成a人片在线观看| 极品少妇高潮喷水抽搐| 乱码一卡2卡4卡精品| 久久人人97超碰香蕉20202| av线在线观看网站| 亚洲美女搞黄在线观看| 亚洲国产欧美日韩在线播放| 纯流量卡能插随身wifi吗| 国产欧美日韩一区二区三区在线| 亚洲伊人色综图| 男女午夜视频在线观看 | 日韩伦理黄色片| 草草在线视频免费看| 国产成人91sexporn| 国产一区亚洲一区在线观看| 啦啦啦在线观看免费高清www| 免费久久久久久久精品成人欧美视频 | 国产不卡av网站在线观看| 赤兔流量卡办理| 久热这里只有精品99| 亚洲国产精品999| 18禁国产床啪视频网站| 捣出白浆h1v1| 色网站视频免费| 欧美精品一区二区大全| 免费大片黄手机在线观看| a级片在线免费高清观看视频| 飞空精品影院首页| 亚洲成人一二三区av| 久久久久久人人人人人| 十八禁高潮呻吟视频| 免费黄频网站在线观看国产| 巨乳人妻的诱惑在线观看| 亚洲人成网站在线观看播放| 久久av网站| 欧美人与善性xxx| 五月开心婷婷网| 久久精品人人爽人人爽视色| 狠狠婷婷综合久久久久久88av| 亚洲欧美一区二区三区黑人 | 亚洲人与动物交配视频| 看免费av毛片| 亚洲四区av| 麻豆乱淫一区二区| 亚洲国产成人一精品久久久| 91成人精品电影| 国产又色又爽无遮挡免| 日韩,欧美,国产一区二区三区| 看十八女毛片水多多多| 一级毛片黄色毛片免费观看视频| 满18在线观看网站| 亚洲激情五月婷婷啪啪| 国产 一区精品| 亚洲综合色惰| 午夜激情久久久久久久| 国产精品欧美亚洲77777| 成人漫画全彩无遮挡| 日日爽夜夜爽网站| 最后的刺客免费高清国语| 97精品久久久久久久久久精品| 国产欧美日韩一区二区三区在线| 男人添女人高潮全过程视频| 久久久欧美国产精品| 亚洲中文av在线| 中文字幕另类日韩欧美亚洲嫩草| 亚洲精品乱码久久久久久按摩| 欧美日韩视频精品一区| 极品人妻少妇av视频| 精品午夜福利在线看| 在线观看国产h片| 中文字幕av电影在线播放| 大香蕉97超碰在线| 日本欧美国产在线视频| 青春草国产在线视频| 国精品久久久久久国模美| 两个人免费观看高清视频| 熟妇人妻不卡中文字幕| 亚洲国产精品一区三区| 亚洲伊人色综图| 国产亚洲精品第一综合不卡 | av播播在线观看一区| 亚洲欧美成人综合另类久久久| 一本色道久久久久久精品综合| 激情五月婷婷亚洲| 久久韩国三级中文字幕| 人妻人人澡人人爽人人| 精品少妇久久久久久888优播| 国产成人免费无遮挡视频| 热99国产精品久久久久久7| 少妇人妻精品综合一区二区| 秋霞在线观看毛片| 国产欧美日韩一区二区三区在线| 国产xxxxx性猛交| 亚洲欧美成人精品一区二区| 亚洲精品美女久久av网站| videosex国产| 亚洲av电影在线进入| 纵有疾风起免费观看全集完整版| 国产一区二区三区av在线| 日本wwww免费看| 国产精品三级大全| 男女边吃奶边做爰视频| 亚洲国产精品一区三区| 丰满少妇做爰视频| 九色亚洲精品在线播放| 建设人人有责人人尽责人人享有的| 丝瓜视频免费看黄片| 欧美精品高潮呻吟av久久| 精品人妻在线不人妻| 日韩熟女老妇一区二区性免费视频| 永久网站在线| av播播在线观看一区| 亚洲国产欧美在线一区| 视频中文字幕在线观看| av电影中文网址| 51国产日韩欧美| 狠狠精品人妻久久久久久综合| tube8黄色片| 欧美+日韩+精品| 熟女电影av网| 26uuu在线亚洲综合色| 国产一区亚洲一区在线观看| 啦啦啦中文免费视频观看日本| 美女国产高潮福利片在线看| 国产精品久久久久久精品古装| h视频一区二区三区| 国产在线免费精品| 高清黄色对白视频在线免费看| 91国产中文字幕| 久久这里只有精品19| 日韩av免费高清视频| 2018国产大陆天天弄谢| 欧美国产精品一级二级三级| 中文字幕av电影在线播放| 免费日韩欧美在线观看| 蜜桃国产av成人99| 男女午夜视频在线观看 | 九色成人免费人妻av| av播播在线观看一区| 99久久中文字幕三级久久日本| 一级片免费观看大全| freevideosex欧美| av免费在线看不卡| 观看美女的网站| 免费日韩欧美在线观看| 超碰97精品在线观看| 欧美精品高潮呻吟av久久| 熟女av电影| 亚洲av日韩在线播放| 视频区图区小说| 18禁裸乳无遮挡动漫免费视频| 久久精品久久精品一区二区三区| 九色亚洲精品在线播放| 十八禁高潮呻吟视频| 亚洲三级黄色毛片| 九草在线视频观看| 亚洲av欧美aⅴ国产| 欧美日韩精品成人综合77777| 国产欧美另类精品又又久久亚洲欧美| 精品一区在线观看国产| 国产成人a∨麻豆精品| 丰满饥渴人妻一区二区三| 精品视频人人做人人爽| 国产高清不卡午夜福利| 亚洲一区二区三区欧美精品| 中国三级夫妇交换| 国产综合精华液| 熟女人妻精品中文字幕| 丁香六月天网| 日韩,欧美,国产一区二区三区| 久久免费观看电影| 久久久久视频综合| 日日摸夜夜添夜夜爱| 最近的中文字幕免费完整| 久久精品国产鲁丝片午夜精品| 少妇精品久久久久久久| 久久久久久久久久人人人人人人| 国产熟女午夜一区二区三区| 97在线视频观看| 一级毛片我不卡| 欧美成人精品欧美一级黄| 欧美变态另类bdsm刘玥| 男女下面插进去视频免费观看 | 国产精品一二三区在线看| 老女人水多毛片| 久久精品人人爽人人爽视色| 欧美bdsm另类| 久久99热这里只频精品6学生| 麻豆精品久久久久久蜜桃| 久久婷婷青草| 一级毛片黄色毛片免费观看视频| 日本色播在线视频| 制服人妻中文乱码| 9191精品国产免费久久| 熟妇人妻不卡中文字幕| 免费大片黄手机在线观看| 女性生殖器流出的白浆| freevideosex欧美| 国产国拍精品亚洲av在线观看| 在现免费观看毛片| 乱码一卡2卡4卡精品| 亚洲成人av在线免费| 国产一区二区在线观看av| 啦啦啦视频在线资源免费观看| 国产亚洲一区二区精品| 宅男免费午夜| av网站免费在线观看视频| 免费播放大片免费观看视频在线观看| 青青草视频在线视频观看| 国产精品国产三级国产专区5o| 在线观看免费视频网站a站| 永久网站在线| 亚洲美女视频黄频| 天美传媒精品一区二区| 国产无遮挡羞羞视频在线观看| 免费在线观看完整版高清| 亚洲av国产av综合av卡| 日韩av免费高清视频| 国产片特级美女逼逼视频| 午夜福利视频在线观看免费| 久久久久久久久久人人人人人人| 久久久久精品久久久久真实原创| 天美传媒精品一区二区| 成人二区视频| 亚洲欧美成人精品一区二区| 男女啪啪激烈高潮av片| 少妇的逼好多水| 久久久久网色| 精品视频人人做人人爽| 天天操日日干夜夜撸| 久久人人爽人人爽人人片va| 女性被躁到高潮视频| 97在线人人人人妻| 久久久久久久久久人人人人人人| 最近最新中文字幕免费大全7| 性色avwww在线观看| av在线app专区| 全区人妻精品视频| 亚洲成国产人片在线观看| 最后的刺客免费高清国语| 国产在线一区二区三区精| 美女脱内裤让男人舔精品视频| 女人精品久久久久毛片| 丝袜美足系列| 成人二区视频| 不卡视频在线观看欧美| 欧美人与性动交α欧美精品济南到 | 麻豆乱淫一区二区| av视频免费观看在线观看| 久久久亚洲精品成人影院| 亚洲精品国产色婷婷电影| 麻豆乱淫一区二区| 宅男免费午夜| 制服诱惑二区| 国产成人免费无遮挡视频| 久久精品国产鲁丝片午夜精品| 国产一区二区激情短视频 | 国产亚洲av片在线观看秒播厂| 欧美最新免费一区二区三区| 高清欧美精品videossex| 一级黄片播放器| 亚洲在久久综合| 日韩一本色道免费dvd| 国产精品三级大全| 少妇 在线观看| 国产精品人妻久久久久久| 91aial.com中文字幕在线观看| 在线观看美女被高潮喷水网站| 亚洲国产欧美日韩在线播放| www.av在线官网国产| 精品一区二区三区四区五区乱码 | av又黄又爽大尺度在线免费看| 女性被躁到高潮视频| 另类亚洲欧美激情| 欧美日韩成人在线一区二区| 人人澡人人妻人| 丝瓜视频免费看黄片| 大话2 男鬼变身卡| 一级毛片电影观看| 晚上一个人看的免费电影| 99精国产麻豆久久婷婷| 亚洲综合色网址| 黄网站色视频无遮挡免费观看| 五月开心婷婷网| 日韩中文字幕视频在线看片| 男人爽女人下面视频在线观看| 国产av一区二区精品久久| 中文字幕人妻熟女乱码| 国产在视频线精品| 日韩欧美一区视频在线观看| 制服诱惑二区| 午夜91福利影院| 国产一区有黄有色的免费视频| 最近最新中文字幕大全免费视频 | 嫩草影院入口| 少妇精品久久久久久久| 国产女主播在线喷水免费视频网站| 精品第一国产精品| 亚洲精品国产av蜜桃| 中文字幕人妻丝袜制服| 精品久久国产蜜桃| 另类精品久久| 人体艺术视频欧美日本| 夫妻午夜视频| 亚洲成人一二三区av| 国产高清不卡午夜福利| 有码 亚洲区| 妹子高潮喷水视频| 少妇高潮的动态图| 国产成人精品婷婷| 蜜桃国产av成人99| 插逼视频在线观看| 狂野欧美激情性xxxx在线观看| 三上悠亚av全集在线观看| 国产免费福利视频在线观看| 制服人妻中文乱码| 香蕉精品网在线| 国产精品久久久久久久电影| 国产高清国产精品国产三级| 久久久久久人妻| 亚洲欧美一区二区三区黑人 | 欧美人与性动交α欧美精品济南到 | 日韩,欧美,国产一区二区三区| 七月丁香在线播放| 一级黄片播放器| 久久久国产精品麻豆| 大片电影免费在线观看免费| 青春草国产在线视频| videosex国产| 免费久久久久久久精品成人欧美视频 | 在现免费观看毛片| 高清视频免费观看一区二区| 久久精品国产自在天天线| 女性被躁到高潮视频| 国产又色又爽无遮挡免| 最黄视频免费看| a级毛片黄视频| 日韩熟女老妇一区二区性免费视频| 国产国拍精品亚洲av在线观看| 亚洲精品456在线播放app| 狠狠婷婷综合久久久久久88av| 91久久精品国产一区二区三区| 国产精品蜜桃在线观看| 美女脱内裤让男人舔精品视频| 欧美另类一区| 熟妇人妻不卡中文字幕| 亚洲av欧美aⅴ国产| 亚洲,一卡二卡三卡| 久久久a久久爽久久v久久| 日韩av不卡免费在线播放| 免费观看无遮挡的男女| 亚洲三级黄色毛片| 久久精品国产自在天天线| 国内精品宾馆在线| 欧美+日韩+精品| 成人国语在线视频| 欧美3d第一页| 国产av精品麻豆| 国产片内射在线| 国产一级毛片在线| 欧美xxⅹ黑人| 亚洲国产精品一区三区| 久久久久久人人人人人| 大话2 男鬼变身卡| 精品久久国产蜜桃| 熟妇人妻不卡中文字幕| 久久人妻熟女aⅴ| 一边亲一边摸免费视频| 晚上一个人看的免费电影| 亚洲一码二码三码区别大吗| 中国国产av一级| 男人舔女人的私密视频| 男女啪啪激烈高潮av片| 好男人视频免费观看在线| 国产av一区二区精品久久| 日本wwww免费看| 51国产日韩欧美| 人体艺术视频欧美日本| 欧美国产精品一级二级三级| 亚洲精品一区蜜桃| 精品人妻偷拍中文字幕| av一本久久久久| 黄网站色视频无遮挡免费观看| 精品国产一区二区三区久久久樱花| 天堂8中文在线网| 欧美精品高潮呻吟av久久| 蜜臀久久99精品久久宅男| 午夜福利影视在线免费观看| 欧美激情国产日韩精品一区| 一本色道久久久久久精品综合| 天堂俺去俺来也www色官网| 99国产综合亚洲精品| 久久午夜综合久久蜜桃| 免费黄频网站在线观看国产| 五月伊人婷婷丁香| 少妇 在线观看| 免费观看在线日韩| 人妻少妇偷人精品九色| 国产日韩欧美在线精品| av免费观看日本| 欧美xxxx性猛交bbbb| 国产成人精品在线电影| 久久久久人妻精品一区果冻| 亚洲美女搞黄在线观看| 亚洲av电影在线观看一区二区三区| 国产亚洲精品久久久com| 亚洲成av片中文字幕在线观看 | 肉色欧美久久久久久久蜜桃| 91在线精品国自产拍蜜月| 国产精品麻豆人妻色哟哟久久| 亚洲欧洲国产日韩| 国产精品久久久久久精品古装| 成人毛片a级毛片在线播放| 9191精品国产免费久久| 亚洲性久久影院| www.熟女人妻精品国产 | 亚洲国产精品专区欧美| 美女视频免费永久观看网站| 日韩人妻精品一区2区三区| 亚洲国产最新在线播放| 宅男免费午夜| 大码成人一级视频| 性色av一级| 男女下面插进去视频免费观看 | 十八禁网站网址无遮挡| 夫妻午夜视频| 国产精品麻豆人妻色哟哟久久| 最黄视频免费看| 高清欧美精品videossex| 一本一本久久a久久精品综合妖精 国产伦在线观看视频一区 | 久久精品国产亚洲av涩爱| 国产精品免费大片| videos熟女内射| 视频区图区小说| 久久精品久久久久久久性| 一级片免费观看大全| 婷婷色综合www| 亚洲成人av在线免费| 91精品伊人久久大香线蕉| 亚洲,欧美精品.| 97在线视频观看| 免费少妇av软件| 十分钟在线观看高清视频www| 在线亚洲精品国产二区图片欧美| 黄片无遮挡物在线观看| 51国产日韩欧美| 日本免费在线观看一区| 午夜免费鲁丝| 青春草视频在线免费观看| 日日撸夜夜添| 亚洲少妇的诱惑av| 观看av在线不卡| 热re99久久精品国产66热6| 久久免费观看电影| av不卡在线播放| 美女脱内裤让男人舔精品视频| av在线播放精品| 亚洲性久久影院| 色哟哟·www| 男人添女人高潮全过程视频| 纵有疾风起免费观看全集完整版| 我要看黄色一级片免费的| 久久久久久久久久久免费av| 久久精品久久精品一区二区三区| a级片在线免费高清观看视频| 色哟哟·www| 成年女人在线观看亚洲视频| 国产欧美另类精品又又久久亚洲欧美| 日日啪夜夜爽| 精品一区二区三区四区五区乱码 | 丝袜脚勾引网站| 人成视频在线观看免费观看| 亚洲四区av| 香蕉丝袜av| 咕卡用的链子| 夫妻性生交免费视频一级片| 国产免费视频播放在线视频| 亚洲精品美女久久av网站| 看免费av毛片| 久久精品国产亚洲av涩爱| 亚洲av电影在线观看一区二区三区| 久久精品aⅴ一区二区三区四区 | 久久99一区二区三区| 大香蕉97超碰在线| 肉色欧美久久久久久久蜜桃| 国产在视频线精品| 国产高清不卡午夜福利| 好男人视频免费观看在线| 久久久久久久久久久免费av| 黄色毛片三级朝国网站| 久久精品人人爽人人爽视色| 在线观看免费高清a一片| 九草在线视频观看| 亚洲精品久久午夜乱码| 欧美日本中文国产一区发布| av国产精品久久久久影院| 日本黄色日本黄色录像| 校园人妻丝袜中文字幕| 十八禁网站网址无遮挡| 最近中文字幕高清免费大全6| 成年人免费黄色播放视频| 亚洲,一卡二卡三卡| 亚洲精品美女久久av网站| 久久97久久精品| 国产在线免费精品| av卡一久久| 久久精品人人爽人人爽视色| 嫩草影院入口| 免费高清在线观看日韩| 天美传媒精品一区二区| www.av在线官网国产| 热re99久久国产66热| 老司机影院毛片| 精品卡一卡二卡四卡免费| 老司机影院毛片| 日韩欧美精品免费久久| 中文字幕另类日韩欧美亚洲嫩草| 99久久精品国产国产毛片| 亚洲一码二码三码区别大吗| 黄色视频在线播放观看不卡| 亚洲av欧美aⅴ国产| 亚洲欧美日韩另类电影网站| 久久99精品国语久久久| 麻豆精品久久久久久蜜桃| 欧美人与性动交α欧美精品济南到 | 国产黄色免费在线视频| 久久久精品区二区三区| 婷婷色综合大香蕉| 老熟女久久久| 少妇的丰满在线观看| 青春草视频在线免费观看| 午夜久久久在线观看| 80岁老熟妇乱子伦牲交| 国产视频首页在线观看| 欧美老熟妇乱子伦牲交| 久久99热这里只频精品6学生| 日韩成人伦理影院| 啦啦啦在线观看免费高清www| 国产亚洲av片在线观看秒播厂| 大码成人一级视频| 两个人免费观看高清视频| 成人漫画全彩无遮挡| 在线天堂中文资源库| 热re99久久国产66热| 欧美xxⅹ黑人| 亚洲人与动物交配视频| 国产精品成人在线| 久久久久久人妻| 成人国产av品久久久| 亚洲国产精品国产精品| 99久久中文字幕三级久久日本| 亚洲综合色惰| 欧美精品高潮呻吟av久久| √禁漫天堂资源中文www| 国产伦理片在线播放av一区| 亚洲色图综合在线观看| 99国产综合亚洲精品| 在线 av 中文字幕| 欧美亚洲 丝袜 人妻 在线|