• <tr id="yyy80"></tr>
  • <sup id="yyy80"></sup>
  • <tfoot id="yyy80"><noscript id="yyy80"></noscript></tfoot>
  • 99热精品在线国产_美女午夜性视频免费_国产精品国产高清国产av_av欧美777_自拍偷自拍亚洲精品老妇_亚洲熟女精品中文字幕_www日本黄色视频网_国产精品野战在线观看 ?

    基于Kinect傳感器的移動機(jī)器人環(huán)境檢測及行為學(xué)習(xí)①

    2016-12-05 07:47:34勇盛棟梁
    高技術(shù)通訊 2016年1期
    關(guān)鍵詞:移動機(jī)器人深度環(huán)境

    段 勇盛棟梁 于 霞

    ?

    基于Kinect傳感器的移動機(jī)器人環(huán)境檢測及行為學(xué)習(xí)①

    段 勇②盛棟梁 于 霞

    (沈陽工業(yè)大學(xué)信息科學(xué)與工程學(xué)院 沈陽 110870)

    研究了一種基于深度圖像和強(qiáng)化學(xué)習(xí)算法的移動機(jī)器人導(dǎo)航行為學(xué)習(xí)方法。該方法利用機(jī)器人裝配的Kinect傳感器檢測工作環(huán)境信息,然后對獲取的深度圖像數(shù)據(jù)和視頻圖像進(jìn)行處理、融合和識別,并由此構(gòu)建機(jī)器人任務(wù)學(xué)習(xí)的狀態(tài)空間,最終利用強(qiáng)化學(xué)習(xí)方法實(shí)現(xiàn)移動機(jī)器人的導(dǎo)航任務(wù)的自學(xué)習(xí)。該方法的有效性通過實(shí)驗(yàn)得到驗(yàn)證。實(shí)驗(yàn)表明,該方法能夠使機(jī)器人具有較強(qiáng)的環(huán)境感知能力,并能夠通過自學(xué)習(xí)的方式掌握行為能力。

    移動機(jī)器人導(dǎo)航, Kinect傳感器, 深度圖像, 強(qiáng)化學(xué)習(xí)(RL)

    0 引 言

    機(jī)器人學(xué)習(xí)是指機(jī)器人利用自身配置的傳感器,通過與環(huán)境的不斷交互來獲取知識并掌握完成任務(wù)的能力,它是使機(jī)器人具有生物智能的一種有效方式,對于提高機(jī)器人的智能水平、自動化程度以及對環(huán)境的適應(yīng)性具有重要意義。

    在未知環(huán)境中機(jī)器人進(jìn)行的任務(wù)學(xué)習(xí)包括環(huán)境感知、自學(xué)習(xí)方法以及如何應(yīng)用學(xué)習(xí)方法實(shí)現(xiàn)機(jī)器人的任務(wù)執(zhí)行等關(guān)鍵問題。其中機(jī)器人裝配的傳感器的感知能力是機(jī)器人進(jìn)行一切工作的基礎(chǔ)和前提條件,目前在移動機(jī)器人導(dǎo)航領(lǐng)域應(yīng)用的傳感器主要包括:超聲測距傳感器、激光測距傳感器以及單目視覺、全景視覺、雙目視覺傳感器和3D激光攝像機(jī)等[1]。而近年來適用于移動機(jī)器人應(yīng)用的新類型傳感器不斷出現(xiàn),其中Kinect傳感器的出現(xiàn)和應(yīng)用為機(jī)器人的研究提供了新的方法并受到了廣泛的關(guān)注[1-3]。Kinect是微軟公司于2010年推出的基于體感交互的傳感器設(shè)備,能夠?qū)崿F(xiàn)視頻圖像、深度數(shù)據(jù)、語音信號的獲取和處理,在人機(jī)交互、虛擬現(xiàn)實(shí)、語音識別、智能機(jī)器人等領(lǐng)域體現(xiàn)出了巨大的潛力[4-6]。Kinect傳感器能夠直接獲取彩色圖像數(shù)據(jù)和覆蓋區(qū)域的深度距離信息,因此與超聲、激光、單目視覺等常用傳感器相比能夠提供更為豐富的感知信息,同時(shí)也具有較好的使用和開發(fā)便利性,因此其研究和開發(fā)具有重要實(shí)用價(jià)值。有效的學(xué)習(xí)方法是機(jī)器人完成學(xué)習(xí)任務(wù)的關(guān)鍵。強(qiáng)化學(xué)習(xí)(reinforcement learning, RL)是一種重要的機(jī)器學(xué)習(xí)方法[7],其學(xué)習(xí)目標(biāo)是實(shí)現(xiàn)狀態(tài)空間到動作空間的最優(yōu)映射策略,這與反應(yīng)式移動機(jī)器人導(dǎo)航方式有著天然的關(guān)聯(lián),因此已成為一種有效的機(jī)器人自學(xué)習(xí)方法[8-10]?;诖耍狙芯拷o出了一種基于Kinect傳感器環(huán)境信息感知的移動機(jī)器人導(dǎo)航任務(wù)自學(xué)習(xí)方法。該方法首先對Kinect獲取的環(huán)境信息進(jìn)行處理、識別和理解,再根據(jù)導(dǎo)航任務(wù)需求,應(yīng)用強(qiáng)化學(xué)習(xí)方法來實(shí)現(xiàn)機(jī)器人的行為動作學(xué)習(xí)。本研究通過實(shí)驗(yàn)測試了機(jī)器人傳感器對環(huán)境的感知能力,并驗(yàn)證了機(jī)器人執(zhí)行導(dǎo)航任務(wù)的有效性。

    1 Kinect系統(tǒng)原理及感知信息

    1.1 Kinect傳感器介紹

    Kinect傳感器如圖1所示,數(shù)據(jù)獲取器件從左至右分別是紅外激光發(fā)射器、彩色攝像頭和紅外接收器,分別用來獲取普通視頻圖像和深度數(shù)據(jù)[11,12]。

    圖1 自主移動機(jī)器人及Kinect傳感器

    1.2 環(huán)境信息的獲取與處理

    Kinect傳感器獲取同一室內(nèi)場景的視頻圖像和深度數(shù)據(jù)映射圖像如圖2所示。為了方便觀察和利用深度數(shù)據(jù),將其進(jìn)行可視化處理,每個(gè)像素的深度數(shù)據(jù)映射到顏色空間,顯示結(jié)果見圖2(b),圖中不同灰度對應(yīng)不同的深度距離數(shù)值。圖中黑色像素用來標(biāo)識傳感器不能正確檢測的深度值,出現(xiàn)該問題的原因來自于Kinect傳感器本身的局限性。造成這些無效深度數(shù)據(jù)出現(xiàn)的情況主要包括環(huán)境中的凹形物體、物體邊緣、特殊材質(zhì)表面物體以及光照條件等。

    無效深度像素通常會成塊出現(xiàn),因此常規(guī)的圖像去噪方法難以解決該問題?;诖?,Silbeman等提出利用條件隨機(jī)場模型深度表示區(qū)域來實(shí)現(xiàn)室內(nèi)場景分割,以此消除Kinect采集的無效數(shù)據(jù)[13]。文獻(xiàn)[14]也給出了基于雙邊聯(lián)合濾波方法來填補(bǔ)深度圖像中的無效數(shù)據(jù)空洞。但以上方法需要較為復(fù)雜的運(yùn)算,將會影響機(jī)器人視覺等應(yīng)用領(lǐng)域?qū)μ幚韺?shí)時(shí)性的要求。因此我們在滿足需求的情況下折衷考慮性能和效率,使用無效數(shù)據(jù)相鄰區(qū)域同一行數(shù)據(jù)的均值來添補(bǔ)無效數(shù)據(jù)的方法,同時(shí)為了防止無效數(shù)據(jù)出現(xiàn)在邊緣的情況,使用水平雙方向進(jìn)行掃描,添補(bǔ)無效數(shù)據(jù)的深度映射圖像,如圖2(c)所示。

    圖2 Kinect傳感器數(shù)據(jù)采集和處理

    2 基于Kinect傳感器的機(jī)器人系統(tǒng)結(jié)構(gòu)

    研究實(shí)驗(yàn)平臺使用博創(chuàng)公司的Voyager Ⅱ型移動機(jī)器人,如圖1所示。移動機(jī)器人導(dǎo)航問題可以認(rèn)為是機(jī)器人能夠根據(jù)傳感器獲取的環(huán)境信息,完成在有障礙物的環(huán)境中的特定任務(wù)。將自主移動機(jī)器人系統(tǒng)分為傳感器、主控系統(tǒng)、運(yùn)動機(jī)構(gòu)三層,Kinect傳感器層用于感知環(huán)境信息,將獲取的視頻圖像和深度數(shù)據(jù)傳遞給機(jī)器人主控系統(tǒng);機(jī)器人主控系統(tǒng)進(jìn)行感知信息融合處理以實(shí)現(xiàn)障礙物的檢測以及目標(biāo)物的定位,然后基于感知信息進(jìn)行導(dǎo)航任務(wù)學(xué)習(xí),學(xué)習(xí)后建立導(dǎo)航策略,再將決策指令發(fā)送給底層運(yùn)動結(jié)構(gòu);運(yùn)動機(jī)構(gòu)控制機(jī)器人執(zhí)行避障、接近目標(biāo)等行為動作。

    機(jī)器人檢測的環(huán)境信息主要包括完全未知的障礙物和具有已知顏色特征的目標(biāo)物。未知障礙物是機(jī)器人室內(nèi)工作環(huán)境的家具、墻壁等物體,已知特征目標(biāo)為機(jī)器人需要跟蹤的目標(biāo)物,

    基于Kinect感知信息進(jìn)行多障礙物檢測方法如下:(1)建立環(huán)境地面模型,檢測多障礙物。由于Kinect獲取的深度數(shù)據(jù)反映了物體表面與傳感器的距離信息,因此當(dāng)傳感器俯仰角度不變的情況下,地面距離也保持不變。事先采集無障礙深度數(shù)據(jù)圖像作為地面模型,然后將檢測深度數(shù)據(jù)與地面模型進(jìn)行幀差,可初步檢測多障礙物。(2)根據(jù)Kinect測距原理和深度數(shù)據(jù)特性,利用障礙物深度圖像的邊緣特征和距離特征進(jìn)行障礙物的分割;(3)對Kinect深度傳感器進(jìn)行標(biāo)定(類似與針孔成像模型),利用深度數(shù)據(jù)圖像的像素與空間位置關(guān)系確定分割障礙物的位置信息。(4)根據(jù)實(shí)際要求設(shè)定障礙物距離閾值,確定障礙物所在機(jī)器人視野中的區(qū)域,實(shí)現(xiàn)障礙物的檢測。檢測過程及結(jié)果如圖3所示,檢測后可獲得障礙物的距離信息和與機(jī)器人的相對方位信息。

    圖3 基于Kinect傳感器的障礙物檢測

    此外,在研究中選擇小球作為機(jī)器人跟蹤的可移動目標(biāo),基于Kinect傳感器的目標(biāo)物檢測方法如下:(1)首先注冊視頻圖像和深度數(shù)據(jù)圖像,使得兩者在像素級上對應(yīng)。注冊后可以實(shí)現(xiàn)視頻數(shù)據(jù)和深度數(shù)據(jù)的信息融合,從而處理復(fù)雜機(jī)器視覺任務(wù);(2)根據(jù)目標(biāo)物體的顏色特征進(jìn)行搜索和分割,包括顏色采集、確定顏色分割閾值、區(qū)域連通、像素搜索等操作,具體實(shí)現(xiàn)方法可參考之前的研究工作[15];(3)基于二維圖像實(shí)現(xiàn)目標(biāo)的分割,但要確定目標(biāo)的三維空間定位,需要進(jìn)行攝像機(jī)標(biāo)定和幾何關(guān)系計(jì)算等復(fù)雜操作[15]。而Kinect傳感器為目標(biāo)空間定位提供了方便且精確的方法,只需根據(jù)視頻圖像獲取的目標(biāo)物像素坐標(biāo)位置,即可對應(yīng)深度數(shù)據(jù)圖像直接得到目標(biāo)位的距離信息。其檢測過程及結(jié)果如圖4所示,檢測后可以獲得目標(biāo)物的距離信息和與機(jī)器人的相對方位信息。

    圖4 基于Kinect傳感器的目標(biāo)物檢測

    3 移動機(jī)器人導(dǎo)航行為自學(xué)習(xí)

    強(qiáng)化學(xué)習(xí)是一種基于感知環(huán)境信息獲取機(jī)器人導(dǎo)航行為能力的有效方法。它只需定義機(jī)器人的學(xué)習(xí)任務(wù),再將機(jī)器人置于未知環(huán)境中通過自身的傳感器來獲取環(huán)境狀態(tài),通過機(jī)器人與環(huán)境的交互來積累成功和失敗經(jīng)驗(yàn),以試錯(cuò)的方式不斷提高機(jī)器人的行為能力。本節(jié)將討論使用強(qiáng)化學(xué)習(xí)方法來學(xué)習(xí)移動機(jī)器人的躲避障礙物和接近目標(biāo)行為。

    3.1 強(qiáng)化學(xué)習(xí)基本理論

    定義智能體的狀態(tài)集合為S={st|st∈S},它執(zhí)行的動作集合表示為A={at|at∈A}。在t時(shí)刻,根據(jù)智能體的狀態(tài)st,選擇并執(zhí)行動作at,導(dǎo)致智能體的狀態(tài)轉(zhuǎn)移到st+1,同時(shí)從環(huán)境得到強(qiáng)化信號rt,它對動作at的效能進(jìn)行評價(jià)。強(qiáng)化學(xué)習(xí)的任務(wù)是得到一個(gè)映射策略π:S→A。

    在強(qiáng)化學(xué)習(xí)算法中,Q學(xué)習(xí)是最重要也是使用最廣泛的一種算法,它通過定義函數(shù)Q(s,a)來評估狀態(tài)相對應(yīng)的各個(gè)動作。Q學(xué)習(xí)算法的基本形式為[2,5]

    -Q(st,at))·e(st,at)

    (1)

    其中,ηt為學(xué)習(xí)率,γ為折扣因子。e(st,at)定義為資格跡[7],它主要用于解決強(qiáng)化學(xué)習(xí)的信度分配問題。

    3.2 基于Kinect感知信息的強(qiáng)化學(xué)習(xí)方法

    本文應(yīng)用表格型Q學(xué)習(xí)方法來使機(jī)器人學(xué)習(xí)避障和接近目標(biāo)行為的學(xué)習(xí)。表格型Q學(xué)習(xí)是將狀態(tài)空間和動作空間進(jìn)行離散化,再由離散的狀態(tài)變量和動作變量構(gòu)成查找表格,表格中的值為對應(yīng)的狀態(tài)-動作對的評估值Q。根據(jù)式(1)實(shí)現(xiàn)學(xué)習(xí)過程中Q值的更新,在學(xué)習(xí)結(jié)束后選擇具有最大Q值的動作和對應(yīng)的狀態(tài)變量形成映射策略。

    (2)

    式中d為障礙物與機(jī)器人的距離,該值可以通過第3節(jié)分割的障礙物所對應(yīng)的深度信息得到。在距離垂直劃分中,對于沒有障礙和距離劃分為“遠(yuǎn)”的機(jī)器人避障策略是相同的。

    通過對特征目標(biāo)的識別和定位可以得到目標(biāo)相對于機(jī)器人的角度信息和距離信息,獲取后機(jī)器人可形成記憶位置信息,將其定義為狀態(tài)變量str和std。再根據(jù)機(jī)器人實(shí)際工作的需求將其進(jìn)行適當(dāng)?shù)碾x散化。

    結(jié)合避障和接近目標(biāo)兩種行為,強(qiáng)化學(xué)習(xí)每個(gè)狀態(tài)變量可以定義為:st={sl,sc,sr,str,std},分別用來表示機(jī)器人Kinect感知范圍內(nèi)左、中、右三個(gè)方向障礙物的距離狀態(tài)以及目標(biāo)的方位和距離信息,將其可能出現(xiàn)的各分量組合構(gòu)成狀態(tài)對應(yīng)序號編碼,并構(gòu)成表格型Q學(xué)習(xí)的離散狀態(tài)。

    圖5 機(jī)器人行為學(xué)習(xí)狀態(tài)劃分

    Q學(xué)習(xí)的動作空間由移動機(jī)器人運(yùn)行信息給出。移動機(jī)器人采用左右輪獨(dú)立驅(qū)動方式,其旋轉(zhuǎn)半徑范圍可從零(原地打轉(zhuǎn))到無限大(直線運(yùn)動)。機(jī)器人的運(yùn)動包括兩個(gè)部分:車體中心的平動和繞小車中心的轉(zhuǎn)動,機(jī)器人的基本運(yùn)動控制單元為左右輪速(左右驅(qū)動電機(jī)轉(zhuǎn)速),表示為vl和vr。定義的Q學(xué)習(xí)動作變量為“宏動作”,具體分為直行前進(jìn)、左/右小轉(zhuǎn)、左/右大轉(zhuǎn)、原地左/右轉(zhuǎn)向,如圖6所示。每個(gè)宏動作通過給定的不同的左右輪速來實(shí)現(xiàn)。

    圖6 強(qiáng)化學(xué)習(xí)動作變量

    Q學(xué)習(xí)最重要的學(xué)習(xí)依據(jù)是強(qiáng)化信號函數(shù)(回報(bào)),它代表在一定狀態(tài)下選擇并執(zhí)行動作獲得的立即評估回報(bào)。對于機(jī)器人所要學(xué)習(xí)任務(wù)需要在避障的同時(shí)接近目標(biāo),對于避障行為,希望機(jī)器人遠(yuǎn)離障礙物,因此機(jī)器人越接近障礙物,越應(yīng)該得到懲罰(負(fù)回報(bào));相反,機(jī)器人應(yīng)該獲得獎(jiǎng)勵(lì)(正回報(bào))。對于接近目標(biāo)行為,機(jī)器人接近目標(biāo)物應(yīng)獲得獎(jiǎng)勵(lì),而遠(yuǎn)離目標(biāo)則應(yīng)得到懲罰。綜合兩種行為需求,定義Q學(xué)習(xí)的強(qiáng)化信號(回報(bào))函數(shù)如下:

    (3)

    4 實(shí)驗(yàn)結(jié)果及分析

    基于以上研究工作,對Kinect傳感器環(huán)境感知和利用強(qiáng)化學(xué)習(xí)實(shí)現(xiàn)移動機(jī)器人導(dǎo)航任務(wù)學(xué)習(xí)進(jìn)行實(shí)驗(yàn)。實(shí)驗(yàn)平臺采用VoyagerII自主機(jī)器人,系統(tǒng)開發(fā)使用Windows操作系統(tǒng)環(huán)境下C++語言的開發(fā)環(huán)境。系統(tǒng)操作界面如圖7所示,可以顯示傳感器采集的信息、處理結(jié)果、定位信息等,能夠?qū)崿F(xiàn)各種處理的操作,機(jī)器人的行為學(xué)習(xí)和導(dǎo)航控制等。

    圖7 系統(tǒng)操作界面

    實(shí)驗(yàn)環(huán)境為實(shí)驗(yàn)室的室內(nèi)場地,室內(nèi)環(huán)境的墻壁,障礙物和具有顏色特征的目標(biāo)球構(gòu)成基本的實(shí)驗(yàn)場景,通過改變障礙物和目標(biāo)物的位置來得到多個(gè)變化的實(shí)驗(yàn)環(huán)境。

    4.1 移動機(jī)器人環(huán)境信息檢測實(shí)驗(yàn)

    首先利用機(jī)器人裝配的Kinect傳感器進(jìn)行環(huán)境檢測實(shí)驗(yàn)并同常用超聲傳感器(聲納)檢測結(jié)果進(jìn)行比較。機(jī)器人通常配置多個(gè)聲納傳感器,每個(gè)傳感器按照一定的距離間隔分別安裝在機(jī)器人同一水平的圓周上,見圖1。首先使用超聲進(jìn)行環(huán)境檢測,環(huán)境中的障礙物如圖8所示,該障礙物正面接觸面積狹窄,同時(shí)下部還有一較低高度的橫梁,這類物體在室內(nèi)環(huán)境中十分常見。圖9為機(jī)器人超聲傳感器的檢測結(jié)果,圖中以標(biāo)靶圖的方式標(biāo)識出了機(jī)器人前方聲納的測距數(shù)據(jù),顯示了傳感器并沒有完整地檢測出環(huán)境中的障礙物。說明聲納雖然檢測出圖中靠左側(cè)的立柱,但由于聲納測距角度分辨率較低,無法確定寬度較窄障礙物的具體方位信息。

    圖8 機(jī)器人工作環(huán)境中的障礙物

    圖9 基于超聲的障礙物檢測結(jié)果

    同時(shí),使用Kinect傳感器對于同一環(huán)境進(jìn)行檢測,Kinect傳感器獲取的深度數(shù)據(jù)進(jìn)行處理,分割出該障礙物,如圖10所示??梢訩inect傳感器能夠較為完整準(zhǔn)確地實(shí)現(xiàn)復(fù)雜障礙物的檢測,相對于機(jī)器人常用的超聲傳感器具有更強(qiáng)的感知能力和適用性。

    圖10 基于Kinect傳感器障礙物檢測結(jié)果

    此外,本研究利用Kinect傳感器的目標(biāo)定位方法,即通過融合自身獲取的彩色圖像和深度數(shù)據(jù)來實(shí)現(xiàn),首先根據(jù)目標(biāo)顏色特征進(jìn)行分割,然后在像素級對應(yīng)深度數(shù)據(jù)圖像來獲得其距離信息。在完成目標(biāo)分割后就能夠直接從深度數(shù)據(jù)中得到目標(biāo)的相對距離值。實(shí)驗(yàn)中,分別進(jìn)行10次測量,每次改變目標(biāo)物(小球)和機(jī)器人的相對位置,求得多次定位相對誤差的平均值為1.1%,定位距離最大相對誤差為1.8%。

    由于各傳感器的精度與工作距離有關(guān),因此本文采用相對誤差來反映測距精度,實(shí)驗(yàn)中作為標(biāo)準(zhǔn)的精確數(shù)據(jù)通過單點(diǎn)激光測距儀(SW-40,精度±2mm)獲得。

    4.2 移動機(jī)器人導(dǎo)航任務(wù)學(xué)習(xí)實(shí)驗(yàn)

    強(qiáng)化學(xué)習(xí)后,基于最終的Q表確定狀態(tài)變量和動作變量的最優(yōu)映射策略,并用其來控制機(jī)器人執(zhí)行導(dǎo)航任務(wù)。圖11為在學(xué)習(xí)過程中,某一狀態(tài)—?jiǎng)幼鲗?yīng)的根據(jù)最大Q值進(jìn)行歸一化后的Q值變化曲線,表明了回報(bào)函數(shù)作用于Q值的更新,并最終使Q值到達(dá)最大值,實(shí)現(xiàn)了該狀態(tài)到動作的最優(yōu)映射策略。

    圖11 強(qiáng)化學(xué)習(xí)中某一Q值變化曲線

    圖12為在應(yīng)用學(xué)習(xí)策略控制機(jī)器人在仿真環(huán)境中的導(dǎo)航運(yùn)行軌跡,其中對機(jī)器人運(yùn)動和障礙物位置進(jìn)行模擬,目標(biāo)位置設(shè)定為已知??梢姍C(jī)器人能夠在較為復(fù)雜的環(huán)境中完成避障且接近目標(biāo)。

    圖12 機(jī)器人導(dǎo)航軌跡

    此外,我們使用實(shí)體移動機(jī)器人進(jìn)行實(shí)驗(yàn),通過改變目標(biāo)物的位置來得到多組目標(biāo)物的位置信息,其位置信息來自于上節(jié)的識別結(jié)果。其位置信息坐標(biāo)分別為:(3.55m, 7.10m), (1.53m, 6.76m),(5.32m, 6.81m)。然后分別進(jìn)行機(jī)器人導(dǎo)航實(shí)驗(yàn),圖13顯示了其中一組的實(shí)體移動機(jī)器人在工作環(huán)境下的運(yùn)行情況,可見機(jī)器人可以按照較為優(yōu)化的路徑無碰撞地到達(dá)目標(biāo)。

    圖13 移動機(jī)器人導(dǎo)航運(yùn)行過程

    本文對于由障礙物和目標(biāo)物定義的強(qiáng)化學(xué)習(xí)離散狀態(tài)空間劃分沒有過于精細(xì),主要原因是由于機(jī)器人車體、障礙物和目標(biāo)均具有一定的體積,特別是機(jī)器人接近時(shí)物體在圖像中會有較大的比例,因此會得到“遠(yuǎn)粗近細(xì)”的機(jī)器人控制效果,能夠滿足機(jī)器人工作的要求。此外,若劃分過細(xì)也會使得對應(yīng)的強(qiáng)化學(xué)習(xí)狀態(tài)空間過大,影響學(xué)習(xí)效率,引起維數(shù)災(zāi)難問題。

    5 結(jié) 論

    感知系統(tǒng)是機(jī)器人執(zhí)行一切工作任務(wù)的基礎(chǔ),也是決定自主機(jī)器人智能程度的關(guān)鍵,Kinect傳感器的產(chǎn)生和應(yīng)用為移動機(jī)器人了解環(huán)境信息提供了更為有效、便捷的途徑。基于此,本文研究了Kinect傳感器在移動機(jī)器人領(lǐng)域的應(yīng)用問題,給出了障礙物和目標(biāo)物的檢測及定位方法,彌補(bǔ)了傳統(tǒng)超聲傳感器和視覺傳感器在機(jī)器人環(huán)境感知方面的局限和不足。此外,本文提出了利用Kinect感知信息并基于強(qiáng)化學(xué)習(xí)的移動機(jī)器人復(fù)雜任務(wù)學(xué)習(xí)方法,該方法能夠在沒有專家知識和精確環(huán)境模型的條件下,利用傳感器感知環(huán)境信息,通過機(jī)器人自學(xué)習(xí)來掌握行為動作能力。因此,研究工作能夠有效地提高機(jī)器人的智能水平、學(xué)習(xí)能力和環(huán)境的適應(yīng)性,同時(shí)也能夠進(jìn)一步拓展到其他復(fù)雜任務(wù)的學(xué)習(xí)中。

    [ 1]StoyanovT,MojtahedzadehR,AndreassonH,etal.Comparativeevaluationofrangesensoraccuracyforindoormobileroboticsandautomatedlogisticsapplications.RoboticsandAutonomousSystems, 2013, 61: 1094-1105

    [ 2] 楊東方,王仕成,劉華平等. 基于Kinect系統(tǒng)的場景建模與機(jī)器人自主導(dǎo)航. 機(jī)器人,2012, 34(5):281-589

    [ 3]TolgyessyM,HubinskyP.TheKinectsensorinroboticseducation.In:Proceedingsofthe2ndRoboticsinEducation,Vienna,Austria, 2011. 143-146

    [ 4] 劉鑫,許華榮,胡占義. 基于GPU和Kinect的快速物體重建. 自動化學(xué)報(bào),2012,38(8): 1288-1297

    [ 5]HanJG,ShaoL,XuD,etal.EnhancedcomputervisionwithMicrosoftKinectsensor:areview.IEEETransactionsonCybernetics, 2013, 43(5): 1318-1334

    [ 6] 羅元,謝彧,張毅. 基于Kinect傳感器的智能輪椅手勢控制系統(tǒng)的設(shè)計(jì)與實(shí)現(xiàn). 機(jī)器人,2012,34(1):110-113,119

    [ 7]SuttonRS,BartoAG.Reinforcementlearning:anintroduction.Cambridge:MITPress, 1998

    [ 8]McPartlandM,GallagherM.Reinforcementlearninginfirstpersonshootergames.IEEETransactionsonComputationalIntelligenceandAIinGames, 2011, 3 (1): 43-56

    [ 9]ChenCL,LiHX,DongDY.Hybridcontrolforrobotnavigation—ahierarchicalQ-learningalgorithm.IEEERobotics&AutomationMagazine, 2008, 15 (2): 37-47

    [10]YamaguchiA,Takamatsu,OgasawaraT.OCOB:actionspaceforreinforcementlearningofhighDoFrobots.AutonomousRobots, 2013, 34(4): 327-346

    [11] 余濤.Kinect應(yīng)用開發(fā):用最自然的方式與機(jī)器對話. 北京:機(jī)械工業(yè)出版社,2013

    [12]KhoshelhamK,ElberinkSO.AccuracyandresolutionofKinectdepthdataforindoormappingapplication.Sensors, 2012, (12): 1437-1454

    [13]SilbermanN,FergusR.Indoorscenesegmentationusingastructuredlightsensor.In:ProceedingsoftheIEEEInternationalConferenceonComputerVisionWorkshops,Barcelona,Spain, 2011. 601-608

    [14]CamplaniM,SalgadoL.Efficientspatio-temporalholefillingstrategyforKinectdepthmaps.Is&t/spieElectronicImaging, 2012, 8290(9): 841-845

    [15] 段勇,徐心和. 自主足球機(jī)器人視覺系統(tǒng)結(jié)構(gòu)及關(guān)鍵技術(shù)研究. 東北大學(xué)學(xué)報(bào)(自然科學(xué)版),2006, 27(1):9-12

    doi:10.3772/j.issn.1002-0470.2016.01.003

    Mobile robot environment detection and behavior learning based on Kinect sensor

    DuanYong,ShengDongliang,YuXia

    (SchoolofInformationScienceandEngineering,ShenyangUniversityofTechnology,Shenyang110870)

    Abehaviorlearningalgorithmformobilerobotnavigationbasedondepthimagesandreinforcementlearningisproposed.ThealgorithmusestheKinectsensoronamobilerobottocapturetheenvironmentaldataoftherobot,then,processes,fusesandidentifiesthedataofdepthimagesandvideoimagesamongthemtoestablishthestatespaceforrobotlearning,andfinally,usesthereinforcementlearningmethodtoimplementthemobilerobot’sself-learningofnavigationtasks.Theeffectivenessofproposedalgorithmwasverifiedbyexperiment.Theexperimentalresultsshowthatthemethodcanmakeamobilerobotpossesthestrongerabilityofperceivingenvironmentsandcapacityofmasteringbehaviorsbyself-learning.

    mobilerobotnavigation,Kinectsensor,depthimage,reinforcementlearning(RL)

    ① 國家自然科學(xué)基金(60905054),遼寧省高等學(xué)校優(yōu)秀科技人才支持計(jì)劃(LR2015045)和遼寧省自然科學(xué)基金(2015020010)資助項(xiàng)目。

    2015-09-20)

    10.3772/j.issn.1002-0470.2016.01.002

    ② 男,1978年生,博士,副教授;研究方向:智能機(jī)器人,計(jì)算機(jī)視覺,機(jī)器學(xué)習(xí)等;聯(lián)系人,E-mail: duanyong0607@163.com(

    猜你喜歡
    移動機(jī)器人深度環(huán)境
    移動機(jī)器人自主動態(tài)避障方法
    長期鍛煉創(chuàng)造體內(nèi)抑癌環(huán)境
    一種用于自主學(xué)習(xí)的虛擬仿真環(huán)境
    深度理解一元一次方程
    孕期遠(yuǎn)離容易致畸的環(huán)境
    深度觀察
    深度觀察
    環(huán)境
    深度觀察
    基于Twincat的移動機(jī)器人制孔系統(tǒng)
    男男h啪啪无遮挡| 天天躁日日躁夜夜躁夜夜| 精品国产乱子伦一区二区三区| 久久国产精品人妻蜜桃| 欧美大码av| 在线播放国产精品三级| 搡老乐熟女国产| 久久99热这里只频精品6学生| 久久国产亚洲av麻豆专区| 亚洲中文日韩欧美视频| 我要看黄色一级片免费的| 天天躁日日躁夜夜躁夜夜| 黑人巨大精品欧美一区二区mp4| 亚洲情色 制服丝袜| 亚洲中文日韩欧美视频| 久久精品亚洲熟妇少妇任你| 亚洲欧美精品综合一区二区三区| 97人妻天天添夜夜摸| 亚洲三区欧美一区| 亚洲专区国产一区二区| 一级毛片精品| 婷婷丁香在线五月| 麻豆av在线久日| 国产一卡二卡三卡精品| 欧美+亚洲+日韩+国产| 成人精品一区二区免费| 久久久精品国产亚洲av高清涩受| 国产一区二区三区在线臀色熟女 | 国产精品免费一区二区三区在线 | 国产成人av教育| 可以免费在线观看a视频的电影网站| 首页视频小说图片口味搜索| 国产亚洲午夜精品一区二区久久| 高清av免费在线| 免费久久久久久久精品成人欧美视频| av网站在线播放免费| 伦理电影免费视频| 91老司机精品| 丁香六月欧美| 成人永久免费在线观看视频 | 男女下面插进去视频免费观看| 日韩人妻精品一区2区三区| 一区二区三区精品91| 操出白浆在线播放| 最新在线观看一区二区三区| 国产亚洲欧美精品永久| 亚洲精品国产色婷婷电影| 久久青草综合色| 老司机深夜福利视频在线观看| 欧美国产精品va在线观看不卡| 天天躁日日躁夜夜躁夜夜| 超碰成人久久| 色播在线永久视频| 色婷婷av一区二区三区视频| 大码成人一级视频| 看免费av毛片| av不卡在线播放| 麻豆乱淫一区二区| 成人av一区二区三区在线看| 欧美日韩黄片免| 亚洲熟女毛片儿| 亚洲欧美精品综合一区二区三区| 成年版毛片免费区| 中文字幕制服av| 亚洲欧美色中文字幕在线| 欧美激情 高清一区二区三区| 欧美黄色片欧美黄色片| 日韩熟女老妇一区二区性免费视频| 黄色视频,在线免费观看| 亚洲欧美一区二区三区黑人| 丝袜人妻中文字幕| 精品国产一区二区久久| 熟女少妇亚洲综合色aaa.| 久久99热这里只频精品6学生| 老司机亚洲免费影院| 免费在线观看影片大全网站| avwww免费| 女性生殖器流出的白浆| 久久亚洲真实| 国产精品久久久久久人妻精品电影 | 国产精品九九99| 亚洲黑人精品在线| 免费在线观看黄色视频的| 老司机福利观看| 午夜激情久久久久久久| 欧美精品av麻豆av| 黄色毛片三级朝国网站| 国产精品国产高清国产av | 好男人电影高清在线观看| 免费少妇av软件| 精品人妻熟女毛片av久久网站| 欧美久久黑人一区二区| 一级毛片精品| 久热爱精品视频在线9| 大型黄色视频在线免费观看| 国产精品国产av在线观看| 午夜福利乱码中文字幕| 亚洲精品一二三| 久久国产精品大桥未久av| 超色免费av| 国产成人欧美在线观看 | 久久香蕉激情| 国产成人av教育| 久久久久视频综合| 亚洲精品久久午夜乱码| 欧美 亚洲 国产 日韩一| 在线观看66精品国产| 伊人久久大香线蕉亚洲五| 国产不卡av网站在线观看| 黄色视频,在线免费观看| 大香蕉久久成人网| 操出白浆在线播放| 自拍欧美九色日韩亚洲蝌蚪91| 熟女少妇亚洲综合色aaa.| av国产精品久久久久影院| 欧美国产精品va在线观看不卡| 18禁观看日本| 亚洲精品一二三| 精品免费久久久久久久清纯 | 男人操女人黄网站| 免费久久久久久久精品成人欧美视频| 亚洲av片天天在线观看| 国产亚洲av高清不卡| 亚洲欧美色中文字幕在线| 成年动漫av网址| 性高湖久久久久久久久免费观看| 在线看a的网站| 免费观看a级毛片全部| 免费久久久久久久精品成人欧美视频| 亚洲av片天天在线观看| 精品国产亚洲在线| 日韩 欧美 亚洲 中文字幕| 亚洲精品粉嫩美女一区| 色精品久久人妻99蜜桃| 国产成人免费观看mmmm| 黄色a级毛片大全视频| 成年人午夜在线观看视频| 久久久久久免费高清国产稀缺| 亚洲欧美激情在线| 侵犯人妻中文字幕一二三四区| 黄色视频在线播放观看不卡| 在线十欧美十亚洲十日本专区| 无限看片的www在线观看| 国产成+人综合+亚洲专区| 国产精品国产高清国产av | av欧美777| 日本a在线网址| 国产熟女午夜一区二区三区| 高清av免费在线| 无限看片的www在线观看| 91字幕亚洲| 高清视频免费观看一区二区| 别揉我奶头~嗯~啊~动态视频| 老司机午夜福利在线观看视频 | 精品亚洲成国产av| 在线天堂中文资源库| 久久久久国内视频| 亚洲国产欧美在线一区| 精品少妇内射三级| 每晚都被弄得嗷嗷叫到高潮| 日韩欧美一区二区三区在线观看 | 国产三级黄色录像| 麻豆av在线久日| 国产麻豆69| 亚洲色图综合在线观看| 欧美成人午夜精品| 亚洲国产看品久久| 欧美激情高清一区二区三区| 免费观看a级毛片全部| 青青草视频在线视频观看| 九色亚洲精品在线播放| 国产成人系列免费观看| 91成年电影在线观看| 99香蕉大伊视频| 国产精品一区二区在线不卡| 美女国产高潮福利片在线看| 国产野战对白在线观看| 性高湖久久久久久久久免费观看| 后天国语完整版免费观看| 高清在线国产一区| 欧美精品亚洲一区二区| 日本欧美视频一区| 99国产综合亚洲精品| 女警被强在线播放| 亚洲精品久久午夜乱码| 亚洲精品在线美女| 18禁国产床啪视频网站| 久久久久久久久久久久大奶| av网站在线播放免费| 欧美 亚洲 国产 日韩一| 国产日韩欧美亚洲二区| 国产一区二区三区在线臀色熟女 | 国产一卡二卡三卡精品| 男女边摸边吃奶| 亚洲精品国产一区二区精华液| 又黄又粗又硬又大视频| 99国产极品粉嫩在线观看| 亚洲中文av在线| 男人操女人黄网站| 日本av手机在线免费观看| 在线观看www视频免费| www.999成人在线观看| 黄片大片在线免费观看| 搡老乐熟女国产| 老司机福利观看| 我的亚洲天堂| 一区二区三区激情视频| 日韩欧美一区二区三区在线观看 | 天堂动漫精品| 欧美成狂野欧美在线观看| 国产高清videossex| 97人妻天天添夜夜摸| 久久国产精品男人的天堂亚洲| 日韩三级视频一区二区三区| 午夜福利免费观看在线| 最黄视频免费看| 日本vs欧美在线观看视频| 大片免费播放器 马上看| 国产深夜福利视频在线观看| 亚洲熟妇熟女久久| 亚洲熟女精品中文字幕| 黑人欧美特级aaaaaa片| 国产亚洲一区二区精品| 精品一品国产午夜福利视频| 欧美在线一区亚洲| 欧美日韩亚洲国产一区二区在线观看 | 在线观看免费日韩欧美大片| 久久国产精品人妻蜜桃| 精品国产亚洲在线| 亚洲久久久国产精品| 两性夫妻黄色片| 啦啦啦中文免费视频观看日本| 黄色 视频免费看| 欧美激情极品国产一区二区三区| 男人操女人黄网站| 国产一区二区 视频在线| 亚洲成人免费电影在线观看| 国产91精品成人一区二区三区 | 在线观看免费视频日本深夜| 欧美变态另类bdsm刘玥| 亚洲精品自拍成人| 成人影院久久| 超碰97精品在线观看| 欧美黄色片欧美黄色片| 男人操女人黄网站| 日日摸夜夜添夜夜添小说| 亚洲国产成人一精品久久久| 亚洲久久久国产精品| 日韩有码中文字幕| 日韩免费高清中文字幕av| 久久久国产欧美日韩av| 日本a在线网址| 熟女少妇亚洲综合色aaa.| 又紧又爽又黄一区二区| 欧美激情 高清一区二区三区| 波多野结衣一区麻豆| 免费一级毛片在线播放高清视频 | 精品国产乱码久久久久久男人| 日韩中文字幕视频在线看片| 曰老女人黄片| 少妇被粗大的猛进出69影院| 视频在线观看一区二区三区| 久久人人爽av亚洲精品天堂| 美女视频免费永久观看网站| videosex国产| 女人精品久久久久毛片| 国产精品1区2区在线观看. | 亚洲国产欧美日韩在线播放| 亚洲av电影在线进入| 亚洲成国产人片在线观看| 国产精品熟女久久久久浪| 人妻 亚洲 视频| 久久天躁狠狠躁夜夜2o2o| 免费av中文字幕在线| 精品国产亚洲在线| av有码第一页| 99久久精品国产亚洲精品| 免费在线观看视频国产中文字幕亚洲| 啦啦啦免费观看视频1| av网站免费在线观看视频| 国产片内射在线| 在线观看www视频免费| 亚洲精品粉嫩美女一区| 女人精品久久久久毛片| 一边摸一边抽搐一进一出视频| 国产欧美日韩一区二区三| 青草久久国产| 热re99久久国产66热| 久久久国产欧美日韩av| 一级片免费观看大全| 精品第一国产精品| 亚洲国产成人一精品久久久| 久久中文字幕人妻熟女| 777米奇影视久久| 一级a爱视频在线免费观看| 亚洲av美国av| 三级毛片av免费| 99国产精品一区二区三区| 欧美黑人精品巨大| 成人黄色视频免费在线看| 精品少妇内射三级| 国产又爽黄色视频| 1024视频免费在线观看| 精品国内亚洲2022精品成人 | 999久久久精品免费观看国产| 亚洲精品美女久久久久99蜜臀| bbb黄色大片| 757午夜福利合集在线观看| 18禁国产床啪视频网站| 免费在线观看黄色视频的| 不卡av一区二区三区| 两个人免费观看高清视频| 大香蕉久久成人网| 亚洲午夜理论影院| 日韩视频在线欧美| 免费人妻精品一区二区三区视频| 91精品国产国语对白视频| 欧美精品高潮呻吟av久久| 亚洲精品自拍成人| 国产1区2区3区精品| 天天躁狠狠躁夜夜躁狠狠躁| a级毛片在线看网站| 黄色怎么调成土黄色| 男女午夜视频在线观看| 满18在线观看网站| 久久影院123| 久久久久久久国产电影| 亚洲七黄色美女视频| 久久人人爽av亚洲精品天堂| 精品亚洲乱码少妇综合久久| 亚洲精华国产精华精| 久久久久久久久免费视频了| 天天躁夜夜躁狠狠躁躁| 国产成人精品无人区| 色视频在线一区二区三区| 亚洲伊人色综图| 丝瓜视频免费看黄片| 久久人妻熟女aⅴ| 国产一区二区 视频在线| 亚洲精品在线观看二区| 亚洲黑人精品在线| 脱女人内裤的视频| 巨乳人妻的诱惑在线观看| 久久九九热精品免费| 国产亚洲精品一区二区www | 国产在线视频一区二区| 国产97色在线日韩免费| 亚洲欧美激情在线| 色94色欧美一区二区| 久久久国产一区二区| 国产无遮挡羞羞视频在线观看| 香蕉丝袜av| 两个人看的免费小视频| 黑人巨大精品欧美一区二区蜜桃| 久久久久久久久久久久大奶| 法律面前人人平等表现在哪些方面| 欧美日韩黄片免| 香蕉丝袜av| 亚洲情色 制服丝袜| 久久久国产欧美日韩av| 国产色视频综合| 无限看片的www在线观看| 天堂动漫精品| 亚洲avbb在线观看| 久久人人97超碰香蕉20202| 天天操日日干夜夜撸| 看免费av毛片| 国产精品香港三级国产av潘金莲| 制服诱惑二区| 亚洲午夜精品一区,二区,三区| 午夜福利,免费看| 午夜老司机福利片| 又黄又粗又硬又大视频| 国产精品免费一区二区三区在线 | 香蕉丝袜av| 黑人猛操日本美女一级片| 久久精品国产a三级三级三级| 亚洲精华国产精华精| 在线观看免费高清a一片| 久久精品国产亚洲av香蕉五月 | 日韩有码中文字幕| av不卡在线播放| 黄色视频不卡| 国产高清videossex| 午夜福利视频在线观看免费| 亚洲黑人精品在线| 久久午夜综合久久蜜桃| 亚洲 国产 在线| 男女边摸边吃奶| 亚洲精品av麻豆狂野| 午夜福利乱码中文字幕| 别揉我奶头~嗯~啊~动态视频| 欧美日韩av久久| 亚洲男人天堂网一区| 亚洲精品乱久久久久久| 婷婷成人精品国产| 日韩视频一区二区在线观看| svipshipincom国产片| 亚洲av成人不卡在线观看播放网| 一级,二级,三级黄色视频| 亚洲精品成人av观看孕妇| 狠狠狠狠99中文字幕| 精品高清国产在线一区| 一本一本久久a久久精品综合妖精| 亚洲国产av新网站| 老司机亚洲免费影院| 国产一卡二卡三卡精品| 老司机午夜福利在线观看视频 | 亚洲伊人色综图| 成年人黄色毛片网站| 在线十欧美十亚洲十日本专区| 国产亚洲欧美在线一区二区| 国产精品 欧美亚洲| 无遮挡黄片免费观看| 国产精品美女特级片免费视频播放器 | 夫妻午夜视频| 久久久久久久国产电影| 又大又爽又粗| 精品久久久精品久久久| 男女床上黄色一级片免费看| 午夜久久久在线观看| 亚洲成人免费av在线播放| 久9热在线精品视频| 欧美日韩精品网址| 99国产综合亚洲精品| 怎么达到女性高潮| 亚洲国产看品久久| 日韩一卡2卡3卡4卡2021年| 国产一区二区三区视频了| 日韩人妻精品一区2区三区| 午夜91福利影院| 亚洲成av片中文字幕在线观看| 久久久久精品国产欧美久久久| 亚洲美女黄片视频| 美女主播在线视频| 亚洲熟女毛片儿| 国产成人精品久久二区二区91| 王馨瑶露胸无遮挡在线观看| 久久久久精品人妻al黑| 在线播放国产精品三级| 免费少妇av软件| 99久久精品国产亚洲精品| 欧美 日韩 精品 国产| 高清毛片免费观看视频网站 | 男女之事视频高清在线观看| 国产成人精品久久二区二区免费| 日韩欧美三级三区| 国产精品免费大片| 国产一区有黄有色的免费视频| 精品久久久久久电影网| 蜜桃国产av成人99| 亚洲精品自拍成人| 曰老女人黄片| 日本a在线网址| 丝袜美足系列| 亚洲第一av免费看| aaaaa片日本免费| 亚洲 国产 在线| 久久香蕉激情| 老汉色∧v一级毛片| 电影成人av| 下体分泌物呈黄色| 天堂中文最新版在线下载| 一区二区三区国产精品乱码| 美女高潮喷水抽搐中文字幕| 男女高潮啪啪啪动态图| 国产精品香港三级国产av潘金莲| 热99re8久久精品国产| 麻豆乱淫一区二区| 亚洲国产欧美一区二区综合| 不卡av一区二区三区| 中文字幕另类日韩欧美亚洲嫩草| 99国产精品99久久久久| 欧美黑人欧美精品刺激| 国产精品一区二区在线不卡| 久热这里只有精品99| 亚洲第一欧美日韩一区二区三区 | 51午夜福利影视在线观看| 真人做人爱边吃奶动态| 亚洲精品美女久久av网站| 黑人欧美特级aaaaaa片| 国产不卡av网站在线观看| 欧美另类亚洲清纯唯美| 日本欧美视频一区| 狂野欧美激情性xxxx| 免费黄频网站在线观看国产| 99久久国产精品久久久| 999久久久国产精品视频| 欧美人与性动交α欧美精品济南到| 欧美成人午夜精品| 中国美女看黄片| 亚洲专区国产一区二区| 国产精品 国内视频| 欧美日韩精品网址| 久久久久久久久久久久大奶| 手机成人av网站| 欧美在线一区亚洲| 欧美日韩精品网址| 亚洲精品自拍成人| 久久久久久免费高清国产稀缺| 精品熟女少妇八av免费久了| 纯流量卡能插随身wifi吗| 精品熟女少妇八av免费久了| 韩国精品一区二区三区| 一进一出抽搐动态| 成人国产一区最新在线观看| 精品一区二区三区四区五区乱码| 久久久久久人人人人人| 亚洲天堂av无毛| 麻豆乱淫一区二区| 超色免费av| 在线观看www视频免费| 欧美精品一区二区免费开放| 日本黄色视频三级网站网址 | 性少妇av在线| 国产日韩欧美亚洲二区| 一本—道久久a久久精品蜜桃钙片| 在线观看人妻少妇| 成年女人毛片免费观看观看9 | 欧美 日韩 精品 国产| av福利片在线| 男人舔女人的私密视频| 一进一出抽搐动态| 欧美 日韩 精品 国产| 午夜精品久久久久久毛片777| 不卡一级毛片| 最黄视频免费看| 久久人人97超碰香蕉20202| 久久久精品国产亚洲av高清涩受| 99久久人妻综合| 国产区一区二久久| 亚洲国产毛片av蜜桃av| 久久久久国产一级毛片高清牌| 美女午夜性视频免费| 色综合欧美亚洲国产小说| 精品视频人人做人人爽| 多毛熟女@视频| 亚洲视频免费观看视频| 中文字幕最新亚洲高清| 99精品欧美一区二区三区四区| 高潮久久久久久久久久久不卡| 啦啦啦 在线观看视频| 国产免费视频播放在线视频| 亚洲av电影在线进入| 少妇猛男粗大的猛烈进出视频| 女性生殖器流出的白浆| 99九九在线精品视频| 91av网站免费观看| 欧美 亚洲 国产 日韩一| 欧美精品一区二区大全| 国产精品98久久久久久宅男小说| 丝袜人妻中文字幕| 蜜桃国产av成人99| 黄色片一级片一级黄色片| 国产男靠女视频免费网站| 自拍欧美九色日韩亚洲蝌蚪91| 另类亚洲欧美激情| 91老司机精品| 亚洲av日韩精品久久久久久密| 午夜日韩欧美国产| 亚洲av第一区精品v没综合| 黄色视频在线播放观看不卡| 欧美日韩成人在线一区二区| 免费在线观看影片大全网站| 午夜老司机福利片| 国产在线观看jvid| 多毛熟女@视频| 亚洲av美国av| 美女福利国产在线| 天天添夜夜摸| 欧美精品啪啪一区二区三区| 一边摸一边抽搐一进一小说 | 新久久久久国产一级毛片| av网站在线播放免费| 亚洲视频免费观看视频| 天堂8中文在线网| 十八禁网站网址无遮挡| 久久精品国产综合久久久| 国产伦人伦偷精品视频| 成年版毛片免费区| 18在线观看网站| 国产精品久久久久久精品古装| 亚洲国产av新网站| 亚洲国产看品久久| 丰满迷人的少妇在线观看| 国产三级黄色录像| 成人永久免费在线观看视频 | 欧美日韩精品网址| 两性夫妻黄色片| 午夜免费成人在线视频| 91麻豆av在线| 免费在线观看完整版高清| 亚洲中文日韩欧美视频| 久久精品国产亚洲av高清一级| 麻豆成人av在线观看| 后天国语完整版免费观看| 国产深夜福利视频在线观看| 精品午夜福利视频在线观看一区 | 欧美日韩视频精品一区| 国产在线一区二区三区精| 成年女人毛片免费观看观看9 | 热re99久久精品国产66热6| 99香蕉大伊视频| 色在线成人网| 美女扒开内裤让男人捅视频| 国产不卡av网站在线观看| 亚洲情色 制服丝袜| 老司机影院毛片| 757午夜福利合集在线观看| 午夜福利在线观看吧| 欧美日韩亚洲高清精品| 99热网站在线观看| 国产av一区二区精品久久| 国产99久久九九免费精品| 国产亚洲精品久久久久5区|