• <tr id="yyy80"></tr>
  • <sup id="yyy80"></sup>
  • <tfoot id="yyy80"><noscript id="yyy80"></noscript></tfoot>
  • 99热精品在线国产_美女午夜性视频免费_国产精品国产高清国产av_av欧美777_自拍偷自拍亚洲精品老妇_亚洲熟女精品中文字幕_www日本黄色视频网_国产精品野战在线观看 ?

    基于PSO算法的RoboCup2D機(jī)器人研究

    2016-11-17 08:56:26包勝剛董春晨
    計(jì)算機(jī)測量與控制 2016年9期
    關(guān)鍵詞:體系結(jié)構(gòu)粒子足球

    包勝剛,董春晨,劉 釗

    (武漢科技大學(xué) 計(jì)算機(jī)科學(xué)與技術(shù)學(xué)院,武漢 430081)

    ?

    基于PSO算法的RoboCup2D機(jī)器人研究

    包勝剛,董春晨,劉 釗

    (武漢科技大學(xué) 計(jì)算機(jī)科學(xué)與技術(shù)學(xué)院,武漢 430081)

    對(duì)機(jī)器人體系結(jié)構(gòu)、動(dòng)作學(xué)習(xí)及行為的組織方式進(jìn)行了研究,以演化計(jì)算為基本方法,以RoboCup2D為平臺(tái),設(shè)計(jì)了基于PSO算法的足球機(jī)器人的體系結(jié)構(gòu),解決感知、動(dòng)作、和規(guī)劃問題;在訓(xùn)練環(huán)境下,形成感知規(guī)則,優(yōu)化感知相關(guān)參數(shù),得到對(duì)信息高效快速的感知方法,并根據(jù)指定的粒度、功能、參數(shù),對(duì)RoboCup2D機(jī)器人的原子動(dòng)作進(jìn)行了組合優(yōu)化,得到一組帶參數(shù)和執(zhí)行效果描述的粒子動(dòng)作;最后在賽場環(huán)境和任務(wù)驅(qū)動(dòng)下,搜索粒子動(dòng)作并進(jìn)行組織規(guī)劃,得到完成特定任務(wù)的機(jī)器人行為;RoboCup2D仿真實(shí)驗(yàn)表明,演化計(jì)算方法不僅能利用原子動(dòng)作進(jìn)行組合優(yōu)化,得到適應(yīng)于不同條件的粒子動(dòng)作,而且能通過其在線搜索粒子動(dòng)作,動(dòng)態(tài)組成機(jī)器人行為;基于演化計(jì)算的足球機(jī)器人能更好地完成跑位、截球、帶球、傳球等任務(wù),具有更強(qiáng)的適應(yīng)性。

    智能體;機(jī)器人體系結(jié)構(gòu);規(guī)劃;粒子群優(yōu)化算法

    0 引言

    機(jī)器人行為的組織在智能機(jī)器人中占有重要地位,而它與動(dòng)作設(shè)計(jì)具有密切的關(guān)系。根據(jù)機(jī)器人的感知、規(guī)劃、行為的方式和關(guān)系,機(jī)器人體系結(jié)構(gòu)分為:分層、包容、分層-反應(yīng)混合3大類結(jié)構(gòu)。早在1984年Nilsson就在分層范式里提出“三層次結(jié)構(gòu)”并在Shakey上實(shí)現(xiàn),將機(jī)器人動(dòng)作分級(jí)為引導(dǎo)、導(dǎo)航、任務(wù);之后類似方法反復(fù)被使用[2-3];2001年Nilsson提出三層塔式體系結(jié)構(gòu),并將Teleo-Reactive (TR)規(guī)劃[4]引入,該結(jié)構(gòu)中機(jī)器人的組成包括:感知塔(Perception Tower)、建模塔(Model Tower)和行為塔(Action Tower),每個(gè)塔都包含層次,主要特點(diǎn)包括:1)將TeleoReactive規(guī)劃應(yīng)用于行為塔。TeleoReactive規(guī)劃融合了層次控制結(jié)構(gòu)的自頂向下方法和基于主體的自底向上方法,使用了TR樹的數(shù)據(jù)結(jié)構(gòu),在TeleoReactive循環(huán)中,從樹根任務(wù)條件開始,依次評(píng)估每個(gè)任務(wù)條件,直到找到第一個(gè)成立的任務(wù)節(jié)點(diǎn),然后就立即執(zhí)行與之關(guān)聯(lián)的動(dòng)作或者序列。2)將感知規(guī)則應(yīng)用于感知塔。3)將真知保留系統(tǒng)(Truth Maintenance System , TMS)應(yīng)用于建模塔中,負(fù)責(zé)獲取可靠的知識(shí)。Nilsson的三層塔式體系結(jié)構(gòu)如圖1。

    圖1 Nilsson的三層塔式體系結(jié)構(gòu)

    該結(jié)構(gòu)被成功應(yīng)用于許多自動(dòng)化領(lǐng)域,包括機(jī)器人規(guī)劃和航空控制(Benson, 1996). 結(jié)構(gòu)中的規(guī)則和動(dòng)作設(shè)計(jì)是其關(guān)鍵點(diǎn)和難點(diǎn),包括Nilsson在內(nèi)的許多研究者考慮過自動(dòng)化這部分工作。2003年Kochenderfer將遺傳算法應(yīng)用于上述體系結(jié)構(gòu),利用演化計(jì)算的方法,自動(dòng)生成Teleo-Reactive程序中的規(guī)則和行為,并可以用來求解積木世界中的不同問題規(guī)模的動(dòng)作規(guī)劃問題。遺傳算法的使用提高了系統(tǒng)的自適應(yīng)性,這是獲取動(dòng)作的相關(guān)知識(shí)的新途徑。

    積木世界里的堆放問題狀態(tài)空間不大,對(duì)系統(tǒng)的智能性和適應(yīng)性要求并不高,相比而言,機(jī)器人踢足球,以及機(jī)器人足球比賽對(duì)智能機(jī)器人的挑戰(zhàn)性更高,更合適用于研究和驗(yàn)證基于演化計(jì)算方法的通用性和靈活性。

    在RoboCup挑戰(zhàn)計(jì)劃[Noda et al.1997]中就指出,RoboCup重點(diǎn)研究:①在多智能體合作及對(duì)抗環(huán)境中的機(jī)器學(xué)習(xí),②多主體體系結(jié)構(gòu),③實(shí)時(shí)的多智能體規(guī)劃和規(guī)劃執(zhí)行,以及④對(duì)手建模。RoboCup2D仿真平臺(tái)利用網(wǎng)絡(luò)互聯(lián)的計(jì)算機(jī)來模擬人類足球比賽,是一個(gè)動(dòng)態(tài)、實(shí)時(shí)、不確定的環(huán)境,比賽雙方各自利用11個(gè)獨(dú)立的程序來控制本方的11個(gè)具有指定質(zhì)量和體力的球員(足球機(jī)器人)進(jìn)行踢球比賽,最終目的是按照指定規(guī)則(和人類足球比賽基本一致)踢球并獲取比賽勝利。為了適度簡化問題,平臺(tái)提供給隊(duì)員一些最基本的動(dòng)作,如踢球、加速、轉(zhuǎn)身等,程序必需合理地組合這些動(dòng)作,形成更“智能”的行為。比賽上下半場各 5 分鐘,每個(gè)模擬周期只有 100 ms,要求程序的實(shí)時(shí)性非常高。其中的足球機(jī)器人設(shè)計(jì)問題具有下面的特點(diǎn):1)任務(wù)復(fù)雜:足球機(jī)器人的任務(wù)包括截球、阻擋、帶球、過人、射門、傳球等,不僅種類多,而且彼此之間有密切聯(lián)系,要求機(jī)器人能夠有效選擇任務(wù)并且實(shí)現(xiàn)任務(wù)之間平滑的過度。2)動(dòng)作空間大:足球機(jī)器人的動(dòng)作力度和方向在實(shí)數(shù)空間取值,搜索空間巨大。3)執(zhí)行效率高:競技對(duì)抗中的足球機(jī)器人,要求其動(dòng)作盡可能簡潔、能耗少、行動(dòng)敏捷。4)多機(jī)器人合作:踢球任務(wù)是典型的合作性任務(wù),要求多機(jī)器人相互配合完成。

    本文將演化計(jì)算方法里的PSO算法應(yīng)用于RoboCup2D機(jī)器人動(dòng)作知識(shí)獲取,以及比賽過程中任務(wù)選擇和動(dòng)作規(guī)劃問題,將粒子群優(yōu)化算法進(jìn)行了適當(dāng)?shù)母倪M(jìn),并將該算法用于足球機(jī)器人的動(dòng)作選擇。設(shè)計(jì)了一個(gè)足球機(jī)器人的動(dòng)作集合;然后,根據(jù)賽場上的實(shí)際情況為機(jī)器人分配角色與任務(wù);利用粒子群優(yōu)化算法為足球機(jī)器人進(jìn)行動(dòng)作選擇。實(shí)驗(yàn)表明,應(yīng)用新算法的仿真足球機(jī)器人動(dòng)作靈活、準(zhǔn)確、效果好。

    1 基于演化計(jì)算的足球機(jī)器人體系結(jié)構(gòu)

    在目前RoboCup2D足球機(jī)器人研究中,智能機(jī)器人的構(gòu)建方式一般采用任務(wù)分層并分別決策或規(guī)劃的體系結(jié)構(gòu),其示圖如圖2所示。

    圖2 一種典型的足球機(jī)器人的體系結(jié)構(gòu)

    其中,戰(zhàn)略層是決策系統(tǒng)模塊中的最高層,用來從全隊(duì)利益出發(fā)實(shí)現(xiàn)高層決策,確定球員智能體的行為目標(biāo)及總的行為方案;任務(wù)層要制訂出為了完成這一特定的目標(biāo),所應(yīng)該采取的行為策略,包括搶占位置、搶球,攔截,帶球,傳球,射門,撲球,盯人等等;動(dòng)作規(guī)劃是決策系統(tǒng)層最低的,用以實(shí)現(xiàn)智能體的個(gè)人技能,即將這些具體的行為決策細(xì)化為比賽平臺(tái)可以接受的執(zhí)行指令。

    類似于Nilsson的三層次體系結(jié)構(gòu),在這種體系結(jié)構(gòu)中,基本動(dòng)作的描述、動(dòng)作規(guī)劃是機(jī)器人的核心模塊。這種結(jié)構(gòu)的主要優(yōu)點(diǎn)在于:

    1)模塊性強(qiáng)。各模塊分工清晰,可理解性強(qiáng),便于工程化實(shí)現(xiàn)。

    2)實(shí)時(shí)性好。計(jì)算明確,響應(yīng)迅速。

    3)可靠性高。各模塊測試方便,組織的系統(tǒng)可靠性高。

    在足球機(jī)器人以及其他智能體的設(shè)計(jì)中我們發(fā)現(xiàn),采用這種體系結(jié)構(gòu)來建立復(fù)雜環(huán)境下多級(jí)任務(wù)驅(qū)動(dòng)的智能體系統(tǒng),具有下面缺點(diǎn):

    1)動(dòng)作設(shè)計(jì)困難。由于環(huán)境和任務(wù)的復(fù)雜性,通用的、有效的動(dòng)作難以設(shè)計(jì),動(dòng)作的相關(guān)知識(shí),包括啟動(dòng)條件、執(zhí)行周期、效果描述等等,獲取困難。動(dòng)作集合的完備性難以保證。目前許多研究采用加強(qiáng)學(xué)習(xí)、人工神經(jīng)網(wǎng)絡(luò)等方法來建立機(jī)器人基本動(dòng)作,但是由于評(píng)價(jià)函數(shù)的設(shè)計(jì)困難,動(dòng)作使用過程中的整體效果并不好。

    2)適應(yīng)性差。特定任務(wù)下,機(jī)器人組織動(dòng)作的方式單一,對(duì)人工經(jīng)驗(yàn)依賴性強(qiáng),可擴(kuò)展性差。

    3)整體性差。實(shí)際上,各級(jí)任務(wù)其實(shí)具有密切的聯(lián)系,忽略這些聯(lián)系可能影響智能機(jī)器人行為的一致性和平滑性。

    根據(jù)RoboCup足球機(jī)器人的環(huán)境和要求,本文提出了機(jī)器人行為的4層(原子動(dòng)作層、粒子動(dòng)作層、行為層、任務(wù)層)組織方法,設(shè)計(jì)了基于演化計(jì)算的足球機(jī)器人的體系結(jié)構(gòu)。主要特點(diǎn):利用在感知分析、動(dòng)作設(shè)計(jì)、任務(wù)規(guī)劃部分引入演化計(jì)算方法。基于演化計(jì)算的足球機(jī)器人的體系結(jié)構(gòu)如圖3所示。

    圖3 基于演化計(jì)算的足球機(jī)器人的體系結(jié)構(gòu)

    由于環(huán)境和任務(wù)的復(fù)雜性,通用的、有效的動(dòng)作難以設(shè)計(jì),動(dòng)作的相關(guān)知識(shí),包括啟動(dòng)條件、執(zhí)行周期、效果描述等等,獲取困難。動(dòng)作集合的完備性難以保證。目前許多研究采用加強(qiáng)學(xué)習(xí)、人工神經(jīng)網(wǎng)絡(luò)等方法來建立機(jī)器人基本動(dòng)作,但是由于評(píng)價(jià)函數(shù)的設(shè)計(jì)困難,動(dòng)作使用過程中的整體效果并不好。本文設(shè)計(jì)了基于演化計(jì)算的足球機(jī)器人學(xué)習(xí)結(jié)構(gòu)。該結(jié)構(gòu)使用任務(wù)框架、行為框架和動(dòng)作框架表達(dá)各種動(dòng)作,利用特定環(huán)境里的感知數(shù)據(jù),在一些規(guī)則的誘導(dǎo)下,形成和豐富行為知識(shí)?;谘莼?jì)算的足球機(jī)器人學(xué)習(xí)結(jié)構(gòu)如圖4所示。

    圖4 基于演化計(jì)算的足球機(jī)器人學(xué)習(xí)結(jié)構(gòu)

    2 基于PSO算法的足球機(jī)器人動(dòng)作設(shè)計(jì)

    2.1 原子動(dòng)作集合

    在RoboCup2D環(huán)境中,足球機(jī)器人一般擁有以下基本動(dòng)作:dash、turn、kick、tackle、catch、move、turn_neck、change_view、say、pointto、attentionto等,這些動(dòng)作添加1個(gè)或者2個(gè)參數(shù)后就直接可以作為動(dòng)作輸出并產(chǎn)生效應(yīng)。其中,catch僅僅應(yīng)用于守門員,而move僅僅應(yīng)用于賽前移動(dòng)隊(duì)員,但是turn_neck、change_view、say、pointto、attentionto等僅僅用于感知,這些動(dòng)作規(guī)劃相對(duì)容易、可控性強(qiáng),本文將它們排除在原子動(dòng)作集合之外,并分別給予考慮和分配。本文設(shè)計(jì)的原子動(dòng)作集合僅僅包含4個(gè)元素,它們?cè)谂cRoboCup2D服務(wù)器交互過程中,每個(gè)周期里只容許使用一次,在機(jī)器人動(dòng)作規(guī)劃過程中頻繁地被搜索和執(zhí)行,對(duì)足球機(jī)器人的整體性能產(chǎn)生非常關(guān)鍵的影響。原子動(dòng)作集合見表1。

    表1 原子動(dòng)作集合

    2.2 粒子動(dòng)作框架

    本文按照足球機(jī)器人動(dòng)作的特點(diǎn)和功能,利用機(jī)器人原子動(dòng)作,設(shè)計(jì)了7類機(jī)器人粒子動(dòng)作,然后利用演化計(jì)算方法,生成各種粒子動(dòng)作,組成粒子動(dòng)作集合,供比賽過程選擇和調(diào)用。

    1) 大力踢球(Hard_Kick):目的是向某確定方向射門或者大力傳球;在持有球的時(shí)候使用;該動(dòng)作由turn、kick和dash組成,持續(xù)時(shí)間為1~20個(gè)周期;優(yōu)化目標(biāo)為踢球速度盡可能快且射出球角度與期望射出方向的偏差小。

    2) 帶球移動(dòng)(Dribble_Ball):目的是向某確定方向帶球;在持有球且無截球威脅時(shí)候使用;該動(dòng)作由turn、kick和dash組成,持續(xù)時(shí)間為1~20個(gè)周期。優(yōu)化目標(biāo)為運(yùn)球速度盡可能快。

    3) 帶球過人(Dribble_Pass):目的是繞過對(duì)手并向某確定方向帶球;在持有球且有截球威脅時(shí)候使用。該動(dòng)作由turn、kick和dash組成,持續(xù)時(shí)間為1~20個(gè)周期。優(yōu)化目標(biāo)為突破對(duì)手防線且丟球率盡可能低。

    4) 位置部署(Location_Arrive):目的是到達(dá)某確定位置;在沒持有球、持有球的機(jī)會(huì)小時(shí)候使用。該動(dòng)作由turn、dash組成,持續(xù)時(shí)間為1~20個(gè)周期。優(yōu)化目標(biāo)為到達(dá)位置的速度大,而能量消耗速度小。

    5) 位置搶占(Location_Rushing):目的是先于對(duì)手迅速到達(dá)某確定位置;在沒持有球、持有球的機(jī)會(huì)大時(shí)候使用。該動(dòng)作由turn和dash組成,持續(xù)時(shí)間為1~20個(gè)周期。優(yōu)化目標(biāo)為到達(dá)位置的速度。

    6) 阻擋運(yùn)行(Block_Robot):目的是阻擋對(duì)手到達(dá)某確定位置;在沒持球、球在附近、持球的機(jī)會(huì)小時(shí)候使用。該動(dòng)作由turn和dash組成,持續(xù)時(shí)間為1~20個(gè)周期。優(yōu)化目標(biāo)為阻擋對(duì)方機(jī)器人的成功率。

    7) 阻擋鏟球(Block_Tackle):目的是破壞對(duì)手的控球;在沒持有球、球在附近、鏟球的機(jī)會(huì)比較大時(shí)候使用。該動(dòng)作由turn、kick、tackle和dash組成,持續(xù)時(shí)間為1~20個(gè)周期。優(yōu)化目標(biāo)為截球的成功率。

    在利用演化計(jì)算方法優(yōu)化粒子動(dòng)作問題中,解的結(jié)構(gòu)設(shè)計(jì),也就是粒子動(dòng)作的表達(dá)方法,非常關(guān)鍵。本文利用一個(gè)框架來描述每種粒子動(dòng)作,主要包括事先狀態(tài)、原子動(dòng)作序列規(guī)劃、動(dòng)作目的要求、動(dòng)作執(zhí)行評(píng)價(jià)等方面的信息。用于描述每種粒子動(dòng)作的框架設(shè)計(jì)如下。

    框架代碼:1-7

    事先的狀態(tài):

    球的速度:(dx,dy)

    對(duì)手相對(duì)于球的位置:(x,y)

    “我”相對(duì)于球的位置:(x,y)

    “我”的體力:stamina

    事后期望的狀態(tài):

    球的速度:(dx,dy)

    “我”相對(duì)于球的位置:(x,y)

    “我”相對(duì)于球的位置:(x,y)

    “我”的體力:stamina

    動(dòng)作執(zhí)行規(guī)劃:

    預(yù)計(jì)執(zhí)行周期:t_now

    原子動(dòng)作序列:act[t_now]

    原子動(dòng)作參數(shù):cl[t_now],c2[t_now]

    動(dòng)作執(zhí)行結(jié)果:

    效果評(píng)價(jià):value

    動(dòng)作修正:

    下次執(zhí)行周期:t_next

    下次原子動(dòng)作序列:act[t_next]

    下次原子動(dòng)作參數(shù):cl[t_next],c2[t_next]

    2.3 基于PSO算法的粒子動(dòng)作生成

    粒子動(dòng)作的設(shè)計(jì)目的是通過訓(xùn)練得到通用的技能,包括:大力踢球(Hard_Kick)、帶球移動(dòng)(Dribble_Ball)、帶球過人(Dribble_Pass)、位置部署(Location_Arrive)、位置搶占(Location_Rushing)、阻擋運(yùn)行(Block_Robot)、阻擋鏟球(Block_Tackle)及它們的啟動(dòng)條件、時(shí)間耗費(fèi)、精力耗費(fèi)、效果描述等。

    基于演化計(jì)算的粒子動(dòng)作設(shè)計(jì)的基本過程是:先根據(jù)人工經(jīng)驗(yàn)設(shè)計(jì)表達(dá)上述各類動(dòng)作的框架,對(duì)于每類動(dòng)作,初始化n個(gè)框架作為演化計(jì)算的種群,然后在指定訓(xùn)練環(huán)境中應(yīng)用這些框架所表達(dá)的動(dòng)作,利用演化計(jì)算對(duì)框架進(jìn)行遺傳和變異,再根據(jù)期望效果和動(dòng)作產(chǎn)生的實(shí)際效果進(jìn)行動(dòng)作效果評(píng)價(jià)、篩選,形成新的種群。在這種迭代中選擇出某種動(dòng)作的最優(yōu)表達(dá)和序列?;谘莼?jì)算的粒子動(dòng)作設(shè)計(jì)如圖5所示。

    圖5 基于演化計(jì)算的粒子動(dòng)作設(shè)計(jì)

    3 仿真實(shí)驗(yàn)及分析

    為了驗(yàn)證本文所提出的基于PSO算法的RoboCup2D機(jī)器人及其動(dòng)作學(xué)習(xí)結(jié)構(gòu)的可行性和有效性,進(jìn)行了RoboCup2D環(huán)境下的仿真實(shí)驗(yàn),實(shí)驗(yàn)設(shè)計(jì)如下:

    1) 指定任務(wù)下的動(dòng)作搜索:給定了特定任務(wù),RoboCup2D機(jī)器人搜索和選擇動(dòng)作序列,驗(yàn)證動(dòng)作搜索的效率和結(jié)果。為完成上述目的,本文設(shè)計(jì)了專門用于機(jī)器人動(dòng)作學(xué)習(xí)的智能體程序,利用歷年RoboCup2D國際比賽中表現(xiàn)優(yōu)秀的智能體程序,組成2對(duì)2的對(duì)戰(zhàn)平臺(tái)(雙方各1名守門員和1名普通隊(duì)員),在實(shí)際對(duì)戰(zhàn)中捕捉學(xué)習(xí)機(jī)會(huì)并學(xué)習(xí)7類粒子動(dòng)作,形成踢球過程中通用的動(dòng)作技能知識(shí)系統(tǒng)。

    2) 特定環(huán)境下的任務(wù)規(guī)劃:給定了特定環(huán)境,規(guī)定了雙方機(jī)器的位置和狀態(tài),RoboCup2D機(jī)器人搜索和選擇任務(wù),驗(yàn)證任務(wù)搜索的效率和結(jié)果。

    3) 實(shí)際比賽:與其他方法設(shè)計(jì)的機(jī)器人進(jìn)行比賽,評(píng)價(jià)整體的效率和結(jié)果,驗(yàn)證比賽過程中的在線學(xué)習(xí)效果。

    實(shí)驗(yàn)結(jié)果證明了基于PSO算法的RoboCup2D機(jī)器人的可行性。PSO算法在指定任務(wù)下的動(dòng)作搜索的效果很好,特定環(huán)境下的任務(wù)規(guī)劃能力一般,而且機(jī)器人在比賽過程中具有一定的在線學(xué)習(xí)能力。

    4 結(jié)束語

    本文將演化計(jì)算方法里的PSO算法應(yīng)用于RoboCup2D機(jī)

    器人動(dòng)作知識(shí)獲取、比賽過程中任務(wù)選擇和動(dòng)作規(guī)劃問題,將粒子群優(yōu)化算法進(jìn)行了適當(dāng)?shù)母倪M(jìn),并將該算法用于足球機(jī)器人的動(dòng)作選擇。設(shè)計(jì)了一個(gè)足球機(jī)器人的動(dòng)作集合,使得機(jī)器人可以根據(jù)賽場上的實(shí)際情況為機(jī)器人分配角色與任務(wù)。實(shí)驗(yàn)表明,應(yīng)用新算法的仿真足球機(jī)器人動(dòng)作靈活、準(zhǔn)確、效果好。

    [1] Nilsson N. Teleo-Reactive Programs for AgentControl[J]. Journal of Artificial Intelligence Research, 1994.

    [2] Nils J. Nilsson,Teleo-Reactive Programs and the Triple-Tower Architecture[J]. Electronic Transactions on Artificial Intelligence, 2001,5, Section B,99-110.

    [3] Rajan K, Py F, McGann C. Adaptive control of AUVs using onboard planning and execution[N]. Sea Technology Magazine, April, 2010.

    [4] Russell S E,Carr D,Dragone M,et al.From bogtrotting to herding: a UCD perspective[J]. Annals of Mathematics andArtificial Intelligence 61:349-368, 2011.

    [5] Sánchez P, Alonso D, Morales J M, et al.From Teleo-Reactive specifications to architectural components: A model-driven approach[J]. Journal of Systems and Software, 85, 2012.

    [6] Smith G, Sanders J W, Winter K.Designing adaptive systems using teleo-reactive agents[J]. Transactions on Computational Collective Intelligence. Springer-Verlag, 2014 (to appear).

    [7] Soto F, Sánchez P, Mateo A, et al.An Educational Tool for Implementing Reactive Systems Following a Goal-Driven Approach[J]. Computer Applications for Engineering Education, DOI: 10.1002/cae.21568, 2012.

    Research on RoboCup2D Robot Planning Based on PSO

    Bao Shengang, Dong Chunchen, Liu Zhao

    (College of Computer Science and Technology, Wuhan University of Science and Technology, Wuhan 430081,China)

    Research on the robot system structure, the organization of action learning and behavior way, evolutionary computation as the basic method, RoboCup2D as platform, designs the architecture of soccer robot based on PSO algorithm, solving the problem of perception, action, and planning. By offline training, agents format perception rules and relevant parameters, to optimize perception method for the information, and according to the granularity, functions, and parameters manually specified, PSO builds a set of combo actions, which described by atomic actions, parameters and execution results. According to game environment and a few task rules, PSO searches for task, behavior, and combo actions, as a whole, to accomplish the game tasks. The simulation experiments on RoboCup2D platform show that, agent based on PSO is a robust and flexible robot control method: given evaluation methods and implementation frames, it is able to learn rapidly in real environment, and displays planning behavior without the use of classical planning techniques.

    agent; robot architecture; planning; PSO

    2016-03-31;

    2016-05-10。

    國家自然科學(xué)基金資助項(xiàng)目(51174151)。

    包勝剛(1991-),男,湖北黃岡人,碩士研究生,主要從事人工智能和機(jī)器學(xué)習(xí)方向的研究。

    劉 釗(1969-),男,教授,主要從事智能計(jì)算、人工智能和計(jì)算機(jī)視覺方向的研究。

    1671-4598(2016)09-0227-04

    10.16526/j.cnki.11-4762/tp.2016.09.063

    TP391

    A

    猜你喜歡
    體系結(jié)構(gòu)粒子足球
    基于粒子群優(yōu)化的橋式起重機(jī)模糊PID控制
    基于粒子群優(yōu)化極點(diǎn)配置的空燃比輸出反饋控制
    讓足球動(dòng)起來
    少年快樂足球
    中國漫畫(2017年4期)2017-06-30 17:04:03
    基于粒計(jì)算的武器裝備體系結(jié)構(gòu)超網(wǎng)絡(luò)模型
    作戰(zhàn)體系結(jié)構(gòu)穩(wěn)定性突變分析
    認(rèn)識(shí)足球(一)
    基于DODAF的裝備體系結(jié)構(gòu)設(shè)計(jì)
    基于云計(jì)算的航天器控制系統(tǒng)自組織體系結(jié)構(gòu)
    基于Matlab的α粒子的散射實(shí)驗(yàn)?zāi)M
    物理與工程(2014年4期)2014-02-27 11:23:08
    久久久久久九九精品二区国产 | 大型av网站在线播放| 精品乱码久久久久久99久播| 久久久久久国产a免费观看| 黄色成人免费大全| 国产精品1区2区在线观看.| 久久婷婷成人综合色麻豆| 日本五十路高清| 欧美亚洲日本最大视频资源| 成人一区二区视频在线观看| 天堂影院成人在线观看| 91大片在线观看| 午夜免费鲁丝| 精品久久久久久久人妻蜜臀av| 黑人操中国人逼视频| 欧美日韩瑟瑟在线播放| av天堂在线播放| 免费高清视频大片| 久久久国产成人免费| 色尼玛亚洲综合影院| 精品国产国语对白av| 色哟哟哟哟哟哟| 国产精品久久久久久精品电影 | 欧美性长视频在线观看| 搡老岳熟女国产| 精品久久久久久久毛片微露脸| 最近在线观看免费完整版| 一卡2卡三卡四卡精品乱码亚洲| 一级毛片高清免费大全| 神马国产精品三级电影在线观看 | 欧美乱妇无乱码| 成人18禁在线播放| 国产亚洲av高清不卡| 在线观看一区二区三区| 亚洲aⅴ乱码一区二区在线播放 | 国产精品乱码一区二三区的特点| 丁香欧美五月| 亚洲国产精品成人综合色| 在线av久久热| 两性午夜刺激爽爽歪歪视频在线观看 | ponron亚洲| 成人三级黄色视频| 欧美性猛交╳xxx乱大交人| 精品熟女少妇八av免费久了| 九色国产91popny在线| 欧美精品亚洲一区二区| 婷婷六月久久综合丁香| 亚洲狠狠婷婷综合久久图片| 很黄的视频免费| 精品国内亚洲2022精品成人| 老熟妇仑乱视频hdxx| 岛国视频午夜一区免费看| 久久精品91无色码中文字幕| 一卡2卡三卡四卡精品乱码亚洲| 波多野结衣巨乳人妻| 欧美一区二区精品小视频在线| 亚洲成av片中文字幕在线观看| 母亲3免费完整高清在线观看| 国产区一区二久久| 91在线观看av| 亚洲av成人不卡在线观看播放网| 国产精品精品国产色婷婷| 国产成人av教育| 国产成人av激情在线播放| 国产乱人伦免费视频| 久久人人精品亚洲av| 变态另类丝袜制服| 大香蕉久久成人网| 看免费av毛片| 精品电影一区二区在线| 久久久国产精品麻豆| 久99久视频精品免费| 中文字幕久久专区| 日本黄色视频三级网站网址| 天堂√8在线中文| 一本一本综合久久| 真人做人爱边吃奶动态| 91成人精品电影| 国产精品精品国产色婷婷| 欧美色欧美亚洲另类二区| 久久久久久久久中文| 亚洲av成人不卡在线观看播放网| 亚洲欧美一区二区三区黑人| √禁漫天堂资源中文www| 欧美激情久久久久久爽电影| 国产精品久久久久久精品电影 | 国产高清视频在线播放一区| 淫秽高清视频在线观看| 三级毛片av免费| 成人一区二区视频在线观看| 91成人精品电影| 少妇裸体淫交视频免费看高清 | 后天国语完整版免费观看| 亚洲av电影不卡..在线观看| 激情在线观看视频在线高清| 一区二区日韩欧美中文字幕| cao死你这个sao货| 大香蕉久久成人网| 制服诱惑二区| xxxwww97欧美| 麻豆国产av国片精品| 少妇粗大呻吟视频| 国产精品综合久久久久久久免费| 熟女电影av网| 免费在线观看日本一区| 99国产精品99久久久久| www日本在线高清视频| 欧美日本视频| 欧美性长视频在线观看| 侵犯人妻中文字幕一二三四区| 老汉色∧v一级毛片| 亚洲成人精品中文字幕电影| 国产精品一区二区三区四区久久 | 国产成人影院久久av| 在线看三级毛片| 国产极品粉嫩免费观看在线| 国产97色在线日韩免费| xxx96com| 手机成人av网站| 成人国产一区最新在线观看| 天堂动漫精品| 母亲3免费完整高清在线观看| 精品欧美国产一区二区三| 怎么达到女性高潮| 亚洲自拍偷在线| 免费观看人在逋| 国产成人av教育| 欧美黑人巨大hd| 国产一区二区三区视频了| 精品国产超薄肉色丝袜足j| 亚洲精品在线美女| 日日爽夜夜爽网站| 成人18禁在线播放| 午夜福利成人在线免费观看| 国产麻豆成人av免费视频| 岛国在线观看网站| 国产爱豆传媒在线观看 | 欧美一区二区精品小视频在线| 丁香欧美五月| 欧美性猛交黑人性爽| 亚洲国产欧美一区二区综合| 可以免费在线观看a视频的电影网站| 高潮久久久久久久久久久不卡| 无限看片的www在线观看| 久久精品91蜜桃| 精品久久久久久,| 中文字幕人妻丝袜一区二区| 夜夜爽天天搞| 精品日产1卡2卡| 变态另类成人亚洲欧美熟女| 亚洲av电影在线进入| 国产精品亚洲av一区麻豆| 国产精品国产高清国产av| 一进一出好大好爽视频| 国内精品久久久久久久电影| 国产精品免费视频内射| 色综合站精品国产| www.熟女人妻精品国产| 免费在线观看影片大全网站| 欧美激情高清一区二区三区| 美女扒开内裤让男人捅视频| 久久久久久人人人人人| 日韩av在线大香蕉| 成人一区二区视频在线观看| 日本 av在线| tocl精华| 欧美日韩瑟瑟在线播放| 女生性感内裤真人,穿戴方法视频| 亚洲成a人片在线一区二区| av免费在线观看网站| 亚洲成av片中文字幕在线观看| 老司机午夜十八禁免费视频| 曰老女人黄片| 视频区欧美日本亚洲| 少妇的丰满在线观看| 在线观看66精品国产| 一二三四社区在线视频社区8| 精品一区二区三区四区五区乱码| 亚洲va日本ⅴa欧美va伊人久久| 免费在线观看完整版高清| 欧美人与性动交α欧美精品济南到| 国产亚洲精品综合一区在线观看 | cao死你这个sao货| 精品国内亚洲2022精品成人| 99re在线观看精品视频| 一本一本综合久久| 欧美日韩精品网址| 91成年电影在线观看| 国产亚洲欧美精品永久| 亚洲中文字幕一区二区三区有码在线看 | 亚洲国产日韩欧美精品在线观看 | 伦理电影免费视频| 亚洲国产精品sss在线观看| 成人免费观看视频高清| 午夜成年电影在线免费观看| 国内少妇人妻偷人精品xxx网站 | 最近最新中文字幕大全免费视频| 看片在线看免费视频| 在线av久久热| 久久久久久九九精品二区国产 | 国产激情久久老熟女| 精品一区二区三区视频在线观看免费| 国产精品精品国产色婷婷| 丰满人妻熟妇乱又伦精品不卡| 18禁观看日本| 99久久无色码亚洲精品果冻| 天堂影院成人在线观看| 日韩精品青青久久久久久| 久久中文字幕一级| 黄色a级毛片大全视频| 亚洲精品一区av在线观看| www.999成人在线观看| 麻豆国产av国片精品| 成人永久免费在线观看视频| 久久人人精品亚洲av| 99国产精品一区二区蜜桃av| 99国产精品99久久久久| 88av欧美| 成人亚洲精品av一区二区| 每晚都被弄得嗷嗷叫到高潮| 久久精品国产亚洲av高清一级| 人妻丰满熟妇av一区二区三区| 女人高潮潮喷娇喘18禁视频| 两性夫妻黄色片| 午夜日韩欧美国产| 日韩精品免费视频一区二区三区| 免费在线观看成人毛片| 在线观看免费视频日本深夜| 性色av乱码一区二区三区2| 中出人妻视频一区二区| 9191精品国产免费久久| 午夜福利在线在线| 日韩欧美免费精品| 国产视频内射| 亚洲精品av麻豆狂野| 自线自在国产av| 免费高清在线观看日韩| 性欧美人与动物交配| 久久国产亚洲av麻豆专区| 精品一区二区三区视频在线观看免费| 啦啦啦免费观看视频1| 后天国语完整版免费观看| 日韩大尺度精品在线看网址| 久久香蕉精品热| 男女做爰动态图高潮gif福利片| 一个人观看的视频www高清免费观看 | 性欧美人与动物交配| 日日夜夜操网爽| 欧美一区二区精品小视频在线| 久久久水蜜桃国产精品网| 国产真实乱freesex| 可以在线观看毛片的网站| 12—13女人毛片做爰片一| 黄色视频不卡| 可以在线观看的亚洲视频| 国产1区2区3区精品| 亚洲全国av大片| 露出奶头的视频| 亚洲一区高清亚洲精品| 日本熟妇午夜| 久久中文看片网| 女警被强在线播放| 女人爽到高潮嗷嗷叫在线视频| 18禁黄网站禁片免费观看直播| 啪啪无遮挡十八禁网站| 久久伊人香网站| 国产精品99久久99久久久不卡| 国产一卡二卡三卡精品| 国产精华一区二区三区| 中文在线观看免费www的网站 | 久久婷婷成人综合色麻豆| 成人免费观看视频高清| 成年免费大片在线观看| 一本大道久久a久久精品| 日韩精品免费视频一区二区三区| 久久精品91无色码中文字幕| 精品一区二区三区av网在线观看| 精品电影一区二区在线| 国产亚洲精品久久久久5区| 桃色一区二区三区在线观看| 免费在线观看视频国产中文字幕亚洲| 午夜福利欧美成人| 午夜福利在线观看吧| 日韩大尺度精品在线看网址| 欧美在线黄色| 日韩一卡2卡3卡4卡2021年| 亚洲精品中文字幕在线视频| 日韩大码丰满熟妇| 一级a爱视频在线免费观看| 免费观看人在逋| 看片在线看免费视频| 亚洲第一青青草原| 日本在线视频免费播放| www日本黄色视频网| 亚洲人成伊人成综合网2020| 久久精品人妻少妇| 日韩有码中文字幕| 色哟哟哟哟哟哟| 1024视频免费在线观看| 岛国在线观看网站| 国产高清有码在线观看视频 | 国产在线精品亚洲第一网站| 岛国在线观看网站| 制服人妻中文乱码| 一本大道久久a久久精品| 巨乳人妻的诱惑在线观看| 麻豆av在线久日| 九色国产91popny在线| 亚洲va日本ⅴa欧美va伊人久久| 精品少妇一区二区三区视频日本电影| 少妇粗大呻吟视频| 日本 av在线| 一个人免费在线观看的高清视频| 夜夜爽天天搞| 免费在线观看亚洲国产| 国产高清videossex| 亚洲国产欧美网| 熟女电影av网| 搡老岳熟女国产| 亚洲精品国产精品久久久不卡| 免费搜索国产男女视频| 日韩一卡2卡3卡4卡2021年| 国产亚洲精品av在线| 精品久久久久久,| 1024视频免费在线观看| 91在线观看av| 亚洲男人天堂网一区| 在线观看日韩欧美| 亚洲一区中文字幕在线| 色综合站精品国产| 久久久久精品国产欧美久久久| 日韩欧美 国产精品| 日韩视频一区二区在线观看| 亚洲精品av麻豆狂野| 亚洲av成人av| 中文字幕久久专区| 国产一区二区在线av高清观看| 九色国产91popny在线| 国产精品久久久人人做人人爽| 精品久久久久久成人av| 久久99热这里只有精品18| 国产激情久久老熟女| 99re在线观看精品视频| 午夜久久久在线观看| 日韩 欧美 亚洲 中文字幕| 成年女人毛片免费观看观看9| 99国产极品粉嫩在线观看| 操出白浆在线播放| 亚洲专区中文字幕在线| 国产国语露脸激情在线看| 精品电影一区二区在线| 很黄的视频免费| 男人舔奶头视频| 欧美人与性动交α欧美精品济南到| 国产午夜福利久久久久久| 男人的好看免费观看在线视频 | 国产高清视频在线播放一区| 女警被强在线播放| 人人妻,人人澡人人爽秒播| 国产精品美女特级片免费视频播放器 | 美女 人体艺术 gogo| 精品一区二区三区视频在线观看免费| 青草久久国产| 不卡一级毛片| 麻豆成人午夜福利视频| 亚洲一区二区三区色噜噜| 99久久无色码亚洲精品果冻| 精品久久久久久久人妻蜜臀av| 国产av一区二区精品久久| 国产成人欧美在线观看| 丝袜在线中文字幕| 十八禁网站免费在线| 中文字幕精品亚洲无线码一区 | 黄片小视频在线播放| 精品欧美国产一区二区三| 欧美乱码精品一区二区三区| 国产高清激情床上av| 日本一区二区免费在线视频| 国产精品免费视频内射| 黑丝袜美女国产一区| 男女那种视频在线观看| 亚洲真实伦在线观看| 免费无遮挡裸体视频| 久久久水蜜桃国产精品网| 国产亚洲欧美精品永久| 91字幕亚洲| 99久久无色码亚洲精品果冻| 亚洲中文日韩欧美视频| 1024香蕉在线观看| 国产单亲对白刺激| 12—13女人毛片做爰片一| 精品久久久久久久末码| 国产亚洲精品综合一区在线观看 | 国产真人三级小视频在线观看| 在线视频色国产色| 亚洲成av人片免费观看| 婷婷精品国产亚洲av| а√天堂www在线а√下载| 欧美日韩亚洲国产一区二区在线观看| 国产男靠女视频免费网站| 这个男人来自地球电影免费观看| 国产精品永久免费网站| 成人特级黄色片久久久久久久| 精品免费久久久久久久清纯| 麻豆一二三区av精品| 国产成年人精品一区二区| 亚洲欧洲精品一区二区精品久久久| 国产男靠女视频免费网站| 精品一区二区三区四区五区乱码| 日韩中文字幕欧美一区二区| 久久久久久国产a免费观看| 可以免费在线观看a视频的电影网站| 老汉色∧v一级毛片| 青草久久国产| 女性被躁到高潮视频| 免费女性裸体啪啪无遮挡网站| 亚洲国产精品久久男人天堂| 波多野结衣高清无吗| 日韩大码丰满熟妇| 欧美 亚洲 国产 日韩一| 亚洲性夜色夜夜综合| 很黄的视频免费| 欧美激情久久久久久爽电影| 亚洲成av片中文字幕在线观看| 精品久久久久久久久久久久久 | 村上凉子中文字幕在线| 久久性视频一级片| 中文资源天堂在线| 国产私拍福利视频在线观看| 国产视频内射| 国产高清视频在线播放一区| 久久性视频一级片| 一级a爱视频在线免费观看| 韩国av一区二区三区四区| 成人三级黄色视频| 好男人在线观看高清免费视频 | 88av欧美| 成人亚洲精品av一区二区| 亚洲av成人不卡在线观看播放网| 在线观看免费日韩欧美大片| 久久久久国产精品人妻aⅴ院| 女生性感内裤真人,穿戴方法视频| 制服人妻中文乱码| 日本 av在线| 狂野欧美激情性xxxx| 日韩欧美国产一区二区入口| 午夜精品久久久久久毛片777| 高潮久久久久久久久久久不卡| www.999成人在线观看| 男男h啪啪无遮挡| 亚洲九九香蕉| 一级a爱视频在线免费观看| 香蕉国产在线看| 亚洲国产欧美日韩在线播放| 久久久久九九精品影院| 国产精品1区2区在线观看.| 一级片免费观看大全| 欧美精品亚洲一区二区| 色精品久久人妻99蜜桃| 亚洲国产欧美网| 日韩精品免费视频一区二区三区| 亚洲成人久久爱视频| 中文亚洲av片在线观看爽| 日日干狠狠操夜夜爽| 久久久久久久久中文| 天天躁狠狠躁夜夜躁狠狠躁| 国产成人影院久久av| 欧美性长视频在线观看| 日韩欧美一区二区三区在线观看| 无人区码免费观看不卡| 亚洲中文字幕一区二区三区有码在线看 | 给我免费播放毛片高清在线观看| 亚洲国产精品合色在线| 18禁美女被吸乳视频| 女人爽到高潮嗷嗷叫在线视频| 90打野战视频偷拍视频| 可以在线观看毛片的网站| 俄罗斯特黄特色一大片| 亚洲色图av天堂| tocl精华| 欧美av亚洲av综合av国产av| 国产aⅴ精品一区二区三区波| 99在线人妻在线中文字幕| 亚洲av片天天在线观看| 99国产精品一区二区蜜桃av| 身体一侧抽搐| 亚洲成国产人片在线观看| 免费av毛片视频| 国产高清videossex| 女人高潮潮喷娇喘18禁视频| 久久精品国产清高在天天线| 性欧美人与动物交配| 婷婷精品国产亚洲av在线| 久久久国产成人免费| 欧美一区二区精品小视频在线| 黄色片一级片一级黄色片| 此物有八面人人有两片| 精品一区二区三区四区五区乱码| 久久久久久人人人人人| 别揉我奶头~嗯~啊~动态视频| 每晚都被弄得嗷嗷叫到高潮| av福利片在线| 大型黄色视频在线免费观看| 一本一本综合久久| 欧美成人午夜精品| a在线观看视频网站| 国产视频一区二区在线看| 久久精品成人免费网站| 亚洲人成网站在线播放欧美日韩| 俺也久久电影网| 精品福利观看| 国产精品久久视频播放| 日本黄色视频三级网站网址| 99在线视频只有这里精品首页| 999久久久精品免费观看国产| 欧美人与性动交α欧美精品济南到| 伊人久久大香线蕉亚洲五| 日韩大码丰满熟妇| 曰老女人黄片| 18禁裸乳无遮挡免费网站照片 | 在线观看66精品国产| 男女视频在线观看网站免费 | 午夜激情av网站| 日本a在线网址| 老司机福利观看| 一区二区日韩欧美中文字幕| 老司机午夜十八禁免费视频| 伊人久久大香线蕉亚洲五| 18禁黄网站禁片午夜丰满| 韩国精品一区二区三区| 国产日本99.免费观看| 男人舔女人的私密视频| 欧美乱妇无乱码| 亚洲av片天天在线观看| 999精品在线视频| 久久天躁狠狠躁夜夜2o2o| 欧美午夜高清在线| 国产视频内射| 成人三级黄色视频| 亚洲avbb在线观看| 国产高清激情床上av| 日本三级黄在线观看| 日韩欧美一区二区三区在线观看| 亚洲天堂国产精品一区在线| 亚洲成av片中文字幕在线观看| 日韩大尺度精品在线看网址| 国产一区二区在线av高清观看| 色综合婷婷激情| 久久久久久大精品| 真人做人爱边吃奶动态| 99在线人妻在线中文字幕| 男男h啪啪无遮挡| 久久中文字幕人妻熟女| 757午夜福利合集在线观看| 亚洲五月天丁香| 精品不卡国产一区二区三区| 亚洲色图 男人天堂 中文字幕| 久久久久久人人人人人| 老司机午夜十八禁免费视频| 精品久久久久久,| 亚洲男人的天堂狠狠| 国产91精品成人一区二区三区| 亚洲在线自拍视频| 制服丝袜大香蕉在线| 欧美三级亚洲精品| 99久久综合精品五月天人人| 亚洲精品国产精品久久久不卡| 国产精品99久久99久久久不卡| 亚洲人成伊人成综合网2020| 免费电影在线观看免费观看| 欧美绝顶高潮抽搐喷水| 亚洲成av人片免费观看| 精品国产一区二区三区四区第35| 99国产精品99久久久久| 又大又爽又粗| 男女午夜视频在线观看| 精品国产乱子伦一区二区三区| cao死你这个sao货| 日韩欧美国产一区二区入口| 久久热在线av| 最近最新中文字幕大全免费视频| 亚洲专区中文字幕在线| 成人18禁在线播放| 香蕉丝袜av| 不卡一级毛片| 国产成人啪精品午夜网站| 亚洲狠狠婷婷综合久久图片| 亚洲精品在线美女| 亚洲avbb在线观看| 亚洲性夜色夜夜综合| 欧美日韩黄片免| 午夜福利成人在线免费观看| 90打野战视频偷拍视频| 亚洲电影在线观看av| 色av中文字幕| 亚洲狠狠婷婷综合久久图片| 国产一区二区三区视频了| 日韩一卡2卡3卡4卡2021年| 男女床上黄色一级片免费看| 少妇熟女aⅴ在线视频| 人人妻人人澡人人看| 精品国产美女av久久久久小说| 女人爽到高潮嗷嗷叫在线视频| 国产熟女午夜一区二区三区| 久久亚洲精品不卡| 亚洲午夜理论影院| 男人操女人黄网站| 午夜a级毛片| 国产成人精品久久二区二区免费| 久久人妻福利社区极品人妻图片| 欧美激情久久久久久爽电影| 久久午夜亚洲精品久久| 午夜免费成人在线视频| 一卡2卡三卡四卡精品乱码亚洲| 黄片小视频在线播放|