• <tr id="yyy80"></tr>
  • <sup id="yyy80"></sup>
  • <tfoot id="yyy80"><noscript id="yyy80"></noscript></tfoot>
  • 99热精品在线国产_美女午夜性视频免费_国产精品国产高清国产av_av欧美777_自拍偷自拍亚洲精品老妇_亚洲熟女精品中文字幕_www日本黄色视频网_国产精品野战在线观看 ?

    一種基于雙DQN的空戰(zhàn)干擾樣式選擇方法

    2021-11-30 04:30:40陳澤盛楊承志曹鵬宇邴雨晨
    電訊技術(shù) 2021年11期
    關(guān)鍵詞:空戰(zhàn)樣式雷達(dá)

    陳澤盛,楊承志,曹鵬宇,邴雨晨,納 賢

    (1.空軍航空大學(xué),長(zhǎng)春 130022;2.中國人民解放軍95510部隊(duì),貴陽 550031)

    0 引 言

    隨著機(jī)載火控雷達(dá)(Airborne Fire Control Radar,AFCR)技術(shù)體制的不斷發(fā)展,其工作狀態(tài)更加復(fù)雜,波形單元更靈活多變,抗干擾能力更強(qiáng)[1],傳統(tǒng)的基于人工加載的干擾樣式選擇方法[2]將失去用武之地。在加載干擾樣式正確的情況下干擾機(jī)可以產(chǎn)生干擾效果,一旦敵方采取抗干擾措施,我方缺乏先驗(yàn)知識(shí)將無法選擇合適的干擾樣式,作戰(zhàn)效能會(huì)大打折扣。強(qiáng)化學(xué)習(xí)由于無需先驗(yàn)知識(shí),且其與環(huán)境交互的過程與雷達(dá)對(duì)抗相似,因此更適用于雷達(dá)干擾樣式選擇。

    Q-學(xué)習(xí)是強(qiáng)化學(xué)習(xí)中的一種高效的免模型算法。文獻(xiàn)[3]設(shè)計(jì)了基于Q-學(xué)習(xí)的認(rèn)知雷達(dá)對(duì)抗過程,使雷達(dá)干擾系統(tǒng)通過自主學(xué)習(xí)實(shí)現(xiàn)高效干擾,但環(huán)境雷達(dá)的工作狀態(tài)較少。文獻(xiàn)[4]提出了智能雷達(dá)對(duì)抗(Intelligent Radar Countermeasure,IRC)方法,在工作模式數(shù)目未知的情況下通過Q-學(xué)習(xí)選擇最優(yōu)的干擾路徑。文獻(xiàn)[5]研究了對(duì)多功能雷達(dá)(Multifunctional Radar,MFR)的Q-學(xué)習(xí)認(rèn)知干擾決策方法,對(duì)仿真中各參數(shù)對(duì)實(shí)驗(yàn)的影響進(jìn)行分析,對(duì)比了該方法與其他傳統(tǒng)方法的優(yōu)勢(shì)。但基于Q-學(xué)習(xí)的認(rèn)知干擾決策方法在雷達(dá)任務(wù)較多的實(shí)戰(zhàn)條件下決策效率會(huì)明顯下降,因此文獻(xiàn)[6]使用深度Q神經(jīng)網(wǎng)絡(luò)(Deep Q Network,DQN)來應(yīng)對(duì)MFR任務(wù)較多的問題,但DQN算法存在計(jì)算Q值中“過估計(jì)”的問題[7]。為此,本文采用Double DQN算法,通過不同的網(wǎng)絡(luò)執(zhí)行動(dòng)作的評(píng)估與選擇,對(duì)這兩個(gè)部分進(jìn)行解耦來解決這一問題,對(duì)空戰(zhàn)中的干擾樣式選擇進(jìn)行研究。仿真結(jié)果顯示了本文算法的有效性。

    1 干擾矩陣

    現(xiàn)代空戰(zhàn)已經(jīng)進(jìn)入了超視距時(shí)代,AFCR已經(jīng)成為空戰(zhàn)中主要的作戰(zhàn)對(duì)象,發(fā)揮著不可替代的作用。AFCR要在不同的作戰(zhàn)環(huán)境中遂行多樣化的作戰(zhàn)任務(wù),因此在雷達(dá)系統(tǒng)設(shè)計(jì)上會(huì)設(shè)定多種工作模式,不同的工作模式對(duì)應(yīng)著不同的威脅等級(jí)??諔?zhàn)中使用較多的是空-空模式下的雷達(dá)工作模式,因此本文以AFCR的空-空雷達(dá)工作模式為主開展干擾研究。

    在典型的空戰(zhàn)場(chǎng)景中,我方針對(duì)敵方的干擾實(shí)施流程如下:首先,我方通過偵察對(duì)敵AFCR的工作模式進(jìn)行識(shí)別[8],之后通過干擾樣式選擇算法從干擾樣式集中選擇最優(yōu)干擾樣式對(duì)其進(jìn)行干擾,使其工作模式不斷轉(zhuǎn)換,直至轉(zhuǎn)換為對(duì)應(yīng)的威脅等級(jí)最低的狀態(tài),達(dá)到預(yù)期干擾效果。

    根據(jù)雷達(dá)的工作模式及其轉(zhuǎn)換關(guān)系和干擾樣式集可以構(gòu)建出干擾矩陣,將干擾矩陣作為算法輸入進(jìn)行干擾樣式選擇。

    1.1 典型空-空雷達(dá)工作模式

    空-空模式下AFCR的工作模式[9]主要包括搜索、跟蹤、格斗和識(shí)別等,每一類模式下又有多種子模式。

    1.1.1 搜索模式

    速度搜索(Velocity Search,VS)模式主要用于遠(yuǎn)距高速接近目標(biāo)的早期預(yù)警,威脅等級(jí)低。

    邊搜索邊測(cè)距(Range While Search,RWS)模式可以在探測(cè)目標(biāo)的同時(shí)進(jìn)行測(cè)距,從而快速獲取潛在目標(biāo)的位置信息。

    邊掃描邊跟蹤(Track While Scan,TWS)模式[10]主要用于對(duì)多個(gè)來襲目標(biāo)的探測(cè)和跟蹤。在檢測(cè)到目標(biāo)后火控計(jì)算機(jī)會(huì)建立跟蹤文件,再通過關(guān)聯(lián)算法來對(duì)目標(biāo)未來的參數(shù)進(jìn)行估計(jì)。

    1.1.2 跟蹤模式

    態(tài)勢(shì)感知(Situation Awareness Mode,SAM)模式是RWS模式下的一個(gè)子模式,可以在單目標(biāo)跟蹤(Single Target Tracking,STT)的方式下同時(shí)保持對(duì)多個(gè)目標(biāo)的探測(cè),威脅等級(jí)較高。

    高優(yōu)先級(jí)目標(biāo)(High Priority Target,HPT)模式是TWS模式的一個(gè)子模式,在TWS模式探測(cè)到的目標(biāo)中指定一個(gè)為HPT,威脅等級(jí)較高。

    單目標(biāo)跟蹤模式是AFCR具有最高威脅等級(jí)的模式。在選定HPT、SAM模式以及空戰(zhàn)格斗模式下的子模式均可進(jìn)入STT模式。

    1.1.3 空戰(zhàn)格斗模式

    空戰(zhàn)格斗(Air Combat Mode,ACM)模式主要用于敵我近距離空戰(zhàn),具有三種子模式。

    機(jī)炮(Gun Acquire,GACQ)模式下,AFCR的平視顯示器(Heads Up Display,HUD)上會(huì)出現(xiàn)一個(gè)20°視角的虛線圓圈。垂直(Vertical Acquire,VACQ)模式下,HUD上會(huì)出現(xiàn)兩條距離5°視角的垂直虛線。這兩種模式如果探測(cè)到一個(gè)位于5 n mile內(nèi)的目標(biāo),將自動(dòng)轉(zhuǎn)入STT模式。

    準(zhǔn)星(Boresight,BST)模式下,HUD上的水線位置會(huì)出現(xiàn)一個(gè)3.4 °視角的虛線圓圈,如果探測(cè)到目標(biāo)并位于10 n mile內(nèi),將自動(dòng)轉(zhuǎn)入STT模式。

    1.1.4 識(shí)別模式

    非合作目標(biāo)識(shí)別(Non-cooperative Target Recognition,NCTR)模式[11]是載機(jī)通過AFCR利用非合作目標(biāo)自身的反射特性對(duì)其進(jìn)行遠(yuǎn)距識(shí)別與分類。

    1.2 干擾樣式集

    雷達(dá)干擾樣式多種多樣,每種干擾樣式的原理又不盡相同,且對(duì)于不同的雷達(dá)工作模式作用效果也有所差別。我方機(jī)載干擾設(shè)備在作戰(zhàn)前會(huì)進(jìn)行干擾樣式的預(yù)加載,用于在作戰(zhàn)中的干擾樣式選擇。本文在干擾樣式集的建立上選擇了部分典型干擾樣式[12],包括相參和非相參干擾樣式共10種:0是密集假目標(biāo);1是窄帶噪聲調(diào)相;2是靈巧噪聲;3是相參梳狀譜;4是間歇采樣;5是距離-速度聯(lián)合拖引;6是多普勒噪聲;7是掃頻噪聲;8是全脈沖復(fù)制;9是移頻干擾。這些干擾樣式產(chǎn)生的干擾效果包括壓制、欺騙和壓制-欺騙聯(lián)合效果。

    1.3 干擾矩陣構(gòu)建

    干擾矩陣的構(gòu)建可以分為實(shí)時(shí)建立和非實(shí)時(shí)建立。實(shí)時(shí)建立是在作戰(zhàn)環(huán)境下,由機(jī)載偵察設(shè)備對(duì)敵方AFCR的工作狀態(tài)進(jìn)行偵察與識(shí)別,根據(jù)我方做出干擾樣式選擇之后敵方AFCR的模式變化來獲取雷達(dá)的工作模式轉(zhuǎn)換關(guān)系,再結(jié)合我方的干擾樣式集建立干擾矩陣。這種方式幾乎沒有任何先驗(yàn)知識(shí),干擾樣式是否可以起到效果無法得知。非實(shí)時(shí)建立則是在非作戰(zhàn)環(huán)境下,依靠偵察設(shè)備在平時(shí)的戰(zhàn)略偵察,我方已對(duì)敵方AFCR的工作模式有一定了解,通過對(duì)偵察數(shù)據(jù)的情報(bào)分析,對(duì)其在一些干擾樣式作用下的工作模式轉(zhuǎn)換關(guān)系已有一定的先驗(yàn)知識(shí),再通過仿真手段對(duì)其他干擾樣式進(jìn)行驗(yàn)證、更新,得到一個(gè)較為完善的干擾矩陣。

    本文的干擾矩陣是在第二種方式下建立的,并且結(jié)合了部分先驗(yàn)知識(shí)和開源資料。如表1所示,左側(cè)一欄為威脅等級(jí)從高到低排列的工作模式,右側(cè)則是各種干擾樣式作用下的工作模式轉(zhuǎn)換關(guān)系。

    表1 干擾矩陣表

    2 基于Double DQN的干擾樣式選擇算法

    2.1 DQN原理與Double DQN的改進(jìn)

    2.1.1 DQN原理

    DQN算法[13]是一種從高維的輸入學(xué)習(xí)控制策略的深度強(qiáng)化學(xué)習(xí)算法。和Q-學(xué)習(xí)算法相比,DQN將Q表的迭代更新過程轉(zhuǎn)化為一個(gè)函數(shù)擬合問題,通過用函數(shù)來代替Q表產(chǎn)生Q值。

    在普通的Q-學(xué)習(xí)中,Q值更新公式如下:

    Q(s,a)←Q(s,a)+α(r+γQ(s′,a′)-Q(s,a))。

    (1)

    式中:s代表智能體(Agent)當(dāng)前狀態(tài),a′是Agent在下一個(gè)狀態(tài)s′下選擇的動(dòng)作,r表示Agent到達(dá)下一個(gè)狀態(tài)得到的獎(jiǎng)勵(lì)值,α∈[0,1]是Q值更新中的學(xué)習(xí)率,γ∈[0,1]是Q值更新中的折扣因子。Q(s,a)為Q現(xiàn)實(shí)值,r+γmaxa′Q(s′,a′)為Q估計(jì)值,通過對(duì)兩者之間的誤差學(xué)習(xí)來更新Q現(xiàn)實(shí)值。

    在DQN算法中使用神經(jīng)網(wǎng)絡(luò)來對(duì)Q值進(jìn)行估計(jì),相近的狀態(tài)得到相近的輸出動(dòng)作。通過更新網(wǎng)絡(luò)參數(shù)θ來使Q函數(shù)逼近最優(yōu)Q值,如式(2)所示:

    Q(s,a;θi)≈Q(s,a)。

    (2)

    式中:θi是第i次迭代時(shí)的神經(jīng)網(wǎng)絡(luò)參數(shù)。

    (3)

    損失函數(shù)如下:

    (4)

    MainNet的參數(shù)是每次訓(xùn)練均在更新,每隔一定步數(shù)將網(wǎng)絡(luò)的參數(shù)值賦給TargetNet。在單步更新中TargetNet參數(shù)值不變,Q估計(jì)值也不變。

    2.1.2 Double DQN的改進(jìn)

    DQN中計(jì)算Q估計(jì)值時(shí)的最大化操作會(huì)使得估計(jì)的值函數(shù)比值函數(shù)的真實(shí)值大,即會(huì)產(chǎn)生非均勻的“過估計(jì)”,影響最終決策。作為一種離線學(xué)習(xí)的算法,DQN每次學(xué)習(xí)時(shí)不是使用下一次交互的真實(shí)動(dòng)作,而是使用當(dāng)前認(rèn)為價(jià)值最大的動(dòng)作來更新目標(biāo)值函數(shù),但是對(duì)于真實(shí)的策略來說在給定的狀態(tài)下并不是每次都選擇使得Q值最大的動(dòng)作,所以目標(biāo)值直接選擇動(dòng)作最大的Q值往往會(huì)導(dǎo)致目標(biāo)值要高于真實(shí)值。

    在Double DQN算法中動(dòng)作的選擇和動(dòng)作的評(píng)估分別用不同的值函數(shù)網(wǎng)絡(luò)來實(shí)現(xiàn):首先,動(dòng)作的評(píng)估是根據(jù)MainNet得到下一狀態(tài)s′下的Q值最大的動(dòng)作Q(s′,a′;θi);然后,將這個(gè)動(dòng)作作為計(jì)算TargetQ值的動(dòng)作,用TargetNet完成最優(yōu)動(dòng)作的選擇工作。Double DQN中TargetQ的計(jì)算式如下:

    (5)

    將上式帶入損失函數(shù)計(jì)算公式,得

    Loss(θ)=E[(TargetQ-Q(s,a;θi))2]。

    (6)

    2.2 Double DQN干擾樣式選擇方法概述

    本文將Double DQN的原理應(yīng)用于干擾樣式選擇,其算法模型的流程如圖1所示,其中,s∈S表示敵方AFCR在某時(shí)刻的工作狀態(tài),S代表敵方AFCR的工作狀態(tài)集;a∈A表示干擾機(jī)在某時(shí)刻下選擇出的干擾樣式,A代表我方干擾樣式集。當(dāng)我方偵察設(shè)備通過雷達(dá)工作狀態(tài)識(shí)別得到s,將此狀態(tài)輸入到Double DQN網(wǎng)絡(luò)中,經(jīng)過神經(jīng)網(wǎng)絡(luò)擬合得到各個(gè)干擾樣式對(duì)應(yīng)的Q值,根據(jù)ε-greedy策略(該策略可以平衡探索與利用之間的關(guān)系來獲得累計(jì)最大回報(bào))來選取出一種干擾樣式a,作用于敵方AFCR。根據(jù)敵方AFCR的工作狀態(tài)轉(zhuǎn)換,我方進(jìn)行效果評(píng)估得到回報(bào)r∈。由于敵方AFCR與我方屬于非合作關(guān)系,我方可以根據(jù)遭受干擾后的雷達(dá)工作狀態(tài)的改變來確定干擾的有效性[14],通過對(duì)AFCR的威脅等級(jí)判定來給出相應(yīng)的回報(bào)值r。干擾機(jī)根據(jù)回報(bào)值來更新Q值,決定下一工作狀態(tài)s′所要采取的干擾樣式,然后將上述的四個(gè)變量存入四元組樣本〈s,a,r,s′〉中,多條樣本組成樣本池D。在樣本池D中隨機(jī)抽取一定批量(minibatch)的樣本對(duì)神經(jīng)網(wǎng)絡(luò)進(jìn)行訓(xùn)練,對(duì)網(wǎng)絡(luò)參數(shù)進(jìn)行更新,然后再進(jìn)行干擾樣式選擇,循環(huán)往復(fù),直至達(dá)到終止?fàn)顟B(tài)。

    圖1 算法流程圖

    算法的偽代碼如下:

    1 輸入:狀態(tài)空間S,動(dòng)作空間A,折扣因子γ,學(xué)習(xí)率α,迭代次數(shù)M

    FORi=1:M

    2 初始化網(wǎng)絡(luò)參數(shù)

    FORs∈S

    3 輸入偵察到的敵方AFCR工作狀態(tài)s

    4 Double DQN計(jì)算Q值并依據(jù)ε-greedy策略給出干擾樣式a

    5 我方通過偵察得到AFCR下一工作狀態(tài) ,進(jìn)行干擾評(píng)估得到獎(jiǎng)勵(lì)值r

    6 將四元組 存入樣本池D,隨機(jī)抽取minibatch個(gè)樣本對(duì)網(wǎng)絡(luò)進(jìn)行訓(xùn)練,更新網(wǎng)絡(luò)參數(shù)

    7s為終止?fàn)顟B(tài);

    END FOR

    8 達(dá)到最大迭代次數(shù)M

    END FOR

    由于不同的干擾樣式產(chǎn)生的干擾效果不同,壓制性干擾樣式會(huì)使敵方AFCR的工作狀態(tài)朝著威脅等級(jí)降低的方向轉(zhuǎn)變;欺騙性干擾樣式會(huì)產(chǎn)生欺騙性干擾效果,部分干擾樣式可能會(huì)使其工作狀態(tài)的威脅等級(jí)朝著升高的方向變化。因此,回報(bào)值定義如下:

    (7)

    式中:TL→min表示AFCR的工作狀態(tài)威脅等級(jí)將至最低;TL↓,ASJ表示采取壓制性干擾樣式,工作狀態(tài)向威脅等級(jí)降低的方向轉(zhuǎn)換;TL↑,ADJ表示采取部分欺騙性干擾樣式時(shí)工作狀態(tài)威脅等級(jí)向升高方向轉(zhuǎn)換;TL?/TL表示工作模式之間沒有轉(zhuǎn)換;TL↑表示AFCR工作狀態(tài)向威脅等級(jí)升高的方向轉(zhuǎn)換。

    3 仿真驗(yàn)證

    本文仿真使用Tensorflow框架編寫。計(jì)算機(jī)配置如下:處理器采用Intel(R)Core(TM) i5-10200H;內(nèi)存為16 GB。

    本文用兩個(gè)全連接層來近似Q函數(shù)Q(s,a;θi)。網(wǎng)絡(luò)的細(xì)節(jié)如圖2所示,該網(wǎng)絡(luò)由兩個(gè)全連接層組成。

    圖2 值函數(shù)擬合神經(jīng)網(wǎng)絡(luò)結(jié)構(gòu)

    算法的訓(xùn)練參數(shù)如表2所示。

    表2 參數(shù)設(shè)置

    在兩個(gè)網(wǎng)絡(luò)的參數(shù)替換前先觀察300步,然后每隔5步將MainNet的參數(shù)賦給TargetNet;初始化的ε-greedy策略中ε的初始概率值為0.1,終止概率值為0.9,即初始時(shí)有90%的概率隨機(jī)選擇干擾樣式,最終有90%的概率選擇最優(yōu)干擾樣式,每一次學(xué)習(xí)都會(huì)將ε的值增大0.001,增加到終止值時(shí)停止,這樣的設(shè)置可以在訓(xùn)練的過程中使網(wǎng)絡(luò)逐漸收斂;每次從樣本池的2 000個(gè)樣本中隨機(jī)抽取64個(gè)樣本用于網(wǎng)絡(luò)訓(xùn)練。

    圖3是Double DQN算法訓(xùn)練得到的損失圖。由于樣本量較少,在迭代中選擇隔5步交換一次網(wǎng)絡(luò)參數(shù)。在每隔5步交換網(wǎng)絡(luò)參數(shù)后,網(wǎng)絡(luò)訓(xùn)練損失值逐步下降,但由于初始時(shí)刻的ε探索值較低,隨機(jī)選擇干擾樣式會(huì)導(dǎo)致?lián)p失值產(chǎn)生波動(dòng),但隨著訓(xùn)練的進(jìn)行,ε探索值逐漸變大,神經(jīng)網(wǎng)絡(luò)擬合的Q值越來越準(zhǔn)確,損失值在大約750步以后降至0附近,說明網(wǎng)絡(luò)訓(xùn)練完成。整個(gè)訓(xùn)練過程所花費(fèi)的平均時(shí)間為11.7 s,但在實(shí)際應(yīng)用時(shí),網(wǎng)絡(luò)訓(xùn)練完成之后即可進(jìn)行干擾決策,所以在實(shí)際應(yīng)用中可以適當(dāng)減少迭代次數(shù),這樣可以提高決策效率,使決策時(shí)間控制在秒級(jí),滿足實(shí)戰(zhàn)要求。

    圖3 網(wǎng)絡(luò)訓(xùn)練損失

    將訓(xùn)練中每次用于干擾樣式選擇的Q值記錄下來,如圖4所示,可以看到兩種算法的Q值變化趨勢(shì)一致,在迭代5 500步后收斂至495附近。但是Double DQN算法的Q值消除了一部分過估計(jì),相比DQN算法的Q值較低,計(jì)算Q值的平均值可以得到前者比后者低34.01。這也驗(yàn)證了Double DQN算法在解決Q值偏大和網(wǎng)絡(luò)訓(xùn)練的TargetQ值不準(zhǔn)確的問題上具有更良好的表現(xiàn)。

    圖4 Q值對(duì)比

    強(qiáng)化學(xué)習(xí)算法的最終目標(biāo)都是使總的目標(biāo)獎(jiǎng)勵(lì)最大化,因此,把迭代過程中每次干擾樣式選擇產(chǎn)生的獎(jiǎng)勵(lì)值相加得到總的獎(jiǎng)勵(lì)值,對(duì)比20次重復(fù)實(shí)驗(yàn)中DQN與Double DQN兩種算法得到的總獎(jiǎng)勵(lì)值,如圖5所示??梢园l(fā)現(xiàn),在絕大部分情況下Double DQN算法產(chǎn)生的總獎(jiǎng)勵(lì)值要高于DQN算法,這說明在干擾樣式選擇中選擇最優(yōu)動(dòng)作比次優(yōu)動(dòng)作會(huì)獲得更高的獎(jiǎng)勵(lì)值,從而驗(yàn)證了本文方法的有效性。

    圖5 兩種算法的總獎(jiǎng)勵(lì)值對(duì)比

    在參數(shù)選擇上,折扣因子γ是調(diào)節(jié)長(zhǎng)期回報(bào)與即時(shí)回報(bào)的參數(shù),在仿真中我們更注重長(zhǎng)期回報(bào),因此將γ設(shè)置為0.9;而學(xué)習(xí)率α一般取值為0.1,但由于本文仿真迭代次數(shù)較多,而且α值過大會(huì)引起損失函數(shù)劇烈波動(dòng),所以經(jīng)過多次試驗(yàn)將α值設(shè)為0.005;樣本池的容量沒有固定的設(shè)置,當(dāng)訓(xùn)練步數(shù)恒定為2 000步時(shí)分別設(shè)置樣本池容量為1 000和2 000,對(duì)比兩種設(shè)置上的損失值情況,如圖6所示,可見樣本池容量設(shè)為2 000時(shí)損失值明顯高于容量為1 000時(shí)的。因此,在訓(xùn)練步數(shù)為2 000步時(shí)選擇樣本池容量為1 000。

    圖6 樣本池容量對(duì)比

    根據(jù)仿真結(jié)果可以得到如圖7所示的最優(yōu)干擾樣式選擇路徑,圖中以數(shù)字代表具體的干擾樣式,根據(jù)空戰(zhàn)的態(tài)勢(shì)和AFCR雷達(dá)的工作模式分為近距和遠(yuǎn)距兩類,分別如圖7(a)和圖7(b)所示。在不同的干擾樣式的作用下,AFCR的威脅等級(jí)由高到低逐漸下降;部分干擾樣式在不同的態(tài)勢(shì)和工作模式下產(chǎn)生的干擾效果也不盡相同。

    圖7 最優(yōu)干擾樣式選擇路徑圖

    4 結(jié)束語

    隨著機(jī)載火控雷達(dá)技術(shù)體制的不斷進(jìn)步,現(xiàn)代空戰(zhàn)中敵我雙方的電子戰(zhàn)博弈也愈演愈烈。針對(duì)空戰(zhàn)場(chǎng)景中機(jī)載火控雷達(dá)與干擾機(jī)之間的對(duì)抗,本文提出了一種基于Double DQN干擾樣式選擇方法,在建立干擾矩陣的基礎(chǔ)上通過Double DQN算法選擇最優(yōu)干擾樣式,仿真實(shí)驗(yàn)分析了參數(shù)設(shè)置,對(duì)比DQN證明了其在解決“過估計(jì)”問題上的有效性,給出了不同態(tài)勢(shì)下的最優(yōu)干擾樣式選擇路徑。本文方法也可以為機(jī)載自衛(wèi)吊艙的干擾樣式選擇提供參考??紤]到目前先進(jìn)戰(zhàn)機(jī)均為多用途戰(zhàn)機(jī),還可以執(zhí)行對(duì)地、對(duì)海突擊任務(wù),因此下一步研究中還需對(duì)AFCR更多作戰(zhàn)模式下的干擾樣式選擇問題進(jìn)行探索。

    猜你喜歡
    空戰(zhàn)樣式雷達(dá)
    有雷達(dá)
    大自然探索(2023年7期)2023-08-15 00:48:21
    CPMF-I 取樣式多相流分離計(jì)量裝置
    最強(qiáng)空戰(zhàn)王
    CPMF-I 取樣式多相流分離計(jì)量裝置
    取樣式多相流分離計(jì)量裝置
    雷達(dá)
    空戰(zhàn)之城
    基于空時(shí)二維隨機(jī)輻射場(chǎng)的彈載雷達(dá)前視成像
    “85:0”的敘以空戰(zhàn)
    現(xiàn)代“千里眼”——雷達(dá)
    久热爱精品视频在线9| 亚洲国产精品合色在线| 一级黄色大片毛片| 久久国产乱子伦精品免费另类| 黄片小视频在线播放| 18禁美女被吸乳视频| 美女 人体艺术 gogo| 人人澡人人妻人| 欧美精品亚洲一区二区| 一级a爱片免费观看的视频| 黄色视频不卡| 黄色片一级片一级黄色片| 国产亚洲欧美精品永久| 欧美激情久久久久久爽电影| 成人三级黄色视频| 亚洲av第一区精品v没综合| 国产激情偷乱视频一区二区| 国产午夜福利久久久久久| 国产蜜桃级精品一区二区三区| 午夜亚洲福利在线播放| 国产单亲对白刺激| 欧美精品啪啪一区二区三区| 亚洲 国产 在线| 久久久久久久久久黄片| 国产熟女午夜一区二区三区| 日日爽夜夜爽网站| 自线自在国产av| 深夜精品福利| 国产精品精品国产色婷婷| 免费高清视频大片| 久久人妻av系列| 午夜免费激情av| 欧美日韩一级在线毛片| 在线观看免费午夜福利视频| 美女 人体艺术 gogo| 亚洲人成伊人成综合网2020| 夜夜夜夜夜久久久久| 欧美丝袜亚洲另类 | 国产人伦9x9x在线观看| 啦啦啦韩国在线观看视频| 激情在线观看视频在线高清| 国产免费av片在线观看野外av| 狠狠狠狠99中文字幕| 欧美黄色淫秽网站| 日本熟妇午夜| 欧美黑人精品巨大| 18禁美女被吸乳视频| 国产成人欧美在线观看| 久久久久国产精品人妻aⅴ院| 色在线成人网| 极品教师在线免费播放| 99久久综合精品五月天人人| 国产伦在线观看视频一区| www.自偷自拍.com| 国产伦人伦偷精品视频| www.精华液| 成人国产综合亚洲| 久久精品夜夜夜夜夜久久蜜豆 | 免费看十八禁软件| 精品久久久久久久久久免费视频| 国产高清视频在线播放一区| 亚洲av电影在线进入| 人人妻人人澡人人看| 啦啦啦韩国在线观看视频| 麻豆久久精品国产亚洲av| 岛国视频午夜一区免费看| 高清毛片免费观看视频网站| 窝窝影院91人妻| 免费在线观看影片大全网站| 亚洲熟妇中文字幕五十中出| tocl精华| 国产亚洲精品av在线| 国产av在哪里看| 亚洲性夜色夜夜综合| x7x7x7水蜜桃| 亚洲国产精品合色在线| 欧美黄色片欧美黄色片| 国产国语露脸激情在线看| 国产1区2区3区精品| 国产高清视频在线播放一区| 免费观看人在逋| 女人被狂操c到高潮| 好看av亚洲va欧美ⅴa在| 婷婷精品国产亚洲av在线| 日韩视频一区二区在线观看| 可以免费在线观看a视频的电影网站| netflix在线观看网站| 午夜福利在线在线| 国产精品av久久久久免费| 在线av久久热| 麻豆成人av在线观看| 午夜a级毛片| 亚洲国产欧洲综合997久久, | 欧美一区二区精品小视频在线| 亚洲熟妇熟女久久| 日本撒尿小便嘘嘘汇集6| 中文资源天堂在线| 男人舔女人下体高潮全视频| 免费看十八禁软件| 亚洲精品av麻豆狂野| 伊人久久大香线蕉亚洲五| 叶爱在线成人免费视频播放| 亚洲国产中文字幕在线视频| 欧美亚洲日本最大视频资源| 亚洲性夜色夜夜综合| 亚洲第一欧美日韩一区二区三区| 亚洲五月色婷婷综合| 香蕉av资源在线| 51午夜福利影视在线观看| 在线国产一区二区在线| 观看免费一级毛片| xxx96com| 不卡av一区二区三区| 午夜视频精品福利| 97人妻精品一区二区三区麻豆 | 1024香蕉在线观看| 亚洲av电影在线进入| 久久天躁狠狠躁夜夜2o2o| 99在线视频只有这里精品首页| 亚洲第一欧美日韩一区二区三区| 欧美绝顶高潮抽搐喷水| 999精品在线视频| www.自偷自拍.com| 露出奶头的视频| 99热6这里只有精品| 狂野欧美激情性xxxx| 精品国产国语对白av| 麻豆久久精品国产亚洲av| 美女免费视频网站| 国产av不卡久久| 日日干狠狠操夜夜爽| 亚洲五月婷婷丁香| 国产97色在线日韩免费| 老司机福利观看| 精品欧美一区二区三区在线| 特大巨黑吊av在线直播 | www.999成人在线观看| 黄色视频,在线免费观看| 三级毛片av免费| 亚洲精品av麻豆狂野| 成年版毛片免费区| 波多野结衣av一区二区av| 国产精品爽爽va在线观看网站 | www国产在线视频色| 欧美成人免费av一区二区三区| 美女 人体艺术 gogo| 人人妻人人澡欧美一区二区| 无遮挡黄片免费观看| 99re在线观看精品视频| 久久中文看片网| 国产成人精品久久二区二区91| 非洲黑人性xxxx精品又粗又长| 精品久久久久久久久久久久久 | 亚洲精品在线美女| 黄色女人牲交| 18禁美女被吸乳视频| 很黄的视频免费| 一级毛片女人18水好多| 日韩中文字幕欧美一区二区| 国产精品自产拍在线观看55亚洲| 亚洲第一电影网av| 神马国产精品三级电影在线观看 | 法律面前人人平等表现在哪些方面| 国产精品免费视频内射| 久久久久久大精品| 级片在线观看| 婷婷精品国产亚洲av在线| 亚洲国产精品成人综合色| 成人18禁高潮啪啪吃奶动态图| 午夜视频精品福利| 精品久久久久久久末码| 中文字幕av电影在线播放| 村上凉子中文字幕在线| 一区二区三区精品91| 色综合婷婷激情| 美女午夜性视频免费| 在线观看免费日韩欧美大片| 欧美绝顶高潮抽搐喷水| 国产午夜精品久久久久久| 在线av久久热| 身体一侧抽搐| 人成视频在线观看免费观看| 午夜日韩欧美国产| 欧美激情 高清一区二区三区| 99久久国产精品久久久| 精品不卡国产一区二区三区| 免费看美女性在线毛片视频| 高潮久久久久久久久久久不卡| 最好的美女福利视频网| 久久九九热精品免费| 色播在线永久视频| 国产蜜桃级精品一区二区三区| 亚洲成人久久爱视频| 国产精品国产高清国产av| 岛国视频午夜一区免费看| 国产亚洲欧美98| 婷婷精品国产亚洲av| АⅤ资源中文在线天堂| 日韩一卡2卡3卡4卡2021年| 国产精品99久久99久久久不卡| 十八禁网站免费在线| 亚洲成国产人片在线观看| 日本成人三级电影网站| 叶爱在线成人免费视频播放| 午夜免费鲁丝| 久热这里只有精品99| 免费在线观看黄色视频的| 国产精品乱码一区二三区的特点| 啦啦啦 在线观看视频| 久久久久国产一级毛片高清牌| 国产亚洲精品久久久久久毛片| 91成年电影在线观看| 在线播放国产精品三级| 波多野结衣av一区二区av| 亚洲成av人片免费观看| 女性被躁到高潮视频| 久久精品影院6| 99久久综合精品五月天人人| 99国产极品粉嫩在线观看| 色精品久久人妻99蜜桃| 成人永久免费在线观看视频| 免费在线观看完整版高清| 亚洲成a人片在线一区二区| 一区二区三区激情视频| 久久久久久久精品吃奶| 91在线观看av| 亚洲,欧美精品.| aaaaa片日本免费| 国产视频一区二区在线看| 99国产综合亚洲精品| 久久午夜综合久久蜜桃| 精品国产一区二区三区四区第35| 夜夜夜夜夜久久久久| 精品国产超薄肉色丝袜足j| 免费观看人在逋| 免费观看精品视频网站| 他把我摸到了高潮在线观看| 国产亚洲欧美精品永久| 亚洲自拍偷在线| 国产av又大| 女性被躁到高潮视频| 国产精品日韩av在线免费观看| √禁漫天堂资源中文www| 男人舔女人的私密视频| 1024手机看黄色片| 国产亚洲av高清不卡| 欧美日韩乱码在线| 中文字幕av电影在线播放| 少妇被粗大的猛进出69影院| 99久久综合精品五月天人人| 伊人久久大香线蕉亚洲五| 18禁裸乳无遮挡免费网站照片 | 国产午夜精品久久久久久| 成人18禁在线播放| 99re在线观看精品视频| 亚洲成国产人片在线观看| 国产高清视频在线播放一区| 亚洲成av人片免费观看| 欧美成人午夜精品| 搡老妇女老女人老熟妇| 一级毛片女人18水好多| 国产精品久久久久久亚洲av鲁大| 国产一级毛片七仙女欲春2 | 在线观看一区二区三区| 久久精品影院6| 高清毛片免费观看视频网站| 亚洲人成网站高清观看| 午夜影院日韩av| avwww免费| 国内毛片毛片毛片毛片毛片| 91麻豆av在线| 婷婷精品国产亚洲av| www.自偷自拍.com| 日韩视频一区二区在线观看| 丰满的人妻完整版| 亚洲人成伊人成综合网2020| 看片在线看免费视频| 又紧又爽又黄一区二区| 丰满的人妻完整版| 亚洲中文av在线| 亚洲免费av在线视频| 手机成人av网站| 色综合亚洲欧美另类图片| 欧美乱妇无乱码| 午夜免费鲁丝| 日韩精品青青久久久久久| 久久中文字幕人妻熟女| 亚洲男人的天堂狠狠| 亚洲精品一卡2卡三卡4卡5卡| 免费在线观看完整版高清| 欧美日韩福利视频一区二区| 国产成人精品久久二区二区免费| 男女午夜视频在线观看| 亚洲精品中文字幕一二三四区| 99热这里只有精品一区 | 国产单亲对白刺激| 精品久久蜜臀av无| 亚洲自偷自拍图片 自拍| www日本黄色视频网| 1024视频免费在线观看| 我的亚洲天堂| 久久精品人妻少妇| 丝袜美腿诱惑在线| 亚洲国产中文字幕在线视频| 精品一区二区三区视频在线观看免费| 久久久久久久午夜电影| 成人国语在线视频| 国产精品1区2区在线观看.| 免费在线观看完整版高清| 国产精品美女特级片免费视频播放器 | 婷婷亚洲欧美| 国产伦人伦偷精品视频| 亚洲午夜理论影院| 亚洲性夜色夜夜综合| 可以在线观看毛片的网站| 国产欧美日韩一区二区三| 欧美一级毛片孕妇| 国产av在哪里看| 18禁黄网站禁片午夜丰满| 妹子高潮喷水视频| 桃红色精品国产亚洲av| 激情在线观看视频在线高清| 免费搜索国产男女视频| 亚洲av五月六月丁香网| 男女之事视频高清在线观看| 欧美 亚洲 国产 日韩一| 淫秽高清视频在线观看| 久久精品国产综合久久久| 久久久水蜜桃国产精品网| 黄片播放在线免费| 中文字幕人妻丝袜一区二区| 啦啦啦观看免费观看视频高清| 自线自在国产av| 午夜福利免费观看在线| 99国产精品99久久久久| 视频区欧美日本亚洲| 夜夜躁狠狠躁天天躁| 日韩欧美三级三区| 精品第一国产精品| 亚洲av美国av| 亚洲在线自拍视频| 亚洲精品美女久久av网站| 国产精品一区二区免费欧美| 18禁国产床啪视频网站| 91老司机精品| 国产精品一区二区三区四区久久 | 亚洲国产看品久久| 日韩欧美在线二视频| 男女下面进入的视频免费午夜 | 韩国精品一区二区三区| 久久久国产成人免费| 亚洲中文字幕一区二区三区有码在线看 | 一级a爱片免费观看的视频| 成人国语在线视频| 中文字幕人成人乱码亚洲影| 欧美中文综合在线视频| 男女做爰动态图高潮gif福利片| 亚洲男人的天堂狠狠| 在线观看一区二区三区| 亚洲第一电影网av| 精品乱码久久久久久99久播| 欧美久久黑人一区二区| 亚洲熟妇中文字幕五十中出| 高潮久久久久久久久久久不卡| 亚洲成av片中文字幕在线观看| 十分钟在线观看高清视频www| 又紧又爽又黄一区二区| 91国产中文字幕| 亚洲精品在线美女| 国产真实乱freesex| 麻豆久久精品国产亚洲av| 国产欧美日韩一区二区精品| 伊人久久大香线蕉亚洲五| 黄色片一级片一级黄色片| 伊人久久大香线蕉亚洲五| 久久久精品国产亚洲av高清涩受| 久久人人精品亚洲av| 97超级碰碰碰精品色视频在线观看| 国产精品二区激情视频| 丝袜在线中文字幕| www日本黄色视频网| 一个人观看的视频www高清免费观看 | 日本一区二区免费在线视频| 亚洲国产精品合色在线| 国产一区二区在线av高清观看| 最新在线观看一区二区三区| 亚洲人成网站在线播放欧美日韩| a级毛片a级免费在线| 级片在线观看| 久久人人精品亚洲av| 亚洲色图 男人天堂 中文字幕| 手机成人av网站| 香蕉丝袜av| 怎么达到女性高潮| 久热这里只有精品99| 两人在一起打扑克的视频| 国产一级毛片七仙女欲春2 | 亚洲一区中文字幕在线| 国产黄a三级三级三级人| www.精华液| 神马国产精品三级电影在线观看 | 亚洲欧美激情综合另类| 日本成人三级电影网站| 日韩欧美免费精品| 午夜免费鲁丝| 久久精品夜夜夜夜夜久久蜜豆 | 最近最新免费中文字幕在线| 亚洲av片天天在线观看| 免费电影在线观看免费观看| 久久草成人影院| 国产爱豆传媒在线观看 | 国产成人av教育| 国产亚洲精品久久久久久毛片| 亚洲av第一区精品v没综合| 91老司机精品| 久久精品夜夜夜夜夜久久蜜豆 | 午夜精品在线福利| 国产精品乱码一区二三区的特点| 久久婷婷人人爽人人干人人爱| 欧美日韩一级在线毛片| 亚洲精品一卡2卡三卡4卡5卡| 久久久精品欧美日韩精品| 欧美久久黑人一区二区| 国产一区在线观看成人免费| 在线观看免费午夜福利视频| 亚洲国产精品合色在线| 叶爱在线成人免费视频播放| 久久青草综合色| 精品国产美女av久久久久小说| 99久久综合精品五月天人人| 久久香蕉精品热| av免费在线观看网站| 欧美激情极品国产一区二区三区| xxxwww97欧美| 一级a爱视频在线免费观看| 久久中文字幕人妻熟女| 人妻丰满熟妇av一区二区三区| 国产真人三级小视频在线观看| 十八禁人妻一区二区| 中亚洲国语对白在线视频| 精品国产乱子伦一区二区三区| 午夜福利在线在线| 在线观看www视频免费| 美女高潮到喷水免费观看| 亚洲精品国产一区二区精华液| 亚洲欧美精品综合久久99| 亚洲国产精品合色在线| 国产成年人精品一区二区| 国产精品久久电影中文字幕| 亚洲精品在线观看二区| 欧美色视频一区免费| 国产免费男女视频| 一级毛片女人18水好多| 成人国产综合亚洲| 听说在线观看完整版免费高清| 色综合婷婷激情| 18禁黄网站禁片免费观看直播| aaaaa片日本免费| 国产一区二区三区视频了| 黄片大片在线免费观看| 欧美性长视频在线观看| 亚洲性夜色夜夜综合| 久久 成人 亚洲| 亚洲,欧美精品.| 这个男人来自地球电影免费观看| 久9热在线精品视频| 免费在线观看视频国产中文字幕亚洲| 男女床上黄色一级片免费看| 午夜久久久久精精品| 一进一出好大好爽视频| 国产aⅴ精品一区二区三区波| 亚洲,欧美精品.| 久久人妻av系列| 亚洲久久久国产精品| 精品国产乱子伦一区二区三区| 国产黄a三级三级三级人| 亚洲欧美日韩高清在线视频| 香蕉av资源在线| 亚洲第一电影网av| 日韩欧美一区视频在线观看| 91麻豆av在线| 亚洲国产精品sss在线观看| 99久久精品国产亚洲精品| 国内少妇人妻偷人精品xxx网站 | 少妇 在线观看| 亚洲国产精品成人综合色| 欧美精品啪啪一区二区三区| 少妇裸体淫交视频免费看高清 | 国产又黄又爽又无遮挡在线| 免费av毛片视频| 午夜久久久在线观看| 午夜a级毛片| 亚洲国产中文字幕在线视频| 午夜福利欧美成人| 少妇的丰满在线观看| 在线视频色国产色| 欧美中文日本在线观看视频| 神马国产精品三级电影在线观看 | 国产精品久久电影中文字幕| 午夜福利18| 欧美成人免费av一区二区三区| 亚洲精品色激情综合| 精品卡一卡二卡四卡免费| 久久亚洲真实| 男人舔女人的私密视频| 啪啪无遮挡十八禁网站| 变态另类成人亚洲欧美熟女| 操出白浆在线播放| 亚洲精品久久成人aⅴ小说| 欧美最黄视频在线播放免费| 国产伦人伦偷精品视频| 国产午夜福利久久久久久| 国产亚洲欧美98| 国产一卡二卡三卡精品| 亚洲av片天天在线观看| 一边摸一边抽搐一进一小说| 神马国产精品三级电影在线观看 | 欧美成人午夜精品| 亚洲成a人片在线一区二区| 欧美午夜高清在线| 亚洲国产欧美网| 18美女黄网站色大片免费观看| 一进一出抽搐gif免费好疼| 成年免费大片在线观看| 欧美午夜高清在线| 中文资源天堂在线| 国产精华一区二区三区| 欧美又色又爽又黄视频| 亚洲天堂国产精品一区在线| 久久久精品欧美日韩精品| 亚洲五月色婷婷综合| 99久久精品国产亚洲精品| 国产私拍福利视频在线观看| 91在线观看av| 黄片大片在线免费观看| 天天躁狠狠躁夜夜躁狠狠躁| 精品久久久久久久久久免费视频| 男女之事视频高清在线观看| 动漫黄色视频在线观看| 精品欧美一区二区三区在线| 国产av不卡久久| 亚洲一区中文字幕在线| bbb黄色大片| 黄色女人牲交| 韩国av一区二区三区四区| 国产成人影院久久av| 午夜免费成人在线视频| 久久热在线av| 制服丝袜大香蕉在线| 亚洲一区二区三区色噜噜| 免费看日本二区| 久久精品影院6| 手机成人av网站| 无人区码免费观看不卡| 久久99热这里只有精品18| 国产亚洲精品综合一区在线观看 | 我的亚洲天堂| 成人午夜高清在线视频 | 亚洲精品国产一区二区精华液| 亚洲中文av在线| 少妇 在线观看| 亚洲免费av在线视频| 香蕉av资源在线| 黄色毛片三级朝国网站| 久久中文字幕一级| 久久精品国产综合久久久| 久久婷婷人人爽人人干人人爱| 高清在线国产一区| 婷婷六月久久综合丁香| 级片在线观看| 久久亚洲精品不卡| 国产aⅴ精品一区二区三区波| 一二三四社区在线视频社区8| 可以在线观看毛片的网站| 99国产综合亚洲精品| 在线观看日韩欧美| 欧美+亚洲+日韩+国产| 国产精品亚洲av一区麻豆| 一区二区日韩欧美中文字幕| 99久久综合精品五月天人人| 精品卡一卡二卡四卡免费| 男女之事视频高清在线观看| x7x7x7水蜜桃| 一区二区日韩欧美中文字幕| 人妻丰满熟妇av一区二区三区| 天天添夜夜摸| 亚洲av五月六月丁香网| 大香蕉久久成人网| 自线自在国产av| 国产激情久久老熟女| 十八禁网站免费在线| 又黄又粗又硬又大视频| 男人的好看免费观看在线视频 | 精品少妇一区二区三区视频日本电影| 国产亚洲av嫩草精品影院| 久久精品人妻少妇| 国产国语露脸激情在线看| 精品电影一区二区在线| 欧美黄色淫秽网站| 日韩精品免费视频一区二区三区| 美女扒开内裤让男人捅视频| 国产免费av片在线观看野外av| 亚洲欧美日韩高清在线视频| 中文字幕人妻丝袜一区二区| 亚洲 欧美一区二区三区| 亚洲狠狠婷婷综合久久图片| 欧美精品啪啪一区二区三区| 1024视频免费在线观看| 999久久久精品免费观看国产| 美女 人体艺术 gogo| 精品少妇一区二区三区视频日本电影| 午夜a级毛片| www.精华液| 久久精品夜夜夜夜夜久久蜜豆 | 久久久精品欧美日韩精品|