《電子技術(shù)應(yīng)用》
您所在的位置:首頁(yè) > 其他 > 設(shè)計(jì)應(yīng)用 > 用于巡航導(dǎo)彈突防航跡規(guī)劃的改進(jìn)深度強(qiáng)化學(xué)習(xí)算法
用于巡航導(dǎo)彈突防航跡規(guī)劃的改進(jìn)深度強(qiáng)化學(xué)習(xí)算法
2021年電子技術(shù)應(yīng)用第8期
馬子杰,高 杰,武沛羽,謝擁軍
北京航空航天大學(xué) 電子信息工程學(xué)院,北京100191
摘要: 為了解決巡航導(dǎo)彈面臨動(dòng)態(tài)預(yù)警機(jī)雷達(dá)威脅下的突防航跡規(guī)劃問(wèn)題,提出一種改進(jìn)深度強(qiáng)化學(xué)習(xí)智能航跡規(guī)劃方法。針對(duì)巡航導(dǎo)彈面對(duì)預(yù)警威脅的突防任務(wù),構(gòu)建了典型的作戰(zhàn)場(chǎng)景,給出了預(yù)警機(jī)雷達(dá)探測(cè)概率的預(yù)測(cè)公式,在此基礎(chǔ)上設(shè)計(jì)了一種引入動(dòng)態(tài)預(yù)警威脅的獎(jiǎng)勵(lì)函數(shù),使用深度確定性策略梯度網(wǎng)絡(luò)算法(Deep Deterministic Policy Gradient,DDPG)探究巡航導(dǎo)彈智能突防問(wèn)題。針對(duì)傳統(tǒng)DDPG算法中探索噪聲時(shí)序不相關(guān)探索能力差的問(wèn)題,引入了奧恩斯坦-烏倫貝克噪聲,提高了算法的訓(xùn)練效率。計(jì)算結(jié)果表明,改進(jìn)的DDPG算法訓(xùn)練收斂時(shí)間更短。
中圖分類號(hào): TN959.1;TP181
文獻(xiàn)標(biāo)識(shí)碼: A
DOI:10.16157/j.issn.0258-7998.211934
中文引用格式: 馬子杰,高杰,武沛羽,等. 用于巡航導(dǎo)彈突防航跡規(guī)劃的改進(jìn)深度強(qiáng)化學(xué)習(xí)算法[J].電子技術(shù)應(yīng)用,2021,47(8):11-14,19.
英文引用格式: Ma Zijie,Gao Jie,Wu Peiyu,et al. An improved deep reinforcement learning algorithm for cruise missile penetration path planning[J]. Application of Electronic Technique,2021,47(8):11-14,19.
An improved deep reinforcement learning algorithm for cruise missile penetration path planning
Ma Zijie,Gao Jie,Wu Peiyu,Xie Yongjun
School of Electronics and Information Engineering,Beihang University,Beijing 100191,China
Abstract: Aiming at the problem of cruise missile penetration trajectory planning under the threat of dynamic early of warning aircraft radar, an improved deep reinforcement learning intelligent trajectory planning method is proposed. Firstly, aiming at the penetration mission of cruise missiles facing early warning threats, a typical combat scenario is constructed, and a prediction formula of radar detection probability of early warning aircraft is given. On this basis, a reward function that introduces dynamic early warning threats is designed, and the deep deterministic policy gradient algorithm(DDPG) is used to explore the intelligent penetration of cruise missiles. And then, in response to the poor exploration ability of the traditional DDPG algorithm that explores the uncorrelated timing of noise, Ornstein-Uhlenbeck noise is introduced to improve the training efficiency of the algorithm. The simulation results show that the improved DDPG algorithm training convergence time is shorter.
Key words : cruise missile;deep deterministic policy gradient algorithm;penetration strategy;deep reinforcement learning

0 引言

    巡航導(dǎo)彈是一種能機(jī)動(dòng)發(fā)射、命中精度高、隱蔽性強(qiáng)、機(jī)動(dòng)性能強(qiáng)的戰(zhàn)術(shù)打擊武器,但近年來(lái)由海陸空防御武器整合得到的體系化信息化反導(dǎo)防御系統(tǒng)態(tài)勢(shì)感知能力和區(qū)域拒止能力都得到了極大的提升,巡航導(dǎo)彈的戰(zhàn)場(chǎng)生存能力受到威脅,提升巡航導(dǎo)彈規(guī)避動(dòng)態(tài)威脅的能力成為其能否成功打擊目標(biāo)的關(guān)鍵[1-3]。傳統(tǒng)的巡航導(dǎo)彈航跡規(guī)劃方法中將雷達(dá)威脅建模為一個(gè)靜態(tài)的雷達(dá)檢測(cè)區(qū)域,這難以適應(yīng)對(duì)決策實(shí)時(shí)性要求較高的動(dòng)態(tài)戰(zhàn)場(chǎng)環(huán)境,而且其缺乏探索先驗(yàn)知識(shí)以外的突防策略的能力,需要研究能應(yīng)對(duì)動(dòng)態(tài)對(duì)抗的巡航導(dǎo)彈智能航跡規(guī)劃算法。

    深度強(qiáng)化學(xué)習(xí)是人工智能領(lǐng)域新的研究熱點(diǎn)[4-6]。隨著深度強(qiáng)化學(xué)習(xí)研究的深入,其開(kāi)始被應(yīng)用于武器裝備智能突防,文獻(xiàn)[7]利用深度強(qiáng)化學(xué)習(xí)提出了一種新的空空導(dǎo)彈制導(dǎo)律,提高了打擊目標(biāo)的能力。文獻(xiàn)[8]針對(duì)目標(biāo)、打擊導(dǎo)彈、攔截導(dǎo)彈作戰(zhàn)問(wèn)題,探究了是否發(fā)射攔截導(dǎo)彈、攔截導(dǎo)彈的最佳發(fā)射時(shí)間和發(fā)射后的最佳導(dǎo)引律。文獻(xiàn)[9]利用深度價(jià)值網(wǎng)絡(luò)算法探究了靜態(tài)預(yù)警威脅下的無(wú)人機(jī)航跡規(guī)劃問(wèn)題,提升了航跡規(guī)劃的時(shí)間。文獻(xiàn)[10]將雷達(dá)威脅建模為一個(gè)靜態(tài)的雷達(dá)檢測(cè)區(qū)域,在二維平面探究了巡飛彈動(dòng)態(tài)突防控制決策問(wèn)題,提高了巡飛彈的自主突防能力。




本文詳細(xì)內(nèi)容請(qǐng)下載:http://www.jysgc.com/resource/share/2000003690




作者信息:

馬子杰,高  杰,武沛羽,謝擁軍

(北京航空航天大學(xué) 電子信息工程學(xué)院,北京100191)




wd.jpg

此內(nèi)容為AET網(wǎng)站原創(chuàng),未經(jīng)授權(quán)禁止轉(zhuǎn)載。
主站蜘蛛池模板: 99精品人妻少妇一区二区| 国产一区在线看| 中日欧洲精品视频在线| 狠狠躁夜夜躁人人爽天天天天97| 国产成人精品亚洲精品| 91av手机在线观看| 天天干天天干天天干天天干天天干| 久久精品亚洲一区二区| 欧美午夜一区二区福利视频 | av无码精品一区二区三区| 性xxxxfreexxxxx喷水欧美| 亚洲另类自拍丝袜第五页| 特级毛片AAAAAA| 免费精品久久久久久中文字幕| 老湿机香蕉久久久久久| 国产做无码视频在线观看| 国产h在线播放| 大伊香蕉精品一区视频在线| 一级做a爱视频| 成人性生活免费视频| 久久99国产精品久久99| 日本免费精品一区二区三区| 久久精品国产精品亚洲精品 | 四虎国产精品永久在线播放| 蝌蚪蚪窝视频在线视频手机| 国产精品高清一区二区人妖 | 一区二区三区视频免费观看| 成人欧美一区二区三区在线观看| 丰满少妇又爽又紧又丰满在线观看| 日本精品3d动漫一区二区| 久久精品女人毛片国产| 日韩美女拍拍免费视频网站| 五月综合色婷婷在线观看| 杨幂下面好紧好湿好爽| 亚洲乱码日产精品BD在线观看| 欧美性大战久久久久久| 免费大片av手机看片| 精品久久久久久久久午夜福利| 北条麻妃一本到高清在线观看| 陈雅伦三级dvd在线观看| 国产在播放一区|