《電子技術應用》
您所在的位置:首頁 > 其他 > 設計應用 > 用于巡航導彈突防航跡規(guī)劃的改進深度強化學習算法
用于巡航導彈突防航跡規(guī)劃的改進深度強化學習算法
2021年電子技術應用第8期
馬子杰,高 杰,武沛羽,謝擁軍
北京航空航天大學 電子信息工程學院,北京100191
摘要: 為了解決巡航導彈面臨動態(tài)預警機雷達威脅下的突防航跡規(guī)劃問題,提出一種改進深度強化學習智能航跡規(guī)劃方法。針對巡航導彈面對預警威脅的突防任務,構建了典型的作戰(zhàn)場景,給出了預警機雷達探測概率的預測公式,在此基礎上設計了一種引入動態(tài)預警威脅的獎勵函數(shù),使用深度確定性策略梯度網(wǎng)絡算法(Deep Deterministic Policy Gradient,DDPG)探究巡航導彈智能突防問題。針對傳統(tǒng)DDPG算法中探索噪聲時序不相關探索能力差的問題,引入了奧恩斯坦-烏倫貝克噪聲,提高了算法的訓練效率。計算結果表明,改進的DDPG算法訓練收斂時間更短。
中圖分類號: TN959.1;TP181
文獻標識碼: A
DOI:10.16157/j.issn.0258-7998.211934
中文引用格式: 馬子杰,高杰,武沛羽,等. 用于巡航導彈突防航跡規(guī)劃的改進深度強化學習算法[J].電子技術應用,2021,47(8):11-14,19.
英文引用格式: Ma Zijie,Gao Jie,Wu Peiyu,et al. An improved deep reinforcement learning algorithm for cruise missile penetration path planning[J]. Application of Electronic Technique,2021,47(8):11-14,19.
An improved deep reinforcement learning algorithm for cruise missile penetration path planning
Ma Zijie,Gao Jie,Wu Peiyu,Xie Yongjun
School of Electronics and Information Engineering,Beihang University,Beijing 100191,China
Abstract: Aiming at the problem of cruise missile penetration trajectory planning under the threat of dynamic early of warning aircraft radar, an improved deep reinforcement learning intelligent trajectory planning method is proposed. Firstly, aiming at the penetration mission of cruise missiles facing early warning threats, a typical combat scenario is constructed, and a prediction formula of radar detection probability of early warning aircraft is given. On this basis, a reward function that introduces dynamic early warning threats is designed, and the deep deterministic policy gradient algorithm(DDPG) is used to explore the intelligent penetration of cruise missiles. And then, in response to the poor exploration ability of the traditional DDPG algorithm that explores the uncorrelated timing of noise, Ornstein-Uhlenbeck noise is introduced to improve the training efficiency of the algorithm. The simulation results show that the improved DDPG algorithm training convergence time is shorter.
Key words : cruise missile;deep deterministic policy gradient algorithm;penetration strategy;deep reinforcement learning

0 引言

    巡航導彈是一種能機動發(fā)射、命中精度高、隱蔽性強、機動性能強的戰(zhàn)術打擊武器,但近年來由海陸空防御武器整合得到的體系化信息化反導防御系統(tǒng)態(tài)勢感知能力和區(qū)域拒止能力都得到了極大的提升,巡航導彈的戰(zhàn)場生存能力受到威脅,提升巡航導彈規(guī)避動態(tài)威脅的能力成為其能否成功打擊目標的關鍵[1-3]。傳統(tǒng)的巡航導彈航跡規(guī)劃方法中將雷達威脅建模為一個靜態(tài)的雷達檢測區(qū)域,這難以適應對決策實時性要求較高的動態(tài)戰(zhàn)場環(huán)境,而且其缺乏探索先驗知識以外的突防策略的能力,需要研究能應對動態(tài)對抗的巡航導彈智能航跡規(guī)劃算法。

    深度強化學習是人工智能領域新的研究熱點[4-6]。隨著深度強化學習研究的深入,其開始被應用于武器裝備智能突防,文獻[7]利用深度強化學習提出了一種新的空空導彈制導律,提高了打擊目標的能力。文獻[8]針對目標、打擊導彈、攔截導彈作戰(zhàn)問題,探究了是否發(fā)射攔截導彈、攔截導彈的最佳發(fā)射時間和發(fā)射后的最佳導引律。文獻[9]利用深度價值網(wǎng)絡算法探究了靜態(tài)預警威脅下的無人機航跡規(guī)劃問題,提升了航跡規(guī)劃的時間。文獻[10]將雷達威脅建模為一個靜態(tài)的雷達檢測區(qū)域,在二維平面探究了巡飛彈動態(tài)突防控制決策問題,提高了巡飛彈的自主突防能力。




本文詳細內容請下載:http://m.jysgc.com/resource/share/2000003690




作者信息:

馬子杰,高  杰,武沛羽,謝擁軍

(北京航空航天大學 電子信息工程學院,北京100191)




wd.jpg

此內容為AET網(wǎng)站原創(chuàng),未經(jīng)授權禁止轉載。
主站蜘蛛池模板: 欧美一级亚洲一级| 国产资源在线看| 日本最新免费二区三区| 人人澡人人澡人人澡| 黄瓜视频芭乐视频app下载| 天天干天天做天天操| 久久天天躁狠狠躁夜夜免费观看 | 亚洲精品欧美日韩| 色综合久久久久综合体桃花网 | 99久久综合久中文字幕| 无需付费看视频网站入口| 亚洲日韩精品无码专区网址 | 中国黄色a级片| 最近最好的中文字幕2019免费| 免费人成激情视频在线观看冫| 高清中国一级毛片免费| 在线精品无码字幕无码av| 久久九九AV免费精品| 欧美成人在线免费| 免费看少妇作爱视频| 韩国19禁无遮挡啪啪无码网站| 国产边摸边吃奶叫床视频| 东北大炕王婶小说| 日韩高清伦理片中字在线观看| 亚洲精品无码不卡| 紫黑粗硬狂喷浓精| 国产天堂在线观看| 3d动漫精品一区二区三区| 小少呦萝粉国产| 久久久久性色av毛片特级| 欧美人妻精品一区二区三区| 健身私教弄了我好几次啊| 草莓视频在线观| 国产欧美日韩综合| 97午夜理伦片在线影院| 忘忧草www日本| 久久亚洲精品成人| 欧美a在线视频| 亚洲狠狠婷婷综合久久蜜芽| 91看片淫黄大片一级在线观看| 菠萝蜜视频在线观看入口|