《電子技術(shù)應(yīng)用》
您所在的位置:首頁 > 通信與網(wǎng)絡(luò) > 設(shè)計(jì)應(yīng)用 > 一種基于PPO算法的低空基站優(yōu)化模型
一種基于PPO算法的低空基站優(yōu)化模型
電子技術(shù)應(yīng)用
薄云鵬1,2,亢抗3,潘桂新3,汪敏1
1.中國(guó)科學(xué)院云南天文臺(tái);2.中國(guó)科學(xué)院大學(xué);3.中國(guó)聯(lián)合網(wǎng)絡(luò)通信有限公司廣東省分公司
摘要: 通過優(yōu)化現(xiàn)有地面網(wǎng)絡(luò)基站來實(shí)現(xiàn)低空網(wǎng)絡(luò)服務(wù)具有成本低、建設(shè)快等優(yōu)點(diǎn),面對(duì)低空基站優(yōu)化過程中存在的無線環(huán)境復(fù)雜、配置參數(shù)多樣、優(yōu)化目標(biāo)互相影響等問題,提出了一種基于近端策略優(yōu)化算法的多維低空網(wǎng)絡(luò)基站優(yōu)化模型:通過射線追蹤技術(shù)計(jì)算不同類型、不同角度基站的低空覆蓋能力,并構(gòu)建支持多目標(biāo)優(yōu)化和多參數(shù)配置的低空網(wǎng)絡(luò)基站優(yōu)化模型,利用PPO算法得到基站配置策略。在仿真環(huán)境中進(jìn)行訓(xùn)練與結(jié)果驗(yàn)證,證明該模型可有效生成基站優(yōu)化方案,且相較于基于A2C方法的模型具有更快的收斂速度和更好的基站優(yōu)化效果。
中圖分類號(hào):TN929.5 文獻(xiàn)標(biāo)志碼:A DOI: 10.16157/j.issn.0258-7998.256278
中文引用格式: 薄云鵬,亢抗,潘桂新,等. 一種基于PPO算法的低空基站優(yōu)化模型[J]. 電子技術(shù)應(yīng)用,2025,51(7):60-64.
英文引用格式: Bo Yunpeng,Kang Kang,Pan Guixin,et al. A low-altitude base station optimization model based on PPO algorithm[J]. Application of Electronic Technique,2025,51(7):60-64.
A low-altitude base station optimization model based on PPO algorithm
Bo Yunpeng1,2,Kang Kang3,Pan Guixin3,Wang Min1
1.Yunnan Observatories, Chinese Academy of Sciences;2.University of Chinese Academy of Sciences;3.China United Network Communications Co., Ltd., Guangdong Branch
Abstract: Optimizing existing terrestrial network base stations to provide low-altitude network services offers advantages such as cost-effectiveness and rapid deployment. Facing challenges in the optimization process of low-altitude base stations, including complex wireless environments, diverse configuration parameters, and interrelated optimization objectives, this paper proposes a multidimensional low-altitude network base station optimization model based on the Proximal Policy Optimization (PPO) algorithm. By employing ray tracing technology, the model calculates the low-altitude coverage capability of base stations with different types and angles. It constructs an optimization model that supports multiple objectives and parameter configurations for low-altitude network base stations. The PPO algorithm is utilized to derive base station configuration strategies, which are then trained and validated in a simulated environment. This demonstrates that the model can effectively generate optimization schemes for base stations and exhibits faster convergence speed and better optimization results compared to models based on the Actor-Critic (A2C) method.
Key words : low-altitude base station;low-altitude communication;PPO;reinforcement learning

引言

近年來,隨著低空經(jīng)濟(jì)的發(fā)展,無人機(jī)的數(shù)量和應(yīng)用急劇增加,無人機(jī)的通信需求也隨之快速擴(kuò)張[1]。而傳統(tǒng)的基于地面站的無人機(jī)通信方式受地面站性能和所用的非授權(quán)頻段的限制,存在易受干擾、通信范圍受限、安全性差等問題,難以滿足新應(yīng)用場(chǎng)景的需求,因此,人們認(rèn)為利用蓬勃發(fā)展的5G及以上蜂窩網(wǎng)絡(luò)支持無人機(jī)通信是最有前途和成本效益的方法[2-6]。

然而,現(xiàn)有的蜂窩網(wǎng)絡(luò)以服務(wù)地面用戶為主[7],據(jù)此開展的網(wǎng)絡(luò)規(guī)劃和優(yōu)化也主要面向地面目標(biāo),并且由于天線自身存在零位、旁瓣等問題,低空?qǐng)鼍爸行盘?hào)覆蓋不全、鄰區(qū)關(guān)系雜亂、切換頻繁、信號(hào)干擾嚴(yán)重等現(xiàn)象極為突出,使得目前的蜂窩網(wǎng)絡(luò)難以滿足無人機(jī)低空通信的需要[2, 5, 8]。因此,亟需通過建立專門的低空網(wǎng)絡(luò)來開展對(duì)低空無人機(jī)應(yīng)用場(chǎng)景的通信服務(wù)。

當(dāng)前的低空通信組網(wǎng)方案主要有同站空地同頻組網(wǎng)、同站空地異頻組網(wǎng)、異站空地同頻組網(wǎng)、異站空地異頻組網(wǎng)等[2, 9],其中,同站組網(wǎng)方案通過在地面蜂窩網(wǎng)絡(luò)站址上對(duì)現(xiàn)有設(shè)備進(jìn)行調(diào)整優(yōu)化或新增少量AAU設(shè)備等方式實(shí)現(xiàn)低空網(wǎng)絡(luò)的建立,具有成本低、建設(shè)方便等優(yōu)點(diǎn)。對(duì)于具體的低空網(wǎng)絡(luò)建設(shè)方案,已有很多關(guān)于低空基站的選址[10]以及對(duì)天線的仰角[11-12]的調(diào)整方面的研究,然而上述研究往往只聚焦于站址或仰角等單一配置的調(diào)整,對(duì)于實(shí)際應(yīng)用中通過優(yōu)化已有地面基站建立低空網(wǎng)絡(luò)過程中的對(duì)合適基站進(jìn)行選擇以及對(duì)高度、天線角度、設(shè)備選型等多方面配置策略的聯(lián)合設(shè)計(jì)而言,其實(shí)用價(jià)值有限,需要設(shè)計(jì)一種多要素聯(lián)合的低空基站優(yōu)化方法,實(shí)現(xiàn)低成本、高效率的低空網(wǎng)絡(luò)建設(shè)。

傳統(tǒng)的蜂窩網(wǎng)絡(luò)的基站規(guī)劃方法往往根據(jù)經(jīng)驗(yàn)?zāi)P凸烙?jì)信號(hào)的傳播,而已有研究證實(shí),城市環(huán)境內(nèi)的復(fù)雜建筑物的遮擋和反射會(huì)極大地改變空對(duì)地信道特性[13-15],因此統(tǒng)計(jì)性信道模型往往難以準(zhǔn)確描述信道特征。而射線追蹤技術(shù)可通過計(jì)算無線電波與場(chǎng)景之間的電磁相互作用,模擬真實(shí)的信號(hào)傳播過程,具有更高的靈活性[15]。然而射線追蹤作為一種確定性傳播工具,其所需計(jì)算量往往遠(yuǎn)大于統(tǒng)計(jì)性模型,因而在應(yīng)用時(shí)需采取實(shí)時(shí)計(jì)算等措施降低計(jì)算量,提升效率。

強(qiáng)化學(xué)習(xí)是一種通過智能體與環(huán)境的交互來積累信息、改進(jìn)策略的機(jī)器學(xué)習(xí)方法,該方法通過環(huán)境對(duì)智能體動(dòng)作的反饋來進(jìn)行智能體的訓(xùn)練與學(xué)習(xí),具有無需提前獲取先驗(yàn)信息的優(yōu)點(diǎn)。對(duì)低空基站優(yōu)化問題而言,使用強(qiáng)化學(xué)習(xí)方法可免于提前進(jìn)行各基站不同優(yōu)化方案的覆蓋效果的繁雜計(jì)算,提升優(yōu)化速度,降低計(jì)算量與時(shí)間成本。


本文詳細(xì)內(nèi)容請(qǐng)下載:

http://m.jysgc.com/resource/share/2000006596


作者信息:

薄云鵬1,2,亢抗3,潘桂新3,汪敏1

(1.中國(guó)科學(xué)院云南天文臺(tái),云南 昆明 650200;

2.中國(guó)科學(xué)院大學(xué),北京 100049;

3.中國(guó)聯(lián)合網(wǎng)絡(luò)通信有限公司廣東省分公司,廣東 廣州 510700)


Magazine.Subscription.jpg

此內(nèi)容為AET網(wǎng)站原創(chuàng),未經(jīng)授權(quán)禁止轉(zhuǎn)載。
亚洲一区二区欧美_亚洲丝袜一区_99re亚洲国产精品_日韩亚洲一区二区
99视频日韩| 亚洲一区二区高清视频| 欧美日韩专区| 欧美 亚欧 日韩视频在线| 久久激情五月丁香伊人| 欧美亚洲一区二区在线| 亚洲综合视频网| 亚洲一区二区高清视频| 亚洲午夜在线观看| 中文日韩欧美| 亚洲天堂激情| 亚洲午夜影视影院在线观看| 一区二区三区高清不卡| 一本一本a久久| 中文在线资源观看视频网站免费不卡| 日韩午夜精品视频| 日韩午夜三级在线| 中日韩午夜理伦电影免费| 亚洲一本视频| 午夜精品久久| 欧美一区二区三区四区在线| 欧美一区二区精美| 久久九九精品| 欧美凹凸一区二区三区视频| 欧美劲爆第一页| 欧美日韩裸体免费视频| 国产精品videosex极品| 国产精品色一区二区三区| 国产毛片精品视频| 韩国精品一区二区三区| 亚洲国产婷婷香蕉久久久久久99| 亚洲国产精品福利| 99国产成+人+综合+亚洲欧美| 亚洲少妇在线| 欧美亚洲综合在线| 久久精品av麻豆的观看方式| 尤物99国产成人精品视频| 亚洲一区视频在线观看视频| 制服丝袜激情欧洲亚洲| 亚洲欧美日韩人成在线播放| 欧美亚洲一区| 亚洲国产欧美不卡在线观看| 亚洲精品免费电影| 亚洲视频精选| 欧美一级视频精品观看| 久久久久久久久久看片| 欧美成人乱码一区二区三区| 欧美美女bb生活片| 国产精品区二区三区日本| 国产一区二区三区网站| 亚洲国产美女精品久久久久∴| 亚洲精品日韩精品| 亚洲综合色视频| 亚洲第一在线综合网站| 亚洲视频一区在线| 欧美在线网站| 欧美精品啪啪| 国产视频一区免费看| 亚洲国产你懂的| 亚洲特级毛片| 亚洲国产成人精品久久久国产成人一区 | 狠狠色狠狠色综合人人| 亚洲九九精品| 欧美亚洲日本网站| 99国产精品久久久| 久久精品日产第一区二区三区 | 国产精品亚洲综合久久| 在线看视频不卡| 亚洲在线观看免费| 亚洲精品美女在线观看| 国产精品久久久久久久久久直播| 欧美伦理91i| 亚洲国产另类久久精品| 一区二区三区日韩| 亚洲观看高清完整版在线观看| 中文欧美字幕免费| 久久久中精品2020中文| 国产精品成人一区二区三区夜夜夜| 性刺激综合网| 欧美一区免费视频| 日韩一区二区久久| 久久久久久久久蜜桃| 欧美日韩一区二区免费视频| 国产综合第一页| 一区二区三区回区在观看免费视频| 久久不射网站| 亚洲欧美文学| 欧美激情网站在线观看| 国产欧美一区二区三区在线老狼| 亚洲精品少妇30p| 亚洲国产黄色片| 欧美在线国产精品| 国产精品电影网站| 亚洲美女中文字幕| 亚洲日韩成人| 美日韩精品视频免费看| 国产视频亚洲精品| 亚洲视频一区二区在线观看| 亚洲精品色图| 蜜桃精品一区二区三区| 国产一区二区三区四区hd| 亚洲一区二区少妇| 亚洲在线一区二区三区| 欧美人与性动交cc0o| 亚洲国产小视频| 亚洲大黄网站| 久久乐国产精品| 国产一区二区三区四区老人| 亚洲一区欧美激情| 亚洲一区二区高清| 欧美日韩亚洲高清| 亚洲精品国产拍免费91在线| 亚洲国产欧美不卡在线观看| 久久日韩粉嫩一区二区三区| 国产情人节一区| 亚洲欧美日韩综合国产aⅴ| 亚洲欧美色婷婷| 国产精品豆花视频| 中文一区在线| 亚洲欧美日韩一区二区三区在线观看 | 久久精品30| 国产三级精品三级| 欧美一区1区三区3区公司| 欧美一区二区黄色| 国产欧美一区二区三区在线老狼| 亚洲一区尤物| 久久成人免费电影| 韩日在线一区| 亚洲国产精品久久久久秋霞蜜臀| 久久久免费精品视频| 国模精品一区二区三区| 久久精品国产在热久久| 免费不卡亚洲欧美| 亚洲韩国青草视频| 中文精品在线| 国产精品亚洲综合| 欧美与黑人午夜性猛交久久久| 久久乐国产精品| 在线视频观看日韩| 日韩亚洲欧美高清| 国产精品啊v在线| 亚洲欧美在线视频观看| 久久久久91| 亚洲国产高清在线| 在线视频精品一区| 国产精品久久久免费| 欧美一区二区三区另类| 卡一卡二国产精品| 亚洲日本久久| 亚洲欧美激情在线视频| 国产欧美亚洲视频| 亚洲激情av在线| 欧美日韩 国产精品| 亚洲一区二区三区在线视频| 久久久精品国产一区二区三区| 亚洲第一精品电影| 亚洲午夜在线观看| 国产日韩欧美日韩大片| 最新国产成人av网站网址麻豆| 欧美日韩亚洲国产一区| 亚洲欧美影音先锋| 老色批av在线精品| 99在线精品免费视频九九视| 欧美一区二区三区免费在线看| 影音先锋亚洲一区| 亚洲一区二区av电影| 国产一区二区三区自拍| 亚洲乱亚洲高清| 国产精品视频| 亚洲国产日韩欧美在线动漫| 欧美日韩一区二区三区在线观看免| 亚洲一区二区三区免费视频| 快射av在线播放一区| 夜久久久久久| 快播亚洲色图| 亚洲天堂激情| 牛牛国产精品| 亚洲免费一级电影| 欧美成人午夜免费视在线看片 | 小处雏高清一区二区三区| 欧美成人小视频| 亚洲专区免费| 欧美精品日韩三级| 欧美一级在线视频| 欧美日韩免费区域视频在线观看| 久久av红桃一区二区小说| 欧美体内谢she精2性欧美| 亚洲国内精品| 国产精品午夜久久| 99国产精品私拍| 好看的av在线不卡观看| 亚洲在线成人精品| 亚洲高清不卡在线| 久久精品亚洲一区二区| 一区二区三区www| 欧美黄色精品| 亚洲国产精品悠悠久久琪琪| 国产精品美女久久久| 99re在线精品| 极品中文字幕一区|