《電子技術(shù)應(yīng)用》
您所在的位置:首頁(yè) > 通信與網(wǎng)絡(luò) > 設(shè)計(jì)應(yīng)用 > 一種基于PPO算法的低空基站優(yōu)化模型
一種基于PPO算法的低空基站優(yōu)化模型
電子技術(shù)應(yīng)用
薄云鵬1,2,亢抗3,潘桂新3,汪敏1
1.中國(guó)科學(xué)院云南天文臺(tái);2.中國(guó)科學(xué)院大學(xué);3.中國(guó)聯(lián)合網(wǎng)絡(luò)通信有限公司廣東省分公司
摘要: 通過(guò)優(yōu)化現(xiàn)有地面網(wǎng)絡(luò)基站來(lái)實(shí)現(xiàn)低空網(wǎng)絡(luò)服務(wù)具有成本低、建設(shè)快等優(yōu)點(diǎn),面對(duì)低空基站優(yōu)化過(guò)程中存在的無(wú)線環(huán)境復(fù)雜、配置參數(shù)多樣、優(yōu)化目標(biāo)互相影響等問(wèn)題,提出了一種基于近端策略優(yōu)化算法的多維低空網(wǎng)絡(luò)基站優(yōu)化模型:通過(guò)射線追蹤技術(shù)計(jì)算不同類型、不同角度基站的低空覆蓋能力,并構(gòu)建支持多目標(biāo)優(yōu)化和多參數(shù)配置的低空網(wǎng)絡(luò)基站優(yōu)化模型,利用PPO算法得到基站配置策略。在仿真環(huán)境中進(jìn)行訓(xùn)練與結(jié)果驗(yàn)證,證明該模型可有效生成基站優(yōu)化方案,且相較于基于A2C方法的模型具有更快的收斂速度和更好的基站優(yōu)化效果。
中圖分類號(hào):TN929.5 文獻(xiàn)標(biāo)志碼:A DOI: 10.16157/j.issn.0258-7998.256278
中文引用格式: 薄云鵬,亢抗,潘桂新,等. 一種基于PPO算法的低空基站優(yōu)化模型[J]. 電子技術(shù)應(yīng)用,2025,51(7):60-64.
英文引用格式: Bo Yunpeng,Kang Kang,Pan Guixin,et al. A low-altitude base station optimization model based on PPO algorithm[J]. Application of Electronic Technique,2025,51(7):60-64.
A low-altitude base station optimization model based on PPO algorithm
Bo Yunpeng1,2,Kang Kang3,Pan Guixin3,Wang Min1
1.Yunnan Observatories, Chinese Academy of Sciences;2.University of Chinese Academy of Sciences;3.China United Network Communications Co., Ltd., Guangdong Branch
Abstract: Optimizing existing terrestrial network base stations to provide low-altitude network services offers advantages such as cost-effectiveness and rapid deployment. Facing challenges in the optimization process of low-altitude base stations, including complex wireless environments, diverse configuration parameters, and interrelated optimization objectives, this paper proposes a multidimensional low-altitude network base station optimization model based on the Proximal Policy Optimization (PPO) algorithm. By employing ray tracing technology, the model calculates the low-altitude coverage capability of base stations with different types and angles. It constructs an optimization model that supports multiple objectives and parameter configurations for low-altitude network base stations. The PPO algorithm is utilized to derive base station configuration strategies, which are then trained and validated in a simulated environment. This demonstrates that the model can effectively generate optimization schemes for base stations and exhibits faster convergence speed and better optimization results compared to models based on the Actor-Critic (A2C) method.
Key words : low-altitude base station;low-altitude communication;PPO;reinforcement learning

引言

近年來(lái),隨著低空經(jīng)濟(jì)的發(fā)展,無(wú)人機(jī)的數(shù)量和應(yīng)用急劇增加,無(wú)人機(jī)的通信需求也隨之快速擴(kuò)張[1]。而傳統(tǒng)的基于地面站的無(wú)人機(jī)通信方式受地面站性能和所用的非授權(quán)頻段的限制,存在易受干擾、通信范圍受限、安全性差等問(wèn)題,難以滿足新應(yīng)用場(chǎng)景的需求,因此,人們認(rèn)為利用蓬勃發(fā)展的5G及以上蜂窩網(wǎng)絡(luò)支持無(wú)人機(jī)通信是最有前途和成本效益的方法[2-6]。

然而,現(xiàn)有的蜂窩網(wǎng)絡(luò)以服務(wù)地面用戶為主[7],據(jù)此開(kāi)展的網(wǎng)絡(luò)規(guī)劃和優(yōu)化也主要面向地面目標(biāo),并且由于天線自身存在零位、旁瓣等問(wèn)題,低空?qǐng)鼍爸行盘?hào)覆蓋不全、鄰區(qū)關(guān)系雜亂、切換頻繁、信號(hào)干擾嚴(yán)重等現(xiàn)象極為突出,使得目前的蜂窩網(wǎng)絡(luò)難以滿足無(wú)人機(jī)低空通信的需要[2, 5, 8]。因此,亟需通過(guò)建立專門的低空網(wǎng)絡(luò)來(lái)開(kāi)展對(duì)低空無(wú)人機(jī)應(yīng)用場(chǎng)景的通信服務(wù)。

當(dāng)前的低空通信組網(wǎng)方案主要有同站空地同頻組網(wǎng)、同站空地異頻組網(wǎng)、異站空地同頻組網(wǎng)、異站空地異頻組網(wǎng)等[2, 9],其中,同站組網(wǎng)方案通過(guò)在地面蜂窩網(wǎng)絡(luò)站址上對(duì)現(xiàn)有設(shè)備進(jìn)行調(diào)整優(yōu)化或新增少量AAU設(shè)備等方式實(shí)現(xiàn)低空網(wǎng)絡(luò)的建立,具有成本低、建設(shè)方便等優(yōu)點(diǎn)。對(duì)于具體的低空網(wǎng)絡(luò)建設(shè)方案,已有很多關(guān)于低空基站的選址[10]以及對(duì)天線的仰角[11-12]的調(diào)整方面的研究,然而上述研究往往只聚焦于站址或仰角等單一配置的調(diào)整,對(duì)于實(shí)際應(yīng)用中通過(guò)優(yōu)化已有地面基站建立低空網(wǎng)絡(luò)過(guò)程中的對(duì)合適基站進(jìn)行選擇以及對(duì)高度、天線角度、設(shè)備選型等多方面配置策略的聯(lián)合設(shè)計(jì)而言,其實(shí)用價(jià)值有限,需要設(shè)計(jì)一種多要素聯(lián)合的低空基站優(yōu)化方法,實(shí)現(xiàn)低成本、高效率的低空網(wǎng)絡(luò)建設(shè)。

傳統(tǒng)的蜂窩網(wǎng)絡(luò)的基站規(guī)劃方法往往根據(jù)經(jīng)驗(yàn)?zāi)P凸烙?jì)信號(hào)的傳播,而已有研究證實(shí),城市環(huán)境內(nèi)的復(fù)雜建筑物的遮擋和反射會(huì)極大地改變空對(duì)地信道特性[13-15],因此統(tǒng)計(jì)性信道模型往往難以準(zhǔn)確描述信道特征。而射線追蹤技術(shù)可通過(guò)計(jì)算無(wú)線電波與場(chǎng)景之間的電磁相互作用,模擬真實(shí)的信號(hào)傳播過(guò)程,具有更高的靈活性[15]。然而射線追蹤作為一種確定性傳播工具,其所需計(jì)算量往往遠(yuǎn)大于統(tǒng)計(jì)性模型,因而在應(yīng)用時(shí)需采取實(shí)時(shí)計(jì)算等措施降低計(jì)算量,提升效率。

強(qiáng)化學(xué)習(xí)是一種通過(guò)智能體與環(huán)境的交互來(lái)積累信息、改進(jìn)策略的機(jī)器學(xué)習(xí)方法,該方法通過(guò)環(huán)境對(duì)智能體動(dòng)作的反饋來(lái)進(jìn)行智能體的訓(xùn)練與學(xué)習(xí),具有無(wú)需提前獲取先驗(yàn)信息的優(yōu)點(diǎn)。對(duì)低空基站優(yōu)化問(wèn)題而言,使用強(qiáng)化學(xué)習(xí)方法可免于提前進(jìn)行各基站不同優(yōu)化方案的覆蓋效果的繁雜計(jì)算,提升優(yōu)化速度,降低計(jì)算量與時(shí)間成本。


本文詳細(xì)內(nèi)容請(qǐng)下載:

http://m.jysgc.com/resource/share/2000006596


作者信息:

薄云鵬1,2,亢抗3,潘桂新3,汪敏1

(1.中國(guó)科學(xué)院云南天文臺(tái),云南 昆明 650200;

2.中國(guó)科學(xué)院大學(xué),北京 100049;

3.中國(guó)聯(lián)合網(wǎng)絡(luò)通信有限公司廣東省分公司,廣東 廣州 510700)


Magazine.Subscription.jpg

此內(nèi)容為AET網(wǎng)站原創(chuàng),未經(jīng)授權(quán)禁止轉(zhuǎn)載。
亚洲一区二区欧美_亚洲丝袜一区_99re亚洲国产精品_日韩亚洲一区二区
一区二区三区国产盗摄| 欧美一区二区日韩| 国产精品剧情在线亚洲| 免费成人av| 欧美中文字幕在线| 亚洲一二区在线| 亚洲三级视频在线观看| 欧美一区二区大片| 亚洲激情国产| 亚洲第一搞黄网站| 激情综合亚洲| 韩国成人福利片在线播放| 国产精品卡一卡二卡三| 欧美日韩的一区二区| 欧美日韩和欧美的一区二区| 性视频1819p久久| 亚洲视频中文| 一区二区三区|亚洲午夜| 最新亚洲视频| 久久精品视频免费观看| 午夜伦欧美伦电影理论片| 亚洲视频在线播放| 亚洲每日在线| 亚洲人成在线影院| 亚洲激情视频在线| 尤物精品在线| 精品福利av| 狠狠综合久久| 一区二区在线看| 悠悠资源网亚洲青| 亚洲国产成人久久| 国产一区二区丝袜高跟鞋图片| 国产乱码精品| 国产偷久久久精品专区| 国产欧美韩日| 国产午夜精品视频| 国产一区二区久久久| 国产亚洲欧美日韩美女| 国产曰批免费观看久久久| 国产午夜精品全部视频播放| 国产亚洲欧美中文| 狠狠久久亚洲欧美专区| 在线播放豆国产99亚洲| 亚洲大胆人体视频| 韩国视频理论视频久久| 狠狠色伊人亚洲综合网站色| 伊人影院久久| 亚洲国产高清一区二区三区| 亚洲精品乱码久久久久| 亚洲国产成人精品久久久国产成人一区 | 在线播放亚洲| 亚洲第一页中文字幕| 亚洲人成人一区二区三区| 亚洲精品影院| 亚洲视频欧洲视频| 亚洲欧美日韩国产一区| 欧美一区二区视频在线观看2020| 亚洲电影免费| 亚洲国产视频直播| 一本大道久久a久久综合婷婷| 亚洲自拍啪啪| 久久国产一区二区| 老牛嫩草一区二区三区日本| 欧美国产日韩一二三区| 欧美日韩在线播放三区| 国产欧美不卡| 亚洲国产精品成人精品| 亚洲国产日韩一区二区| 一本色道久久88精品综合| 亚洲综合成人在线| 欧美在线亚洲一区| 亚洲三级免费观看| 亚洲女人小视频在线观看| 久久久91精品国产| 欧美精品九九99久久| 国产精品永久入口久久久| 国产欧美一区二区精品忘忧草 | 亚洲啪啪91| 亚洲男人的天堂在线aⅴ视频| 久久都是精品| 欧美精品一区二区久久婷婷| 国产精品一二三四| 国产一级揄自揄精品视频| 亚洲国产1区| 亚洲欧美国产77777| 久久精品视频网| 亚洲一区二区精品在线| 欧美成人伊人久久综合网| 国产一区二区精品久久| 亚洲一区二区三区高清不卡| 99国产精品久久| 久久综合狠狠综合久久综青草 | 国产一区二区在线观看免费| 夜夜嗨av一区二区三区| 亚洲日本欧美| 久久一综合视频| 国产午夜精品在线观看| 亚洲视频一区二区在线观看| 99精品欧美一区二区蜜桃免费| 久久人91精品久久久久久不卡| 国产伦精品免费视频| 在线综合亚洲| 亚洲网站在线观看| 欧美日韩国产二区| 亚洲国产毛片完整版| 久久精品夜夜夜夜久久| 久久久久国产精品一区| 国产亚洲视频在线| 午夜久久久久久久久久一区二区| 亚洲综合欧美| 国产精品都在这里| 99亚洲一区二区| aa日韩免费精品视频一| 欧美精品一区二区久久婷婷| 亚洲国产精品久久久久秋霞蜜臀 | 亚洲精品欧美专区| 蜜臀久久久99精品久久久久久| 红桃av永久久久| 久久精品99国产精品| 久久免费99精品久久久久久| 国产欧美日韩在线| 亚洲欧美日韩一区二区在线| 性欧美在线看片a免费观看| 国产精品手机视频| 亚洲专区在线| 欧美在线在线| 国内伊人久久久久久网站视频| 久久福利视频导航| 久久一二三四| 亚洲高清久久网| 日韩一级欧洲| 欧美三区不卡| 亚洲午夜激情| 久久成人免费电影| 国产自产在线视频一区| 亚洲激情av| 欧美精品免费播放| 99在线视频精品| 午夜亚洲福利| 国产综合精品一区| 亚洲国产日本| 欧美巨乳波霸| 制服诱惑一区二区| 欧美一区二区观看视频| 国产三区精品| 久久精品免费观看| 欧美激情第10页| 日韩一区二区免费高清| 亚洲欧美三级在线| 国产一区二区三区免费观看 | 欧美ed2k| 一区二区动漫| 久久国产成人| 亚洲国产精品欧美一二99| 一区二区三区四区五区精品视频| 国产精品久久久久影院亚瑟| 欧美亚洲一级| 欧美激情第3页| 制服丝袜亚洲播放| 久久九九全国免费精品观看| 亚洲国产一二三| 亚洲视屏一区| 国产真实乱子伦精品视频| 亚洲毛片av| 国产精品入口日韩视频大尺度| 欧美伊人久久久久久久久影院| 欧美大片免费观看| 亚洲影视在线播放| 麻豆九一精品爱看视频在线观看免费| 亚洲免费av片| 久久精品视频在线看| 亚洲国产一区在线| 性欧美超级视频| 一色屋精品视频免费看| 亚洲一区日本| 黄色成人在线观看| 亚洲天堂成人在线视频| 国内揄拍国内精品少妇国语| 一区二区欧美日韩| 狠狠色综合一区二区| 亚洲一区二区三区视频播放| 国内精品99| 亚洲欧美自拍偷拍| 亚洲国产清纯| 久久本道综合色狠狠五月| 亚洲精品一区二区三区婷婷月| 久久精品九九| 亚洲网站在线看| 欧美激情中文字幕乱码免费| 久久爱www久久做| 国产精品国产三级国产普通话三级 | 伊人色综合久久天天| 午夜天堂精品久久久久| 亚洲人永久免费| 久久亚洲春色中文字幕| 亚洲小少妇裸体bbw| 欧美精品综合| 亚洲高清三级视频| 国产九九视频一区二区三区| 亚洲色图在线视频|