《電子技術(shù)應(yīng)用》
您所在的位置:首頁(yè) > 通信與網(wǎng)絡(luò) > 設(shè)計(jì)應(yīng)用 > 一種基于PPO算法的低空基站優(yōu)化模型
一種基于PPO算法的低空基站優(yōu)化模型
電子技術(shù)應(yīng)用
薄云鵬1,2,亢抗3,潘桂新3,汪敏1
1.中國(guó)科學(xué)院云南天文臺(tái);2.中國(guó)科學(xué)院大學(xué);3.中國(guó)聯(lián)合網(wǎng)絡(luò)通信有限公司廣東省分公司
摘要: 通過(guò)優(yōu)化現(xiàn)有地面網(wǎng)絡(luò)基站來(lái)實(shí)現(xiàn)低空網(wǎng)絡(luò)服務(wù)具有成本低、建設(shè)快等優(yōu)點(diǎn),面對(duì)低空基站優(yōu)化過(guò)程中存在的無(wú)線環(huán)境復(fù)雜、配置參數(shù)多樣、優(yōu)化目標(biāo)互相影響等問(wèn)題,提出了一種基于近端策略優(yōu)化算法的多維低空網(wǎng)絡(luò)基站優(yōu)化模型:通過(guò)射線追蹤技術(shù)計(jì)算不同類型、不同角度基站的低空覆蓋能力,并構(gòu)建支持多目標(biāo)優(yōu)化和多參數(shù)配置的低空網(wǎng)絡(luò)基站優(yōu)化模型,利用PPO算法得到基站配置策略。在仿真環(huán)境中進(jìn)行訓(xùn)練與結(jié)果驗(yàn)證,證明該模型可有效生成基站優(yōu)化方案,且相較于基于A2C方法的模型具有更快的收斂速度和更好的基站優(yōu)化效果。
中圖分類號(hào):TN929.5 文獻(xiàn)標(biāo)志碼:A DOI: 10.16157/j.issn.0258-7998.256278
中文引用格式: 薄云鵬,亢抗,潘桂新,等. 一種基于PPO算法的低空基站優(yōu)化模型[J]. 電子技術(shù)應(yīng)用,2025,51(7):60-64.
英文引用格式: Bo Yunpeng,Kang Kang,Pan Guixin,et al. A low-altitude base station optimization model based on PPO algorithm[J]. Application of Electronic Technique,2025,51(7):60-64.
A low-altitude base station optimization model based on PPO algorithm
Bo Yunpeng1,2,Kang Kang3,Pan Guixin3,Wang Min1
1.Yunnan Observatories, Chinese Academy of Sciences;2.University of Chinese Academy of Sciences;3.China United Network Communications Co., Ltd., Guangdong Branch
Abstract: Optimizing existing terrestrial network base stations to provide low-altitude network services offers advantages such as cost-effectiveness and rapid deployment. Facing challenges in the optimization process of low-altitude base stations, including complex wireless environments, diverse configuration parameters, and interrelated optimization objectives, this paper proposes a multidimensional low-altitude network base station optimization model based on the Proximal Policy Optimization (PPO) algorithm. By employing ray tracing technology, the model calculates the low-altitude coverage capability of base stations with different types and angles. It constructs an optimization model that supports multiple objectives and parameter configurations for low-altitude network base stations. The PPO algorithm is utilized to derive base station configuration strategies, which are then trained and validated in a simulated environment. This demonstrates that the model can effectively generate optimization schemes for base stations and exhibits faster convergence speed and better optimization results compared to models based on the Actor-Critic (A2C) method.
Key words : low-altitude base station;low-altitude communication;PPO;reinforcement learning

引言

近年來(lái),隨著低空經(jīng)濟(jì)的發(fā)展,無(wú)人機(jī)的數(shù)量和應(yīng)用急劇增加,無(wú)人機(jī)的通信需求也隨之快速擴(kuò)張[1]。而傳統(tǒng)的基于地面站的無(wú)人機(jī)通信方式受地面站性能和所用的非授權(quán)頻段的限制,存在易受干擾、通信范圍受限、安全性差等問(wèn)題,難以滿足新應(yīng)用場(chǎng)景的需求,因此,人們認(rèn)為利用蓬勃發(fā)展的5G及以上蜂窩網(wǎng)絡(luò)支持無(wú)人機(jī)通信是最有前途和成本效益的方法[2-6]。

然而,現(xiàn)有的蜂窩網(wǎng)絡(luò)以服務(wù)地面用戶為主[7],據(jù)此開(kāi)展的網(wǎng)絡(luò)規(guī)劃和優(yōu)化也主要面向地面目標(biāo),并且由于天線自身存在零位、旁瓣等問(wèn)題,低空?qǐng)鼍爸行盘?hào)覆蓋不全、鄰區(qū)關(guān)系雜亂、切換頻繁、信號(hào)干擾嚴(yán)重等現(xiàn)象極為突出,使得目前的蜂窩網(wǎng)絡(luò)難以滿足無(wú)人機(jī)低空通信的需要[2, 5, 8]。因此,亟需通過(guò)建立專門的低空網(wǎng)絡(luò)來(lái)開(kāi)展對(duì)低空無(wú)人機(jī)應(yīng)用場(chǎng)景的通信服務(wù)。

當(dāng)前的低空通信組網(wǎng)方案主要有同站空地同頻組網(wǎng)、同站空地異頻組網(wǎng)、異站空地同頻組網(wǎng)、異站空地異頻組網(wǎng)等[2, 9],其中,同站組網(wǎng)方案通過(guò)在地面蜂窩網(wǎng)絡(luò)站址上對(duì)現(xiàn)有設(shè)備進(jìn)行調(diào)整優(yōu)化或新增少量AAU設(shè)備等方式實(shí)現(xiàn)低空網(wǎng)絡(luò)的建立,具有成本低、建設(shè)方便等優(yōu)點(diǎn)。對(duì)于具體的低空網(wǎng)絡(luò)建設(shè)方案,已有很多關(guān)于低空基站的選址[10]以及對(duì)天線的仰角[11-12]的調(diào)整方面的研究,然而上述研究往往只聚焦于站址或仰角等單一配置的調(diào)整,對(duì)于實(shí)際應(yīng)用中通過(guò)優(yōu)化已有地面基站建立低空網(wǎng)絡(luò)過(guò)程中的對(duì)合適基站進(jìn)行選擇以及對(duì)高度、天線角度、設(shè)備選型等多方面配置策略的聯(lián)合設(shè)計(jì)而言,其實(shí)用價(jià)值有限,需要設(shè)計(jì)一種多要素聯(lián)合的低空基站優(yōu)化方法,實(shí)現(xiàn)低成本、高效率的低空網(wǎng)絡(luò)建設(shè)。

傳統(tǒng)的蜂窩網(wǎng)絡(luò)的基站規(guī)劃方法往往根據(jù)經(jīng)驗(yàn)?zāi)P凸烙?jì)信號(hào)的傳播,而已有研究證實(shí),城市環(huán)境內(nèi)的復(fù)雜建筑物的遮擋和反射會(huì)極大地改變空對(duì)地信道特性[13-15],因此統(tǒng)計(jì)性信道模型往往難以準(zhǔn)確描述信道特征。而射線追蹤技術(shù)可通過(guò)計(jì)算無(wú)線電波與場(chǎng)景之間的電磁相互作用,模擬真實(shí)的信號(hào)傳播過(guò)程,具有更高的靈活性[15]。然而射線追蹤作為一種確定性傳播工具,其所需計(jì)算量往往遠(yuǎn)大于統(tǒng)計(jì)性模型,因而在應(yīng)用時(shí)需采取實(shí)時(shí)計(jì)算等措施降低計(jì)算量,提升效率。

強(qiáng)化學(xué)習(xí)是一種通過(guò)智能體與環(huán)境的交互來(lái)積累信息、改進(jìn)策略的機(jī)器學(xué)習(xí)方法,該方法通過(guò)環(huán)境對(duì)智能體動(dòng)作的反饋來(lái)進(jìn)行智能體的訓(xùn)練與學(xué)習(xí),具有無(wú)需提前獲取先驗(yàn)信息的優(yōu)點(diǎn)。對(duì)低空基站優(yōu)化問(wèn)題而言,使用強(qiáng)化學(xué)習(xí)方法可免于提前進(jìn)行各基站不同優(yōu)化方案的覆蓋效果的繁雜計(jì)算,提升優(yōu)化速度,降低計(jì)算量與時(shí)間成本。


本文詳細(xì)內(nèi)容請(qǐng)下載:

http://www.jysgc.com/resource/share/2000006596


作者信息:

薄云鵬1,2,亢抗3,潘桂新3,汪敏1

(1.中國(guó)科學(xué)院云南天文臺(tái),云南 昆明 650200;

2.中國(guó)科學(xué)院大學(xué),北京 100049;

3.中國(guó)聯(lián)合網(wǎng)絡(luò)通信有限公司廣東省分公司,廣東 廣州 510700)


Magazine.Subscription.jpg

此內(nèi)容為AET網(wǎng)站原創(chuàng),未經(jīng)授權(quán)禁止轉(zhuǎn)載。
亚洲一区二区欧美_亚洲丝袜一区_99re亚洲国产精品_日韩亚洲一区二区
欧美亚韩一区| 在线观看亚洲精品| 免费成人毛片| 久久精品欧美日韩| 亚洲欧美激情四射在线日 | 欧美国产精品劲爆| 老司机免费视频久久| 久久另类ts人妖一区二区| 久久国产精品久久w女人spa| 欧美一区二区三区的| 欧美一级大片在线免费观看| 亚洲欧美亚洲| 亚洲欧美在线另类| 午夜欧美视频| 欧美一区二区三区久久精品茉莉花| 亚洲影院免费观看| 午夜免费电影一区在线观看| 午夜精品亚洲| 欧美在线观看网址综合| 欧美伊人久久| 久久精品在线免费观看| 久久久夜夜夜| 免费成人网www| 欧美成人精品h版在线观看| 欧美黄色影院| 欧美性做爰毛片| 国产伦理精品不卡| 国产午夜精品理论片a级大结局 | 国产女精品视频网站免费| 国产日产亚洲精品系列| 国产一级揄自揄精品视频| 国产三级欧美三级| 狠狠爱成人网| 亚洲精品欧美一区二区三区| 一区二区三区久久| 亚洲综合视频1区| 久久国产精品99国产精| 日韩视频免费大全中文字幕| 一区二区三区国产盗摄| 亚洲男女自偷自拍| 久久久精品2019中文字幕神马| 久久综合九色九九| 欧美日韩1区| 国产精品美女久久久浪潮软件| 国产欧美亚洲一区| 伊人精品视频| 亚洲精品日韩综合观看成人91| 一本一本久久a久久精品综合妖精 一本一本久久a久久精品综合麻豆 | 久久亚洲一区二区| 欧美理论电影在线观看| 国产精品视频福利| 亚洲成人在线| 在线视频欧美日韩| 欧美在线一级视频| av成人天堂| 欧美在线观看日本一区| 欧美大片在线观看| 国产九九视频一区二区三区| 在线欧美三区| 亚洲一区二区三区影院| 亚洲福利电影| 亚洲欧美日韩国产成人| 六十路精品视频| 国产精品极品美女粉嫩高清在线| 国内精品久久久久久久果冻传媒| 亚洲精品激情| 欧美伊人久久久久久午夜久久久久 | 亚洲专区欧美专区| 亚洲另类黄色| 久久疯狂做爰流白浆xx| 欧美日韩一级视频| 国产综合色在线视频区| 日韩一级片网址| 久久精品一二三区| 亚洲在线观看视频网站| 美玉足脚交一区二区三区图片| 欧美午夜在线视频| 亚洲国产成人精品久久| 新片速递亚洲合集欧美合集| 日韩网站在线观看| 久久精品首页| 国产精品久久久久久久久久三级| 亚洲福利视频三区| 欧美一级久久久| 亚洲在线视频免费观看| 欧美激情1区2区3区| 国产日韩欧美视频| 亚洲视频欧美在线| 亚洲免费成人av电影| 久久免费黄色| 国产伦精品一区二区三区视频孕妇| 亚洲精选视频免费看| 亚洲国内在线| 久久精品国产一区二区三区免费看 | 在线免费不卡视频| 午夜日韩在线| 亚洲欧美另类久久久精品2019| 欧美久久久久久久久久| 伊人久久噜噜噜躁狠狠躁| 欧美一区二区三区在线观看视频| 亚洲制服丝袜在线| 欧美日韩日韩| 亚洲精品女人| 亚洲美女中出| 欧美成人自拍视频| 亚洲成人在线视频播放| 亚洲国产中文字幕在线观看| 久久亚洲精品一区二区| 国产资源精品在线观看| 欧美一区二区三区四区高清| 亚洲欧美一区二区三区在线| 欧美三级小说| 日韩亚洲国产欧美| 亚洲深夜福利| 欧美色综合网| 一区二区三区高清在线观看| 中文av字幕一区| 欧美日韩一卡二卡| 日韩视频永久免费观看| 一本大道久久a久久综合婷婷| 欧美激情网友自拍| 最新日韩欧美| 一区二区日韩| 欧美午夜精品久久久久久孕妇| 夜夜夜久久久| 亚洲在线日韩| 国产精品一区二区黑丝| 亚洲欧美一区在线| 久久精品国产第一区二区三区最新章节| 国产人成精品一区二区三| 欧美一区二粉嫩精品国产一线天| 欧美在线播放| 国内成+人亚洲+欧美+综合在线| 久久精品亚洲精品| 牛牛影视久久网| 亚洲精品美女在线| 亚洲一区二区黄色| 国产精品区二区三区日本| 亚洲欧美自拍偷拍| 久久综合网络一区二区| 亚洲国产精品久久久久秋霞蜜臀 | 一区二区国产在线观看| 欧美日韩美女| 亚洲手机在线| 欧美一区二区免费观在线| 国产在线精品自拍| 亚洲精品乱码久久久久久| 欧美日韩在线亚洲一区蜜芽| 亚洲自拍都市欧美小说| 久久精品人人做人人爽| 精品成人久久| 日韩午夜电影在线观看| 欧美午夜a级限制福利片| 西西裸体人体做爰大胆久久久| 久久久久高清| 91久久久国产精品| 亚洲永久视频| 激情五月综合色婷婷一区二区| 亚洲精品午夜精品| 国产精品国产精品| 欧美专区中文字幕| 欧美激情aⅴ一区二区三区| 亚洲乱码国产乱码精品精| 亚洲欧洲99久久| 伊人成年综合电影网| 一区二区三区视频免费在线观看 | 性色av一区二区三区| 欧美a级一区二区| 一区二区三欧美| 久久婷婷麻豆| 一本色道久久综合亚洲91| 久久久人成影片一区二区三区| 亚洲日本aⅴ片在线观看香蕉| 欧美亚洲在线观看| 亚洲国产免费| 欧美亚洲免费高清在线观看| 亚洲缚视频在线观看| 亚洲欧美成人一区二区三区| 狠狠色噜噜狠狠狠狠色吗综合| 一区二区三区 在线观看视频| 国产一区二区电影在线观看| 99国产精品久久久| 国产主播精品在线| 亚洲香蕉网站| 在线观看精品| 翔田千里一区二区| 亚洲国产成人高清精品| 欧美在线一二三四区| 亚洲九九爱视频| 玖玖综合伊人| 亚洲欧美在线x视频| 欧美日韩美女| 最新国产拍偷乱拍精品 | 亚洲国产成人精品女人久久久| 国产精品久久久久国产a级| 亚洲欧洲日本国产| 国产性猛交xxxx免费看久久| 亚洲一区二区三区在线看| 亚洲国产精品成人综合| 久久久久99|