《電子技術應用》
您所在的位置:首頁 > 通信與網絡 > 設計應用 > 一種基于PPO算法的低空基站優化模型
一種基于PPO算法的低空基站優化模型
電子技術應用
薄云鵬1,2,亢抗3,潘桂新3,汪敏1
1.中國科學院云南天文臺;2.中國科學院大學;3.中國聯合網絡通信有限公司廣東省分公司
摘要: 通過優化現有地面網絡基站來實現低空網絡服務具有成本低、建設快等優點,面對低空基站優化過程中存在的無線環境復雜、配置參數多樣、優化目標互相影響等問題,提出了一種基于近端策略優化算法的多維低空網絡基站優化模型:通過射線追蹤技術計算不同類型、不同角度基站的低空覆蓋能力,并構建支持多目標優化和多參數配置的低空網絡基站優化模型,利用PPO算法得到基站配置策略。在仿真環境中進行訓練與結果驗證,證明該模型可有效生成基站優化方案,且相較于基于A2C方法的模型具有更快的收斂速度和更好的基站優化效果。
中圖分類號:TN929.5 文獻標志碼:A DOI: 10.16157/j.issn.0258-7998.256278
中文引用格式: 薄云鵬,亢抗,潘桂新,等. 一種基于PPO算法的低空基站優化模型[J]. 電子技術應用,2025,51(7):60-64.
英文引用格式: Bo Yunpeng,Kang Kang,Pan Guixin,et al. A low-altitude base station optimization model based on PPO algorithm[J]. Application of Electronic Technique,2025,51(7):60-64.
A low-altitude base station optimization model based on PPO algorithm
Bo Yunpeng1,2,Kang Kang3,Pan Guixin3,Wang Min1
1.Yunnan Observatories, Chinese Academy of Sciences;2.University of Chinese Academy of Sciences;3.China United Network Communications Co., Ltd., Guangdong Branch
Abstract: Optimizing existing terrestrial network base stations to provide low-altitude network services offers advantages such as cost-effectiveness and rapid deployment. Facing challenges in the optimization process of low-altitude base stations, including complex wireless environments, diverse configuration parameters, and interrelated optimization objectives, this paper proposes a multidimensional low-altitude network base station optimization model based on the Proximal Policy Optimization (PPO) algorithm. By employing ray tracing technology, the model calculates the low-altitude coverage capability of base stations with different types and angles. It constructs an optimization model that supports multiple objectives and parameter configurations for low-altitude network base stations. The PPO algorithm is utilized to derive base station configuration strategies, which are then trained and validated in a simulated environment. This demonstrates that the model can effectively generate optimization schemes for base stations and exhibits faster convergence speed and better optimization results compared to models based on the Actor-Critic (A2C) method.
Key words : low-altitude base station;low-altitude communication;PPO;reinforcement learning

引言

近年來,隨著低空經濟的發展,無人機的數量和應用急劇增加,無人機的通信需求也隨之快速擴張[1]。而傳統的基于地面站的無人機通信方式受地面站性能和所用的非授權頻段的限制,存在易受干擾、通信范圍受限、安全性差等問題,難以滿足新應用場景的需求,因此,人們認為利用蓬勃發展的5G及以上蜂窩網絡支持無人機通信是最有前途和成本效益的方法[2-6]。

然而,現有的蜂窩網絡以服務地面用戶為主[7],據此開展的網絡規劃和優化也主要面向地面目標,并且由于天線自身存在零位、旁瓣等問題,低空場景中信號覆蓋不全、鄰區關系雜亂、切換頻繁、信號干擾嚴重等現象極為突出,使得目前的蜂窩網絡難以滿足無人機低空通信的需要[2, 5, 8]。因此,亟需通過建立專門的低空網絡來開展對低空無人機應用場景的通信服務。

當前的低空通信組網方案主要有同站空地同頻組網、同站空地異頻組網、異站空地同頻組網、異站空地異頻組網等[2, 9],其中,同站組網方案通過在地面蜂窩網絡站址上對現有設備進行調整優化或新增少量AAU設備等方式實現低空網絡的建立,具有成本低、建設方便等優點。對于具體的低空網絡建設方案,已有很多關于低空基站的選址[10]以及對天線的仰角[11-12]的調整方面的研究,然而上述研究往往只聚焦于站址或仰角等單一配置的調整,對于實際應用中通過優化已有地面基站建立低空網絡過程中的對合適基站進行選擇以及對高度、天線角度、設備選型等多方面配置策略的聯合設計而言,其實用價值有限,需要設計一種多要素聯合的低空基站優化方法,實現低成本、高效率的低空網絡建設。

傳統的蜂窩網絡的基站規劃方法往往根據經驗模型估計信號的傳播,而已有研究證實,城市環境內的復雜建筑物的遮擋和反射會極大地改變空對地信道特性[13-15],因此統計性信道模型往往難以準確描述信道特征。而射線追蹤技術可通過計算無線電波與場景之間的電磁相互作用,模擬真實的信號傳播過程,具有更高的靈活性[15]。然而射線追蹤作為一種確定性傳播工具,其所需計算量往往遠大于統計性模型,因而在應用時需采取實時計算等措施降低計算量,提升效率。

強化學習是一種通過智能體與環境的交互來積累信息、改進策略的機器學習方法,該方法通過環境對智能體動作的反饋來進行智能體的訓練與學習,具有無需提前獲取先驗信息的優點。對低空基站優化問題而言,使用強化學習方法可免于提前進行各基站不同優化方案的覆蓋效果的繁雜計算,提升優化速度,降低計算量與時間成本。


本文詳細內容請下載:

http://m.rjjo.cn/resource/share/2000006596


作者信息:

薄云鵬1,2,亢抗3,潘桂新3,汪敏1

(1.中國科學院云南天文臺,云南 昆明 650200;

2.中國科學院大學,北京 100049;

3.中國聯合網絡通信有限公司廣東省分公司,廣東 廣州 510700)


Magazine.Subscription.jpg

此內容為AET網站原創,未經授權禁止轉載。
主站蜘蛛池模板: 男人好大好硬好爽免费视频 | 欧美肥婆videoxxx | 99视频在线看观免费 | 成人免费看黄网址 | 亚洲欧美日韩在线精品一区二区 | 高清在线观看自拍视频 | 午夜三级理论在线观看视频 | 精品成人一区二区三区免费视频 | 国产在线精品香蕉综合网一区 | 成人观看免费大片在线观看 | 日韩欧美一中字暮 | 欧美的高清视频在线观看 | jizjiz日本 | 三级欧美 | 欧美一区二区三区视视频 | 97国产精品视频观看一 | 成年女人免费观看视频 | 国内自产拍自a免费毛片 | 亚洲精品成人7777在线观看 | 日本美女作爱 | 日韩一区二区三区视频 | 久久99精品久久久久久久野外 | 国产精品亚洲精品一区二区三区 | 国产欧美日韩精品第二区 | 亚洲午夜片 | 亚洲在线中文 | 国产精品久久久久毛片 | 一本色道久久爱88av | 精品视频在线一区 | 欧美一区二区三区久久综 | 国产欧美日韩视频在线观看一区二区 | 超级香蕉97视频在线观看一区 | 成人高清视频在线观看 | 欧美日产国产亚洲综合图区一 | 国产一级片网址 | 国产麻豆入在线观看 | 国产极品精频在线观看 | 欧美精品免费在线 | 国产天堂在线一区二区三区 | 成年女人毛片免费观看中文w | 亚洲精品91 |