講演抄録/キーワード |
講演名 |
2022-08-26 12:05
セルラー方式におけるマルチエージェント深層Q学習に基づいたセル間干渉制御 ○劉 昱辰・張 裕淵・府川和彦(東工大) RCS2022-119 |
抄録 |
(和) |
小セル方式においては,セル間干渉(ICI)が全体のシステム容量を大きく劣化させる可能性がある.このICIを軽減するために,本稿では,マルチエージェント強化学習(MARL)を3セクターの小セル方式に適用し,基地局(BS)の送信電力とビームフォーミングベクトルを同時に最適制御することを目指す.強化学習のエージェントの役割を担うBSは,学習および制御のための局所情報として,一部のチャネル情報と制御結果の情報を隣接のBSと交換する.その後,エージェントは交換した局所情報を用いて,制御パラメータを推定する.したがって,提案法はBSの数が非常に多い大規模システムへも容易に拡張し適用できる.提案方式の有効性を明らかにするため計算機シミュレーションを行い,3リンクおよび21リンクのMIMO通信において,提案法は平均システム容量をランダム制御に較べ大幅に改善できることを示す.さらに,局所全探索(ES)に較べ演算量を大幅に削減できることを明らかにする. |
(英) |
In small cell systems, inter-cell interference (ICI) can severely degrade the overall system capacity. To alleviate ICI, this report applies multi-agent reinforcement learning (MARL) to three-sector small cell systems, which aims to jointly optimize transmit power levels and beamforming vectors of base stations (BSs). Each BS, which plays a role of the agent in the reinforcement learning, exchanges its partial channel information and control results with neighboring BSs as the local information for the training and control. Then, the agent is expected to exploit the local information on the same environment for estimating control parameters, which can be extended and applied to large scale systems including more BSs. Computer simulations are conducted in order to verify the effectiveness of the proposed scheme. It is shown that the proposed scheme can improve average system capacity of 3-link and 21-link MIMO communications more drastically than the random control, while requiring much less computational complexity than that of the local exhaust search (ES). |
キーワード |
(和) |
MIMO / セル間干渉制御 / マルチエージェント強化学習 / 送信ビームフォーミング / 送信電力制御 / / / |
(英) |
MIMO / inter-cell interference coordination / multi-agent reinforcement learning / transmit beamforming / transmit power control / / / |
文献情報 |
信学技報, vol. 122, no. 164, RCS2022-119, pp. 126-131, 2022年8月. |
資料番号 |
RCS2022-119 |
発行日 |
2022-08-18 (RCS) |
ISSN |
Online edition: ISSN 2432-6380 |
著作権に ついて |
技術研究報告に掲載された論文の著作権は電子情報通信学会に帰属します.(許諾番号:10GA0019/12GB0052/13GB0056/17GB0034/18GB0034) |
PDFダウンロード |
RCS2022-119 |