核心概念
本研究では、IEEE 802.11ax規格における上りリンクの利用者スケジューリング、周波数リソース割当て、MU-MIMO利用者選択、MIMO伝送モード選択の統合最適化問題を深層階層強化学習を用いて解決する。
要約
本研究では、IEEE 802.11ax規格における上りリンクの利用者スケジューリング、周波数リソース割当て、MU-MIMO利用者選択、MIMO伝送モード選択の統合最適化問題を扱う。
具体的には以下の通り:
従来の研究では飽和トラフィック条件を想定していたが、本研究では非飽和トラフィック条件を考慮する。非飽和条件では利用者のデータ需要が変動するため、MU-MIMO利用者選択と周波数リソース割当ての同時最適化が必要となる。
この問題は組合せ最適化問題であり、従来の最適化手法では解くことが困難である。
そこで本研究では、深層階層強化学習を用いて問題を解決する。
従来の深層階層強化学習をそのまま適用すると収束が遅く、性能が低下するため、IEEE 802.11ax規格に合わせて深層階層強化学習のモデル構造を最適化する。
具体的には、リソース割当てと利用者スケジューリングを階層的に最適化するマスターエージェントとサブエージェントを定義し、MU-MIMO利用者選択の際の行動空間を削減する手法を提案する。
提案手法は従来手法と比べて大幅な性能向上を実現する。
統計
提案手法は従来手法と比べて、非飽和トラフィック条件下で大幅な throughput 向上を実現する。
飽和トラフィック条件下でも、提案手法は従来手法と同等以上の throughput を達成する。