核心概念
並列サーバシステムの動的ルーティングにおいて、提案するセミグラジエントSARSA(SGS)アルゴリズムは、システムが安定化可能であれば、交通状態と重みベクトルの同時収束を保証する。
要約
本論文では、並列サーバシステムの動的ルーティング問題に対して、セミグラジエントSARSA(SGS)アルゴリズムを提案している。
- SGSアルゴリズムは、線形価値関数近似を用いて、重みベクトルの更新と交通状態の収束を同時に考慮する。
- 理論的には、システムが安定化可能であれば、重みベクトルと交通状態の同時収束が保証される。
- 重みベクトルの収束は、ストохャスティック近似理論に基づいて示される。一方、交通状態の収束は、リアプノフ関数を用いて示される。
- 実験的には、提案手法が計算効率が高く、最適性ギャップも小さいことが示されている。
統計
到着率λ = 2 [1/s]
サービス率 μ1 = 0.5 [1/s], μ2 = 2.5 [1/s], μ3 = 5 [1/s]
最終的な重みベクトルは w = [0.60, 0.49, 0.15]
引用
"学習ベースのアプローチは、理論的保証と解釈可能性が限られているという問題がある。"
"提案アルゴリズムは、交通状態と重みベクトルの同時収束を保証する。"
"提案アルゴリズムは、計算効率が高く、最適性ギャップも小さい。"