核心概念
提出一種新的在線算法OPADMM,用於從流式光滑信號中學習和跟蹤動態圖拓撲。OPADMM結合了近端ADMM的快速收斂特性,並在拓撲更新中引入近端項作為時間變化的正則化項。在簡化假設下,OPADMM可以實現次線性靜態後悔。實驗結果表明,OPADMM在靜態和動態網絡拓撲估計中都優於現有的在線圖學習方法。
摘要
本文提出了一種新的在線算法OPADMM,用於從流式光滑信號中學習和跟蹤動態圖拓撲。
- 問題描述:
- 給定一個未知的無向圖G(V, E, W),以及在該圖上的光滑信號觀測序列{x(1), x(2), ...}。
- 目標是在線學習和跟蹤G的拓撲,即估計時變的權重矩陣W(k)。
- 算法設計:
- 基於近端ADMM(PADMM)在批量圖學習中的優秀性能,提出了在線版本OPADMM。
- OPADMM包括兩個步驟:
- 遞歸更新觀測信號的成對距離矩陣z1:k。
- 運行單次PADMM迭代,更新拓撲估計w(k)、節點度代理v(k)和對偶變量λλλ(k)。
- 近端項在拓撲更新中起到時間變化正則化的作用,使OPADMM能夠有效跟蹤動態網絡拓撲。
- 理論分析:
- 在簡化假設下,證明OPADMM可以實現次線性靜態後悔。
- OPADMM的計算複雜度和內存需求與時間無關,優於批量算法。
- 實驗結果:
- 在合成和真實數據集上,OPADMM在靜態和動態網絡拓撲估計中都優於現有的在線圖學習方法。
總之,本文提出了一種新穎高效的在線圖學習算法OPADMM,在理論和實踐上都有重要貢獻。
統計資料
在靜態圖上,OPADMM的收斂速度優於在線PG和DPG算法。
在動態圖上,OPADMM能夠更好地適應網絡拓撲的變化,最終收斂速度也優於在線PG和DPG。
在真實數據集上,OPADMM的收斂速度在所有情況下都優於在線PG和DPG算法。