本研究では、遠隔探査画像の異常検知タスクにおいて、モダリティ間の転移学習を実現するための手法を提案している。従来の異常検知モデルは、特定の背景分布を学習し、その分布に基づいて偏差スコアを算出していた。しかし、このような手法では、未知のモダリティの画像に適用することができない。
そこで本研究では、学習目標を背景分布の学習から、画像に依存しない偏差スコアの学習へと変更する。具体的には、偏差スコアを学習する深層学習モデルを構築し、訓練データ内で大きな余裕を持って正しい順位付けができるよう最適化する。これにより、未知のモダリティの画像に対しても正しい順位付けができるようになり、モダリティ間の転移学習が可能となる。
提案手法では、ピクセルレベルと特徴レベルの2つの大余裕ランキング損失関数を設計している。また、実際の異常サンプルが得られにくいため、スペクトル的および空間的な異常のシミュレーション手法も提案している。
提案手法は、ハイパースペクトル、可視光、SAR、赤外線、低照度の5つのモダリティで評価され、従来手法と比較して優れた性能を示している。特に、提案手法は未知のモダリティの画像に対しても直接推論が可能であり、モダリティ間の転移学習能力を有している。
翻译成其他语言
从原文生成
arxiv.org
更深入的查询