任意モダリティの顕著物体検出のためのモダリティプロンプト

本論文は、任意のモダリティから顕著物体を検出するための新しいモダリティ適応型トランスフォーマーを提案する。提案手法は、モダリティプロンプトを使ってモデルの特徴空間を適応的に調整し、さまざまなモダリティの特徴を効果的に抽出する。また、チャンネル方向とスペース方向の動的融合モジュールを組み合わせることで、複数のモダリティ間の相補的な意味情報と詳細情報を効果的に捉える。