本研究では、赤外線と可視光の2つのモーダリティを効率的に活用するための新しい手法「MiPa(Mixed Patch)」を提案している。
MiPaの主な特徴は以下の通り:
実験の結果、提案手法MiPaは、LLVIP、FLIR、KAISTの各ベンチマークデータセットにおいて、個別のモーダリティ検出精度が高く、かつ両モーダリティの平均精度も優れていることが示された。特に、LLVIPデータセットでは、従来手法を上回る最先端の性能を達成した。さらに、MiPaを強いモーダリティの正則化手法として活用することで、マルチモーダル融合手法を上回る性能を得られることも確認された。
To Another Language
from source content
arxiv.org
ข้อมูลเชิงลึกที่สำคัญจาก
by Heitor R. Me... ที่ arxiv.org 04-30-2024
https://arxiv.org/pdf/2404.18849.pdfสอบถามเพิ่มเติม