核心概念
DOT unifies point tracking and optical flow techniques to efficiently predict dense motions in videos.
要約
最近の点追跡手法は、遮蔽物が存在する中でもビデオ全体で特定のポイントを追跡し、数千フレーム後でも初期クエリの50%以上を保持することができる。しかし、これらの手法はビデオ内のすべての個々のポイントを追跡するには速度が遅すぎるため、それまで光流に代わるものとして広く採用されていなかった。点追跡手法の非効率性は、個々のトラックを独立して処理することから生じており、空間的コンテキストが欠如している。本論文では、この概念をさらに進めて、1つのフレーム内のすべてのポイントを同時に追跡することで、新しいアプローチDOTを導入します。DOTは光流と点追跡手法を統合し、任意のフレーム間で密なフロー場と可視性マスクを予測するために少数トラックを使用します。
統計
DOTはCoTrackerよりも優れたパフォーマンスを示しました。
DOTは最高水準の光流手法よりも優れた結果を示しました。
DOTは少なくとも2桁速い速度で最高水準の点追跡アルゴリズムと同等以上の性能を発揮します。
引用
"DOT unifies point tracking and optical flow techniques."
"Dense Optical Tracking significantly outperforms state-of-the-art optical flow methods."
"DOT is flexible as it may trade motion prediction quality for speed by adjusting the number of initial point tracks."