Keskeiset käsitteet
Eine zweistufige Methode, die Kamerabewegungserkennung und Bewegungsobjektsegmentierung verwendet, um die Verfolgung statischer Punkte in Videos mit statischer Kamera zu verbessern.
Tiivistelmä
Der Bericht stellt eine verbesserte Methode für die Tracking Any Point (TAP) Aufgabe vor, die jeden physischen Oberflächenpunkt durch ein Video verfolgt. Mehrere bestehende Ansätze haben den TAP-Ansatz durch Berücksichtigung der zeitlichen Beziehungen erforscht, um glatte Punktbewegungstrajektorien zu erhalten, leiden aber immer noch unter dem kumulativen Fehler, der durch die zeitliche Vorhersage verursacht wird.
Um dieses Problem anzugehen, schlagen wir einen einfachen, aber effektiven Ansatz namens TAP with confident static points (TAPIR+) vor, der sich darauf konzentriert, die Verfolgung des statischen Punkts in Videos, die von einer statischen Kamera aufgenommen wurden, zu korrigieren. Unser Ansatz enthält zwei Schlüsselkomponenten:
Mehrstufige Kamerabewegungserkennung, die die Videosequenz anhand des Schusses mit statischer Kamera identifizieren kann.
CMR-basierte Punkttrajektorienvorhersage mit einem Bewegungsobjektsegmentierungsansatz, um den statischen Punkt vom bewegenden Objekt zu isolieren.
Unser Ansatz belegte den ersten Platz im Endtest mit einem Ergebnis von 0,46.
Tilastot
Die Videoaufnahmen mit statischer Kamera zeigen gelegentlich leichte Positionsschwankungen der Punkte, obwohl sie in der Ground Truth Tracker statisch sind.
Während der Vorhersage der Punkttrajektorien verschieben sich ursprünglich statische Punkte oft aufgrund der Abdeckung durch bewegende Objekte, indem sie entweder der Objektbewegung folgen oder in den nachfolgenden Vorhersagen abdriften.
Lainaukset
"Unser Ansatz enthält zwei Schlüsselkomponenten: (1) Mehrstufige Kamerabewegungserkennung, die die Videosequenz anhand des Schusses mit statischer Kamera identifizieren kann. (2) CMR-basierte Punkttrajektorienvorhersage mit einem Bewegungsobjektsegmentierungsansatz, um den statischen Punkt vom bewegenden Objekt zu isolieren."