CoTracker: It is Better to Track Together

Трекер группы точек.
Обратите внимание как он продолжает отслеживать точки даже когда они уже перекрыты другими объектами.
Я бы нашел применение такому инструменту в композе.

Код
Колаб

#tracking #opticalflow

Отличная новость.
CoTracker теперь можно погонять на huggingface

Только посмотртите, он пытается отследить даже руку, уходящую за кадр

Демо

#tracking #opticalflow

DINO-Tracker: Taming DINO for Self-Supervised Point Tracking in a Single Video

Трекер группы точек, в том числе перекрытых переднеплановыми объектами. На приведенных примерах показывает себя лучше чем CoTracker

Код

#tracking #opticalflow

TAPIR: Towards Spatial Intelligence via Point Tracking

Трекинг видимых и перекрытых точек от гугл/deepmind. Конкурент CoTracker и DINO-Tracker. Я уже писал о нем. И о, чудо. Оказывается, код уже доступен. На всякий случай, ну а вдруг вам нужно - там есть модуль в помощь роботизированным манипуляторам

Гитхаб

#tracking #opticalflow

Self-Supervised Learning of Motion Concepts by Optimizing Counterfactuals

Ура, новый трекер группы точек от Стэнфорда.

Несмотря на то что все они неточные, они мне уже пригождались там где все планарные и точечные трекеры оказывались бессильны

Код
Колаб

#tracking #opticalflow