Xiaomi представила PROVE для оцінювання видалення об’єктів
Команда MiLM Plus із Xiaomi Inc. випустила PROVE — систему для оцінювання моделей видалення об’єктів. Роботу прийнято на ACM MM 2026. Автори зазначають, що це некоректно поставлене завдання: ту саму порожню ділянку можна правдоподібно відновити різними способами, тому єдиного еталона немає. PROVE поєднує дві метрики без референсного відео: RC-S оцінює просторову узгодженість, а RC-T — часову послідовність. Вони аналізують локальні розподіли ознак DINOv2 за допомогою Maximum Mean Discrepancy у ковзному вікні.
До PROVE-Bench входять PROVE-M із 80 парними відео, доповненими синхронним рухом, і PROVE-H зі 100 складними відео без еталонних даних. У порівнянні з оцінками 20 учасників RC-S отримала середній Kendall’s τ 0.59, проти 0.26 у ReMOVE та 0.16 у CFD. Вона посіла перше місце у п’яти з шести тестів. На RORD-Val метрика обрала чисте зображення замість розмитого або зміненого у 100% випадків.
Код має ліцензію Apache 2.0 і потребує Python 3.10+, PyTorch 2.6+, Transformers 4.51+ та ваг DINOv2-giant. На RTX 4090 RC-S обробляє кадр за 134.6 ms. PROVE призначена для оцінювання моделей, а не для підрахунку в реальному часі на пристрої; обмеження також виникають, коли тіні чи відображення виходять за межі оцінюваної області.
Текст підготовлено ШІ Sakhanda Wire за матеріалом MarkTechPost. Факти, цитати та повний контекст — в оригінальній статті нижче.