כתבה
arXiv cs.AI ·
עזרה אגוצנטרית פרואקטיבית
Ambient @ EgoProactive 2026 : Proactive Egocentric Assistance with Visually Grounded Supervision
החידוש מציג עזרה אגוצנטרית פרואקטיבית המשתמשת בפיקוח ויזואלי. המודל מנבא האם להתערב או להישאר שקט לאחר כל קטע וידאו. הגישה הזו שיפרה את התוצאות ב-0.249 מקרו-F1 ו-0.30 G-mean.
תקציר מקורי באנגליתarXiv:2609.07099v2 Announce Type: replace-cross Abstract: We present our submission to the EgoProactive track of the ECCV 2026 Wearable AI Challenge, which ranked first in the large-model division and second in the <=2B division. The task requires a wearable assistant to decide after each eight-second segment of egocentric video whether to intervene or remain silent. Our approach has two main components. First, we reformulate intervention timing as single-token classification. Rather than generating either $interrupt$<utterance> or $silent$, the model predicts yes or no, and we derive the decision from the renormalised probabilities of these two tokens. This formulation improved macro-F1 by 0.249 and G-mean by 0.30 over free-form generation. Second, because labelled data were limited to th
קרא במקור המקורי
arxiv.org
פתח כתבה מקורית