כתבה
arXiv cs.LG ·
אינפרנסה מרובדת: פיתוח יעיל של קבלת נתונים ואיחוד רציף
Efficient Multimodal Inference through Adaptive Acquisition and Sequential Fusion
SemARC מציעה דרך יעילה לאינפרנסה מרובדת, על ידי קבלת נתונים תקיפה ואיחוד רציף. המערכת עובדת על גיאוס, קפו ואנדרואיד, ומציעה יתרונות ניכרים בקצב ובעלות.
תקציר מקורי באנגליתarXiv:2610.07466v1 Announce Type: new Abstract: Multimodal systems often encode every available input, even when a subset suffices for prediction. Adaptive acquisition can reduce this cost by using predictions from incrementally fused evidence to decide which modality to encode next and when to stop. However, sequential fusion makes these predictions order-dependent, so decisions based on them may need to distinguish factorially many histories of the same acquired set. We introduce SemARC, which couples a Sequential Modality Aggregator (SeMA) with an Adaptive Runtime Controller (ARC) and uses acquired evidence to select each modality before its encoder runs. SeMA executes only selected encoder and fusion branches, updates a fixed-size state, and predicts after each acquisition without reco
קרא במקור המקורי
arxiv.org
פתח כתבה מקורית