יום שישי, 31 ביולי 2026 LIVE
AI־INFO

כתבה arXiv cs.LG ·

מממשק להסקה: הפעלת הסקה בכל סדר ממודלים בכל סדר

From Interface to Inference: Eliciting Any-Order Inference from Any-Order Models
חוקרים מציעים שיטות חדשות להפעלת הסקה בכל סדר ממודלים בכל סדר. הם מציגים שתי גישות: החדרת מידע והסקה במרחב הלטנטי. הניסויים מראים שיפור בביצועים.
תקציר מקורי באנגליתarXiv:2607.26504v1 Announce Type: new Abstract: Many discrete reasoning tasks, such as code generation, are inherently non-causal: programmers move between high-level structure and local details, a process we call any-order inference. For autoregressive language models, which lack a native any-order interface, non-causal abilities such as infilling and next-edit prediction require hand-designed mechanisms. Can we instead design models that natively support any-order inference? Masked diffusion models have recently emerged as compelling candidates, as their any-order training objective naturally offers an any-order prediction interface. This interface, however, does not automatically yield any-order inference. We demonstrate that this interface-inference gap stems from positional uncertaint
קרא במקור המקורי