כתבה
arXiv cs.CL ·
MetaEncoder: מערכת קבלת החלטות רב-מודאלית
MetaEncoder: Exploring the Limit of Bi-Encoders for Multimodal System One Decision Making with Natural Language Interface
MetaEncoder היא מערכת קבלת החלטות רב-מודאלית המשתמשת בלמידת חיזוק ובשיטות קודמות כדי לקבל החלטות מדויקות. המערכת מאפשרת קבלת החלטות על בסיס קלטים טבעיים ורב-מודאליים, כולל תמונות וסרטונים.
תקציר מקורי באנגליתarXiv:2610.11316v1 Announce Type: new Abstract: System One models output constrained decisions and probability distributions rather than free-form text generation. While prevailing paradigms rely on structured schema objects to encode state, intent, and candidate choices, we revisit a fully natural language-based System One interface. In this framework, both the user request and each candidate option are expressed in natural language, supported by multimodal (image and video) auxiliary inputs. We introduce MetaEncoder, which fine-tunes a pre-trained Muse-Glimmer 30B decoder into an instruction-following decision-making encoder. To scale effectively across both small closed-set (< 256) and massive open-set (millions) candidate spaces, MetaEncoder employs a bi-encoder architecture trained vi
קרא במקור המקורי
arxiv.org
פתח כתבה מקורית