כתבה
arXiv cs.CL ·
בינה על לוח גיר עוקפת אוטורגרסיבית
Blackboard Intelligence Can Surpass Autoregressive on Globally Constrained Problems
חוקרים מציגים 'בינה על לוח גיר' - גישה חדשה למודלים של שפה. היא משתמשת במודלים דיפוזיים ומשפרת את הדיוק בבעיות עם הגבלות גלובליות. המחקר הראה תוצאות טובות יותר מאוטורגרסיביים במספר בעיות.
תקציר מקורי באנגליתarXiv:2609.38806v2 Announce Type: cross Abstract: Next-token prediction has driven remarkable progress in large language models, yet a growing body of evidence suggests that they can struggle on problems governed by complex global constraints. In this work, we focus on this regime and ask whether some of these limitations arise from the inference interface induced by next-token prediction itself. We study this question through blackboard intelligence: an inference-time perspective in which a model works on a fixed, revisable canvas and searches over candidate solution states rather than committing to a causal, left-to-right trajectory. We instantiate this idea with diffusion language models, whose any-order prediction interface naturally exposes predictions over partially filled solution s
קרא במקור המקורי
arxiv.org
פתח כתבה מקורית