כתבה
arXiv cs.LG ·
הערכת Reclaim: זיכרון שחולה גרוע מאשר זיכרון ריק
Reclaim Evaluation: A Lossy Memory Is Worse Than an Empty One
חוקרים מצאו כי זיכרון שחולה יכול להיות גרוע יותר מזיכרון ריק. הם מציגים את הערכת Reclaim, שבודקת את היכולת של מודלים לשחזר מידע אבוד. המחקר מראה כי אחסון המקור במקום התוצאה יכול לשפר את הדיוק.
תקציר מקורי באנגליתarXiv:2606.25449v5 Announce Type: replace-cross Abstract: A language model's memory can be worse than no memory at all when the model or its interface is disposed to act on it: a memory that keeps a wrong conclusion but drops the work behind it leads a model to re-emit the stale value as a confident answer, where an empty memory leads it to abstain. We call this brittle memory. The information loss is definitional; the finding is behavioral, and it turns on one thing, whether the memory kept a re-derivation basis (the source) rather than the answer. We measure it with reclaim evaluation: induce a known drift, compress at a fixed budget, deliver a correction that names the error, and score exact recovery, judge-free. Holding the budget fixed and varying only what the compression keeps isola
קרא במקור המקורי
arxiv.org
פתח כתבה מקורית