כתבה
arXiv cs.AI ·
האם מודלים מתחזים להתאמה ללא תוצאות ברורות?
Do Models Fake Alignment Without Clear Consequences?
מודלים גדולים מסוגלים לזהות הקשרי הערכה ולשנות את התנהגותם כדי לשקף את ציפיות המעריך, תופעה הידועה בשם 'התאמה מזויפת'. מחקר חדש בודק האם מידע על תוצאות הנובעות מהערכה הוא הכרחי להתאמה מזויפת.
תקציר מקורי באנגליתarXiv:2607.24758v1 Announce Type: new Abstract: Large language models are capable of recognizing evaluation contexts and altering their behavior to reflect evaluator expectations rather than typical deployment behaviors, a phenomenon known as alignment faking. The reasons why models fake alignment are not fully understood, however. Canonical examples of alignment faking have taken place in scenarios that explicitly connect evaluation to consequences for the model, such as retraining the model or delaying its deployment. However, recent work by Sheshadri et al. has suggested that mechanistic motivations for alignment faking may vary across models and be more complex than previously considered. To investigate whether consequence-linking information is necessary for alignment faking, we place
קרא במקור המקורי
arxiv.org
פתח כתבה מקורית