כתבה
arXiv cs.AI ·
הסכנה הבסיסית: חשיבה מחדש של בדיקת תוכנית ב-LLM Agents
The Default Trap: Rethinking Plan Evaluation in Tool-Using LLM Agents
אנחנו חושבים מחדש את בדיקת תוכניות ב-LLM Agents כדי למנוע את הסכנה הבסיסית. המחקר חוקר את ההשפעה של שינויי נוקטה וסדר רשימת חשבונות על תגובת ה-LLM. המאמר עוסק בפיתוח תוכניות ובבדיקתן ב-LLM Agents.
תקציר מקורי באנגליתarXiv:2609.36829v1 Announce Type: new Abstract: An executor can respond strongly to a change in a supplied plan's priority while showing a small change in the same information-selection probability when a default-aligned whole plan is removed. We call the risk of interpreting the latter as weak responsiveness to alternative priorities the default trap. We compare paired plans that prioritize different information targets with a shared no-plan reference. An accounting identity relates these distinct behavioral contrasts. Across 3,200 decision windows on 160 selected Retail, Airline, and AgentDojo tasks, switching priorities strongly redirects two models' choices, while the two plan-versus-default contrasts differ. In 2,160 additional windows, reversing account-list order shifts default targ
קרא במקור המקורי
arxiv.org
פתח כתבה מקורית