כתבה
arXiv cs.CL ·
בקש, ניחום, או פעולה? הערכת אי-דחיפות פעולה בLLM
Ask, Relax, or Act? Evaluating Actionable Indeterminacy in LLM Preference Reasoning
מחקר חדש: LLMs יכולים להבחין באי-וודאות, אך עדיין יכולים לבצע פעולה שאינה נחוצה. המחקר מציע פתרון לבעיה זו, ומדגים את חשיבות ההבחנה בין פעולה נחוצה לאי-דחיפות.
תקציר מקורי באנגליתarXiv:2610.03102v1 Announce Type: new Abstract: An LLM agent can recognize uncertainty yet still choose the wrong next step: asking when action is already justified, or seeking clarification when the constraints must change. We formalize actionable indeterminacy: act when an accepted action is shared across all admissible preferences or objectives, clarify when each possibility is feasible but no action is shared, and propose a minimum-cost permitted constraint repair when the request is infeasible. We construct a solver-grounded benchmark spanning object allocation, meeting scheduling, apartment choice, and stable matching. Matched pairs retain the same source while changing whether intervention is necessary, and evaluation separates decision correctness, matched-pair reliability, and ful
קרא במקור המקורי
arxiv.org
פתח כתבה מקורית