יום חמישי, 8 באוקטובר 2026 LIVE
AI־INFO

כתבה arXiv cs.CL ·

עבר לסימולטורים שיתפי: יצירת דמויות משתמש ריאליסטיות לבדיקה חזקה של סוכני LLM

Beyond Cooperative Simulators: Generating Realistic User Personas for Robust Evaluation of LLM Agents
ניתן ליצור דמויות משתמש ריאליסטיות לבדיקה חזקה של סוכני LLM. תוכנה זו, PPol, משתמשת בטכניקה של קודים רב-תכליתיים כדי ליצור דמויות משתמש שונות וריאליסטיות. ניתן לשים לב שפורטלי החדשות כבר עושים שימוש בסוכני LLM כדי ליצור דמויות משתמש ריאליסטיות.
תקציר מקורי באנגליתarXiv:2605.12894v2 Announce Type: replace-cross Abstract: Large Language Model (LLM) agents are increasingly deployed in settings where they interact with diverse users, including those who are unclear, impatient, or reluctant to share information. However, collecting real interaction data at scale remains expensive. The field has turned to LLM-based \emph{user simulators} as stand-ins, but these simulators inherit the behavior of their underlying models: cooperative and homogeneous. As a result, agents that appear strong in simulation often fail in real human interactions. To narrow this gap, we introduce Persona Policies (PPol), a plug-and-play control layer that induces realistic behavioral variation in user simulators while preserving original task goals. Rather than hand-crafting pers
קרא במקור המקורי