כתבה
arXiv cs.CL ·
Wiki-Talkie: ניתוח משפטי של סוכני פרסונה בשיחות ריאליות
Wiki-Talkie: Multilingual Benchmarking of Persona-Based Agents on Real-World Discussions
ניתוח משפטי של סוכני פרסונה בשיחות ריאליות, בשפות שונות. המחקר מציג דטה-סט חדש, Wiki-Talkie, שכולל שיחות מ-Wikipedia Talk pages ב-5 שפות. המחקר מבחין בין סוכני פרסונה שמתנהגים בצורה יותר אופטימית ופחות חיובית.
תקציר מקורי באנגליתarXiv:2610.08513v1 Announce Type: new Abstract: LLMs are increasingly deployed as autonomous agents in social environments, making it critical to study their ability to faithfully simulate human interactions. Central to this is grounding agents in realistic user personas, yet existing datasets rely on fictional personas and are limited to a handful of languages, lacking the empirical grounding necessary to evaluate behavioral fidelity across diverse populations. We introduce Wiki-Talkie, a multilingual dataset of real-world conversations from Wikipedia Talk pages across five languages spanning two language families: Germanic (German, English) and Romance (Spanish, French, Italian), paired with personas derived from real user communities and encompassing sociodemographic attributes, self-de
קרא במקור המקורי
arxiv.org
פתח כתבה מקורית