כתבה
arXiv cs.CL ·
האילוזיה של החקלאי הממוצע במדיניות של דגימות שפה
The average-farmer illusion in language-model simulations of agricultural decisions
מודלי שפה נכשלו להציג החלטות של חקלאים באופן נכון. המחקר הציג תוצאות חדשות של חיפוש תגובות של חקלאים בסין ובאפריקה. נראה כי גם מודלים חדישים כמו Gemini ו-LangGraph נכשלו. המחקר קורא לבחון מחדש את תפקודם של מודלי שפה במדיניות של דגימות שפה.
תקציר מקורי באנגליתarXiv:2609.15038v1 Announce Type: cross Abstract: Language-model agents are increasingly used as synthetic people in surveys and social simulations, yet their apparent realism is often judged from population averages or distributional similarity. We tested what such evidence actually establishes by comparing Claude, Codex and Kimi under four prespecified prompt designs with matched farmer decisions from China and four African countries. Some configurations reproduced observed means and adoption rates. However, their person-level predictions were weak; their decisions clustered around typical values and policy-relevant extremes were largely missing. Most strikingly, a simple generator fitted only to the observed marginal dis- tribution, and given no information about any farmer, achieved gr
קרא במקור המקורי
arxiv.org
פתח כתבה מקורית