כתבה
arXiv cs.AI ·
דגמי התנהגות מבוססי סיבות לאודיט של סימולטורי LLM
Reason-Mediated Behavioral Models for Auditing LLM Social Simulators
מחקר חדש מציע תקן לאודיט של סימולטורי LLM. התקן נועד לבדוק האם סימולטור LLM יכול לשחזור סיבות של בני אדם. המחקר נערך באמצעות ניסוי שבו 94 חברים בני אדם העריכו שלושה קונספטים של מוצרי שמן וכתבו רציונלים פתוחים.
תקציר מקורי באנגליתarXiv:2607.24649v1 Announce Type: new Abstract: Large language models are increasingly used as social simulators, including as synthetic survey respondents. Most evaluations ask whether simulated outcomes resemble human outcomes. We argue that this is necessary but too weak: a simulator can match the final answer while using the wrong rationale-derived reason pattern. We study this problem through a 94-person sunscreen concept test in which each respondent evaluated three product concepts and wrote open-ended rationales. We map those rationales into signed reason states $Z$, where positive signs support adoption and negative signs block it. This gives a practical audit: holding respondent descriptors $D$, category context $K$, and concept treatment $X$ fixed, do human rationale-derived rea
קרא במקור המקורי
arxiv.org
פתח כתבה מקורית