כתבה
arXiv cs.AI ·
InterviewPlayground: סביבת הדמיה לבדיקת רובוטי מראיינים
InterviewPlayground: A Simulation Environment for Evaluating AI Interviewers
סביבת הדמיה לבדיקת רובוטי מראיינים, שמאפשרת לבדוק את יכולותיהם של רובוטי מראיינים בסביבה מבוקרת. הסביבה כוללת סימולציות של חוקרים ונושאים שונים, ומאפשרת לבדוק את יכולותיהם של הרובוטים בתגובה לשאלות שונות. הסביבה גם כוללת כלים לבדיקת רובוטי המראיינים, כגון כלי לבדיקת יכולות השפה של הרובוטים.
תקציר מקורי באנגליתarXiv:2610.12023v1 Announce Type: new Abstract: Increasingly, AI interviewers are being developed to elicit open-ended responses in applications like market research, public polling, preference elicitation, and social science research. However, evaluating AI interviewers is challenging because they function in extended, multi-turn interactions where they must adapt to participant behaviors. To address this need, we develop InterviewPlayground, a simulation environment for evaluating AI interviewers using simulated study participants whose behaviors are grounded in social theory. Simulated studies in InterviewPlayground produce an InterviewReportCard, which assesses the performance of AI interviewers using a suite of validated measures. To test whether our simulation-based evaluations predi
קרא במקור המקורי
arxiv.org
פתח כתבה מקורית