כתבה
arXiv cs.LG ·
חיקוי תלמידים מנותקים לבדיקת מורים מבוססי LLM
Simulating Disengaged Students to Evaluate LLM-based Tutors
חוקרים פיתחו פרוטוקול לבדיקת מורים מבוססי LLM באמצעות חיקוי תלמידים מנותקים. הם השתמשו במודלים Qwen ו-GPT לבדיקת תגובות המורים למצבי למידה שונים.
תקציר מקורי באנגליתarXiv:2609.12331v1 Announce Type: new Abstract: Simulated students generated by computational models provide a practical way to evaluate tutoring strategies and pedagogical approaches used by human and AI tutors. However, such simulations should account for disengaged behaviors, including gaming the system, wheel-spinning, and off-task behavior, because tutors may need different responses for different learner states. We present Disengagement-Aware Student Simulators (DAS2), a reproducible pre-deployment protocol that models five learner-engagement states: engaged, gaming, wheel-spinning, off-task, and mixed, and evaluates AI tutor performance across these states. Using ASSISTments09, two coders independently labeled 100 sampled tutoring sessions based on anonymized interaction-log summari
קרא במקור המקורי
arxiv.org
פתח כתבה מקורית