כתבה
arXiv cs.CL ·
LLM כמאמן: למידה מניסיון למשימות לא ניתנות לאימות
LLM-as-a-Coach: Experiential Learning for Non-Verifiable Tasks
חוקרים הציגו שיטת 'למידה מניסיון' ל-LLM, המשתמשת במודל LLM כמאמן. השיטה מאפשרת ל-LLM ללמוד מניסיון ולשפר את ביצועיה במשימות פתוחות. השיטה הוכחה כיעילה בהשוואה לשיטות RL קלאסיות.
תקציר מקורי באנגליתarXiv:2607.18110v1 Announce Type: cross Abstract: Reinforcement learning (RL) on open-ended tasks compresses an LLM's rubric-based evaluation into a scalar reward, discarding rich textual feedback and conflating responses with distinct quality profiles. We propose Experiential Learning (EL), which repurposes the feedback model from an LLM-as-a-Judge into an LLM-as-a-Coach. The coach distills its assessment of each on-policy response into transferable experiential knowledge, which conditions a teacher model and is internalized by the policy through on-policy context distillation. Compared with scalar rewards, this higher-bandwidth feedback channel provides dense supervision and preserves fine-grained preferences among high-quality responses. Across two policy families, with feedback from th
קרא במקור המקורי
arxiv.org
פתח כתבה מקורית