כתבה
arXiv cs.AI ·
דיוורסיטה של משימות מפיקה תעבורה מערכתית, אך מעכבת למידה רציפה
Task diversity produces systematic transfer but inhibits continual reinforcement learning
דיוורסיטה של משימות פוגעת בלמידה רציפה. חוקרים חקרו את השפעת דיוורסיטה על למידה רציפה. הם פיתחו תחום מחקר חדש, Banyan, ומצאו שדיוורסיטה מפיקה תעבורה מערכתית, אך מעכבת למידה רציפה.
תקציר מקורי באנגליתarXiv:2606.00880v2 Announce Type: replace-cross Abstract: Continual reinforcement learning (RL) aims to produce agents that never stop adapting to new tasks. A key question is how this interacts with the diversity of tasks an agent experiences. Prior work has shown that training on many diverse tasks leads to agents with strong zero-shot and in-context adaptation. However, this work evaluated agents after they'd stopped learning, i.e. with frozen weights. How task diversity affects an agent's ability to continue learning over a sequence of distribution shifts remains unclear. We introduce Banyan, a GPU-accelerated continual RL domain where one can parametrically control three independent axes that define a task: the map layouts an agent must navigate, the objects it must interact with, and
קרא במקור המקורי
arxiv.org
פתח כתבה מקורית