כתבה
arXiv cs.CL ·
התקנת בעיות למידה לתוכניות התאמה למודלי שפה
Compiling Learning Problems into Adaptation Programs for Language Models
במאמר זה, המחברים מציגים שיטה חדשה להתאמת מודלי שפה, המאפשרת לשפר את הביצועים שלהם. השיטה, הנקראת 'התקנת בעיות למידה', מאפשרת לשפר את הביצועים של המודלים על ידי התאמתם לבעיות מסוימות. המחברים מציגים תוצאות מבחן של השיטה, המעלות את הביצועים של המודלים. המאמר גם מדגים את האפשרות לשפר את הביצועים של המודלים על ידי התאמתם לבעיות מסוימות.
תקציר מקורי באנגליתarXiv:2609.37371v1 Announce Type: new Abstract: Model adaptation is typically governed by a fixed recipe, even though different update programs can produce substantially different behavioral outcomes. We introduce adaptation compilation, which reframes where, how, and to what extent a model should adapt as a joint prediction and decision problem. Rather than searching over candidate programs anew for each learning episode, a compiler learns from prior adaptations to predict a vector-valued counterfactual response surface over candidate programs---their expected effects on acquisition, transfer, boundedness, and preservation---and selects a program before adaptation begins. Because this predicted geometry captures multiple behavioral consequences rather than a single winner or scalar score,
קרא במקור המקורי
arxiv.org
פתח כתבה מקורית