יום שלישי, 15 בספטמבר 2026 LIVE
AI־INFO

כתבה arXiv cs.LG ·

אימון בזמן המבחן משפר את הלמידה במקום

Test time training enhances in-context learning of nonlinear functions
אימון בזמן המבחן משפר את הלמידה במקום של פונקציות לא-רגליות. המחקר חוקר את השילוב של אימון בזמן המבחן עם למידה במקום, שבה המודל נתון דוגמאות מהתפוצה המטרה בזמן המבחן. התאוריה מציגה גבול עליון על הסיכון של התחזית. התאוריה מציגה גבול עליון על הסיכון של התחזית.
תקציר מקורי באנגליתarXiv:2509.25741v3 Announce Type: replace-cross Abstract: Test-time training (TTT) enhances model performance by explicitly updating designated parameters prior to each prediction to adapt to the test data. While TTT has demonstrated considerable empirical success, its theoretical underpinnings remain limited, particularly for nonlinear models. In this paper, we investigate the combination of TTT with in-context learning (ICL), where the model is given a few examples from the target distribution at inference time. We analyze this framework in the setting of single-index models, where the feature vector is drawn from a hidden low-dimensional subspace. For single-layer transformers trained with gradient-based algorithms and adopting TTT, we establish an upper bound on the prediction risk. Ou
קרא במקור המקורי