יום ראשון, 4 באוקטובר 2026 LIVE
AI־INFO

כתבה arXiv cs.LG ·

שני דרכים למרכז: חיפוש סידור וקריאת קודקס נפגשים במקום שבו למדען המתמשך יש להתמקד

Two Routes to the Middle: Placement Search and Brain Readouts Converge on Where Continual Learners Should Specialize
למדען המתמשך נמצא דרך סידור שבה הוא יכול להתמקד. חיפוש סידור וקריאת קודקס נפגשים במקום שבו הלמדען המתמשך יש להתמקד. נמצא דרך סידור שבה הוא יכול להתמקד.
תקציר מקורי באנגליתarXiv:2610.01590v1 Announce Type: new Abstract: Continual learners that keep a task-specific adapter in every block of a pre-trained vision transformer accumulate storage linearly with the number of tasks; keeping task-specific adapters in only a few blocks curbs this growth but raises the question of where to place them. We investigate this question from two perspectives. Algorithmically, training all contiguous four-block placements yields an inverted U: final accuracy peaks at intermediate depth and varies by up to 3.5 percentage points (pp), while inexpensive criteria based on weight spectra or activation statistics favor the deepest blocks. From neuroscience, the hierarchical organization and intermediate-stage plasticity of the visual cortex motivate us to ask whether a measurement t
קרא במקור המקורי