כתבה
arXiv cs.LG ·
כמה רחוק מגיע מפתח ליניארי משותף?
How Far Does a Shared Linear Map Go? Probing Feature-Space Manipulability for Image Editing
חוקרים בדקו כיצד שינויים בתמונות משפיעים על ייצוגים פנימיים של מודלים. הם מצאו שמפתח ליניארי משותף יכול לתאר שינויים רבים בתמונות, כולל שינויים גאומטריים וסמנטיים. המחקר בודק את היכולת של מודלים כמו ConvNeXt, SwinV2 ו-DINOv3 ללמוד מפתחות ליניאריים משותפים.
תקציר מקורי באנגליתarXiv:2605.11203v2 Announce Type: replace Abstract: Understanding how image-space transformations manifest in a model's internal representations is a longstanding goal in representation analysis. Prior work has shown that geometric transformations can often be captured by learned linear operators between feature maps, but it remains unclear whether this extends to photometric, local, and semantically defined edits. We train probes of increasing capacity from a spatially shared linear map to nonlinear per-vector, receptive-field, and global transformer models to predict feature-space changes induced by geometric transforms, photometric edits, occlusions, and diffusion-generated semantic edits. Across ConvNeXt, SwinV2, and DINOv3, a single shared linear map often predicts held-out manipulati
קרא במקור המקורי
arxiv.org
פתח כתבה מקורית