כתבה
arXiv cs.LG ·
SPICE: פירוש פשוט למאפיינים פוליסמנטיים דרך הקבצה של תיאורים
SPICE: Simple Polysemantic Feature Interpretation via Clustering-based Explanation
SPICE - פירוש פשוט למאפיינים פוליסמנטיים. המאמר עוסק בפיתוח פרקטיקה חדשה לניתוח פוליסמנטיות ברשתות עצביות. SPICE מאפשר חקירה מקיפה של פוליסמנטיות, ומציע פתרון לבעיית הפוליסמנטיות ברשתות עצביות.
תקציר מקורי באנגליתarXiv:2609.13198v1 Announce Type: new Abstract: One of the pivotal recent challenges in neural network interpretability is polysemanticity, where a single neuron is activated by multiple, often unrelated concepts, hindering clear functional understanding. Although prior work has explored this phenomenon, existing approaches remain architecture-specific and depend on manual heuristics such as a fixed number of concept clusters ($K$), limiting their generality and scalability--especially for modern Transformer-based models. To address these limitations, we introduce SPICE (\textbf{S}imple \textbf{P}olysemantic Feature \textbf{I}nterpretation via \textbf{C}lustering-based \textbf{E}xplanation), a generalizable framework for analyzing polysemanticity in deep vision architectures. SPICE avoids
קרא במקור המקורי
arxiv.org
פתח כתבה מקורית