כתבה
arXiv cs.LG ·
סימטריות של פרמטרים מוכרות את הגאומטריה המייצגת ברשתות רב-ממדיות מעודנות
Parameter symmetries determine representational geometry in overparameterized nonlinear networks
סימטריות של פרמטרים מגדירות את הגאומטריה המייצגת ברשתות רב-ממדיות מעודנות. תוצאות אלו יכולות לסייע בהבנת הקשר בין גאומטריה מייצגת לבין החישוב שנעשה ברשתות אלו.
תקציר מקורי באנגליתarXiv:2609.39078v1 Announce Type: new Abstract: Representations are routinely used across machine learning, psychology, and neuroscience to draw inferences about the computations of biological and artificial systems. Such inferences presume a meaningful link between representational geometry and the computation being performed. For artificial neural networks, however, the extent to which function constrains representation remains unclear. One key obstacle is that these networks admit parameter symmetries: changes in parameterization that preserve function exactly while reshaping representational geometry. Here, we show that a broad class of parameter symmetries acts on representations through just three primitive feature transformations: addition, duplication, and scaling. This feature-lev
קרא במקור המקורי
arxiv.org
פתח כתבה מקורית