כתבה
arXiv cs.LG ·
Bergson: ספרייה קוד פתוח לניתוח נתונים
Bergson: An Open Source Library for Data Attribution
Bergson היא ספרייה קוד פתוח לניתוח נתונים, המאפשרת הבנה טובה יותר של התנהגות המודל. היא כוללת שלוש שיטות חדשניות: MAGIC, SOURCE ו-TrackStar. הספרייה זמינה ב-GitHub.
תקציר מקורי באנגליתarXiv:2606.11660v4 Announce Type: replace Abstract: Data attribution is a promising field in interpretability that aims to explain model behavior through the influence of its training data, with applications including debugging undesirable model behavior and training dataset curation. However, significant engineering effort is required to perform it at scale, and many cutting edge techniques lack open-source tooling and support. Bergson is an open source library that aims to enable faster progress in the field by providing a host of techniques that scale to very large language models and pre-training datasets. The library natively supports on-disk gradient stores and multi-node distributed training, and provides quality of life tools for researchers. Finally, we introduce the first open-so
קרא במקור המקורי
arxiv.org
פתח כתבה מקורית