כתבה
arXiv cs.LG ·
מחקר אוטומטי בקנה מידה תעשייתי
AutoResearch at Production Scale: Failure Modes and a Multi-Agent Framework
חוקרים פיתחו שיטה למחקר אוטומטי בקנה מידה תעשייתי, המשתמשת במודלים גדולים לשיפור מערכות המלצה. השיטה זיהתה חמישה מצבי כשל ופיתחה פתרונות להם.
תקציר מקורי באנגליתarXiv:2609.30541v1 Announce Type: new Abstract: Optimizing embedding systems for production recommendation pipelines demands systematic exploration that consumes disproportionate engineering effort at scale. We apply Andrej Karpathy's AutoResearch paradigm -- a large language model that iteratively edits a training script and retains modifications that improve a held-out scalar metric -- to automate this exploration. We report on twelve weeks of running this paradigm at production scale, where iterations consume hours of multi-GPU compute, evaluation involves competing criteria, and campaigns span weeks across many training jobs. Across two independently developed representation-learning systems for a book recommendation pipeline, we ran 220+ experiments and observed five recurring failure
קרא במקור המקורי
arxiv.org
פתח כתבה מקורית