יום שישי, 31 ביולי 2026 LIVE
AI־INFO

כתבה arXiv cs.LG ·

החלקה אופטימלית של רעש לאימון דיפוזיה

From Atoms to Entropy: Optimal Noise Allocation for Diffusion Training in the Convex Regime
פותח כלי להחלקה אופטימלית של רעש לאימון מודלים דיפוזיים. המחקר מציג שיטה סטטיסטית לאימון מודלים עם רעש מותאם. התוצאות מראות שיפור ביעילות האימון.
תקציר מקורי באנגליתarXiv:2607.20540v1 Announce Type: new Abstract: How should a diffusion model decide which noise levels to train on, and how much? Despite the importance of this choice, current noise schedules are based largely on heuristics or empirical tuning. Here, we develop a general statistical framework for studying asymptotically optimal noise-level allocation in diffusion training. Our first main result concerns the fully coupled regime, where information can spread between different time points. Under convexity or Polyak-Lojasiewicz-type assumptions, we show that the optimized training schedule admits an atomic minimizer, concentrated on finitely many noise levels. Our second main result specializes this framework to an idealized independent-learner regime, intended to model temporal specializati
קרא במקור המקורי