יום שלישי, 15 בספטמבר 2026 LIVE
AI־INFO

כתבה arXiv cs.LG ·

התכנסות, עיצוב ואימון של דיפרופט רציף כאפרוקסימציה של תפוקה תאורטית

Convergence, design and training of continuous-time dropout as a random batch method
במאמר זה, המחברים חקרו דיפרופט רציף כאפרוקסימציה של תפוקה תאורטית. הם הציגו אפרוקסימציה של תפוקה תאורטית, שבה כל תפוקה תאורטית נחלקת לשני חלקים: חלק רציף וחלק דיסקרטי. המחברים הראו שהאפרוקסימציה של תפוקה תאורטית יכולה להפחית את הטעות של המודל באופן יעיל.
תקציר מקורי באנגליתarXiv:2510.13134v2 Announce Type: replace Abstract: We study continuous-time dropout in controlled differential equations. We introduce a random-batch approximation of additive vector fields. On each time interval of length $h$, a random subset of components is activated and rescaled by its inclusion probabilities, yielding an unbiased approximation of the full field. We prove a uniform-in-time mean-square trajectory error of order $\mathcal O(h)$. At the distribution level, we derive Wasserstein and pointwise density estimates, together with global $L^1$ bounds under moment assumptions. For supervised training, we prove uniform $\mathcal O(\sqrt h)$ root-mean-square fluctuations of the randomized objective and an $\mathcal O(h)$ weak error for its expectation, leading to consistency of op
קרא במקור המקורי