כתבה
arXiv cs.LG ·
SimplexUQ: פלטפורמה לבדיקה ולהשוואה של חוסר הוודאות של תחושות קלאסיות
SimplexUQ: An Evaluation Framework and Benchmark for Conformal Uncertainty on Simplex-Valued Predictions
פלטפורמה לבדיקה ולהשוואה של חוסר הוודאות של תחושות קלאסיות. המאמר עוסק בפיתוח של SimplexUQ, פלטפורמה לבדיקה ולהשוואה של חוסר הוודאות של תחושות קלאסיות. הפלטפורמה כוללת תרגילים סינתטיים ואמיתיים, ומאפשרת השוואה של חוסר הוודאות של תחושות קלאסיות בין שונות שונות.
תקציר מקורי באנגליתarXiv:2610.00523v1 Announce Type: new Abstract: Conformal prediction guarantees marginal coverage, but a single calibration threshold can still spread that coverage unevenly, over-covering easy regions and under-covering hard ones. SimplexUQ is, to our knowledge, the first benchmark and reproducible protocol for measuring this allocation problem on simplex-valued predictions; it compares existing conformal wrappers rather than proposing a new one. Its task suite, SimplexTasks-12, combines six controlled synthetic regimes with six frozen-predictor real tasks spanning class probabilities, topic mixtures, spectral abundances, cell-type fractions, age distributions, and emotion mixtures. Each comparison fixes the predictor, score, and response-free stratification map, varies only the wrapper,
קרא במקור המקורי
arxiv.org
פתח כתבה מקורית