כתבה
arXiv cs.LG ·
כאשר התשובה הנכונה חסרה: צינת הדחה אריתמטית-תלויה ב-Jev
When the Right Answer Is Missing: An Arithmetic-Dependent Rejection Bottleneck in Jev
נמצאה צינת דחה אריתמטית-תלויה ב- Jev, דגם החלטי טיפוס. כאשר התשובה הנכונה חסרה, Jev נוטה לקבל תשובות שגויות. נראה שצינת הדחה יכולה להיות מוגברת על ידי קביעת סף החלטה.
תקציר מקורי באנגליתarXiv:2609.39496v1 Announce Type: new Abstract: Typed decision models such as Jev offer an efficient alternative to generative LLMs in decision-making workflows by selecting directly from predefined options. When candidate sets contain no valid answer, TypeSafe recommends including an "other" or "none-of-the-above" option to enable rejection. In this report, however, we identify an arithmetic-dependent rejection bottleneck: Jev reliably selects correct numerical answers when available but frequently accepts incorrect alternatives when they are absent despite an explicit rejection option. On paired arithmetic problems, answer-present accuracy reaches 99%, while correct rejection falls to 7%. Moreover, this gap persists across numerical magnitudes, operation depths, contextual formulations,
קרא במקור המקורי
arxiv.org
פתח כתבה מקורית