כתבה
arXiv cs.CL ·
בניית בקבוק צוואר בJev
When the Right Answer Is Missing: An Arithmetic-Dependent Rejection Bottleneck in Jev
חוקרים גילו בקבוק צוואר בJev, מודל קבלת החלטות, שגורם לו לבחור בתשובות שגויות כאשר התשובה הנכונה אינה קיימת. המחקר מראה שניתן לשפר את הדיוק על ידי התאמת סף החלטה.
תקציר מקורי באנגליתarXiv:2609.39496v1 Announce Type: cross Abstract: Typed decision models such as Jev offer an efficient alternative to generative LLMs in decision-making workflows by selecting directly from predefined options. When candidate sets contain no valid answer, TypeSafe recommends including an "other" or "none-of-the-above" option to enable rejection. In this report, however, we identify an arithmetic-dependent rejection bottleneck: Jev reliably selects correct numerical answers when available but frequently accepts incorrect alternatives when they are absent despite an explicit rejection option. On paired arithmetic problems, answer-present accuracy reaches 99%, while correct rejection falls to 7%. Moreover, this gap persists across numerical magnitudes, operation depths, contextual formulations
קרא במקור המקורי
arxiv.org
פתח כתבה מקורית