כתבה
arXiv cs.CL ·
ArgGYM: בנצ'מרק פרוצדורלי לתיבת נימוקים חזקה
ArgGYM: A Procedural, Engine-Verified Benchmark for Structured Defeasible Reasoning
ArgGYM הוא בנצ'מרק פרוצדורלי לתיבת נימוקים חזקה, המאפשר הערכה ואימון של מודלים. הוא כולל 1,440 מקרי בדיקה מאומתים ומנוע טיעונים סמלי. ArgGYM מיועד לבדיקת יכולות הנימוק של מודלים במצבים מורכבים.
תקציר מקורי באנגליתarXiv:2609.38409v1 Announce Type: cross Abstract: Recent progress in large language model reasoning has been driven by benchmarks and reinforcement learning environments with automatically verifiable rewards, particularly in mathematics, code, and formal logic. These settings make model accuracy easier to evaluate and optimize, but it remains unclear how far success under fixed problem specifications and stable evaluation criteria transfers to reasoning outside such domains. Real-world reasoning often proceeds under incomplete and revisable information: conclusions may be supported provisionally, defeated by counter-evidence, reinstated by further arguments, or revised when stronger reasons become available. Reasoning of this kind is generally referred to as defeasible reasoning. We introd
קרא במקור המקורי
arxiv.org
פתח כתבה מקורית