כתבה
arXiv cs.AI ·
לכיוון פתרון מתמטי תקין למודלי שפה קליניים
Towards a Deterministic Math Solver for Clinical Language Models
מפתחים פתרון מתמטי תקין למודלי שפה קליניים. הם משתמשים ב-Qwen2.5-7B ו-Qwen2.5-32B-AWQ כדי לבדוק את הפתרון. התוצאות הן 75.31% ו-90.53% בהתאמה.
תקציר מקורי באנגליתarXiv:2609.10728v1 Announce Type: new Abstract: Large language models are unreliable at arithmetic, which is a problem for clinical calculators where a single numerical error changes the recommendation. The standard response is to hardcode each calculator as a validated function, one at a time. We test an alternative: the model does not calculate. Instead, it writes case-specific Python that a restricted local executor runs as a deterministic solver, and the model's task reduces to deciding how to use it. We evaluate this Program-Solve interface on MedCalc-Bench Verified (1,100 cases, 55 calculators) against direct model arithmetic and a hand-written 22-calculator library, using Qwen2.5-7B and Qwen2.5-32B-AWQ, after auditing the benchmark's formulas against current clinical guidelines and
קרא במקור המקורי
arxiv.org
פתח כתבה מקורית