כתבה
arXiv cs.CL ·
החלפת ציטוטים עם מספר זהה: בדיקת סבלנות של Jev כשופט ראיות פיננסיות
Same-Number Citation Swaps: Stress-Testing Jev as a Financial Evidence Judge
במאמר זה, נבדק Jev כשופט ראיות פיננסיות לטובת חישובי GPT-4.1-mini. נבחן את התוספת של וריפיקציה של ראיות סבירות כשמתאימות ספרותית נשמרת.
תקציר מקורי באנגליתarXiv:2610.08675v1 Announce Type: new Abstract: Financial reports repeat values across periods, metrics and accounting lines, allowing an LLM-generated calculation to be numerically correct while citing the wrong financial role. We evaluate what probabilistic evidence verification adds beyond number matching using Jev as a source-support verifier for GPT-4.1-mini calculation traces. A signed-number-at-pointer baseline explains most recovery over exact quotation checks. To isolate the remaining role-recognition problem, we hold operands and arithmetic fixed, move citations between same-number cells, and retain controls that express equivalent facts. These contrasts reveal both wrong-role citations that pass and valid alternative citations that are withheld. Explicit column labels improve se
קרא במקור המקורי
arxiv.org
פתח כתבה מקורית