יום שישי, 9 באוקטובר 2026 LIVE
AI־INFO

כתבה arXiv cs.CL ·

פסק דין ללא כלל

Verdict Without the Rule: Diagnosing and Auditing Regulatory Rule Sensitivity in LLM Compliance Systems
מערכות ציות ל-LLM מותקנות בהנחה שפסק דין תלוי בכלל הרגולטורי שניתן. מחקר זה בודק תפיסה זו בחמישה מודלים ו-20 תחומים שונים. התוצאות מראות כי המודלים אינם משנים את פסק הדין אפילו כאשר הכלל הרגולטורי משתנה.
תקציר מקורי באנגליתarXiv:2610.12313v1 Announce Type: cross Abstract: Large language model compliance systems are deployed on the assumption that a verdict depends on the regulatory rule it is given. We test this directly across five models and 20 regulatory and platform-policy domains: delete, swap, or negate the governing rule while holding the case fixed, and check whether the verdict changes (OCS) or the model's internal representation of compliance shifts at all (ICS-delta). Neither moves much: models' verdicts are often invariant to substantial perturbations of the supplied rule, and the guard model, evaluated here under a custom-rule adaptation of its native taxonomy, is the least rule-sensitive and least accurate of the five, barely above chance (51%, versus 90-92% for general-purpose models). This re
קרא במקור המקורי