כתבה
arXiv cs.CL ·
OMIT: מדידת הטיה של השמטה
OMIT the Action: Measuring Framing-Invariant Omission Bias under Philosophical Disagreement
OMIT הוא בנק אמת מורכב מ-218 סצנריות מסוגרות, שנועד לבדוק הטיה של השמטה במודלים כמו LLaMA ו-GPT. המחקר מצא שהטיה זו נפוצה אך מושפעת מגודל המודל.
תקציר מקורי באנגליתarXiv:2610.07847v1 Announce Type: new Abstract: As LLMs increasingly assist in moral reasoning, omission bias, the tendency to prefer inaction even when equivalent framings reverse substantive outcomes, poses a significant risk of skewed decision-making. Yet omission bias remains underexplored in LLM evaluation, with the few existing studies limited in scale and focused largely on utilitarian-deontological conflicts. To address this gap, we introduce OMIT, a benchmark consisting of 218 paired-frame scenarios across 10 conflict types, constructed by leveraging disagreement patterns from an LLM-based, five-perspective philosophical persona panel (utilitarianism, deontology, virtue ethics, care ethics, and contractualism). Evaluating eight LLMs, we find that omission bias is pervasive but inv
קרא במקור המקורי
arxiv.org
פתח כתבה מקורית