כתבה
arXiv cs.AI ·
XAI-Arena: הערכת איכות הסברים XAI באמצעות LLMs
XAI-Arena: Can LLMs Assess the Quality of XAI Explanations?
XAI-Arena היא פלטפורמה להערכת איכות הסברים XAI. היא משתמשת ב-LLMs כדי לבצע הערכה רב-ממדית וניתנת לשחזור. הפלטפורמה מאפשרת השוואה בין שיטות XAI שונות ומודלים.
תקציר מקורי באנגליתarXiv:2609.09428v1 Announce Type: new Abstract: Evaluating the quality of explanations produced by explainable AI (XAI) methods remains challenging because existing approaches often rely on subjective human judgment, limiting reproducibility, scalability, and comparability between studies. We examine whether LLMs can serve as a reproducible and scalable mechanism to make comparative assessments of the quality of XAI explanations. We introduce XAI-Arena, an LLM-as-a-judge framework for scalable, reproducible, multidimensional, and stakeholder-sensitive evaluation of XAI explanation quality. XAI-Arena then allows us to compare XAI explanations along various dimensions, namely, perceived simplicity, clarity, task adequacy, trust calibration, actionability, transparency, faithfulness, and over
קרא במקור המקורי
arxiv.org
פתח כתבה מקורית