כתבה
arXiv cs.AI ·
EIO-Agents: שכבה סמנטית חסרה להערכת סוכנים AI
EIO-Agents: The Missing Semantic Layer for AI Agent Evaluation
EIO-Agents הוא מסגרת פתוחה להערכת סוכנים AI. היא כוללת שכבה סמנטית המגדירה את משמעות הראיות והחלטות. המערכת מאפשרת ניתוח ואימות עצמאי של הערכות.
תקציר מקורי באנגליתarXiv:2610.07675v1 Announce Type: new Abstract: AI agents are entering production in increasingly consequential environments without a shared semantic standard for what their evaluations actually mean. Scores, traces, judge outputs, and multi juror findings are increasingly used to justify readiness and release decisions, yet they often do not specify what evidence supports a claim, what that evidence can establish, or how the claim leads to a decision. We introduce EIO-Agents, an open specification for interoperable AI agent evaluation built on two layers. The Evaluation Intelligence Ontology (EIO) provides the semantic layer through typed evidence, versioned behavioral predicates, evidence contracts, claims, witness rules, proof status, recurrence, and computable derivations for metrics,
קרא במקור המקורי
arxiv.org
פתח כתבה מקורית