כתבה
arXiv cs.LG ·
אימות כיסוי תשתית בחבילות אימות סוכנים
Discriminating Fixture Coverage in Agent-Infrastructure Verification Suites
חוקרים בדקו את יעילות חבילות אימות לסוכנים, ומצאו שאימות סטנדרטי אינו מספיק. הם השתמשו בניתוח מוטציה כדי לבדוק את החבילה, וגילו שחסרים קלטים מסוימים. הם הוסיפו קלטים חדשים והשיגו תוצאות טובות יותר.
תקציר מקורי באנגליתarXiv:2610.02928v1 Announce Type: cross Abstract: Invariant suites and runtime monitors increasingly gate agent deployment decisions, and the evidence offered for any particular suite is almost always a single observation: it passes an implementation believed correct and fails one believed broken. We measure what that observation is worth. Applying mutation analysis to an invariant suite for a multi-session agent state-projection layer, we first find that this standard validation certifies a suite in which a first-order mutant removing event-identity deduplication survives every check. We then freeze the repaired twelve-check suite, record its hash, and run it once against ten mutants specified by an adversarial reader who designed none of its fixtures: it kills five. Instrumenting the fiv
קרא במקור המקורי
arxiv.org
פתח כתבה מקורית