כתבה
arXiv cs.AI ·
RAGScope: תקן לבקרת חדירה, זול ומבוקר, לפרוטוקול של גייטינג ראיות ל-RAG
RAGScope: A Leakage-Controlled, Cost-Aware Evidence-Gating Protocol for RAG Hallucination Triage
RAGScope: תקן לבקרת חדירה, זול ומבוקר, לפרוטוקול של גייטינג ראיות ל-RAG. התקן משתמש בפרוטוקול של גייטינג ראיות שמשתמש בקלט, במידע שנלקח מהמקור, ובטקסט התשובה. התקן נבדק בשלושה תרגילי RAGTruth והציג תוצאות טובות.
תקציר מקורי באנגליתarXiv:2609.39075v1 Announce Type: cross Abstract: Retrieval-augmented generation (RAG) systems need inexpensive ways to route generated answers: accept low-risk outputs, review uncertain ones, and reserve strong verifiers for the expensive tail. We present RAGScope, a leakage-controlled protocol for evaluating local evidence gates that use only the task input, retrieved context, and answer text. The protocol combines context-grouped splits, fold-scoped preprocessing, group bootstrap intervals, deployment operating points, end-to-end runtime, and explicit source-shift stress tests. On three RAGTruth tasks, the enhanced gate RAGScope-E reaches 0.798 AUROC and 0.660 average precision (AP) in pooled grouped cross-validation. Its pooled AP exceeds ROUGE-L by 0.034 with a 95% context-group inter
קרא במקור המקורי
arxiv.org
פתח כתבה מקורית