כתבה
arXiv cs.AI ·
מעקבים חזקים ויעילים עם נימוקים לטנטיים
Robust and Efficient Guardrails with Latent Reasoning
COLAGUARD הוא מודל שמשפר את הבטיחות של מודלי שפה גדולים. הוא משתמש בנימוקים לטנטיים כדי לשפר את הבטיחות ולהקטין את העיכוב. COLAGUARD מתעלה על Llama Guard 3 ומשווה ל-GuardReasoner ברמת הבטיחות, תוך כדי הגברת המהירות והיעילות.
תקציר מקורי באנגליתarXiv:2605.29068v2 Announce Type: replace Abstract: Maintaining the safety of large language models (LLMs) is crucial as they are increasingly deployed in real-world applications. Existing safety guardrails typically rely on single-pass classification or, more recently, distilled reasoning. Reasoning-based guardrails significantly outperform classification-only baselines, but they incur substantial query latency and token overhead that make them impractical for highthroughput deployment. To address this challenge, we propose COLAGUARD, a guardrail model that transfers multi-step safety reasoning into a continuous latent space through a stage-wise training curriculum, enabling direct hidden-state propagation at inference. Evaluated on ten prompt- and response-moderation settings spanning ei
קרא במקור המקורי
arxiv.org
פתח כתבה מקורית