כתבה
arXiv cs.CL ·
WASIL: פעילויות דיבור ערביות באוויר הפתוח עם LLMs
WASIL: In-the-Wild Arabic Spoken Interactions with LLMs
WASIL: פעילויות דיבור ערביות באוויר הפתוח עם LLMs. המאמר מציג קבוצת ניסויים גדולה של פעילויות דיבור ערביות, כולל תרגילים, תגובות ודיווחי רצון/לא רצון. המאמר גם מציע כלי לבדיקה והערכה של תגובות LLMs.
תקציר מקורי באנגליתarXiv:2605.16364v3 Announce Type: replace-cross Abstract: Large Language Models (LLMs) voice assistants are commonly built as cascaded Automatic Speech recognition (ASR) to LLM systems, where recognition errors can distort user intent. Dislikes may also arise from ambiguous, out-of-domain, or non-request turns, making it hard to isolate ASR effects. We release WASIL (it denotes connection or linking in Arabic): in-the-wild Arabic spoken interaction prompts with audio, ASR hypotheses, assistant responses, and explicit like/dislike feedback (8,529 turns; 14.2% dislikes), plus a 2,000-turn test set covering Modern Standard Arabic (MSA) and four major dialects with their labels. We provide low-cost gold transcripts via multi-ASR agreement-guided post-editing and annotate answerability (answera
קרא במקור המקורי
arxiv.org
פתח כתבה מקורית