כתבה
arXiv cs.CL ·
ESCUCHA: בחינת הבנת שפה ספרדית בתנאים אקוסטיים מגוונים
ESCUCHA: A Spanish Speech Benchmark for Heterogeneous Acoustic Conditions
ESCUCHA היא בחינה להבנת שפה ספרדית בתנאים אקוסטיים מגוונים. היא כוללת 1,000 שאלות עם אודיו, ומדגישה תהליכי גישוש והיגיון. הבחינה נועדה להעריך מודלים שונים של שפה ואודיו.
תקציר מקורי באנגליתarXiv:2607.17812v1 Announce Type: new Abstract: As large audio language models (LALMs) advance, robust evaluation frameworks have become essential. In this context, Spanish speech understanding under realistic acoustic conditions has received particularly little attention. We introduce ESCUCHA, the first Spanish speech understanding benchmark designed to evaluate LALMs across heterogeneous acoustic conditions and reasoning abilities. ESCUCHA comprises 1,000 human-curated questions paired with audio, totaling 162.9 hours sourced directly ``from the wild'' rather than drawn from existing datasets, with durations ranging from a few seconds to over 80 minutes. The benchmark emphasizes reasoning, spanning 9 perceptual and 10 reasoning categories, and it captures linguistic diversity through mul
קרא במקור המקורי
arxiv.org
פתח כתבה מקורית