כתבה
arXiv cs.CL ·
מדבר לעריכה: חקירה של הזיהוי של רגשות עם דגמי קונספט
From Speech to Editable Concepts: Probing Emotion Recognition with Concept Bottleneck Models
במאמר זה, חוקרים חקרו את השימוש בדגמי קונספט לזיהוי של רגשות. הם ניסו שלושה מודלי LLM שונים על ספריות קוראים שונות, ומצאו כי המודלים היו מושפעים קשות מהתרגום.
תקציר מקורי באנגליתarXiv:2609.39453v1 Announce Type: cross Abstract: Speech emotion recognition (SER) is the task of assigning emotion labels to utterances. Early systems relied on acoustic features, whereas recent approaches combine multiple modalities, most commonly speech and text. Still, performance remains poor on many datasets. Large language models (LLMs) have therefore attracted interest for SER, as they can process diverse inputs jointly with instructions. However, direct audio input raises questions of explainability. To address similar questions in image classification, concept bottleneck models were introduced. This work adapts concept bottlenecks to SER to examine how individual predictions depend on transcripts, acoustic descriptions and speaker attributes. Experiments test three LLMs on CREMA-
קרא במקור המקורי
arxiv.org
פתח כתבה מקורית