כתבה
arXiv cs.CL ·
SISER: זיהוי רגשות דיבור עם אימון אדוורסרי
SISER: Speaker-Invariant Speech Emotion Recognition with Entropy-Based Adversarial Training
SISER הוא אלגוריתם לזיהוי רגשות דיבור שמשתמש באימון אדוורסרי ומודלים מוכווני קול. הוא משתמש ב-Wav2Vec 2.0 ו-ECAPA-TDNN כדי לזהות רגשות בדיבור.
תקציר מקורי באנגליתarXiv:2609.02941v1 Announce Type: cross Abstract: Speech emotion recognition (SER) faces two fundamental challenges: scarcity of labeled data and inter-speaker variability, both of which hinder generalization of emotion recognition systems. While prior adversarial approaches address speaker variability, they fall short in leveraging powerful pre-trained representations. We propose SISER (Speaker-Invariant Speech Emotion Recognition), integrating wav2vec 2.0 as a feature encoder and ECAPA-TDNN as a speaker discriminator within an entropy-based adversarial training scheme. wav2vec 2.0 provides rich self-supervised representations that alleviate dependency on large labeled datasets, while ECAPA-TDNN enables suppression of speaker identity via a stronger adversarial signal than shallow classif
קרא במקור המקורי
arxiv.org
פתח כתבה מקורית