כתבה
arXiv cs.AI ·
חשוב מחדש אמינות תצורה באנליזה של רגשות מרוב-תצורה עם תצפיות לא מלאות
Rethinking Modality Reliability in Multimodal Sentiment Analysis with Incomplete Observations
במאמר זה, המחברים חושבים מחדש את אמינות התצורה באנליזה של רגשות מרוב-תצורה עם תצפיות לא מלאות. הם מציגים פרקטיקה חדשה שמעריך את אמינות התצורה בכל דגימה ומשתמש בה לשיפור האנליזה.
תקציר מקורי באנגליתarXiv:2608.03611v3 Announce Type: replace Abstract: Multimodal Sentiment Analysis (MSA) integrates text, audio, and vision to infer human affect, yet real-world multimodal observations are often incomplete. Existing methods for incomplete-observation MSA mainly follow two paradigms. Reconstruction-based methods recover missing information from observed modalities, while joint-representation methods learn directly from incomplete inputs. Although effective, these methods usually treat modality reliability only implicitly within representation learning or fusion design rather than modeling it explicitly. We argue that modality reliability is a central variable in incomplete-observation settings. Failure to model it explicitly gives rise to two related issues. The first is reliability mismatc
קרא במקור המקורי
arxiv.org
פתח כתבה מקורית