כתבה
arXiv cs.CL ·
הבקעה הסמנטית: שימוש בייצוגים סמנטיים לפיענוח דיבור לא-לא-אינוואסיבי
The Semantic Bottleneck: Leveraging Semantic Representations for Non-Invasive Speech Decoding
במאמר זה, המחברים מציגים שיטה חדשה לפיענוח דיבור לא-לא-אינוואסיבי, המשתמשת בייצוגים סמנטיים. השיטה, הקרויה Brain2Semantics2Text, מסוגלת לשחזר טקסט דרך ייצוג סמנטי. המחברים מציגים את העקרונות המרכזיים של השיטה, ומשווים אותה לשיטות קודמות לפיענוח דיבור לא-לא-אינוואסיבי.
תקציר מקורי באנגליתarXiv:2609.10296v1 Announce Type: new Abstract: Non-invasive speech decoding remains constrained by the low signal-to-noise ratio of neural recordings, which makes fine-grained reconstruction of phonemes or individual words difficult. Motivated by neuroscientific evidence that high-level semantic representations are distributed across cortical regions and evolve over slower temporal scales, we hypothesize that semantic content may provide a more suitable target for non-invasive decoding than low-level acoustic or lexical features. We introduce Brain2Semantics2Text, a method that reconstructs text through an intermediate semantic embedding space. Our model maps sentence-level MEG responses into a semantic manifold and then inverts the predicted embeddings into natural language. This semanti
קרא במקור המקורי
arxiv.org
פתח כתבה מקורית