כתבה
arXiv cs.AI ·
BGM2Pose: אסטימציה 3D של מיקום אדם פעילה באמצעות צלילי שירה לא תחושיים
BGM2Pose: Active 3D Human Pose Estimation with Non-Stationary Sounds
BGM2Pose היא שיטה לאסטימציה 3D של מיקום אדם פעילה, המשתמשת בצלילי שירה לא תחושיים כאותות חסיני-מגע. השיטה עובדה על צלילי שירה רגילים, שהם קשים לעיבוד יותר מאשר צלילי חצוצרה רגילים. BGM2Pose כוללת יחידה להפרדת מיקום, המשתמשת בלמידה חסינת-מגע ובחירת-שלילה-חדה להסרת חלקי השיר. השיטה גם כוללת יחידה לתשומת-לב-על-פולס, המאפשרת למודל להתמקד בשינויים קטנים בצליל, הקשורים לתנועות האדם. ניסויים הראו ש-BGM2Pose עובדה טוב יותר משיטות אחרות, והיא עשויה להיות רלוונטית ליישומים רבים.
תקציר מקורי באנגליתarXiv:2503.00389v2 Announce Type: replace-cross Abstract: We propose BGM2Pose, a non-invasive 3D human pose estimation method using arbitrary music (e.g., background music) as active sensing signals. Unlike existing approaches that significantly limit practicality by employing intrusive chirp signals within the audible range, our method utilizes natural music that causes minimal discomfort to humans. Estimating human poses from standard music presents significant challenges. In contrast to sound sources specifically designed for measurement, regular music varies in both volume and pitch. These dynamic changes in signals caused by music are inevitably mixed with alterations in the sound field resulting from human motion, making it hard to extract reliable cues for pose estimation. To addres
קרא במקור המקורי
arxiv.org
פתח כתבה מקורית