כתבה
arXiv cs.AI ·
Ego2World: תיכון וידאו של סרטוני בישול לעולמות סימבוליים
Ego2World: Compiling Egocentric Cooking Videos into Executable Worlds for Belief-State Planning
Ego2World מתכנת וידאו של סרטוני בישול לעולמות סימבוליים שיכולים להיות מבוצעים. המערכת נועדה לבדוק את יכולתם של סוכנים לתכנן ולבצע פעולות בעולם שאינו מושלם. המאמר מציג כלי חדש לבדיקת סוכנים, המכונה Ego2World.
תקציר מקורי באנגליתarXiv:2605.13335v2 Announce Type: replace Abstract: Embodied agents in household environments must plan under partial observation: they need to remember objects, track state changes, and recover when actions fail. Existing benchmarks only partially test this ability. Egocentric video datasets capture realistic human activities but remain passive, while interactive simulators support execution but rely on synthetic scenes and hand-crafted dynamics, introducing a sim-to-real gap and often assuming fully observable state. We introduce Ego2World, an executable benchmark that turns egocentric cooking videos into executable symbolic worlds governed by graph-transition rules. Built on HD-EPIC, Ego2World derives reusable transition rules from video annotations and executes them in a hidden symboli
קרא במקור המקורי
arxiv.org
פתח כתבה מקורית