כתבה
arXiv cs.AI ·
כאשר ממשקי המשתמש מדברים: תשתית ייצור UI-Data Aware לאינטראקציה פעילה
When Interfaces Speak: Data-Aware Generative UI Harness for Active Interaction
תשתית ייצור UI נתמכת נתונים לאינטראקציה פעילה בין בני אדם לאגנטים. התשתית כוללת כלי טול וכלי קודר GUI שמזהים עיוותים ויוצרים קוד קדמי לממשקי UI מבנים. התשתית נבחנה בבנך UI-TAU, שכולל 10 מאגרי נתונים ממקורים ציבוריים. התשתית הציגה תוצאות טובות בהשוואה למודלים קדמיים.
תקציר מקורי באנגליתarXiv:2610.11123v1 Announce Type: new Abstract: Most human-agent interaction today remains text-based. Natural language can impose cognitive overload, ambiguity, information chaos, and slow input for complex tasks; ephemeral generative UIs can present structured information and guide users toward task completion. We propose GenUI-Harness, a multi-agent harness pairing a Tool Agent for information retrieval and task execution with a GUI Coder Agent that identifies ambiguities and generates front-end code for structured interfaces. Training the coder with reinforcement learning is challenging: verifiable rewards for interactive UI generation require costly execution, while LLM-as-a-Judge rewards are prone to reward hacking. We address the first challenge with Dynamic UX, a lightweight packag
קרא במקור המקורי
arxiv.org
פתח כתבה מקורית