כתבה
arXiv cs.AI ·
OmegaUse-SOP: הכנה מובנית לפעילות מחשבים מאתרי אדם
OmegaUse-SOP: SOP Engineering for Professional Computer Use from Human Demonstrations
מערכת OmegaUse-SOP מאפשרת הכנה מובנית של פעילות מחשבים מאתרי אדם למיומנויות GUI שיכולות להיות מורצות בסביבות GUI. המערכת כוללת ארבעה חלקים: צפייה, תפיסה, הגדרה וביצוע. OmegaUse-SOP נבחנה בסביבת PVsyst 7.2 והתוצאות הראו שהיא יכולה לשפר אמינות GUI-agent במשימות SOP מקצועיות.
תקציר מקורי באנגליתarXiv:2609.02149v3 Announce Type: replace-cross Abstract: Large language models (LLMs) are increasingly evolving from conversational assistants into agents capable of operating external digital environments. Graphical user interface (GUI) agents play an important role in this transition, as many real-world workflows remain accessible only through user-facing software interfaces. However, despite recent progress on general computer-use benchmarks, domain-specific professional standard operating procedures (SOPs) remain challenging for GUI agents because they often involve implicit domain knowledge, software-specific conventions, and task-level verification requirements. We introduce OmegaUse-SOP, a human-in-the-loop SOP Engineering system for transforming human demonstrations of professiona
קרא במקור המקורי
arxiv.org
פתח כתבה מקורית