כתבה
arXiv cs.CL ·
EngiWorld: מה יכולים סוכני גבול להציע בסביבות הנדסה מקצועיות?
EngiWorld: What Can Frontier Agents Deliver in Professional Engineering Environments?
EngiWorld הוא המבחן הראשון שנוצר סביב הלולאה המלאה של תכנון הנדסי: 1,301 משימות שנקבעו על ידי מומחים, 6 תחומי הנדסה (CAD, CAE, CAM, BIM, EDA, ו-3D תצוגה) ו-26 תוכנות הנדסה מקצועיות, עם גיאומטריה ופיזיקה של תכנון וביצוע.
תקציר מקורי באנגליתarXiv:2609.37686v1 Announce Type: cross Abstract: Autonomous agents have made rapid progress in general-purpose computer use, but reliable automation of professional industrial engineering remains out of reach, as engineering workflows demand reasoning over geometric and physical constraints and dependencies preserved across software and design stages. We present EngiWorld, the first benchmark structured around the complete design loop: 1,301 expert-curated tasks spanning 6 engineering domains (CAD, CAE, CAM, BIM, EDA, and 3D visualization) and 26 professional software platforms, with both GUI and CLI interfaces and 6 task types ranging from software-selection to open-ended tasks. We further introduce an artifact-centric evaluation methodology built on a unified domain-verifier suite, whic
קרא במקור המקורי
arxiv.org
פתח כתבה מקורית