כתבה
arXiv cs.LG ·
TimeWarp: בדיקת סוכני רשת על ידי חזרה לעבר
TimeWarp: Evaluating Web Agents by Revisiting the Past
TimeWarp היא בדיקה של סוכני רשת שמדמה את האינטרנט המשתנה. המחקר מציג חידוש חדש בשם TimeTraj, שמאפשר לאסוף תספורת של סוכני רשת על ידי חזרה לעבר. המחקר נערך על ידי Qwen-3 4B ו-Llama-3.1 8B.
תקציר מקורי באנגליתarXiv:2603.04949v2 Announce Type: replace-cross Abstract: As web agents close the gap with humans on benchmarks, one question arises: Do today's agents perform just as well on tomorrow's web? We introduce TimeWarp, a benchmark that emulates the evolving web. TimeWarp consists of three web environments, each with six UI versions spanning UI design, frontend code, and workflows from different eras of the internet. We pair TimeWarp with a set of complex, realistic tasks covering different forms of web navigation. Our experiments reveal that vision-based agents are vulnerable to changes, while text-based agents become brittle once fine-tuned on a single version. To address this, we propose TimeTraj, a new annotation method that uses plan distillation to collect trajectories across multiple ver
קרא במקור המקורי
arxiv.org
פתח כתבה מקורית