יום שישי, 31 ביולי 2026 LIVE
AI־INFO

כתבה arXiv cs.CL ·

מבחן רב-דקות לניתוח אירועים במודלים גדולים

From Single- to Cross-Document: Benchmarking Multi-Granularity Event Analysis of Large Language Models
חוקרים פיתחו את MiGUE-Bench, מבחן רב-דקות לניתוח אירועים במודלים גדולים. המבחן בודק את היכולת של מודלים כמו LLaMA לזהות, לנתח ולחזות אירועים ברמות שונות של פירוט.
תקציר מקורי באנגליתarXiv:2607.27654v1 Announce Type: new Abstract: Event analysis is an essential and fundamental direction of information extraction, involving various event-centric tasks at different granularity of documents. While large language models (LLMs) have preliminarily achieved promising performance in part of these tasks individually, their capability in event analysis still lacks comprehensive understanding due to restricted document granularity, task designs, and data source of existing benchmarks. To address these limitations, we introduce MiGUE-Bench, a systematic benchmark for assessing the performance of LLMs in multi-granularity event analysis. To support large-scale evaluation, we first develop an LLM-driven self-correcting annotation framework called MiGUE-Pipeline, enabling scalable ac
קרא במקור המקורי