כתבה
arXiv cs.AI ·
ChartAnno: בדיקת דגמי שפה גדולים מודאליים לייצור תוויות תצוגה
ChartAnno: Benchmarking Multimodal Large Language Models for Chart Annotation Generation
בדיקת דגמי שפה גדולים מודאליים לייצור תוויות תצוגה. ChartAnno הוא תקן בדיקה חדש לבדיקת דגמי שפה גדולים מודאליים.
תקציר מקורי באנגליתarXiv:2608.03464v2 Announce Type: replace Abstract: Annotations are essential to communicative visualization, helping explain data, emphasize key findings, and guide attention. While multimodal large language models (MLLMs) offer new opportunities for automatic chart annotation authoring, their capabilities in this task remain underexplored. To address this gap, we introduce ChartAnno, a comprehensive benchmark for evaluating MLLMs on chart annotation generation. ChartAnno contains 1,200 real-world charts with paired annotated and unannotated executable code, along with 3,600 annotation instructions spanning three levels of specificity. We also develop a multidimensional evaluation framework combining rule-based and LLM-judged metrics to assess execution, structural compliance, semantic co
קרא במקור המקורי
arxiv.org
פתח כתבה מקורית