כתבה
arXiv cs.CL ·
IDRBench: הבנת יכולות של מודלי שפה גדולים במחקר מקצועי
IDRBench: Understanding the Capability of Large Language Models on Interdisciplinary Research
IDRBench הוא תקן חדש לבדיקת יכולות של מודלי שפה גדולים במחקר מקצועי. התקן כולל נתוני מחקר ומשימות בדיקה. ניתוח של 10 מודלי שפה גדולים הראה כי IDRBench הוא התקן הראשון שבודק את יכולות המודלים במחקר מקצועי.
תקציר מקורי באנגליתarXiv:2507.15736v4 Announce Type: replace Abstract: Innovation is a key driving force of human civilization. As the body of knowledge has grown considerably, bridging knowledge across different disciplines, where significant innovation often emerges, has become increasingly challenging. The recent advancements in machine learning models, particularly Large Language Models (LLMs), have provided effective access to extensive knowledge sources and shown impressive abilities in reasoning, rendering significant opportunities for interdisciplinary discovery. Our research aims to understand the capabilities of state-of-the-art LLMs in integrating knowledge from different fields for interdisciplinary research (IDR). To address this fundamental problem, we introduce IDRBench, a pioneering framework
קרא במקור המקורי
arxiv.org
פתח כתבה מקורית