כתבה
arXiv cs.CL ·
הפער ב间 גיוון שטחי וגיוון רמת גישה בתהליכי היגיון מתמטי של LLM
Are We Measuring Strategy or Phrasing? The Gap Between Surface- and Approach-Level Diversity in LLM Math Reasoning
חוקרים גילו פער ב间 גיוון שטחי וגיוון רמת גישה בתהליכי היגיון מתמטי של LLM. המחקר מציג את המושג 'גיוון רמת גישה' ומראה כי אמצעי מדידה קיימים אינם משקפים נכון את הגיוון ברמת הגישה.
תקציר מקורי באנגליתarXiv:2606.29985v2 Announce Type: replace Abstract: Diversity in LLM mathematical reasoning is critical for exploration, but common diversity metrics mostly capture surface-level variation rather than differences in how a problem is solved. We address this gap by introducing approach-level diversity: variation in strategies across correct solutions to the same problem. Using a human-calibrated LLM judge framework, we show that prior diversity measures are unreliable proxies for approach-level diversity, and this mismatch carries over to diversity-aware RLVR, where target metrics are preserved while approach-level diversity declines. Investigating when approach-level diversity helps and whether it can be directly induced, we find that approach-diverse candidate sets improve test-time scalin
קרא במקור המקורי
arxiv.org
פתח כתבה מקורית