כתבה
arXiv cs.AI ·
הגיעו ל-CHOIR
Reach Into The CHOIR: Free-List Elicitation Uncovers Distinct Model Voices in LLM Ensembles
פותחים את CHOIR, שיטה לחשיפת קולות מודלים שונים באנסמבלים של LLM. השיטה משתמשת בשאילתות פתוחות ומדידות קונספטים. הניסויים הראו כי CHOIR יכול לחשוף הבדלים בין מודלים, גם כאשר הם נראים דומים.
תקציר מקורי באנגליתarXiv:2609.38448v1 Announce Type: new Abstract: Open-ended LLM homogeneity can create false plurality when several systems appear to offer independent perspectives while returning the same familiar default. Single-pass answers obscure the distinction between agreement produced by a tightly constrained answer space, prompt-vocabulary echo, and broader answer spaces with stable alternatives beneath the surface. We introduce CHOIR (Collective Hierarchically-Ordered Inquiry Responses), a framework that adapts free-list elicitation from cognitive anthropology to LLM ensembles. CHOIR repeatedly elicits ranked lists, clusters items into prompt-level concepts, and measures concept salience across models, prompt variants, and persona conditions. We evaluate CHOIR on Infinity-Chat 100, an external p
קרא במקור המקורי
arxiv.org
פתח כתבה מקורית