כתבה
arXiv cs.CL ·
DiSCo: פלטפורמה לבדיקת טעמי תרבות ב-LLMs
DiSCo: A Distribution-First Steering and Cultural Prior Evaluation Framework for Measuring Cultural Preference Bias in LLMs
פלטפורמה לבדיקת טעמי תרבות ב-LLMs, כולל ניתוח של 6 מודלי LLM שונים. המחקר מצא שמודלים אלה נוטים להעדיף תרבויות מסוימות על פני אחרות, וכי פקטורים תרבותיים יכולים להשפיע על התנהגותם של LLMs.
תקציר מקורי באנגליתarXiv:2609.10253v1 Announce Type: new Abstract: Large language models (LLMs) are increasingly deployed in globally used assistants, yet their default choices in culturally grounded everyday situations can systematically favour some cultures over others, affecting localisation, user trust, and equitable behaviour. Existing cultural benchmarks evaluate accuracy against a single "correct" answer, making it difficult to characterise an LLM's cultural preference prior when multiple culturally grounded responses are all valid; they also conflate default preferences with context-driven adaptation. We propose DiSCo, a distribution-first forced-choice evaluation framework that isolates default cultural priors and tests steerability via a four-level context gradient (C0--C3). Using DiSCo-Bench (304
קרא במקור המקורי
arxiv.org
פתח כתבה מקורית