כתבה
arXiv cs.AI ·
הצגה חברתית: בירור התאמה של AI לקבוצות סוציודמוגרפיות
Sympathetic Framing: Evaluating AI Alignment across Sociodemographic Groups
במחקר זה, נבדקה התאמת AI להבנת הרגשות האנושיים. התוצאות הראו שהדגמים הטובים ביותר תואמו את ההערכות האנושיות, אך עדיין יש חלקי תאמה שונים בין הקבוצות השונות.
תקציר מקורי באנגליתarXiv:2607.27232v2 Announce Type: replace-cross Abstract: Large Language Models (LLMs) are increasingly shaping how we consume information and form our worldview. This raises concerns beyond bias in AI: do LLMs grasp the emotional nuances conveyed via textual framing? In this work, we empirically evaluate how well an array of LLMs aligns with human emotional perception. Considering news headlines covering political and geopolitical conflicts, both human participants (n = 3011, a representative sample of the U.K. adult population, via a YouGov survey) and seven LLMs answered whether headlines evoked sympathy for a specified side in a conflict. We find that the correlation between AI and human evaluations varies across models, ranging from very high (0.789, GPT-5.2) to medium (0.4 ,Mistral L
קרא במקור המקורי
arxiv.org
פתח כתבה מקורית