כתבה
arXiv cs.CL ·
מדידת השפעה פרגמטית בהנחיות מודלי שפה גדול
Measuring Pragmatic Influence in Large Language Model Instructions
במאמר זה נחקרה השפעה פרגמטית של הנחיות על מודלי שפה גדולים. נמצא כי פרגמטיקה יכולה לשנות את התנהגות המודל, וזאת ללא שינוי בתיאור המשימה. המחברים פיתחו תקן למדידת השפעה פרגמטית, ובאמצעותו נמצא כי כל המודלים המבודדים היו רגישים להשפעה זו.
תקציר מקורי באנגליתarXiv:2602.21223v2 Announce Type: replace Abstract: It is not only what we ask large language models (LLMs) to do that matters, but also how we ask them. Phrases like ``This is urgent'' or ``As your supervisor'' can shift model behavior without altering task content. We study this effect as pragmatic framing, contextual cues that shape directive interpretation rather than task specification. While prior work exploits such cues for prompt optimization or probes them as security vulnerabilities, pragmatic framing itself has received comparatively little attention as a target of controlled measurement in instruction following. To support its systematic study as a measurable property, we introduce a framework that combines three components: directive-framing decomposition separating framing co
קרא במקור המקורי
arxiv.org
פתח כתבה מקורית