כתבה
arXiv cs.LG ·
הצגת HALC: PipeLine כללי לבניית תבניות מערכתמיות ואמינות לקודים אוטומטיים עם LLMs במדעי החברה
Introducing HALC: A general pipeline for the systematic and reliable construction of prompts for automated coding with LLMs in the computational social sciences
HALC - PipeLine כללי לבניית תבניות מערכתמיות ואמינות לקודים אוטומטיים עם LLMs. החידוש: HALC מציע PipeLine כללי לבניית תבניות מערכתמיות ואמינות לקודים אוטומטיים עם LLMs. המחקר נערך במסגרת פרויקט של חברת Meta AI.
תקציר מקורי באנגליתarXiv:2507.21831v2 Announce Type: replace-cross Abstract: LLMs are seeing widespread use for task automation, including automated coding in the social sciences. However, even though researchers have proposed different prompting strategies, their effectiveness varies across LLMs and tasks. Often trial and error practices are still widespread. Our study aims to fill this gap and evaluate how LLMs can be used in a systematic and transparent way to produce reliable codings in content analyses. We propose HALC-a general pipeline that allows for the systematic and reliable construction of prompts for any given coding task and model. We develop this pipeline based on current literature and findings of a prestudy investigating consistency and influencing factors of LLM codings. We also apply HALC
קרא במקור המקורי
arxiv.org
פתח כתבה מקורית