כתבה
arXiv cs.CL ·
שפה נושאת את רושם המומחה
Language Carries the Expert's Impression: Instrument-Anchored LLM Judges Transfer Counseling-Quality Assessment and Beat In-Domain Training
חוקרים בדקו העברה בין-תחומית של חיזוי רושם מומחים בשיחות ייעוץ. הם מצאו שאימון על תחומים אחרים משפר את הדיוק. המאמר מציג תוצאות עם מודל LLM.
תקציר מקורי באנגליתarXiv:2610.08055v1 Announce Type: new Abstract: Automatic assessment of communication quality in dyadic counseling conversations is bottlenecked by data: expert-rated corpora are small and expensive to grow. We study cross-domain transfer of expert overall-impression prediction across three German corpora of simulated counseling (two general-practice medical, one school-related parent-teacher; $n=195$ expert-rated sessions, one corpus after scale equating). Training on the other domains beats training in-domain: leave-one-domain-out transfer reaches nested Spearman $\rho = 0.54$ against $\le 0.48$ within the target domain, a paired session-level gap of $+0.15$ that holds at $+0.12$ when the training-set sizes are matched, so it is not simply data volume. The decisive features are session-l
קרא במקור המקורי
arxiv.org
פתח כתבה מקורית