כתבה
arXiv cs.CL ·
פרומפטים נגד חוקים: בדיקה ובקרה של התנהגויות טבעיות בדיבור
Prompts versus Rules: Auditing and Controlling Speech Naturalness Behaviors in Voice User Simulators
מחקר זה בודק את ההתנהגויות הטבעיות בדיבור של סימולטורים של משתמשים, ומציע שיטה חדשה לבקרה ואימות של התנהגויות אלו. המחקר משווה בין שיטות פרומפטים וחוקים, ומראה שהשיטה החדשה מספקת התנהגויות טבעיות יותר. המחקר משתמש במודל LLM, ומראה שהוא אינו מספיק לבדו לייצג התנהגויות משתמשים אותנטיות.
תקציר מקורי באנגליתarXiv:2610.11015v1 Announce Type: new Abstract: As voice agents gain more popularity commercially, the user simulators used to evaluate the deployed agents are also being developed to include more realistic, variable, and diverse speech naturalness behaviors -- disfluency, interruption and backchanneling. The quality of the user simulator directly affects the validity of agent evaluation results. However, we find that most studies so far have not examined in detail whether the intended configuration for these behaviors is realized in the simulation. In this study, we audit the realized naturalness behaviors of tau-Voice, our own LLM-based prompting approach across three models, and our rule-based injection algorithm for disfluency, interruption, and backchanneling. We find that prompting f
קרא במקור המקורי
arxiv.org
פתח כתבה מקורית