כתבה
arXiv cs.LG ·
בחירת הציפור: פרמטריזציה של האיזון בין תקינות לבירוריות בבדיקת מטא של תרגום מכוני
Mind Which Bird You Favour: Parameterizing Adequacy-Fluency Balance in Meta-Evaluation of Machine Translation
מאמר זה עוסק בבדיקת מטא של תרגום מכוני, ומציע שיטה לאיזון בין תקינות לבירוריות. השיטה מאפשרת לבחור את האיזון המתאים לכל תחום. המאמר כולל תיאור של שיטת האיזון ובדיקות שלה.
תקציר מקורי באנגליתarXiv:2609.14795v1 Announce Type: cross Abstract: There is a tradeoff in machine translation meta-evaluation between prioritizing alignment with adequacy versus fluency. The balance depends on the combination of translation systems in the meta-evaluation dataset. This system set is a small, filtered sample whose characteristics change heavily across years and language pairs; it does not represent the true system distribution. Consequently, the adequacy-fluency balance is often unrepresentative and subject to change. For sensitive domains, controlling this balance is critical. We expose this balance as a tunable choice. To achieve a target balance, we reweight existing systems while minimizing distortion from uniform weighting, ensuring the evaluated systems remain real and representative.
קרא במקור המקורי
arxiv.org
פתח כתבה מקורית