כתבה
arXiv cs.CL ·
DiaLLM: חקר הפער בין עמידות ליצירה באדפטציה של ניבים אנגליים
DiaLLM: An Investigation into the Robustness-Generation Gap in English Dialect Adaptation
DiaLLM חוקר את הפער בין עמידות ליצירה באדפטציה של ניבים אנגליים. המחקר משתמש במודלים משפחתיים של LLM ומיישם שיטות שונות להתאמה ואימון. התוצאות מראות פער בין עמידות ליצירה, ומדגישות את הצורך בעיצוב מערכות גמישות יותר.
תקציר מקורי באנגליתarXiv:2607.07669v3 Announce Type: replace Abstract: Large language models increasingly understand dialectal English, yet still produce only standard, US-leaning English, leaving dialectal generation, the harder half of the problem, largely unaddressed. We introduce DiaLLM, which continually pretrains three open-weight language model families on the International Corpus of English and applies implicit and explicit post-training paradigms, each combined with three model alignment strategies, giving the first controlled comparison of these components across Australian, Indian, and Northern British English. Our results reveal a robustness-generation gap: benchmarks are shaped by continual pretraining and SFT, while alignment visibly reshapes generation in ways benchmarks do not capture. Explic
קרא במקור המקורי
arxiv.org
פתח כתבה מקורית