יום שלישי, 15 בספטמבר 2026 LIVE
AI־INFO

כתבה arXiv cs.AI ·

MameLoshnLM: דגם שפתי ליידיש ומבחן הערכה

MameLoshnLM: Yiddish Language Model and Evaluation Benchmark
אנו מציגים את MameLoshnLM, דגם שפתי פתוח-מקור 8B-מפתחות ליידיש. דגם זה נבנה באמצעות Oytser, קורפוס טקסטים גבוה-איכות ליידיש, ו-Kashes, מבחן תפקודי רב-משימתי. MameLoshnLM משיג תוצאות טובות יותר מדגמים פתוחים אחרים של אותו קנה מידה.
תקציר מקורי באנגליתarXiv:2608.05850v2 Announce Type: replace-cross Abstract: We present MameLoshnLM, the first open-source 8B-parameter language model built specifically for Yiddish. Despite Yiddish's rich textual tradition, its limited digital presence and the scarcity of reliable evaluation resources have constrained progress in Yiddish language modeling. Existing multilingual corpora and benchmarks are often poor proxies for the language, containing substantial amounts of noisy, machine-translated, and misclassified text. We address these gaps by introducing Oytser, a high-quality Yiddish pretraining corpus that combines contemporary web-native sources with literary materials, and Kashes, a multi-task benchmark spanning translation, linguistic analysis, information extraction, and language understanding.
קרא במקור המקורי