כתבה
arXiv cs.LG ·
בעברית: למידה תת-תודעתית: יכולת תעבורה וחורים
Beyond Owls: Subliminal Learning Can Transfer Learned Capabilities and Backdoors
למידה תת-תודעתית יכולה להעביר יכולות וחורים שנלמדו. החידוש נבדק באמצעות תכנות של כלי ללמידה תת-תודעתית.
תקציר מקורי באנגליתarXiv:2610.10657v1 Announce Type: new Abstract: In subliminal learning (SL), a teacher model passes on a trait to a student model by distillation on data semantically unrelated to the trait. So far, SL has been demonstrated for only a limited range of traits, including preferences for animals (e.g., owls) and malicious personas. These traits can also be elicited with simple prompts or with steering. Can SL transfer a wider range of traits, including more complex ones? If so, distillation might transfer subtle forms of misalignment (e.g., reward-seeking, scheming, and secret loyalties) without detection. To this end, we test whether SL can transfer a novel capability: predicting the outputs of a randomly initialized MLP. After distilling on unrelated text, the student achieves substantial p
קרא במקור המקורי
arxiv.org
פתח כתבה מקורית