כתבה
arXiv cs.AI ·
FoCLIP: תקן-מרחב התאמה-מאפס למערכות CLIP-בסיסיות לעיבוד וזיהוי תמונות
FoCLIP: A Feature-Space Misalignment Framework for CLIP-Based Image Manipulation and Detection
פרויקט FoCLIP מציע תקן-מרחב התאמה-מאפס לעיבוד תמונות CLIP-בסיסיות, ומציע דרך יעילה להפליא את תקן-האיכות CLIPscore. המחקר כולל ניסויים על תמונות אמנותיות ו-ImageNet.
תקציר מקורי באנגליתarXiv:2511.06947v2 Announce Type: replace-cross Abstract: The well-aligned attribute of CLIP-based models enables its effective application like CLIPscore as a widely adopted image quality assessment metric. However, such a CLIP-based metric is vulnerable for its delicate multimodal alignment. In this work, we propose FoCLIP, a feature-space misalignment framework for fooling CLIP-based image quality metric. Based on the stochastic gradient descent technique, FoCLIP integrates three key components to construct fooling examples: feature alignment as the core module to reduce image-text modality gaps, the score distribution balance module and pixel-guard regularization, which collectively optimize multimodal output equilibrium between CLIPscore performance and image quality. Such a design ca
קרא במקור המקורי
arxiv.org
פתח כתבה מקורית