כתבה
arXiv cs.CL ·
אם לא מופרע, אל תתקן: על הדינמיקה של תיקון באגים איטרטיבי עם LLMs
If It's Not Buggy, Don't Fix It: On the Dynamics of Iterative Bug-fixing with LLMs
מודלי LLMs יכולים לזהות באגים בתוכנות תקינות. מחקר זה בוחן את השימוש האיטרטיבי ב-LLMs לתיקון באגים ומצא שהם יוצרים מעגלי תיקון פסאודו-באגים. המחקר גם חושף וקטור הנעה השולט בנטייה לעריכה.
תקציר מקורי באנגליתarXiv:2609.10123v1 Announce Type: cross Abstract: Large language models (LLMs) have become ubiquitous in software development, with LLM-based automated program repair tools increasingly used during code review. In this report, we explore the iterative blind use of LLMs as bug-fixers. Across multiple models and repair environments, we find that LLMs consistently claim to detect bugs in entirely bug-free programs while the rate of repair of buggy programs is less than that of the damage to correct programs. We also explore the long-term dynamics of this iterative process, and find that this frequently reaches a pseudo-bug-fixing cycle where the same changes are added and removed again ad infinitum. Lastly, via mechanistic probing, we unveil the existence of a steering vector which controls t
קרא במקור המקורי
arxiv.org
פתח כתבה מקורית