יום שישי, 9 באוקטובר 2026 LIVE
AI־INFO

כתבה arXiv cs.AI ·

FreshMem: זיכרון-היברידי תדר-מרחבי המונשא על ידי המוח

FreshMem: Brain-Inspired Frequency-Space Hybrid Memory for Streaming Video Understanding
פיתוח זיכרון המונשא על ידי המוח, המאפשר תחזית והבנה של וידאו זרם בזמן-אמת. הפרויקט FreshMem משתמש בזיכרון-היברידי תדר-מרחבי, המקלד על זיכרון-קצר-אורך וזיכרון-ארוך-אורך. הפרויקט כולל פיתוח של זיכרון-תדר-מרחבי, המאפשר קליטת וידאו זרם והפיכתו לזיכרון-ארוך-אורך. הפרויקט כולל גם פיתוח של זיכרון-מרחבי, המאפשר קליטת וידאו זרם והפיכתו לזיכרון-קצר-אורך.
תקציר מקורי באנגליתarXiv:2602.01683v2 Announce Type: replace-cross Abstract: Transitioning Multimodal Large Language Models (MLLMs) from offline to online streaming video understanding is essential for continuous perception. However, existing methods lack flexible adaptivity, leading to irreversible detail loss and context fragmentation. To resolve this, we propose FreshMem, a Frequency-Space Hybrid Memory network inspired by the brain's logarithmic perception and memory consolidation. FreshMem reconciles short-term fidelity with long-term coherence through two synergistic modules: Multi-scale Frequency Memory (MFM), which projects overflowing frames into representative frequency coefficients, complemented by residual details to reconstruct a global historical "gist"; and Space Thumbnail Memory (STM), which
קרא במקור המקורי