יום חמישי, 30 ביולי 2026 LIVE
AI־INFO

כתבה MarkTechPost ·

מדריך NVIDIA ל-Cosmos-Framework: יישום מיניאטורי של Cosmos 3

NVIDIA’s Cosmos-Framework Tutorial: Designing a Colab-Friendly Miniature of Cosmos 3 World Models with Omnimodal Mixture-of-Transformers
NVIDIA השיקה מדריך ל-Cosmos-Framework, המראה כיצד ליישם מודל עולם מיניאטורי עם Omnimodal Mixture-of-Transformers. המדריך מתמקד בחומרה של Colab ובאיך להתגבר על מגבלות החומרה.
תקציר מקורי באנגליתIn this tutorial , we explore NVIDIA’s cosmos-framework from a practical Colab-friendly angle while staying honest about the hardware limits of running real Cosmos 3 checkpoints. We begin by checking the current runtime, GPU capabilities, CUDA availability, memory, and disk space to understand why full Cosmos 3 inference is not realistic on standard Colab hardware. Instead of stopping there, we use the framework’s real structure, CLI surface, input schema, and model modes as the foundation for a hands-on miniature implementation. We then build and train a compact omnimodal Mixture-of-Transformers world model that mirrors the core Cosmos idea: shared cross-modal attention with modality-specific expert routing for text, vision, and action streams. Using synthetic physical-world data, trainin
קרא במקור המקורי