יום שלישי, 15 בספטמבר 2026 LIVE
AI־INFO

וידאו YT AI Engineer ·

ניתוב מודלים: הבחירה הנכונה

Preferences Over Benchmarks: Model Routing — Archana Kamath & Tyler Gillam, DigitalOcean
▶ צפה כאן — בלי לצאת מהאתר
ניתוב מודלים הוא שיטה לבחירת המודל הנכון למשימה ספציפית. Archana Kamath ו-Tyler Gillam מ-DigitalOcean הדגימו כיצד ניתוב מודלים יכול לחסוך עלויות ולשפר ביצועים. הם השתמשו במודל מומחים מותאם לקבלת החלטות בפחות מ-200 מילישניות.
תקציר מקורי באנגליתTwo terminals run the same prompt, build me a spinning wheel app. On the left every request goes to a single premium model. On the right they go through a router that picks a model per task. Both finish at about the same time with comparable output, and by then the router's session has cost 8 cents against 25. The gap widens with every prompt after that. Archana Kamath and Tyler Gillam use it to argue that picking a model by climbing a leaderboard is the wrong instinct, because there is no single best model, only the right one for a given request. What makes a model right is a mix no public leaderboard encodes: the task itself, the system prompt and tools around it, the cost you are willing to spend, the latency the use case needs, and what the end user actually wants. Their router takes t
קרא במקור המקורי