כתבה
arXiv cs.CL ·
ViSTA: גשר פשוט שמשלב התאמה ראייתית להבנה של סדרות זמן-קליניות ב-LLMs הרב-תפקודיים
ViSTA: A Simple Bridge Extends Visual Alignment to Clinical Time-Series Understanding in Multimodal LLMs
ViSTA היא גשר פשוט שמשלב התאמה ראייתית להבנה של סדרות זמן-קליניות ב-LLMs הרב-תפקודיים. היא משלבת מדדים רפואיים בעלי גודל גבוה ל-LLMs. ViSTA היא תוספת קטנה שמשלבת מדדים רפואיים בעלי גודל גבוה ל-LLMs.
תקציר מקורי באנגליתarXiv:2609.31448v1 Announce Type: new Abstract: Clinical prediction models estimate risk from patient measurements, while large language models support medical text understanding and question answering. Yet their language capabilities do not ensure accurate prediction from structured, high-dimensional clinical time series. Improving this ability would connect risk estimation with flexible questions about a patient's evolving condition. We introduce ViSTA, a compact adapter that incorporates irregular numerical measurements into a pretrained vision-language model's chart representations. It learns corrections to visual tokens while leaving all pretrained parameters unchanged. On MIMIC-IV, ViSTA has the highest mean scores among the compared adaptations on all four metrics for acute kidney i
קרא במקור המקורי
arxiv.org
פתח כתבה מקורית