כתבה
arXiv cs.LG ·
אישור תחתון ללמידת תגמולים רגישים לסיכונים
Certifying Lower Bounds for Risk-Sensitive Reinforcement Learning under Adversarial State Perturbations
חוקרים פיתחו שיטות לאישור תחתון ללמידת תגמולים רגישים לסיכונים. השיטות משפרות את העמידות של סוכנים בפני הפרעות אדוורסריות. המחקר הראה שאימון ריסק-אברסיבי משפר את התוצאות.
תקציר מקורי באנגליתarXiv:2609.10866v1 Announce Type: new Abstract: Reinforcement learning (RL) agents deployed in real-world environments are often vulnerable to adversarial perturbations in state observations, creating risks in safety-critical applications. Certification methods can improve robustness against adversarial perturbations by providing lower bounds on expected cumulative rewards. Existing certification methods, however, mainly focus on risk-neutral objectives. In this paper, we extend certification methods to risk-sensitive objectives by establishing lower bounds on the exponential utility of cumulative rewards under $l_{p}$-norm-bounded state adversarial perturbations ($1\leq p <\infty$). By introducing a $\phi$-divergence relaxation of the perturbation set, we formulate the risk-sensitive cert
קרא במקור המקורי
arxiv.org
פתח כתבה מקורית