نسبة الاحتمال

النسبة r(θ) = π_θ(a|s) / π_old(a|s) التي تقيس مقدار تغيّر السياسة الجديدة عن القديمة لفعل محدد. عندما r=1 السياستان متطابقتان، وعندما r>1 السياسة الجديدة تمنح احتمالاً أعلى لهذا الفعل.

The ratio r(θ) = π_θ(a|s) / π_old(a|s) measuring how much the new policy differs from the old one for a specific action. When r=1 the policies agree; when r>1 the new policy assigns higher probability to that action.