Semi-Markov Decision Process

تعميم لعملية ماركوف القرارية يسمح للإجراءات بأن تستغرق عدداً متغيراً من الخطوات الزمنية بدلاً من خطوة واحدة ثابتة. إطار الخيارات يحوّل أي عملية ماركوف قرارية مع خيارات إلى عملية شبه ماركوف قرارية على مستوى اختيار الخيارات.

A generalization of MDPs that allows actions to take a variable number of time steps. The Options Framework transforms any MDP with options into an SMDP at the option-selection level.