Relative Entropy

اسم آخر لتباعد كولباك-لايبلر. تقيس كمّ المعلومات الإضافية المطلوبة عند استخدام توزيع تقريبي بدلاً من التوزيع الحقيقي لترميز البيانات.

Another name for KL divergence. Measures the extra information required when using an approximate distribution instead of the true distribution to encode data.