التقطير الذاتي

حالة خاصة من التقطير حيث المعلم والطالب يتشاركان البنية ذاتها، وغالباً يكون المعلم نسخة متوسط متحرك أسّي من الطالب.

A special case of distillation where teacher and student share the same architecture, often with the teacher being an exponential moving average of the student.