التكييف اللغوي

مرحلة تدريب إضافية تُحوّل نموذجاً مُدرَّباً بهدف إكمال الفجوات (مثل T5) إلى نموذج قادر على التوليد الطبيعي للنص، عبر مواصلة التدريب الذاتي الإشراف بهدف نمذجة اللغة المعتاد لعدد محدود من الخطوات.

An additional training phase that transforms a model pre-trained with span corruption (like T5) into one capable of natural text generation, by continuing self-supervised training with a standard language modeling objective for a limited number of steps.