ضبط الرموز

تقنية تُعاد فيها هيئة رموز موجودة في مفردات نموذج اللغة لتمثيل مفاهيم جديدة (مثل استبدال 256 رمزاً من الأقل استخداماً لتمثيل مستويات الأفعال). يتعلم النموذج معاني جديدة لرموز قديمة من خلال التدريب.

A technique where existing tokens in a language model's vocabulary are repurposed to represent new concepts (e.g. overwriting the 256 least-used tokens to represent action bins). The model learns new meanings for old symbols through training.