WordPiece

خوارزمية تجزئة تقسم الكلمات إلى وحدات فرعية شائعة لتقليل حجم المفردات مع تغطية الكلمات النادرة.

A subword tokenization algorithm that splits words into common subword units to reduce vocabulary size while covering rare words.