أداة تجزئة الجمل والكلمات
SentencePiece
أداة تجزئة متطورة تتعامل مع النص كمتتالية من البايتات دون الحاجة للاعتماد على المسافات، ومثالية للغات المتنوعة.
SentencePiece
تُرجم أيضاًالتفكيك اللغوي الحر المستقل عن المسافات، معالج الوحدات اللغوية الفرعية الشامل
أول ظهور في هذه المجموعة: ترجمة الكلمات النادرة آلياً باستخدام وحدات دون الكلمة (2016)
يظهر في هذه الأوراق