SentencePiece
أداة تجزئة الجمل والكلمات
أداة تجزئة متطورة تتعامل مع النص كمتتالية من البايتات دون الحاجة للاعتماد على المسافات، ومثالية للغات المتنوعة.
SentencePiece
Also translated asالتفكيك اللغوي الحر المستقل عن المسافات، معالج الوحدات اللغوية الفرعية الشامل
First appears in this corpus in: Neural Machine Translation of Rare Words with Subword Units (2016)
Appears in these papers