Relative Positional Encoding
الترميز الموضعي النسبي
أسلوب ترميز موضعي يُرمّز المسافة بين الرموز بدلاً من مواقعها المطلقة، مما يسمح للنموذج بمدّ الانتباه عبر حدود المقاطع دون تصادم في المواضع.
A positional encoding scheme that encodes the distance between tokens rather than their absolute positions, allowing the model to extend attention across segment boundaries without positional collisions.
Also translated asالتضمين الموضعي النسبي
First appears in this corpus in: XLNet: Generalized Autoregressive Pretraining for Language Understanding (2019)
Appears in these papers