المعجم

الموضع النسبي

Relative Position

الفرق بين موضعَي رمزين في التسلسل (n − m). في RoPE يظهر الموضع النسبي تلقائياً في الجداء النقطي بين الاستعلام والمفتاح المُدارَين.

The difference between two token positions in a sequence (n − m). In RoPE, relative position emerges automatically in the dot product of rotated query and key vectors.

تُرجم أيضاًالموقع النسبي، المسافة النسبية

أول ظهور في هذه المجموعة: DeBERTa: تعزيز BERT بفكّ ترميز مُحسَّن وانتباه مُفكَّك (2020)

يظهر في هذه الأوراق