ثنائي الاتجاه
Bidirectional
قدرة النموذج على النظر إلى السياق من الجانبين الأيسر والأيمن في آن واحد عند بناء تمثيل كل رمز.
The model's ability to look at context from both left and right sides simultaneously when building each token's representation.
تُرجم أيضاًذو اتجاهين، مزدوج الاتجاه
أول ظهور في هذه المجموعة: BERT: التدريب المسبق لمحوِّلات عميقة ثنائية الاتجاه لفهم اللغة (2018)
يظهر في هذه الأوراق
- BART: التدريب المسبق بإزالة التشويش لنماذج تسلسل إلى تسلسل في التوليد والترجمة والفهم اللغوي2019في السماء ✦
- BEiT: التدريب المسبق بأسلوب BERT لمحوِّلات الصور2021في السماء ✦
- BERT: التدريب المسبق لمحوِّلات عميقة ثنائية الاتجاه لفهم اللغة2018في السماء ✦
- BLIP-2: بناء تدريب مسبق للرؤية واللغة انطلاقاً من مرمِّزات صور ونماذج لغوية كبيرة مُجمَّدة2023في السماء ✦
- ELECTRA: تدريب مُرمِّزات النصوص مسبقاً بالتمييز بدلاً من التوليد2020في السماء ✦
- توليد الكلام الطبيعي بتهيئة WaveNet على تنبؤات طيف ميل2018في السماء ✦
- XLNet: تدريب مسبق ذاتي الانحدار مُعمَّم لفهم اللغة2019في السماء ✦