رمز [CLS]
[CLS] Token
رمز قابل للتعلم يُلحق في بداية تسلسل الرموز ويحمل تمثيله النهائي معلومات التصنيف الشاملة.
A learnable token prepended to the token sequence whose final representation carries the global classification information.
تُرجم أيضاًرمز التصنيف، الرمز الفئوي
أول ظهور في هذه المجموعة: BERT: التدريب المسبق لمحوِّلات عميقة ثنائية الاتجاه لفهم اللغة (2018)
يظهر في هذه الأوراق
- تعلُّم التحكّم الثنائي الدقيق بعتاد منخفض التكلفة2023في السماء ✦
- BART: التدريب المسبق بإزالة التشويش لنماذج تسلسل إلى تسلسل في التوليد والترجمة والفهم اللغوي2019في السماء ✦
- BEiT: التدريب المسبق بأسلوب BERT لمحوِّلات الصور2021في السماء ✦
- BERT: التدريب المسبق لمحوِّلات عميقة ثنائية الاتجاه لفهم اللغة2018في السماء ✦
- تعلُّم نماذج بصرية قابلة للنقل عبر الإشراف باللغة الطبيعية2021في السماء ✦
- ColBERT: البحث الفعّال والكفوء في المقاطع النصية عبر التفاعل المتأخر السياقي فوق BERT2020في السماء ✦
- تدريب محوِّلات الصور الكفوءة بيانياً والتقطير عبر الانتباه2021في السماء ✦
- خصائص ناشئة في محوِّلات الرؤية ذاتية الإشراف2021في السماء ✦
- DINOv2: تعلُّم سمات بصرية متينة بدون إشراف2023في السماء ✦
- ImageBind: فضاء تضمين واحد يربط كل الأنماط2023في السماء ✦
- REALM: التدريب المسبق لنموذج لغوي مُعزَّز بالاسترجاع2020في السماء ✦