التدريج
Scaling
دراسة كيف يتغير أداء النماذج مع زيادة الموارد — سواء حجم النموذج أو البيانات أو الحوسبة — واكتشاف العلاقات القابلة للتنبؤ بينها.
The study of how model performance changes with increasing resources — model size, data, or compute — and discovering the predictable relationships among them.
تُرجم أيضاًالتوسيع، القياس، تدرج المدى العددي، قوانين التدريج، مواءمة الأحجام الحسابية للمدخلات
أول ظهور في هذه المجموعة: استكشاف حدود نقل التعلُّم باستخدام محوِّل موحَّد يعمل بصيغة نصّ إلى نصّ (2019)
يظهر في هذه الأوراق
- اختبار الفريق الأحمر للنماذج اللغوية للحدّ من أضرارها: المنهجيات وأنماط التوسّع والدروس المستفادة2022في السماء ✦
- اختبار الفريق الأحمر للنماذج اللغوية للحدّ من أضرارها: المنهجيات وأنماط التوسّع والدروس المستفادة2022في السماء ✦
- استكشاف حدود نقل التعلُّم باستخدام محوِّل موحَّد يعمل بصيغة نصّ إلى نصّ2019في السماء ✦
- WebGPT: الإجابة عن الأسئلة بمساعدة متصفّح ويب وتغذية راجعة بشرية2021في السماء ✦