المعجم

منحنى متساوي العمليات الحسابية

IsoFLOP Curve

منحنى يرسم دالة الفقد مقابل حجم النموذج عند ميزانية حوسبية ثابتة، أدنى نقطة فيه تكشف الحجم الأمثل.

A curve plotting loss vs. model size at a fixed compute budget; its minimum reveals the optimal model size for that budget.

تُرجم أيضاًمنحنى ثابت الحوسبة، خط تساوي FLOPs

أول ظهور في هذه المجموعة: تدريب النماذج اللغوية الكبيرة بالكفاءة الحوسبية المُثلى (2022)

يظهر في هذه الأوراق