الميزانية الحوسبية

إجمالي كمية الحوسبة المخصصة لتدريب النموذج، تُقاس بعمليات الفاصلة العائمة (FLOPs)، وتُقدَّر بنحو C ≈ 6ND للمحوِّلات.

The total amount of computation allocated for training a model, measured in FLOPs. Approximately C ≈ 6ND for Transformers.