المعجم

فرط المعاملات

Overparameterization

حالة يمتلك فيها النموذج معاملات أكثر بكثير من نقاط التدريب (N ≫ n). كلاسيكياً كان يُعتقد أن هذا يُسبب فرط التخصيص، لكن ظاهرة الهبوط المزدوج تُظهر أن النماذج مفرطة المعاملات تعثر على حلول استيفائية أنعم تُعمِّم جيداً.

A regime where the model has far more parameters than training points (N ≫ n). Classically thought to cause overfitting, but the double descent phenomenon shows that overparameterized models find smoother interpolating solutions that generalize well.

تُرجم أيضاًزيادة المعاملات، الإفراط في المعلمات

أول ظهور في هذه المجموعة: GPTQ: تكميم دقيق بعد التدريب للمحوِّلات التوليدية المُدرَّبة مسبقاً (2022)

يظهر في هذه الأوراق