المعجم

MMLU

MMLU

معيار تقييم يضم أسئلة متعددة الاختيارات في 57 تخصصاً أكاديمياً ومهنياً، يختبر اتساع معرفة النموذج عبر مجالات متنوعة من القانون إلى الطب إلى الرياضيات.

An evaluation benchmark of multiple-choice questions across 57 academic and professional subjects, testing the breadth of a model's knowledge from law to medicine to mathematics.

تُرجم أيضاًمعيار الفهم اللغوي متعدد المهام

أول ظهور في هذه المجموعة: القدرات الناشئة في النماذج اللغوية الكبيرة (2022)

يظهر في هذه الأوراق