التنبؤ الجزئي

تحسين عملي في XLNet يقتصر فيه التنبؤ على آخر الرموز في كل تبديل (نحو 15%)، بدلاً من التنبؤ بجميع الرموز، لتركيز التعلّم على المواضع ذات السياق الأغنى.

A practical optimization in XLNet where prediction is limited to the last tokens in each permutation (roughly 15%), focusing learning on positions with the richest available context.