Parameter-Efficient Fine-Tuning

الضبط الدقيق الكفوء بالمعاملات

عائلة أساليب تُكيِّف النماذج المُدرَّبة مسبقاً بتدريب مجموعة فرعية صغيرة فقط من المعاملات (مثل LoRA والمُلائمات والبادئات)، مما يُخفِّض كُلفة التدريب والتخزين بشكل كبير.

A family of methods that adapt pretrained models by training only a small subset of parameters (e.g. LoRA, adapters, prefixes), dramatically reducing training and storage costs.

Also translated asPEFT، التكييف الكفؤ حسابياً، الضبط الدقيق باقتصاد المعاملات، الضبط المقتصد

First appears in this corpus in: Parameter-Efficient Transfer Learning for NLP (2019)

Appears in these papers

Parameter-Efficient Transfer Learning for NLP2019 in the sky ✦
Parameter-Efficient Transfer Learning for NLP2019 in the sky ✦
The Power of Scale for Parameter-Efficient Prompt Tuning2021 in the sky ✦
QLoRA: Efficient Finetuning of Quantized LLMs2023 in the sky ✦