ما هي peft-fine-tuning؟
ضبط دقيق لكفاءة المعلمات لمدارس LLM باستخدام LoRA وQLoRA وأكثر من 25 طريقة. يُستخدم عند الضبط الدقيق للنماذج الكبيرة (7B-70B) ذات ذاكرة وحدة معالجة الرسومات المحدودة، أو عندما تحتاج إلى تدريب أقل من 1% من المعلمات مع الحد الأدنى من فقدان الدقة، أو لخدمة محولات متعددة. مكتبة HuggingFace الرسمية متكاملة مع النظام البيئي للمحولات. المصدر: orchestra-research/ai-research-skills.