الضبط الدقيق للنماذج
تخصيص نموذج مفتوح من سبعة إلى ثمانية مليارات من المعاملات لكتابة محاضر اجتماعات منظّمة، انطلاقًا من تفريغات نصّية.
مدّة الدورة: 8 ساعات
ما ستتعلّمه
- التمييز بين ما يُتعلَّم بالتعليمة وما يتطلّب RAG وما يستوجب ضبطًا دقيقًا فعليًّا
- إعداد مجموعة بيانات تعليمات بألفَي زوج نظيف من التفريغ والمحضر المنظَّم
- حساب الكلفة الحقيقية لضبط كامل وفهم لماذا لم يعد سبيلًا افتراضيًّا
- التقاط عائلة PEFT وموقع LoRA بينها، والفرق بين ما يُجمَّد وما يُدرَّب
- ضبط نموذج بسبعة مليارات معامل على بطاقة رسومية واحدة بسعة 24 غيغا بايت باستعمال QLoRA
- اختيار المعاملات الفائقة الأساسية وقراءة منحنيات التدريب لتحديد لحظة التوقّف
- دمج المحوّلات في الأوزان الأصلية وتصدير النموذج إلى صيغة GGUF للاستدلال المحلّي
- تقييم النموذج قبل الضبط وبعده باستعمال جُيوب اختبار محفوظة وحُكم بشري في الأعمى
المتطلّبات المسبقة
- الدورة 16 حول النماذج اللغوية الكبيرة وبِنية المحوّلات
- الدورة 09 حول PyTorch وحلقات التدريب
وحدات الدورة
- التعليمة أو RAG أو الضبط الدقيق: اختيار الجواب الصحيح
- تحضير مجموعة بيانات التعليمات
- الضبط الكامل وكلفته الحقيقية
- الضبط الدقيق الموفّر للمعاملات (PEFT)
- LoRA: محوّلات الرتبة المنخفضة
- QLoRA والتكميم بأربعة بتّات
- المعاملات الفائقة للضبط الدقيق
- متابعة التدريب والتوقّف في الوقت المناسب
- دمج المحوّلات والتصدير
- التقييم قبل الضبط وبعده
التقييم والشهادة
يُختَم المسار باختبار من 40 سؤالًا يغطّي وحدات الدورة كلّها، وتُمنَح عند النجاح شهادة إتمام قابلة للتحقّق برقمها على المنصّة.