أما النصف الآخر فتمثله معلمات الاستدلال.
المعلمات الأساسية
تفاعلات ينبغي الانتباه إليها
- تؤثر كل من
temperatureوtop_pفي العشوائية. غيّر معلمة واحدة فقط في كل مرة أثناء الضبط. - قد يؤدي الجمع بين التكميم الشديد بعدد بتات منخفض والعشوائية العالية إلى زيادة عدم استقرار المخرجات.
- قد تبدو قيمة
max_tokensالمنخفضة كأنها إخفاق من النموذج بينما تكون الإجابة مقتطعة فقط.
قيم بدء موصى بها
temperature: من0.2إلى0.7بحسب مقدار الإبداع المطلوبtop_p: من0.9إلى1.0max_tokens: اضبطه وفق طول المخرجات المتوقع بدلًا من استخدام قيمة كبيرة موحدة
خطوات الضبط
- اضبط التكميم أولًا.
- ثبّت مجموعة التقييم.
- غيّر معلمة واحدة في كل مرة.
- قارن الجودة وزمن الاستجابة واستخدام الرموز.
- احتفظ بإعدادات مسبقة منفصلة لكل نقطة نهاية وحالة استخدام.