Decoding तय करता है कि model probabilities में से अगला token कैसे चुना जाए।
आम controls
आम presets
आम विफलताएँ
- बहुत random: तथ्य असंगत और structured output अस्थिर।
- बहुत deterministic: दोहराव वाले या फीके completions।
- बहुत अधिक penalties: अटपटी भाषा और विषय से भटकाव।
व्यावहारिक सलाह
- Decoding को globally नहीं, हर task के अनुसार tune करें।
- Extraction/JSON tasks के लिए conservative settings रखें।
- Creative tasks में randomness धीरे-धीरे बढ़ाएँ और human review से नतीजों का मूल्यांकन करें।
अंतिम संशोधन 2 अक्टूबर 2026