منهجية معايير الأداء

​

مصادر البيانات

• الإصدارات الرسمية — إعلانات المزوّدين والمدونات التقنية والمواد الصحفية.
• الأوراق الأكاديمية — منشورات محكّمة ومسودات arXiv بنتائج قابلة لإعادة الإنتاج.
• مساهمات المجتمع — مساهمات موثّقة من مجتمع Phaseo وشركائها.

​

توحيد البيانات

1. اربط كل مشاركة بمعرّف معيار داخلي.
2. حوّل المقاييس المنشورة إلى مقياس موحّد (مثل النسب المئوية).
3. سجّل أي اختلافات، مثل إصدارات few-shot أو أطر التقييم المخصصة.
4. شغّل تحققًا آليًا للتأكد من معقولية الحقول والنطاقات.

​

وتيرة التحديث

• أسبوعيًا للمجموعات الشائعة مثل MMLU وGSM8K وHumanEval.
• شهريًا للمعايير المتخصصة أو الناشئة.
• عند الطلب عندما يرسل المزوّدون أو أفراد المجتمع تقييمات عالية الجودة.

​

الشفافية وقابلية إعادة الإنتاج

​

مسار الملاحظات

1. افتح مشكلة مع الأدلة الموضحة في إرسال نتائج المعايير.
2. أجب عن أسئلة المراجعة في المشكلة. ينشر المسؤولون التصحيحات المتحققة عبر محرر قاعدة البيانات.
3. تواصل عبر Discord لتنسيق المشاركات البحثية الأكبر.