من أين تأتي الدرجات
تحتاج كل درجة إلى مصدر عام أو سجل تقييم قابل لإعادة الإنتاج قبل نشرها.
ما معنى التوحيد
يُبقي Phaseo كل معيار مرجعي على مقياسه الخاص. فهو يوحّد السجل المحيط بالدرجة، لا الدرجة نفسها:- تُطابَق كل نتيجة مع معرّف معيار مرجعي واحد، بحيث يُجمَّع المعيار نفسه الوارد بأسماء مختلفة معًا.
- يُحتفظ بالإعداد كنسخة مختلفة عندما يختلف، مثل عدد الأمثلة (few-shot) أو أداة التقييم أو جهد الاستدلال، بدلًا من دمجه في الإعداد الافتراضي.
- لكل معيار مرجعي اتجاه ترتيب. المعايير التي تكون فيها القيمة الأقل أفضل، مثل معدلات الخطأ، ترتّب أقل درجة أولًا.
- يبقى رابط المصدر ووسم الإبلاغ الذاتي مع الدرجة.
الإبلاغ عن تعارض
- افتح مشكلة تتضمن الأدلة المذكورة في إرسال درجات المعايير المرجعية.
- أجب عن أسئلة المراجعة في المشكلة. ينشر المشرفون التصحيحات المتحقق منها عبر محرر قاعدة البيانات.
- للمساهمات البحثية الأكبر، نسّق عبر Discord.