v1.0 · test set v0.1 · 2026-10-14

كيف نقيس دعم العربية

لا درجة منشورة لأي أداة. مجموعة الاختبار v0.1 جاهزة كبروتوكول، والتشغيل لم يبدأ، وملف scores.json يضع null في كل صف حتى يُضاف تشغيل حقيقي.

طبقتان، بلا دمج صامت

مراجعة الدليل تحسب رقمًا من 100 إذا اكتملت خمسة معايير خام من 0 إلى 10: المجموع المقرب لـ (الوزن × الخام × 10). إذا نقص معيار تبقى النتيجة فارغة ولا نعرض درجة جزئية كأنها نهائية.

مجموعة الاختبار v0.1 تقيس أقسامًا (فصحى، خليجي، مصري، شامي، اتجاه، تشكيل، تعرّف، صوت، وتخصص) بدرجات بند من 0 إلى 5. المواصفات لم تثبت معادلة دمج القسم في معيار «جودة العربية» ذي الوزن 35٪. لن نختار هذه المعادلة في الكود قبل أول تشغيل، وسنرفع رقم المنهجية حين نثبتها.

أوزان مراجعة الدليل

تفصيل الدرجةالوزن
جودة دعم العربية35%
الدقة وجودة المخرج20%
السعر والقيمة15%
سهولة الاستخدام15%
الخصوصية والبيانات15%

Σ = 1

بروتوكول التشغيل

  1. تُنسخ الأوامر حرفيًا. أي تعديل يأخذ لاحقة إصدار جديدة.
  2. كل تشغيل يُسجَّل: الأداة، الباقة، إصدار النموذج، الواجهة، لغة الواجهة، الوقت بتوقيت السعودية، البند، المخرج، المُقيّم، والدرجات.
  3. جلسة جديدة بلا ذاكرة مخصصة. الإعدادات كما تشحنها الأداة. الواجهة بالعربية إن وُجدت.
  4. ثلاث محاولات، والدرجة وسيطها. الرفض أو الخطأ = 0 مع ملاحظة.
  5. مُقيّمان ناطقان، وأحدهما خليجي في بنود الخليج. إذا اختلف المجموع بأكثر من نقطة يحسم ثالث. حكم آلي يمكن أن يسبق، والكلمة الأخيرة للإنسان.
  6. تُنشر النصوص والتاريخ. إعادة أسبوعية لاحقًا لأعلى الأدوات بعد أن توجد درجات أصلًا.

سلّم البند

0 فشل، 1 أغلبه خطأ، 2 ضعيف، 3 يُستخدم مع أخطاء، 4 جيد مع ملاحظات صغيرة، 5 بمستوى ناطق. درجة البند = متوسط معاييره ÷ 5 × 100. درجة القسم = متوسط بنوده. الدرجة العربية للأقسام = متوسط موزون على الأقسام التي تنطبق، ثم تُعاد وزنته. الأوزان الاسمية: فصحى 20، خليجي 15، مصري 10، شامي 10، اتجاه 10، تشكيل 5، تعرّف 10، صوت 10، تخصص 10.

ما الذي يُختبر حسب النوع

المحادثة والكتابة والوكلاء: فصحى ولهجات واتجاه وتشكيل، وللوكلاء بند تخصص. البرمجة: فصحى قصيرة واتجاه وبرمجة بالوصف. الصورة والفيديو: نص داخل الصورة. الصوت: نطق وتفريغ. التعرّف الضوئي: بنوده. الألعاب: عامية اللاعب وتعريب الواجهة.

بنود منشورة يمكن نسخها

الأوامر الكاملة التي لا تحتاج ملف عينة موجودة في مكتبة البرومبتات ومعلّمة «غير مختبر»: VC-01 وVC-02 وAG-01 وGM-02 وMSA-02 وGLF-02. بقية البنود (تلخيص خبر، إعراب، أرقام، أمثال، تعرّف، صوت) تحتاج ملفات عينة لم تُودع بعد، فلا يُعاد إنتاجها اليوم. قائمة الملفات المطلوبة: نص خبر، نص ثنائي الاتجاه، قصيدة مشكولة، خمس صور تعرّف مع النص الأصلي، سبعة مقاطع صوت، رسالة فاتورة مصطنعة، وخطأ اتجاه في CSS.

ما لا نفعله

الحدود

نشر الأوامر ومفتاح بعض الإجابات يجعل الحفظ الحرفي ممكنًا. نقبل ذلك في 0.1 لأن الهدف التكرار والاستشهاد، وسنبدّل البند بإصدار لاحق إذا ظهر حفظ. العينات الصوتية والصور غير موجودة، فبنودها غير قابلة للتشغيل بعد. اللهجة المغاربية في جدول الأداة لا تُملأ قبل أن تُضاف بنودها.

scores.json · scores.csv · CC BY 4.0