lm-evaluation-harness
اختبار نموذج الذكاء الاصطناعي وتقييمه وموارد القياس
github.com
نبذة عن الأداة
ويمثل التقييم المعدّل مجموعة أدوات تقييم نموذجية للغة.() وينظم المطورون مهام تقييمية مشفرة ويجرون اختبارات نموذجية قابلة للتعديل.
الميزات الرئيسية
- تنفيذ الاختبار: تقييم نموذجي وفقا لتشكيل المهام
- استعراض النتائج: مقارنة مؤشرات النواتج بالإطارات
حالات الاستخدام
ويمكن للمطورين والباحثين المناسبين لمقارنة النماذج واختيار خيارات المرشحين أن يستخدموا النتائج المفتوحة كنقطة انطلاق لإجراء المزيد من الاختبارات.
بدء الاستخدام
فبعثات التقييم والبيانات والصيغ النموذجية وتعاريف المؤشرات معروفة أولا، اختار أن تقارن الأبعاد المرتبطة بالتطبيق الفعلي، ثم تصادق عليها بعينتك الخاصة، وتسجل أطر الاختبارات لتجنب تقسيم إجمالي واحد.
نقاط يجب التحقق منها
وقد تكون شروط القوائم المختلفة مختلفة، ولا تضمن النتائج المفتوحة أن يؤدي النموذج نفس الشيء في كل مهمة من المهام الفعلية.
الأسعار والتوفر
قد تتغير متطلبات الحساب والأسعار وحدود تصدير الملفات والتوفر حسب المنطقة. راجع الشروط الرسمية الحالية قبل استخدام الخدمة. لا يضمن هذا الدليل حصة مجانية أو سعراً محدداً.
