تكنوستاك
ابدأ مشروعكEnglish

استكشف الوسم

تقييم تطبيقات نماذج اللغة والعمل بنتائجه: بناء مجموعة اختبار من أسئلة حقيقية لها إجابات مرجعية متفق عليها، وقياس الاسترجاع والإجابة كلًّا على حدة، وقراءة النتائج حسب الشرائح، ثم تحويل التقييم إلى بوابات إطلاق ومراقبة وتراجع في الإنتاج.

المعرفة التي تدفعك للأمام30 مقالًا • بالعربية والإنجليزية

نتائج التصفح · #تقييم نماذج اللغة

مقارنة دون درجات: العثور على المقاطع الصحيحة، دعم الادعاءات، دقة الاستشهادات، امتناع صحيح.

كيف تقيس هلوسة نماذج اللغة؟ مجموعات الاختبار والتصنيف والمقاييس

لتقييم هلوسة تطبيق مبني على نموذج لغوي، اختبره بأسئلة حقيقية لها إجابات مرجعية متفق عليها، وتحقق من كل ادعاء مقابل مصادره، وقِس الاسترجاع والإجابة كلًّا على حدة، ثم اقرأ النتائج حسب الشرائح لا بمتوسط واحد.

تسلسل خطوات: تشغيل ظلّي، مستخدمون داخليون، مجموعة صغيرة، إطلاق أوسع.

إدارة خطر هلوسة نماذج اللغة في الإنتاج: بوابات الإطلاق والمراقبة والتراجع

لا يستطيع الاختبار إزالة الهلوسة تمامًا، لذلك تعتمد السلامة في الإنتاج على ما يحيط بكل إطلاق: بوابة متفق عليها مسبقًا، وإطلاق على مراحل، ومراقبة للإجابات الحية، واحتواء للحوادث، وتراجع جرى التدرّب عليه.