حساب الحيرة من دالة الخسارة

أدخل قيمة دالة الخسارة (خسارة الانتروبيا المتقاطعة) لنموذج اللغة الخاص بك. هذه القيمة تُحسب عادةً على مجموعة اختبار وتكون عددًا حقيقيًا موجبًا (مثل 2.5). كلما انخفضت القيمة، كان أداء النموذج أفضل.

تقوم الحاسبة تلقائيًا بتطبيق الصيغة الأساسية: الحيرة (Perplexity) = exp(خسارة الانتروبيا المتقاطعة). حيث exp هي الدالة الأسية الطبيعية (e^x). تربط هذه الصيغة بين خسارة النموذج وعدم اليقين في التنبؤ بالكلمة التالية.

ستحصل على قيمة الحيرة، والتي تمثل عدد الخيارات المكافئة التي يكون النموذج غير متأكد منها في المتوسط. على سبيل المثال، حيرة 10 تعني أن النموذج يختار عشوائيًا من بين 10 كلمات محتملة.

استخدم النتيجة لمقارنة نماذج مختلفة: النموذج ذو الحيرة الأقل أفضل. يمكنك أيضًا حساب الحيرة على مجموعات بيانات مختلفة لاختبار التعميم.