DeepEval

إطار تقييم LLM مفتوح المصدر، مثل Pytest لنماذج اللغة الكبيرة.

DeepEval إطار تقييم مفتوح المصدر من Confident AI يُتيح للمطورين اختبار مخرجات LLM باستخدام وحدات اختبار بنفس طريقة Pytest. يأتي بمقاييس مدعومة بالأبحاث تشمل G-Eval والهلوسة وصلة الإجابة والأمانة ودرجات خاصة بـ RAG، كما يدعم المعايير المرجعية والاختبار الأحمر والاختبار على مستوى المكوّنات. يعمل محلياً ويتّصل بخطوط CI لرصد الانحدارات قبل النشر.