مفتوح المصدرتحليلات9k
Ragas
مجموعة أدوات تقييم لخطوط أنابيب RAG وتطبيقات LLM.
Ragas إطار عمل مفتوح المصدر لتقييم تطبيقات LLM واختبارها، مع تركيز قوي على التوليد المعزّز بالاسترجاع. يوفر مقاييس لا تحتاج إلى مرجع مثل الأمانة وصلة الإجابة ودقة/استيعاب السياق، إضافة إلى أدوات لتوليد مجموعات اختبار اصطناعية. يتكامل مع LangChain وLlamaIndex وأدوات الرصد لإدراج التقييم الموضوعي في دورات CI والتجارب.
المستودع
explodinggradients/ragasاللغة
Pythonما الذي يمكنك بناؤه به
- تقييم إجابات RAG على الأمانة وصلة السياق دون تصنيفات يدوية
- توليد مجموعات اختبار من أسئلة وأجوبة اصطناعية لقياس أداء خط أنابيب الاسترجاع
- ضبط تغييرات النموذج أو الموجّه في CI عبر تتبع مقاييس التقييم بمرور الوقت
الوسوم
evalsragllm-testingmetrics