Açık KaynakAnalitik6k
Evidently
ML ve LLM sistemleri için açık kaynaklı değerlendirme ve izleme.
Evidently, klasik makine öğrenimi ve LLM kullanım durumlarını kapsayan veri ve yapay zeka sistemlerini değerlendirme, test etme ve izlemeye yönelik açık kaynaklı bir Python kütüphanesidir. Veri kayması, model kalitesi ve LLM çıktı kalitesi için 100'den fazla yerleşik metrik ve test sunar; bunlar etkileşimli raporlar veya test paketleri olarak görselleştirilir. Bir not defterinde geçici kontroller olarak veya isteğe bağlı bir pano ile zamanlanmış izleme şeklinde çalıştırılabilir.
Depo
evidentlyai/evidentlyDil
PythonBununla neler kurabilirsin
- Dağıtılmış bir ML modelinde veri ve tahmin kaymasını zaman içinde tespit etme
- Önceden oluşturulmuş metriklerle LLM çıktılarını kalite, toksisite ve doğruluk açısından değerlendirme
- Üretim yapay zeka pipeline'ları için otomatik test paketleri ve izleme panoları oluşturma
Etiketler
ml-monitoringdrift-detectionevalsobservability