Open SourceAnalytics6k
Evidently
Valutazione e monitoring open-source per sistemi ML e LLM.
Evidently è una libreria Python open-source per valutare, testare e monitorare sistemi di dati e AI, coprendo sia casi d'uso ML classici che LLM. Offre oltre 100 metriche e test predefiniti per data drift, qualità del modello e qualità degli output LLM, resi come report interattivi o test suite. Può girare come check ad-hoc in un notebook oppure come monitoring pianificato con una dashboard opzionale.
Repository
evidentlyai/evidentlyLinguaggio
PythonCosa ci costruiresti
- Rilevare data drift e prediction drift su un modello ML distribuito nel tempo
- Valutare gli output LLM per qualità, tossicità e correttezza con metriche precostruite
- Costruire test suite automatiche e dashboard di monitoring per pipeline AI in produzione
Tag
ml-monitoringdrift-detectionevalsobservability