Evidently

Open-Source-Evaluation und Monitoring für ML- und LLM-Systeme.

Evidently ist eine Open-Source-Python-Bibliothek zur Evaluierung, zum Testen und zum Monitoring von Daten- und KI-Systemen, die klassische ML- und LLM-Anwendungsfälle abdeckt. Sie bietet über 100 integrierte Metriken und Tests für Datendrift, Modellqualität und LLM-Ausgabequalität, die als interaktive Reports oder Testsuites dargestellt werden. Sie kann als Ad-hoc-Checks in einem Notebook oder als geplantes Monitoring mit einem optionalen Dashboard betrieben werden.