Open SourceAnalytics6k
Evidently
Évaluation et surveillance open-source pour les systèmes ML et LLM.
Evidently est une bibliothèque Python open-source pour évaluer, tester et surveiller les systèmes de données et d'IA, couvrant les cas d'usage ML classiques et LLM. Elle offre plus de 100 métriques et tests intégrés pour la dérive des données, la qualité des modèles et la qualité des sorties LLM, rendus sous forme de rapports interactifs ou de suites de tests. Elle peut être exécutée en vérifications ponctuelles dans un notebook ou en surveillance planifiée avec un tableau de bord optionnel.
Dépôt
evidentlyai/evidentlyLangage
PythonCe que vous pourriez construire avec
- Détecter la dérive des données et des prédictions sur un modèle ML déployé au fil du temps
- Évaluer les sorties LLM en termes de qualité, de toxicité et de correction avec des métriques préconstruites
- Construire des suites de tests automatisés et des tableaux de bord de surveillance pour les pipelines IA en production
Tags
ml-monitoringdrift-detectionevalsobservability