Ragas

Toolkit d'évaluation pour les pipelines RAG et les applications LLM.

Ragas est un framework open-source pour évaluer et tester les applications LLM, avec un focus particulier sur la génération augmentée par retrieval. Il fournit des métriques sans référence telles que la fidélité, la pertinence des réponses et la précision/rappel du contexte, ainsi que des outils pour générer des jeux de test synthétiques. Il s'intègre avec LangChain, LlamaIndex et des outils d'observabilité pour apporter un scoring objectif dans les boucles CI et d'expérimentation.