Ragas

Evaluierungs-Toolkit für RAG-Pipelines und LLM-Anwendungen.

Ragas ist ein Open-Source-Framework zur Evaluierung und zum Testen von LLM-Anwendungen mit einem starken Fokus auf Retrieval-Augmented Generation. Es bietet referenzfreie Metriken wie Faithfulness, Answer Relevancy und Context Precision/Recall sowie Tooling zur Generierung synthetischer Testsets. Es integriert sich mit LangChain, LlamaIndex und Observability-Tools, um objektive Bewertungen in CI- und Experiment-Schleifen zu bringen.