Open SourceAnalytics9k
Ragas
Evaluatietoolkit voor RAG-pipelines en LLM-applicaties.
Ragas is een open-source framework voor het evalueren en testen van LLM-applicaties, met een sterke focus op retrieval-augmented generation. Het biedt referentievrije metrics zoals faithfulness, antwoordrelevantie en contextprecisie/recall, plus tooling voor het genereren van synthetische testsets. Het integreert met LangChain, LlamaIndex en observability-tools om objectieve scoring in CI- en experimentlussen te brengen.
Opslagplaats
explodinggradients/ragasTaal
PythonWat je ermee zou bouwen
- Scoor RAG-antwoorden op faithfulness en contextrelevantie zonder handmatige labels
- Genereer synthetische vraag/antwoord-testsets om een retrieval-pipeline te benchmarken
- Blokkeer model- of promptwijzigingen in CI door eval-metrics in de tijd bij te houden
Tags
evalsragllm-testingmetrics