Ragas

RAG pipeline'ları ve LLM uygulamaları için değerlendirme araç seti.

Ragas, retrieval-augmented generation üzerine güçlü bir odakla LLM uygulamalarını değerlendirip test etmeye yönelik açık kaynaklı bir framework'tür. Sadakat, yanıt ilgisi ve bağlam hassasiyeti/geri çağırma gibi referanssız metrikler ile sentetik test kümeleri oluşturma araçları sunar. LangChain, LlamaIndex ve gözlemlenebilirlik araçlarıyla entegre olarak CI ve deney döngülerine nesnel puanlama getirir.