Open SourceAnalytics16k
Langfuse
Piattaforma open-source di LLM engineering per tracing, valutazione e gestione dei prompt.
Langfuse è una piattaforma open-source di osservabilità e analytics progettata appositamente per applicazioni LLM. Cattura trace nidificate delle esecuzioni di agenti e chain, traccia l'utilizzo di token e i costi, e fornisce strumenti per la valutazione, la gestione dei prompt e i dataset. Si integra con l'OpenAI SDK, LangChain, LlamaIndex e OpenTelemetry, e può essere self-hosted con Postgres e ClickHouse.
Repository
langfuse/langfuseLinguaggio
TypeScriptCosa ci costruiresti
- Tracciare pipeline multi-step di agenti e RAG per debuggare latenza, costi e output errati
- Eseguire valutazioni LLM offline e online su dataset curati per rilevare regressioni
- Versionare e fare A/B test dei prompt da una UI centralizzata senza ridistribuire l'app
Tag
llm-observabilitytracingevalsself-hosted