Código abiertoAnalytics6k
Arize Phoenix
Observabilidad y evaluación de IA open-source para aplicaciones LLM y agentes.
Phoenix es la herramienta open-source de observabilidad de Arize para experimentación, evaluación y resolución de problemas en aplicaciones de IA y LLM. Construida sobre OpenTelemetry y OpenInference, captura trazas de los frameworks más populares, ejecuta evaluaciones LLM-as-a-judge y visualiza embeddings para detectar deriva y grupos de fallos. Puede ejecutarse localmente en un notebook, como contenedor o en modo autoalojado.
Repositorio
Arize-ai/phoenixLenguaje
PythonLo que construirías con esto
- Instrumentar llamadas de LangChain, LlamaIndex o OpenAI directas con trazabilidad OpenTelemetry
- Puntuar salidas con evaluaciones LLM-as-a-judge integradas para alucinaciones y relevancia
- Explorar embeddings para detectar deriva en recuperación y grupos de consultas problemáticas
Etiquetas
llm-observabilityevalstracingopentelemetry