LLMOps & Evals
·7 Min. Lesezeit
Opik im Test: Open-Source-Tracing und Evals mit US-gehosteter Cloud
Opik im Test: Traces, Judge-Metriken, Prompts und Optimierer unter Apache 2.0. Selbst hosten ist gratis, Pro-Cloud ab 19 Dollar, Hosting in den USA.
Blog/Schlagwort
Artikel über LLM observability
5 Artikel mit dem Schlagwort LLM observability, neueste zuerst. Jeder ist belegt und für Leute geschrieben, die Software ausliefern.
LLMOps & Evals
·10 Min. Lesezeit
Langfuse-Test: Tracing, Prompts und Evals selbst gehostet
Langfuse im Test: LLM-Traces, Prompt-Versionen und Experimente auf einer MIT-lizenzierten Plattform. Was Selbsthosting kostet und wo Langfuse verliert.
LLMOps & Evals
·12 Min. Lesezeit
Observability für LLM-Agenten mit OpenTelemetry: Traces, Tokens, PII und Evals
So tracest du LLM-Agenten mit OpenTelemetry: GenAI Semantic Conventions und ihr Status, Span-Baum, Token-Metriken, Sampling, PII, Evals und Tool-Optionen.
LLMOps & Evals
·10 Min. Lesezeit
Arize Phoenix im Test: LLM-Tracing und Evals auf eigener Infrastruktur
Arize Phoenix im Test: ELv2-lizenzierter Tracing- und Eval-Server, Betriebskosten und wo Langfuse, Braintrust und LangSmith besser sind.
LLMOps & Evals
·10 Min. Lesezeit
Helicone: Observability, die im Request-Pfad sitzt
Helicone im Test: Apache-2.0-Plattform für LLM-Gateway und Observability. Was der Proxy bringt, was er kostet und wie der Eigenbetrieb aussieht.
- LLM observability
- OpenTelemetry
- Cost tracking