Was ist Opik?
Opik vom Experiment-Tracking-Anbieter Comet erfasst LLM-Aufrufe und Agentenschritte als Traces, führt Evaluierungen mit LLM-as-Judge-Metriken durch, verwaltet Prompts und Datensätze und überwacht die Produktion mit Dashboards und Regeln für Online-Evaluierung. Eine pytest-Integration führt Evaluierungen in der CI aus, ein Agent Optimizer SDK stimmt Prompts automatisch ab, und ein MCP-Server lässt Claude Code oder Cursor Traces aus dem Chat heraus lesen.
Die gesamte Plattform, Server und Web-App eingeschlossen, steht unter Apache 2.0, und laut Preisseite von Comet ist die selbst gehostete Version dieselbe Codebasis wie die gehostete. Selbst gehostet läuft sie lokal mit Docker Compose oder in Produktion mit einem Helm-Chart, auf einem Stack aus ClickHouse, MySQL, Redis, ZooKeeper und MinIO.
Die gehosteten Pläne beginnen mit einer kostenlosen Stufe mit 25.000 Spans im Monat und 60 Tagen Aufbewahrung. Pro kostet 19 $ im Monat für 100.000 Spans, danach 5 $ pro 100.000; eine Aufbewahrung von bis zu 400 Tagen ist ein Add-on für 29 $ pro 100.000 Spans.
Was kostet Opik?
| Tarif | Preis | Was enthalten ist |
|---|---|---|
| Open source | Free | Apache 2.0 |
| Cloud Free | Free | 25.000 Spans/Monat, 60 Tage Aufbewahrung |
| Pro | $19/month | 100.000 Spans, danach 5 $ pro 100.000 |
| Enterprise | Custom |
Kostenlos und Open Source unter Apache 2.0. Cloud: Free (25.000 Spans/Monat, 60 Tage Aufbewahrung); Pro 19 $/Monat (100.000 Spans, danach 5 $ pro 100.000; Add-on für 400 Tage Aufbewahrung 29 $ pro 100.000 Spans); Enterprise nach Vereinbarung.
Lohnt sich Opik?
Für Opik sprechen Lizenz und Preis. Jeder Teil, der Server eingeschlossen, steht unter Apache 2.0 ohne Enterprise-Ordner, und der Pro-Cloud-Plan für 19 $ im Monat für 100.000 Spans unterbietet Langfuse Core mit 29 $. Für ein Team, dessen Juristen bei allem, was es hostet, eine einfache permissive Lizenz sehen wollen, ist damit viel entschieden.
Die Funktionsliste folgt Langfuse eng: Traces, Datensätze, Experimente, LLM-as-Judge-Metriken für Halluzinationen und Moderation, Online-Evaluierung und Prompt-Verwaltung. Hinzu kommen der Agent Optimizer, eine pytest-Integration, die Evaluierungen wie Unit-Tests behandelt, und AI Guardrails, die die Preisseite nur für die selbst gehostete Edition führt. Die Integrationen reichen über mehr als 60 Frameworks und Anbieter, dazu OpenTelemetry für Java, Ruby und .NET. Die Angabe im README von 40 Millionen Traces pro Tag ist eine Herstellerzahl ohne veröffentlichten Benchmark dahinter.
Die selbst gehostete Edition hat eine Lücke, die die Diskussion um die Lizenz verdeckt. Laut der Dokumentation von Comet kommt sie "ohne Funktionen zur Benutzerverwaltung", es gibt also keine Logins oder Rollen: Wer Port 5173 erreicht, sieht jeden Trace, und Traces enthalten meist Prompts und Kundentexte. Außerdem schickt sie standardmäßig täglich einen anonymen Nutzungsbericht an Comet (Zahl der Traces, Experimente und Datensätze plus eine Server-ID), bis OPIK_USAGE_REPORT_ENABLED auf false gesetzt ist. Gehostetes SSO, RBAC und die Linie aus SOC 2, ISO 27001 und HIPAA gibt es alle nur im Enterprise-Plan.
Der Release-Takt ist fast täglich; 2.2.119 erschien am 23. Oktober 2026, und die Dokumentation warnt, dass neuere SDKs einen neueren Server brauchen können, eine selbst gehostete Installation muss also Schritt halten. Mit rund 22.800 GitHub-Sternen gegenüber 36.200 bei Langfuse hat Opik weniger Antworten aus der Community, auf die man sich stützen kann. Die Preisseite widerspricht sich bei den Plätzen weiterhin: Im FAQ verspricht sie unbegrenzte Mitglieder, auf den Plan-Karten begrenzt sie Free auf 10 und Pro auf 50.
Wo es sich lohnt
Ein ML-Engineer bei einem Fintech, das keine Prompts an ein US-SaaS schicken darf
Einen internen RAG-Assistenten tracen und evaluieren, ohne dass Daten die VPC verlassen
Stelle das Helm-Chart im bestehenden Kubernetes-Cluster bereit und richte das Python-SDK mit opik configure darauf aus. Keine Lizenzgebühr, aber das Team betreibt ClickHouse und MySQL selbst und muss SSO oder ein VPN davorsetzen, weil die Open-Source-Edition keine Benutzerkonten hat.
Ein Start-up mit drei Leuten, das einen Agenten für Kunden ausliefert
Produktions-Traces und Online-Bewertungen durch LLM-Judges bekommen, ohne Infrastruktur zu betreiben
Pro für 19 $ im Monat deckt 100.000 Spans ab; bei 2 Millionen Spans im Monat liegt die Rechnung mit 5 $ pro weiteren 100.000 bei etwa 114 $. Die Daten werden in den USA gespeichert und 60 Tage aufbewahrt, sofern das Add-on für längere Aufbewahrung nicht gekauft wird.
Ein Plattform-Team, das Comet schon fürs Modelltraining nutzt
Die LLM-Evaluierung neben dem bestehenden Experiment-Tracking halten
Opik läuft im selben Comet-Workspace, und die pytest-Integration lässt einen CI-Build scheitern, wenn eine Metrik für Halluzination oder Relevanz absinkt. Das MLOps-Add-on und OpikAssist gibt es nur in der Cloud, gemischte Setups mit Selbsthosting verzichten also darauf.
Bevor du dich festlegst
- Einrichtung
- pip install opik und den Decorator @track für die gehostete Cloud hinzufügen. Selbst hosten heißt git clone plus ./opik.sh auf Docker Compose, was die Dokumentation als nicht produktionsreif bezeichnet; in Produktion kommt das Helm-Chart zum Einsatz. Comet veröffentlicht keine Angaben zu CPU- oder Speicherbedarf.
- Integrationen
- SDKs für Python und TypeScript, eine REST-API, OpenTelemetry-Ingest und dokumentierte Integrationen für mehr als 60 Frameworks und Anbieter, darunter LangChain, LangGraph, LlamaIndex, OpenAI Agents, Vercel AI SDK, LiteLLM, Dify und n8n. Ein MCP-Server verbindet Claude Code, Cursor und Codex.
- Daten und Datenschutz
- Selbst gehostete Traces bleiben in deinem ClickHouse, aber der Server schickt täglich einen anonymen Nutzungsbericht an Comet, sofern nicht OPIK_USAGE_REPORT_ENABLED=false gesetzt ist, und es gibt kein eingebautes Login. Im September 2026 wurde eine SSRF mittlerer Schwere im Test-Endpunkt für Alarm-Webhooks veröffentlicht. Die Cloud wird in den USA gehostet; SOC 2, ISO 27001 und HIPAA sind nur bei Enterprise aufgeführt.
- Kosten im großen Maßstab
- Selbst gehostet kostenlos bis auf den Cluster. Cloud Pro kostet 19 $ plus 5 $ pro 100.000 Spans über 100.000, 10 Millionen Spans im Monat kosten also rund 514 $; eine auf 400 Tage verlängerte Aufbewahrung kostet 29 $ pro 100.000 Spans. SSO, RBAC und SLAs brauchen einen individuellen Enterprise-Vertrag.
- Grenzen
- 181 offene Issues und Pull Requests, viele zum Parsen von LLM-Judge-Bewertungen und zu Dashboard-Filtern. Fast tägliche Releases und die Versionskopplung zwischen SDK und Server bedeuten, dass selbst gehostete Installationen regelmäßige Upgrades brauchen. Kleinere Community als Langfuse.
Was gut ist
- Durchgehend Apache 2.0, auch der Server
- Die Pro-Cloud für 19 $ im Monat unterbietet Langfuse Core (29 $)
- pytest-Integration, Prompt-Optimierer und Guardrails für selbst gehostete Installationen
- OpenTelemetry-Ingest für Java, Ruby und .NET
Was nicht
- Die selbst gehostete Edition hat keine Logins oder Rollen
- Anonymer Nutzungsbericht standardmäßig aktiv
- SSO, RBAC und Compliance nur bei Enterprise
- Die Preisseite widerspricht sich bei den Platzgrenzen
Am besten für
Teams, die eine permissiv lizenzierte, selbst hostbare Plattform für Tracing und Evaluierung wollen oder eine günstige gehostete.
Alternativen zu Opik
Opik: häufige Fragen
- Lohnt sich Opik?
- Opik verschenkt den ganzen Server unter Apache 2.0 und verkauft den günstigsten gehosteten Plan, aber die selbst gehostete Version hat keine Benutzerkonten und meldet sich standardmäßig beim Hersteller. Wir bewerten es mit 4.1 von 5.
- Was kostet Opik?
- Kostenlos und Open Source unter Apache 2.0. Cloud: Free (25.000 Spans/Monat, 60 Tage Aufbewahrung); Pro 19 $/Monat (100.000 Spans, danach 5 $ pro 100.000; Add-on für 400 Tage Aufbewahrung 29 $ pro 100.000 Spans); Enterprise nach Vereinbarung.
- Welche Nachteile hat Opik?
- Die selbst gehostete Edition hat keine Logins oder Rollen; Anonymer Nutzungsbericht standardmäßig aktiv; SSO, RBAC und Compliance nur bei Enterprise; Die Preisseite widerspricht sich bei den Platzgrenzen.
- Für wen eignet sich Opik?
- Teams, die eine permissiv lizenzierte, selbst hostbare Plattform für Tracing und Evaluierung wollen oder eine günstige gehostete.
- Was kostet Opik für ein Team oder im Produktivbetrieb?
- Selbst gehostet kostenlos bis auf den Cluster. Cloud Pro kostet 19 $ plus 5 $ pro 100.000 Spans über 100.000, 10 Millionen Spans im Monat kosten also rund 514 $; eine auf 400 Tage verlängerte Aufbewahrung kostet 29 $ pro 100.000 Spans. SSO, RBAC und SLAs brauchen einen individuellen Enterprise-Vertrag.
- Ist Opik sicher für Firmendaten?
- Selbst gehostete Traces bleiben in deinem ClickHouse, aber der Server schickt täglich einen anonymen Nutzungsbericht an Comet, sofern nicht OPIK_USAGE_REPORT_ENABLED=false gesetzt ist, und es gibt kein eingebautes Login. Im September 2026 wurde eine SSRF mittlerer Schwere im Test-Endpunkt für Alarm-Webhooks veröffentlicht. Die Cloud wird in den USA gehostet; SOC 2, ISO 27001 und HIPAA sind nur bei Enterprise aufgeführt.
- Was sind die besten Alternativen zu Opik?
- Die nächsten Alternativen, die wir getestet haben, sind Langfuse, Arize Phoenix und DeepEval.
Antworten geprüft am 26. Okt. 2026.