Zum Inhalt springen
ReviewRamble

Der wöchentliche Brief

KI im Test, in deinem Postfach.

  • Neue Tests von Tools, Modellen, MCP-Servern und Repos, mit dem Urteil vorneweg
  • Neu geprüfte Preise und Bewertungen, wenn sich etwas ändert
  • Neue Analysen, sobald sie erscheinen

Modelle, Agenten, MCP-Server und die Tools, die deine Zeit wirklich wert sind.

Eine E-Mail pro Woche. Abmelden kannst du dich über den Link in jedem Brief. Wie wir deine E-Mail-Adresse nutzen

PostHog

Produktanalyse, Session Replay und LLM-Tracing auf einer Plattform; der Code ist MIT, die KI-Funktionen und bezahlten Tarife gibt es aber nur in der Cloud.

Getestet von ReviewRamble editors · Aktualisiert

Auf GitHub ansehen Open Source

Diese Seite teilen:XLinkedInFacebookRedditWhatsAppE-Mail

Unsere Bewertung

4.3/5

Lohnt sich, wenn du LLM-Traces neben der Produktanalyse haben willst, die du ohnehin brauchst, aber behandle es als Cloud-Dienst, denn die selbst gehostete Version hat keinen Support und lässt die KI-Funktionen weg.

Was ist PostHog?

PostHog sammelt Produkt-Events, Session-Aufzeichnungen, Feature Flags, Fehler, Umfragen und Logs an einem Ort und ergänzt KI-Observability: Jeder Modellaufruf wird mit Prompt, Antwort, Tokens, Kosten und Latenz erfasst, zu Traces gruppiert und mit dem Nutzer, seiner Session-Aufzeichnung und etwaigen Exceptions verknüpft. SDK-Wrapper gibt es unter anderem für OpenAI, Anthropic, das Claude Agent SDK, Google, das Vercel AI SDK, LangChain, LiteLLM und OpenRouter.

PostHog AI ist ein Analyst in der App, der SQL schreibt, Insights und Dashboards baut, Aufzeichnungen findet und eine Coding-Aufgabe gegen ein verbundenes Repository starten kann. Es läuft auf Modellen von Anthropic, OpenAI und Alphabet und ist nur in der Cloud verfügbar.

Das Repository steht außerhalb des Verzeichnisses ee/ unter MIT-Lizenz. Self-Hosting ist ein kostenloses Docker-Compose-'Hobby'-Deployment, das PostHog nicht unterstützt; die eigene Dokumentation schickt fast alle zu PostHog Cloud, das für jedes Produkt ein monatliches Freikontingent und darüber nutzungsbasierte Preise hat.

Lohnt sich PostHog?

PostHogs Argument für KI-Teams ist Kontext. Eine schlechte Antwort deines Chatbots erscheint als Trace mit Prompt, Kosten und Latenz, und einen Klick entfernt liegen die Session-Aufzeichnung des Nutzers, der Funnel, aus dem er ausgestiegen ist, und die Exception, die die Anfrage ausgelöst hat. Spezialisierte Tracing-Tools wie Langfuse gehen bei Prompt-Management und Evaluation tiefer; keines davon steuert zusätzlich deine Feature Flags und A/B-Tests. Das Repository hat 40.826 GitHub-Sterne und wird fortlaufend aus master ausgeliefert statt in getaggten Releases.

Das Cloud-Freikontingent ist groß: jeden Monat 1M Analyse-Events, 5K Aufzeichnungen, 100K KI-Observability-Events, geteilt mit Evaluationen, und 500 PostHog-AI-Credits im Wert von $5, und die Nutzung stoppt an den Grenzen, solange du keine Karte hinterlegst. Über dem Kontingent kostet KI-Observability $0.00035 pro Event und sinkt zwischen 500.000 und 1M auf $0.00008 pro Event. Nach unserer Rechnung mit diesen veröffentlichten Sätzen kosten 1M KI-Events im Monat etwa $100. Boost ($250 im Monat), Scale ($750) und Enterprise ($2,000) bringen längere Aufbewahrung, SSO und Audit-Funktionen.

Der Umgang mit Daten will gelesen sein. Der Privacy Mode entfernt Prompt- und Antwortinhalte aus erfassten Events, und PostHog löscht große KI-Eigenschaften nach 30 Tagen. PostHog AI schickt deine Nachrichten und die gelesenen Daten an Anthropic, OpenAI und Alphabet; der DPA verbietet ihnen, damit zu trainieren, aber es gibt keine Zero Data Retention, und PostHog trainiert eigene Modelle mit anonymisierten Daten, solange ein Admin diese Einstellung nicht abschaltet.

Beim Self-Hosting enttäuscht das Repository. Die Dokumentation nennt es offiziell nicht unterstützt, gibt keine Garantie gegen Datenverlust, veröffentlicht keine CVEs, weil es keine Versionen gibt, und sagt, dass alle Funktionen der bezahlten Tarife nur in der Cloud laufen; PostHog AI lässt sich gar nicht selbst hosten. Das Hobby-Deployment verlangt eine Maschine mit 4 vCPU und 16GB RAM, und das eigene Entscheidungsdiagramm der Dokumentation stellt jeden infrage, der mehr als 300k Events erwartet.

Wo es sich lohnt

  • Ein SaaS-Start-up mit fünf Leuten, das seiner App einen KI-Schreibassistenten hinzufügt

    Sehen, welche Nutzer schlechte Antworten bekommen und was jedes Gespräch kostet

    Den OpenAI- oder Anthropic-Client mit dem PostHog-SDK umhüllen, damit jeder Aufruf ein Trace wird, verknüpft mit Nutzer und Aufzeichnung. Die ersten 100K KI-Events im Monat sind kostenlos; 1M Events kosten zu den veröffentlichten Sätzen etwa $100.

  • Eine Produktmanagerin in einem B2B-Softwareunternehmen

    Fragen an die Produktdaten stellen, ohne auf einen Analysten zu warten

    PostHog AI schreibt das SQL, baut das Insight oder Dashboard und findet passende Aufzeichnungen aus einer Frage in normaler Sprache. 500 Credits im Monat sind kostenlos, danach $0.01 pro Credit; die Daten laufen über Anthropic, OpenAI und Alphabet.

  • Ein Team einer Gesundheits-App, dessen Prompts Patientendaten enthalten können

    Kosten und Latenz der Modelle verfolgen, ohne zu speichern, was Patienten tippen

    Den Privacy Mode im SDK einschalten, damit Prompt- und Antwortfelder nie erfasst werden, und in der Cloud das HIPAA-BAA von PostHog unterzeichnen. Token-, Kosten- und Latenzwerte kommen weiterhin an.

Bevor du dich festlegst

Einrichtung
Cloud: registrieren und npx @posthog/wizard ai-observability im Projekt ausführen. Selbst gehostet: ein deploy-hobby-Skript auf einer Ubuntu-VM mit 4 vCPU, 16GB RAM und 30GB oder mehr Speicher, dazu eine Domain.
Integrationen
OpenAI, OpenAI Agents SDK, Anthropic, Claude Agent SDK, Google, Google ADK, Vercel AI SDK, LangChain, LiteLLM, OpenRouter, Cloudflare AI Gateway und mehr; ein MCP-Server und eine Slack-App; Traces lassen sich auch aus Helicone, Langfuse und Traceloop weiterleiten.
Daten und Datenschutz
Cloud-Regionen in den USA (Virginia) und der EU (Frankfurt); HIPAA-BAA verfügbar. Events werden im Gratis-Tarif 1 Jahr und bei Pay-as-you-go 2 Jahre aufbewahrt. Die Anbieter hinter PostHog AI dürfen nicht mit deinen Daten trainieren, PostHog selbst trainiert aber eigene Modelle mit anonymisierten Daten, solange das nicht abgeschaltet ist.
Kosten im großen Maßstab
KI-Observability sinkt bis 1M von $0.00035 auf $0.00008 pro Event; Analyse-Events beginnen nach dem ersten 1M bei $0.00005 pro Stück. Plattformpakete kosten zusätzlich $250 bis $2,000 im Monat. Kosten für selbst gehostete Infrastruktur sind nicht veröffentlicht.
Grenzen
Der Gratis-Tarif verwirft Events über seinen Grenzen. Selbst gehostete Instanzen bekommen keinen Support, keine getaggten Releases und keine bezahlten Funktionen, und neue Kubernetes-Deployments werden nicht mehr unterstützt.

Was gut ist

  • LLM-Traces verknüpft mit Session-Aufzeichnungen, Fehlern und Produktanalyse
  • Monatliches Freikontingent für jedes Produkt, Nutzung standardmäßig gedeckelt
  • SDK-Wrapper für die meisten großen Modellanbieter und Agenten-Frameworks
  • Privacy Mode hält Prompts und Antworten aus gespeicherten Events heraus

Was nicht

  • Selbst gehostetes Deployment ohne Support, ohne Versionen und ohne bezahlte Funktionen
  • PostHog AI nur in der Cloud und ohne Zero Data Retention bei den Modellanbietern
  • Trainiert eigene Modelle mit anonymisierten Daten, solange ein Admin nicht widerspricht
  • Flacheres Prompt-Management und flachere Evaluation als spezialisierte LLM-Tools

Am besten für

Produktteams, die eine KI-Funktion ausliefern und Modell-Traces, Kosten und Nutzerverhalten in einem Cloud-Tool wollen und nicht selbst hosten müssen.

Alternativen zu PostHog

PostHog: häufige Fragen

Lohnt sich PostHog?
Lohnt sich, wenn du LLM-Traces neben der Produktanalyse haben willst, die du ohnehin brauchst, aber behandle es als Cloud-Dienst, denn die selbst gehostete Version hat keinen Support und lässt die KI-Funktionen weg. Wir bewerten es mit 4.3 von 5.
Was kostet PostHog?
MIT außerhalb von ee/; selbst gehostetes Hobby-Deployment kostenlos und ohne Support. Cloud kostenlos pro Monat: 1M Events, 5K Aufzeichnungen, 100K KI-Observability-Events, 500 PostHog-AI-Credits. Danach KI-Observability für $0.00035 pro Event, sinkend mit dem Volumen. Boost $250/Monat, Scale $750/Monat, Enterprise $2,000/Monat.
Welche Nachteile hat PostHog?
Selbst gehostetes Deployment ohne Support, ohne Versionen und ohne bezahlte Funktionen; PostHog AI nur in der Cloud und ohne Zero Data Retention bei den Modellanbietern; Trainiert eigene Modelle mit anonymisierten Daten, solange ein Admin nicht widerspricht; Flacheres Prompt-Management und flachere Evaluation als spezialisierte LLM-Tools.
Für wen eignet sich PostHog?
Produktteams, die eine KI-Funktion ausliefern und Modell-Traces, Kosten und Nutzerverhalten in einem Cloud-Tool wollen und nicht selbst hosten müssen.
Was kostet PostHog für ein Team oder im Produktivbetrieb?
KI-Observability sinkt bis 1M von $0.00035 auf $0.00008 pro Event; Analyse-Events beginnen nach dem ersten 1M bei $0.00005 pro Stück. Plattformpakete kosten zusätzlich $250 bis $2,000 im Monat. Kosten für selbst gehostete Infrastruktur sind nicht veröffentlicht.
Ist PostHog sicher für Firmendaten?
Cloud-Regionen in den USA (Virginia) und der EU (Frankfurt); HIPAA-BAA verfügbar. Events werden im Gratis-Tarif 1 Jahr und bei Pay-as-you-go 2 Jahre aufbewahrt. Die Anbieter hinter PostHog AI dürfen nicht mit deinen Daten trainieren, PostHog selbst trainiert aber eigene Modelle mit anonymisierten Daten, solange das nicht abgeschaltet ist.
Was sind die besten Alternativen zu PostHog?
Die nächsten Alternativen, die wir getestet haben, sind Langfuse, Arize Phoenix und Opik.

Antworten geprüft am 16. Nov. 2026.

Du entwickelst PostHog? Zeig diese Bewertung auf deiner WebsitePostHog mit 4.3 von 5 bewertet auf ReviewRamble