Zum Inhalt springen
ReviewRamble

Der wöchentliche Brief

KI im Test, in deinem Postfach.

  • Neue Tests von Tools, Modellen, MCP-Servern und Repos, mit dem Urteil vorneweg
  • Neu geprüfte Preise und Bewertungen, wenn sich etwas ändert
  • Neue Analysen, sobald sie erscheinen

Modelle, Agenten, MCP-Server und die Tools, die deine Zeit wirklich wert sind.

Eine E-Mail pro Woche. Abmelden kannst du dich über den Link in jedem Brief. Wie wir deine E-Mail-Adresse nutzen

Splunk Agent Observability

Das frühere Galileo, jetzt Teil von Splunk: Agent-Tracing, Evaluierungen, Luna-Judge-Modelle und Guardrails zur Laufzeit, verkauft per Jahresangebot.

Getestet von Andrew Miller · Aktualisiert

Unsere Bewertung

3.7/5

Galileos kleine Judge-Modelle machen es günstig, jede Agent-Konversation zu bewerten, doch unter Splunk ist daraus ein Enterprise-Kauf mit vorgeschaltetem Vertriebsgespräch geworden.

Was ist Splunk Agent Observability?

Splunk Agent Observability ist das Produkt, das früher Galileo (galileo.ai) hieß. Cisco kündigte am 9. April 2026 die Übernahme von Galileo Technologies an und schloss sie am 22. Mai ab; laut Galileos Release Notes wurde Galileo am 7. August 2026 zu Splunk Agent Observability. Die alte Preisseite auf galileo.ai leitet inzwischen auf die von Splunk weiter.

Das Produkt zeichnet jeden Schritt eines KI-Agenten als Trace auf (Modellaufrufe, Tool-Aufrufe, Retrieval) und bewertet diese Traces mit eingebauten und eigenen Evaluatoren für Korrektheit, Tool-Nutzung, RAG-Qualität und Sicherheit. Sein besonderer Teil ist Luna, eine Familie kleiner Judge-Modelle, die laut Splunk in etwa 152 ms ein Urteil liefern, zu rund 0,15 $ pro Million Tokens, gegenüber etwa 3.200 ms und 5,00 $ bei einem Frontier-Modell. Evaluatoren, denen du vertraust, lassen sich in Guardrails zur Laufzeit umwandeln, die Prompt Injection, das Abfließen personenbezogener Daten und Tool-Missbrauch blockieren; Galileos ältere Funktion Protect wurde im Juni 2026 zugunsten von Agent Control abgekündigt. Eine Ansicht namens Tokenomics verfolgt Token-Kosten nach Anfrage, Modell, Agent und Workflow.

Es läuft als Teil von Splunk Observability Cloud (Regionen USA, EU, Australien und Japan) oder On-Premises, auch Air-Gapped. Splunk führt es ab 100 $ im Monat pro 1,2 Millionen Spans im Jahr, jährlich abgerechnet, mit 500 Millionen Luna-Tokens und 5 Luna-Fine-Tuning-Läufen pro Jahr inklusive; Zugang zum vollen Produkt gibt es über das Vertriebsteam von Splunk.

Was kostet Splunk Agent Observability?

TarifPreisWas enthalten ist
Observability Cloud Free EditionFreeBis 15 Hosts, unbefristet; Agent-Tracing inklusive
Agent ObservabilityFrom $100/month, billed annuallyPro 1,2M Spans im Jahr; 500M Luna-Tokens und 5 Luna-Fine-Tuning-Läufe pro Jahr

Agent Observability ab 100 $/Monat pro 1,2M Spans im Jahr, jährlich abgerechnet, mit 500M Luna-Tokens und 5 Luna-Fine-Tuning-Läufen pro Jahr; zusätzliche Luna-Tokens und längere Aufbewahrung nach Angebot. Splunk Observability Cloud Free Edition (bis 15 Hosts, unbefristet) umfasst Agent-Tracing. Galileos alte Tarife Free (5.000 Traces/Monat) und Pro (100 $/Monat bei jährlicher Zahlung, 50.000 Traces) werden nicht mehr veröffentlicht.

Lohnt sich Splunk Agent Observability?

Wer die Antworten seines KI-Agenten von einem großen Modell benoten lässt, hat bald eine Rechnung für die Benotung, die der des Agenten selbst nahekommt. Die meisten Teams prüfen deshalb Stichproben von ein paar Prozent der Konversationen und hoffen, dass der Rest ähnlich aussieht.

Galileos Antwort war Luna: kleine Modelle, die nur zum Urteilen trainiert sind. Laut Splunk sind sie 98% günstiger als ein Frontier-Modell als Judge und schnell genug, um einen schlechten Tool-Aufruf zu blockieren, bevor er ausgeführt wird. Das ist immer noch der Grund, sich dieses Produkt anzusehen. Die Guardrails bauen auf denselben Modellen auf, sodass eine Prüfung, der du im Test vertraust, in der Produktion Prompt Injection oder eine abgeflossene Kartennummer stoppen kann, statt sie hinterher zu melden.

Der Rest ist ein solides Tool für Tracing und Evaluierung: Traces jedes Modell-, Tool- und Retrieval-Schritts, voreingestellte Evaluatoren für Agenten, RAG und Text-to-SQL, Experimente gegen Datasets, Annotation Queues und eine Kostenansicht. Seit Cisco Galileo im Mai 2026 gekauft und am 7. August umbenannt hat, steckt es außerdem in Splunk Observability Cloud. Ein langsamer Agent lässt sich so bis zur GPU oder Datenbank dahinter verfolgen, ähnlich wie Datadog es für seine eigenen Kunden macht.

Der Haken: Gerade die Teile, die Galileo besonders machten, sind am schwersten zu bekommen. Laut Splunks Luna-Dokumentation sind Luna-Modelle nur im Enterprise-Tarif verfügbar, und die gehostete Version unterstützt nur fünf voreingestellte Luna-Evaluatoren, ohne Luna-Fine-Tuning und ohne eigene Code-Evaluatoren; dafür braucht es die On-Premises-Installation. Die Release Notes von Splunk Observability Cloud sagen, dass du für den Zugang den Support kontaktierst. Der veröffentlichte Preis, ab 100 $ im Monat pro 1,2 Millionen Spans im Jahr, ist ein Ausgangspunkt, keine Preisliste. Galileos alter Free-Tarif mit 5.000 Traces im Monat und sein Pro-Tarif für 100 $ werden nicht mehr veröffentlicht, und Splunk hat nicht gesagt, wie Verlängerungen für Kunden aussehen, die vor dem 7. August dazukamen; ihre Dokumentation bleibt vorerst auf docs.galileo.ai. Wer auf Protect aufgebaut hat, hat außerdem eine Migration zu Agent Control vor sich.

Unser Fazit: Die Judge-Modelle sind der Grund für die Wahl, und sie werden jetzt so verkauft wie alles andere bei Splunk. Ein Team, das Splunk schon für Observability bezahlt, sollte ein Angebot anfordern. Ein Startup mit zehn Leuten, das sich anmelden und noch heute Nachmittag mit dem Bewerten anfangen will, ist mit Braintrust oder LangSmith besser bedient.

Wo es sich lohnt

  • Ein Plattformteam bei einer Bank, die schon Splunk Observability Cloud betreibt

    Verhindern, dass der Kundenservice-Agent Kartennummern preisgibt oder eingeschleusten Anweisungen folgt

    Voreingestellte Luna-Evaluatoren für personenbezogene Daten und Prompt Injection laufen bei jeder Anfrage als Guardrails; laut Splunk liefert Luna ein Urteil in etwa 152 ms, die Prüfung kann eine Antwort also blockieren, bevor sie verschickt wird. Der Preis richtet sich nach einem Jahresangebot.

  • Eine Verantwortliche für KI-Qualität bei einem Softwareunternehmen im Gesundheitswesen

    Jede Konversation in der Produktion bewerten statt einer kleinen Stichprobe

    Luna-Judges zu angegebenen 0,15 $ pro Million Tokens, gegenüber etwa 5,00 $ für einen Frontier-Judge, machen die volle Abdeckung bezahlbar. Ein Luna-Modell mit den eigenen Labels des Unternehmens zu trainieren, braucht etwa 4.000 Beispiele und die On-Premises- oder Enterprise-Umgebung.

  • Ein Engineering Manager mit einem alten Galileo-Vertrag

    Vor der Verlängerung verstehen, was die Umbenennung zu Splunk bedeutet

    Bestehende Workspaces und docs.galileo.ai funktionieren für Kunden, die vor dem 7. August 2026 dazukamen, weiter. Frag Splunk nach Verlängerungspreisen, Bedingungen zur Datenverarbeitung und einem Zeitplan für den Umzug von Protect-Regeln zu Agent Control.

Bevor du dich festlegst

Einrichtung
Zugang über das Splunk-Team beantragen, dann Agent Observability im Menü von Observability Cloud wählen; laut Quickstart dauert ein erster Trace mit dem Python-SDK, einer Integration für ein Agent-Framework oder der REST-API weniger als 5 Minuten.
Integrationen
OpenAI und das OpenAI Agents SDK, Anthropic Claude, LangChain und LangGraph, CrewAI, Google ADK, Pydantic AI, Strands, Microsoft Agent Framework, Amazon Bedrock, NVIDIA NIM; OpenTelemetry und OpenInference; MCP-Server für Cursor und VS Code.
Daten und Datenschutz
Gehostete Traces werden standardmäßig 30 Tage aufbewahrt, erweiterbar auf 60, 90 oder 180; Daten aus Experimenten 2 Jahre. Gehostete Regionen in den USA, der EU (eu-west-1), Australien und Japan; On-Premises- und Air-Gapped-Installationen verfügbar. Galileo nennt SOC 2 Type II und unterzeichnet HIPAA-BAAs; Splunk hat weder produktspezifische Zertifizierungen veröffentlicht noch, ob Trace-Daten zum Training genutzt werden.
Kosten im großen Maßstab
Über den Einstiegspreis von 100 $ im Monat pro 1,2 Millionen Spans im Jahr bei jährlicher Abrechnung hinaus nicht veröffentlicht. Splunk rechnet nach agentischen Spans plus Luna-Tokens ab, wobei die Luna-Abrechnung im jeweiligen Abonnementvertrag festgelegt wird.
Grenzen
Die gehostete Aufnahme ist standardmäßig auf 5 MB Trace-Daten pro Minute und gekaufter Einheit begrenzt, und Spans über dem Limit werden verworfen. Luna-Fine-Tuning und codebasierte Evaluatoren gibt es nur On-Premises; Luna-3 ist in der Region Japan nicht verfügbar.

Was gut ist

  • Luna-Judge-Modelle machen es bezahlbar, den gesamten Traffic zu bewerten statt einer Stichprobe
  • Evaluatoren dienen zugleich als Guardrails zur Laufzeit, die blockieren statt nur zu melden
  • Agent-Traces verknüpft mit Daten aus Splunk APM und Infrastruktur
  • On-Premises- und Air-Gapped-Installationen verfügbar
  • Voreingestellte Evaluatoren für Agenten, RAG, Sicherheit und Text-to-SQL

Was nicht

  • Luna nur im Enterprise-Tarif, und die gehostete Version unterstützt nur fünf voreingestellte Luna-Evaluatoren
  • Zugang über Support oder Vertrieb von Splunk; keine Preisliste zum Selbstbuchen
  • Galileos veröffentlichte Tarife Free und Pro sind weg
  • Verlängerungsbedingungen für bestehende Galileo-Kunden nicht veröffentlicht
  • Protect abgekündigt; Nutzer der Guardrails müssen zu Agent Control wechseln

Am besten für

Große Organisationen, die schon Splunk Observability nutzen und jede Agent-Konversation bewerten sowie unsichere Aktionen zur Laufzeit blockieren wollen.

Alternativen zu Splunk Agent Observability

Splunk Agent Observability: häufige Fragen

Lohnt sich Splunk Agent Observability?
Galileos kleine Judge-Modelle machen es günstig, jede Agent-Konversation zu bewerten, doch unter Splunk ist daraus ein Enterprise-Kauf mit vorgeschaltetem Vertriebsgespräch geworden. Wir bewerten es mit 3.7 von 5.
Was kostet Splunk Agent Observability?
Agent Observability ab 100 $/Monat pro 1,2M Spans im Jahr, jährlich abgerechnet, mit 500M Luna-Tokens und 5 Luna-Fine-Tuning-Läufen pro Jahr; zusätzliche Luna-Tokens und längere Aufbewahrung nach Angebot. Splunk Observability Cloud Free Edition (bis 15 Hosts, unbefristet) umfasst Agent-Tracing. Galileos alte Tarife Free (5.000 Traces/Monat) und Pro (100 $/Monat bei jährlicher Zahlung, 50.000 Traces) werden nicht mehr veröffentlicht.
Welche Nachteile hat Splunk Agent Observability?
Luna nur im Enterprise-Tarif, und die gehostete Version unterstützt nur fünf voreingestellte Luna-Evaluatoren; Zugang über Support oder Vertrieb von Splunk; keine Preisliste zum Selbstbuchen; Galileos veröffentlichte Tarife Free und Pro sind weg; Verlängerungsbedingungen für bestehende Galileo-Kunden nicht veröffentlicht; Protect abgekündigt; Nutzer der Guardrails müssen zu Agent Control wechseln.
Für wen eignet sich Splunk Agent Observability?
Große Organisationen, die schon Splunk Observability nutzen und jede Agent-Konversation bewerten sowie unsichere Aktionen zur Laufzeit blockieren wollen.
Was kostet Splunk Agent Observability für ein Team oder im Produktivbetrieb?
Über den Einstiegspreis von 100 $ im Monat pro 1,2 Millionen Spans im Jahr bei jährlicher Abrechnung hinaus nicht veröffentlicht. Splunk rechnet nach agentischen Spans plus Luna-Tokens ab, wobei die Luna-Abrechnung im jeweiligen Abonnementvertrag festgelegt wird.
Ist Splunk Agent Observability sicher für Firmendaten?
Gehostete Traces werden standardmäßig 30 Tage aufbewahrt, erweiterbar auf 60, 90 oder 180; Daten aus Experimenten 2 Jahre. Gehostete Regionen in den USA, der EU (eu-west-1), Australien und Japan; On-Premises- und Air-Gapped-Installationen verfügbar. Galileo nennt SOC 2 Type II und unterzeichnet HIPAA-BAAs; Splunk hat weder produktspezifische Zertifizierungen veröffentlicht noch, ob Trace-Daten zum Training genutzt werden.
Was sind die besten Alternativen zu Splunk Agent Observability?
Die nächsten Alternativen, die wir getestet haben, sind Datadog LLM Observability, LangSmith, Braintrust und Arize AX.

Antworten geprüft am 2. Nov. 2026.