Observabilidade e tracing

O que observar

As perguntas que separam as opções, em ordem de importância.

1. 01

   OpenTelemetry na entrada e na saída

   A instrumentação é a parte cara de mudar, então emita spans padrão do OpenTelemetry e mantenha o backend substituível. Verifique se a ferramenta aceita OpenTelemetry (Langfuse, Opik, LangSmith, Braintrust e Weave aceitam), se ela é construída sobre ele (Arize Phoenix com OpenInference) e quais convenções de atributos de LLM ela lê melhor: as convenções do OpenInference e as do OpenLLMetry coexistem no ecossistema OpenTelemetry.

2. 02

   Self-hosted ou SaaS, e o que a licença permite

   Os traces contêm prompts, documentos e respostas, muitas vezes com dados de clientes. O Langfuse (núcleo MIT com pastas ee/ comerciais) e o Opik (Apache 2.0 em tudo) podem ser hospedados de graça; o Phoenix também, mas a sua Elastic License 2.0 proíbe oferecê-lo como serviço hospedado a terceiros. O LangSmith, a Braintrust e o Weave reservam a hospedagem própria para contratos Enterprise. Hospedar por conta própria significa operar bancos de dados como ClickHouse e Postgres, então inclua no preço o tempo de operação.

3. 03

   Retenção e controles de PII

   Os planos gratuitos na nuvem guardam os dados por 14 a 60 dias; retenção maior é um extra pago em quase todos, e o LangSmith reduziu a retenção estendida de traces para 180 dias em setembro de 2026. Se os prompts contêm dados pessoais, procure ocultação no cliente antes do envio (os SDKs da Braintrust suportam), mascaramento no servidor (pago no Langfuse) e políticas de retenção por projeto, e garanta que o seu contrato de processamento de dados cubra o fornecedor.

4. 04

   Acompanhamento de custos por usuário e por funcionalidade

   A observabilidade é como a maioria das equipes descobre quais custos cortar. Verifique se a ferramenta registra a contagem de tokens e o custo por span, calcula corretamente o preço dos modelos, incluindo tokens em cache, e consegue agrupar os gastos por usuário, funcionalidade ou tag. Se você já roteia as chamadas por um gateway, os logs de gastos dele podem cobrir isso sem um tracer separado.

5. 05

   Como você é cobrado

   As unidades de preço variam e tornam as cotações difíceis de comparar: o Langfuse cobra por unidades, o Opik e a Arize por spans, o LangSmith por traces mais licenças de usuário, a Braintrust por gigabytes processados e por notas, e o Weave cobra a ingestão por megabyte acima de uma pequena franquia. Estime um mês realista de tráfego, incluindo prompts grandes e saídas de ferramentas, nos termos de cada fornecedor antes de escolher.

6. 06

   Avaliações e gestão de prompts no mesmo lugar

   O melhor ciclo de feedback transforma um trace ruim de produção em uma entrada do conjunto de dados e em um teste de regressão. Langfuse, Opik, Phoenix, LangSmith e Braintrust combinam tracing com conjuntos de dados, pontuação com LLM como juiz e versionamento de prompts; o OpenLLMetry é só instrumentação e precisa de um backend para tudo isso.

7. 07

   Visualizações de traces que entendem agentes

   Os traces de agentes são árvores profundas de chamadas a modelos, chamadas de ferramentas e subagentes. Procure visualizações que mostrem sessões e turnos, não apenas spans planos, e integrações nativas com o seu framework: o LangSmith para o LangGraph, os patches de uma linha do Weave para o OpenAI Agents SDK, o Claude Agent SDK e o Google ADK, e a ampla cobertura de frameworks do Langfuse e do Phoenix.

8. 08

   Risco de propriedade e de roadmap

   Quase todos os fornecedores aqui mudaram de dono recentemente: a ClickHouse comprou o Langfuse, a Dynatrace comprou a Arize, a ServiceNow comprou a Traceloop, a CoreWeave é dona da Weights & Biases e chama o Agent Lens de sucessor do Weave, e o Helicone entrou em modo de manutenção depois que a Mintlify o adquiriu. A instrumentação padrão é a proteção.

11 ferramentas comparadas

Ordenadas pela nossa nota. Abra qualquer avaliação para ver as fontes, os preços e o veredito completo.

Ferramentas de Observabilidade e tracing comparadas

Ferramenta	Nota	Nosso veredito	Ideal para	Preço
Langfuserepositório	4.6/5	Rastreamento de LLM neutro em relação a frameworks que você pode ter por completo: o build auto-hospedado gratuito cobre quase tudo, e a nuvem tem preço definido até a unidade.	Equipes que querem rastreamento e avaliação neutros em relação a frameworks, que possam auto-hospedar de graça ou comprar como serviço de nuvem com preço razoável.	Gratuito e de código aberto sob MIT, exceto as pastas ee/, sob licença comercial. Nuvem: Hobby gratuito (50k unidades/mês); Core $29/mês; Pro $199/mês (complemento Teams +$300); Enterprise $2,499/mês; excedente de $8 por 100k unidades, caindo para $6 acima de 50M.
MLflowrepositório	4.4/5	Continua sendo o lugar padrão para registrar experimentos de ML, agora com tracing e avaliação de LLM de graça; proteja o servidor antes que qualquer outra pessoa consiga acessá-lo.	Equipes de Python que treinam modelos e criam recursos com LLM e querem um único sistema de registro, gratuito e auto-hospedado, para os dois.	Grátis e de código aberto sob Apache-2.0; você paga só o servidor, o banco de dados e o armazenamento de objetos. O MLflow gerenciado na Databricks não tem preço de tabela próprio e é cobrado pela computação da Databricks; a Free Edition é só para uso pessoal.
Braintrustferramenta	4.3/5	O Braintrust é para equipes cuja pergunta mais difícil é se a última mudança melhorou o produto, e ele cobra por dados e não por pessoa, o que favorece equipes grandes e pesa para agentes que registram muito.	Equipes de produto que querem desenvolvimento orientado por avaliações com rastreamento hospedado e não se importam em pagar por um serviço gerenciado.	Starter gratuito (1 GB de dados, 10k pontuações, US$ 10 em créditos de modelos, retenção de 14 dias, usuários ilimitados; depois US$ 4/GB e US$ 2,50 por 1.000 pontuações). Pro US$ 249/mês (5 GB, 50k pontuações, US$ 100 em créditos de modelos, retenção de 30 dias; depois US$ 3/GB e US$ 1,50 por 1.000 pontuações). Enterprise sob medida, com SAML, BAA e data plane auto-hospedado. Startups qualificadas recebem o Pro grátis por 6 a 12 meses.
Arize Phoenixrepositório	4.2/5	O Phoenix tem o ciclo de avaliação mais forte entre as ferramentas abertas de tracing, embalado em uma licença e em um dono sobre os quais os departamentos jurídicos vão querer conversar.	Engenheiros e cientistas de dados que querem tracing baseado em padrões com um ciclo de avaliação forte, começando em um notebook.	Gratuito para auto-hospedar sob a Elastic License 2.0 (código disponível; não é permitido hospedá-lo como serviço para terceiros). Arize AX gerenciada: Free (25k spans/mês, retenção de 15 dias, 1 GB); Pro a $50/mês (50k spans, 30 dias, 10 GB); Enterprise sob consulta.
LangSmithferramenta	4.2/5	O LangSmith tem o rastreamento e a avaliação mais profundos e maduros para agentes LangGraph, vendidos por assento a um preço que favorece equipes pequenas com orçamento grande.	Equipes que constroem agentes em produção sobre LangChain ou LangGraph e querem rastreamento, avaliação e implantação hospedados por um só fornecedor.	Developer gratuito (1 assento, 5.000 traces base/mês). Plus US$ 39/assento/mês (10.000 traces base, depois cobrança pelo uso; uma pequena implantação serverless). Enterprise sob consulta, com opções híbrida ou de hospedagem própria. Traces base guardados por 14 dias, traces estendidos por 180 dias.
Opikrepositório	4.1/5	O Opik entrega o servidor inteiro sob Apache 2.0 e vende o plano hospedado mais barato, mas a build auto-hospedada não tem contas de usuário e envia dados para casa por padrão.	Equipes que querem uma plataforma de rastreamento e avaliação com licença permissiva e auto-hospedável, ou uma hospedada de baixo custo.	Gratuito e de código aberto sob Apache 2.0. Nuvem: Free (25k spans/mês, retenção de 60 dias); Pro $19/mês (100k spans, depois $5 a cada 100k; add-on de retenção de 400 dias a $29 a cada 100k spans); Enterprise sob consulta.
Arize AXferramenta	4.1/5	O Arize AX oferece rastreamento e avaliações sérias de agentes sobre instrumentação aberta, mas os planos baratos se esgotam rápido e o roadmap agora pertence à Dynatrace.	Equipes de engenharia que rodam agentes em produção, querem rastreamento e avaliações hospedados sobre instrumentação aberta e portável e podem negociar um contrato Enterprise.	AX Free US$ 0 (25.000 spans, 1 GB por mês, retenção de 15 dias); AX Pro US$ 50/mês (50.000 spans, 10 GB, retenção de 30 dias); Enterprise sob medida com SSO, HIPAA e auto-hospedagem. Usuários ilimitados em todos os planos.
OpenLLMetryrepositório	4.1/5	Instrumente as chamadas a LLMs uma vez em OpenTelemetry padrão e mantenha a liberdade de escolher o backend, depois de mudar antes dois padrões que enviam os prompts completos à nuvem da Traceloop.	Equipes padronizadas em OpenTelemetry que querem traces de LLM na sua pilha de observabilidade existente sem o SDK de um fornecedor.	Gratuito e de código aberto sob Apache 2.0. A plataforma hospedada da Traceloop, agora da ServiceNow: Free até 50.000 spans por mês com retenção de 24 horas; Enterprise (SOC 2, on-prem) sob cotação.
Datadog LLM Observabilityferramenta	4.0/5	Se a sua empresa já vive na Datadog, este é o lugar sensato para observar os seus agentes, e a cobrança por chamada ao modelo é mais justa do que parece à primeira vista.	Equipes de engenharia que já usam a Datadog e querem os traces dos agentes ao lado do monitoramento de serviços e infraestrutura.	Gratuito até 40 mil LLM spans/mês com retenção de 15 dias. Pro a partir de US$ 160/mês no anual, US$ 200 mês a mês ou US$ 240 sob demanda, para 100 mil LLM spans; depois US$ 3,50 (anual), US$ 4,20 (mês a mês) ou US$ 5 (sob demanda) a cada 10 mil LLM spans. Complementos de retenção listados a US$ 6,50, US$ 8 e US$ 9 a cada 10 mil spans por mês para 30, 60 e 90 dias. Só os LLM spans são cobrados.
Splunk Agent Observabilityferramenta	3.7/5	Os pequenos modelos juízes do Galileo tornam barato pontuar todas as conversas de um agente, mas sob a Splunk ele virou uma compra corporativa com uma conversa de vendas pela frente.	Grandes organizações que já usam o Splunk Observability e querem pontuar todas as conversas dos agentes e bloquear ações inseguras em tempo de execução.	Agent Observability a partir de US$ 100/mês a cada 1,2M de spans por ano, com cobrança anual, incluindo 500M de tokens Luna e 5 execuções de fine-tuning do Luna por ano; tokens Luna extras e retenção maior sob cotação. O Splunk Observability Cloud Free Edition (até 15 hosts, sem prazo de validade) inclui rastreamento de agentes. Os antigos planos Free (5.000 traces/mês) e Pro (US$ 100/mês com cobrança anual, 50.000 traces) do Galileo não são mais publicados.
W&B Weaverepositório	3.6/5	Vale a pena ativar se os seus modelos já residem no Weights & Biases; a $0.10 por megabyte, é uma escolha difícil para quem está começando do zero.	Equipes que já usam Weights & Biases para treinamento de modelos e querem rastreamentos e avaliações de LLM no mesmo local.	SDK gratuito sob Apache 2.0. Hospedado: Free (1 GB de ingestão do Weave/mês); Pro a partir de $60/mês (1.5 GB, depois $0.10/MB); Enterprise sob consulta ($0.20/MB de excedente listado), com implantação dedicada.

Lado a lado

As especificações que importam nesta etapa. Verificadas em 23 de out. de 2026; confirme no site do fornecedor antes de decidir.

Conecte ao seu agente

Servidores MCP que permitem que assistentes como Claude, ChatGPT e Cursor usem essas ferramentas diretamente.

• Sentry MCP 4.3
• Grafana MCP Server 4.3

Onde esta etapa se encaixa

• Converse com os seus documentos: começaríamos com Langfuse.
• Agente de atendimento ao cliente: começaríamos com LangSmith.
• Agente de programação: começaríamos com Langfuse.
• Pesquisa e grafo de conhecimento: começaríamos com Arize Phoenix.
• Assistente com memória de longo prazo: começaríamos com Langfuse.
• Agente de voz: começaríamos com Langfuse.
• Processamento de documentos: começaríamos com Opik.
• O seu próprio modelo com fine-tuning: começaríamos com Langfuse.
• Automação de fluxos de trabalho: começaríamos com Langfuse.

Fontes deste guia

• Preços do Langfuse
• Preços do Langfuse self-hosted
• Opik no GitHub
• Arize Phoenix no GitHub
• Dynatrace conclui a aquisição da Arize
• Preços da LangChain
• Preços da Braintrust
• Preços do CoreWeave Forge
• OpenLLMetry no GitHub
• ServiceNow amplia o AI Control Tower (aquisição da Traceloop)
• O Helicone está se juntando à Mintlify