Étape 21 sur 22
Observabilité et traçage
Voir chaque prompt, appel d'outil, coût et latence en production. Quand un agent se comporte mal, il vous faut la trace. L'observabilité sert aussi à repérer les coûts à réduire.
Par Sheela · Vérifié le 23 oct. 2026 · Notre méthode d’évaluation
Comment choisir
- Auto-hébergé et open source : gardez les traces dans votre propre infrastructure.
- Déjà sur LangChain ou LangGraph : le traceur hébergé conçu pour eux.
- Tableaux de bord des coûts par utilisateur ou par fonctionnalité : une passerelle qui journalise les dépenses.
Ce qu’il faut regarder
Les questions qui départagent les options, par ordre d’importance.
01
OpenTelemetry en entrée et en sortie
L'instrumentation est la partie coûteuse à changer : émettez donc des spans OpenTelemetry standard et gardez le backend remplaçable. Vérifiez si un outil accepte OpenTelemetry (Langfuse, Opik, LangSmith, Braintrust et Weave le font tous), s'il est construit dessus (Arize Phoenix avec OpenInference) et quelles conventions d'attributs LLM il lit le mieux : les conventions d'OpenInference et celles d'OpenLLMetry coexistent dans l'écosystème OpenTelemetry.
02
Auto-hébergé ou SaaS, et ce que permet la licence
Les traces contiennent prompts, documents et réponses, souvent avec des données clients. Langfuse (cœur MIT avec dossiers ee/ commerciaux) et Opik (Apache 2.0 de bout en bout) peuvent être auto-hébergés gratuitement ; Phoenix aussi, mais son Elastic License 2.0 interdit de le proposer à d'autres comme service hébergé. LangSmith, Braintrust et Weave réservent l'auto-hébergement aux contrats Enterprise. Auto-héberger implique d'exploiter des bases de données comme ClickHouse et Postgres : chiffrez le temps d'exploitation.
03
Conservation et contrôle des données personnelles
Les offres cloud gratuites conservent les données de 14 à 60 jours ; une conservation plus longue est payante presque partout, et LangSmith a réduit la conservation étendue des traces à 180 jours en septembre 2026. Si les prompts contiennent des données personnelles, vérifiez la présence d'un masquage côté client avant l'envoi (pris en charge par les SDK de Braintrust), d'un masquage côté serveur (payant chez Langfuse) et de politiques de conservation par projet, et assurez-vous que votre accord de traitement des données couvre le fournisseur.
04
Suivi des coûts par utilisateur et par fonctionnalité
L'observabilité est le moyen par lequel la plupart des équipes repèrent les coûts à réduire. Vérifiez que l'outil enregistre le nombre de tokens et le coût par span, tarifie correctement les modèles, tokens en cache compris, et peut regrouper les dépenses par utilisateur, fonctionnalité ou étiquette. Si vous faites déjà passer vos appels par une passerelle, ses journaux de dépenses peuvent couvrir ce besoin sans traceur séparé.
05
Comment vous êtes facturé
Les unités de prix diffèrent et rendent les devis difficiles à comparer : Langfuse facture des unités, Opik et Arize des spans, LangSmith des traces plus des sièges, Braintrust les gigaoctets traités et les scores, et Weave l'ingestion au mégaoctet au-delà d'un petit quota. Estimez un mois de trafic réaliste, gros prompts et sorties d'outils compris, dans les termes de chaque fournisseur avant de choisir.
06
Évaluations et gestion des prompts au même endroit
La meilleure boucle de retour transforme une mauvaise trace de production en entrée de jeu de données et en test de régression. Langfuse, Opik, Phoenix, LangSmith et Braintrust combinent tous traçage, jeux de données, notation par LLM juge et versionnage des prompts ; OpenLLMetry ne fait que l'instrumentation et a besoin d'un backend pour tout cela.
07
Des vues de traces adaptées aux agents
Les traces d'agents sont des arbres profonds d'appels de modèles, d'appels d'outils et de sous-agents. Cherchez des vues qui montrent sessions et tours, pas seulement des spans à plat, et des intégrations natives pour votre framework : LangSmith pour LangGraph, les correctifs en une ligne de Weave pour l'OpenAI Agents SDK, le Claude Agent SDK et Google ADK, et une large couverture des frameworks chez Langfuse et Phoenix.
08
Propriétaire et risque sur la feuille de route
Presque tous les fournisseurs présentés ici ont récemment changé de mains : ClickHouse a racheté Langfuse, Dynatrace a racheté Arize, ServiceNow a racheté Traceloop, CoreWeave possède Weights & Biases et présente Agent Lens comme le successeur de Weave, et Helicone est passé en mode maintenance après son rachat par Mintlify. Une instrumentation standard est la meilleure couverture.
Ce qui distingue les options
Il existe ici trois sortes d'outils. Les plateformes open source (Langfuse, Opik, Arize Phoenix) stockent et affichent les traces, exécutent des évaluations et gèrent les prompts, et peuvent être auto-hébergées gratuitement ou achetées comme service cloud ; elles diffèrent surtout par la licence, la taille de l'écosystème et l'unité de prix. Les plateformes hébergées (LangSmith, Braintrust, W&B Weave) offrent le même cœur avec un service géré par le fournisseur, des liens plus étroits avec un framework ou un workflow, et l'auto-hébergement uniquement sur les offres Enterprise. Les bibliothèques d'instrumentation (OpenLLMetry) ne font que produire des spans OpenTelemetry et les envoyer au backend de votre choix, y compris des outils APM généraux comme Datadog ou Grafana.
Les outils généraux de suivi des erreurs et de l'infrastructure (Sentry, Grafana) complètent ces outils mais ne remplacent pas une vue de traces adaptée aux LLM. Helicone, autrefois une option populaire à base de proxy, est en mode maintenance depuis mars 2026 et n'est pas recommandé pour de nouveaux projets.
11 outils comparés
Classés selon notre note. Ouvrez un avis pour voir les sources, les prix et le verdict complet.
| Outil | Note | Notre verdict | Idéal pour | Prix |
|---|---|---|---|---|
| Langfusedépôt | 4.6/5 | Du traçage LLM neutre vis-à-vis des frameworks que vous pouvez posséder entièrement : le build gratuit auto-hébergé couvre presque tout, et le cloud est tarifé jusqu'à l'unité. | Les équipes qui veulent un traçage et une évaluation neutres vis-à-vis des frameworks qu'elles peuvent auto-héberger gratuitement ou acheter comme service cloud à prix raisonnable. | Gratuit et open source sous MIT, sauf les dossiers ee/ sous licence commerciale. Cloud : Hobby gratuit (50k unités/mois) ; Core 29 $/mois ; Pro 199 $/mois (module additionnel Teams +300 $) ; Enterprise 2 499 $/mois ; dépassement 8 $ par 100k unités, tombant à 6 $ au-dessus de 50M. |
| MLflowdépôt | 4.4/5 | Toujours l'endroit par défaut pour consigner les expériences ML, désormais avec tracing et évaluation LLM offerts ; verrouillez le serveur avant que quiconque d'autre puisse l'atteindre. | Les équipes Python qui entraînent des modèles et créent des fonctions LLM et veulent un seul système de référence, gratuit et auto-hébergé, pour les deux. | Gratuit et open source sous Apache-2.0 ; vous ne payez que le serveur, la base de données et le stockage objet. MLflow géré sur Databricks n'a pas de prix catalogue propre et se facture via le calcul Databricks ; la Free Edition est réservée à un usage personnel. |
| Braintrustoutil | 4.3/5 | Braintrust s'adresse aux équipes dont la question la plus difficile est de savoir si la dernière modification a amélioré le produit, et il facture les données plutôt que les personnes, ce qui convient aux grandes équipes et pénalise les agents qui journalisent beaucoup. | Les équipes produit qui veulent un développement piloté par l'évaluation avec un traçage hébergé et acceptent de payer un service managé. | Starter gratuit (1 Go de données, 10 000 scores, 10 $ de crédits de modèles, 14 jours de conservation, utilisateurs illimités ; puis 4 $/Go et 2,50 $ les 1 000 scores). Pro à 249 $/mois (5 Go, 50 000 scores, 100 $ de crédits de modèles, 30 jours de conservation ; puis 3 $/Go et 1,50 $ les 1 000 scores). Enterprise sur mesure, avec SAML, BAA et data plane auto-hébergé. Les startups éligibles ont Pro gratuitement pendant 6 à 12 mois. |
| Arize Phoenixdépôt | 4.2/5 | Phoenix a la boucle d'évaluation la plus solide des outils de tracing ouverts, enveloppée dans une licence et un propriétaire dont les équipes juridiques voudront discuter. | Les ingénieurs et data scientists qui veulent un tracing fondé sur des standards avec une boucle d'évaluation solide, en démarrant sur un portable. | Gratuit à auto-héberger sous l'Elastic License 2.0 (source disponible ; pas d'hébergement comme service pour d'autres). Arize AX managé : Free (25 k spans/mois, rétention 15 jours, 1 Go) ; Pro 50 $/mois (50 k spans, 30 jours, 10 Go) ; Enterprise sur mesure. |
| LangSmithoutil | 4.2/5 | LangSmith offre le traçage et l'évaluation les plus poussés et les plus mûrs pour les agents LangGraph, vendus par siège à un prix qui avantage les petites équipes aux gros budgets. | Les équipes qui construisent des agents de production sur LangChain ou LangGraph et veulent traçage, évaluation et déploiement hébergés chez un seul fournisseur. | Developer gratuit (1 siège, 5 000 traces de base par mois). Plus à 39 $ par siège et par mois (10 000 traces de base, puis paiement à l'usage ; un petit déploiement serverless). Enterprise sur devis, avec options hybride ou auto-hébergée. Traces de base conservées 14 jours, traces étendues 180 jours. |
| Opikdépôt | 4.1/5 | Opik donne tout le serveur sous Apache 2.0 et vend l'offre hébergée la moins chère, mais le build auto-hébergé n'a pas de comptes utilisateurs et téléphone à la maison par défaut. | Les équipes qui veulent une plateforme de traçage et d'évaluation sous licence permissive et auto-hébergeable, ou une hébergée à bas coût. | Gratuit et open source sous Apache 2.0. Cloud : Free (25k spans/mois, rétention 60 jours) ; Pro 19 $/mois (100k spans, puis 5 $ par 100k ; module de rétention 400 jours à 29 $ par 100k spans) ; Enterprise sur mesure. |
| Arize AXoutil | 4.1/5 | Arize AX offre un traçage et des évaluations d'agents sérieux sur une instrumentation ouverte, mais ses offres bon marché s'épuisent vite et sa feuille de route appartient désormais à Dynatrace. | Les équipes d'ingénierie qui font tourner des agents en production, veulent un traçage et des évaluations hébergés sur une instrumentation ouverte et portable, et peuvent négocier un contrat Enterprise. | AX Free à 0 $ (25 000 spans, 1 Go par mois, 15 jours de conservation) ; AX Pro à 50 $/mois (50 000 spans, 10 Go, 30 jours de conservation) ; Enterprise sur mesure avec SSO, HIPAA et auto-hébergement. Utilisateurs illimités sur toutes les offres. |
| OpenLLMetrydépôt | 4.1/5 | Instrumentez les appels LLM une fois en OpenTelemetry standard et gardez votre choix de backend, après avoir d'abord changé deux réglages par défaut qui envoient les prompts complets au cloud de Traceloop. | Les équipes standardisées sur OpenTelemetry qui veulent les traces LLM dans leur pile d'observabilité existante sans SDK fournisseur. | Gratuit et open source sous Apache 2.0. La plateforme hébergée de Traceloop, désormais détenue par ServiceNow : Free jusqu'à 50 000 spans par mois avec rétention de 24 heures ; Enterprise (SOC 2, sur site) sur devis. |
| Datadog LLM Observabilityoutil | 4.0/5 | Si votre entreprise vit déjà dans Datadog, c'est l'endroit logique pour surveiller vos agents, et sa facturation par appel au modèle est plus équitable qu'il n'y paraît. | Les équipes d'ingénierie qui utilisent déjà Datadog et veulent les traces de leurs agents à côté de la surveillance de leurs services et de leur infrastructure. | Gratuit jusqu'à 40K spans LLM/mois avec 15 jours de conservation. Pro à partir de 160 $/mois en annuel, 200 $ au mois ou 240 $ à la demande, pour 100K spans LLM ; ensuite 3,50 $ (annuel), 4,20 $ (au mois) ou 5 $ (à la demande) par tranche de 10K spans LLM. Options de conservation affichées à 6,50 $, 8 $ et 9 $ par tranche de 10K spans par mois pour 30, 60 et 90 jours. Seuls les spans LLM sont facturés. |
| Splunk Agent Observabilityoutil | 3.7/5 | Les petits modèles juges de Galileo permettent de noter à peu de frais chaque conversation d'agent, mais sous Splunk, le produit est devenu un achat d'entreprise précédé d'un appel commercial. | Les grandes organisations déjà sur Splunk Observability qui veulent noter chaque conversation d'agent et bloquer les actions dangereuses à l'exécution. | Agent Observability à partir de 100 $/mois pour 1,2M de spans par an, facturé annuellement, avec 500M de tokens Luna et 5 sessions de fine-tuning Luna par an ; tokens Luna supplémentaires et conservation prolongée sur devis. La Free Edition de Splunk Observability Cloud (jusqu'à 15 hôtes, sans expiration) inclut le traçage d'agents. Les anciennes offres Free (5 000 traces/mois) et Pro (100 $/mois facturés à l'année, 50 000 traces) de Galileo ne sont plus publiées. |
| W&B Weavedépôt | 3.6/5 | Vaut la peine d'être activé si vos modèles vivent déjà dans Weights & Biases ; à 0,10 $ le mégaoctet, difficile à vendre à quiconque part de zéro. | Les équipes qui utilisent déjà Weights & Biases pour l'entraînement de modèles et veulent les traces et évaluations LLM au même endroit. | SDK gratuit sous Apache 2.0. Hébergé : Free (1 Go d'ingestion Weave/mois) ; Pro à partir de 60 $/mois (1,5 Go, puis 0,10 $/Mo) ; Enterprise sur mesure (dépassement de 0,20 $/Mo indiqué), avec déploiement dédié. |
Côte à côte
Les caractéristiques qui comptent pour cette étape. Vérifiées le 23 oct. 2026 ; confirmez-les sur le site du fournisseur avant de vous engager.
| Outil | Type | Licence | Auto-hébergement | OpenTelemetry | Conservation de l'offre gratuite |
|---|---|---|---|---|---|
| Langfuse | Traçage, évaluations, prompts | Cœur MIT ; ee/ commercial | Gratuit, presque complet | Accepte OTel | 30 jours (Hobby) |
| Braintrust | Évaluations et traçage hébergés | Propriétaire (autoevals MIT) | Enterprise uniquement (data plane) | Accepte OTel | 14 jours |
| Arize Phoenix | Traçage, évaluations, prompts | Elastic License 2.0 | Gratuit ; pas d'hébergement pour des tiers | Construit sur OTel/OpenInference | 15 jours (Arize AX Free) |
| LangSmith | Traçage, évaluations et déploiement hébergés | Propriétaire | Enterprise uniquement | Accepte OTel | 14 jours (traces de base) |
| Opik | Traçage, évaluations, prompts | Apache 2.0 | Gratuit, même code que le cloud | Accepte OTel | 60 jours |
| OpenLLMetry | Bibliothèque d'instrumentation uniquement | Apache 2.0 | Utilise votre propre backend | Émet des spans OTel | Dépend du backend |
| W&B Weave | SDK de traçage et d'évaluation, hébergé | SDK Apache 2.0 | Enterprise dédié uniquement | Endpoint OTLP | Non publié |
Connectez-le à votre agent
Des serveurs MCP qui permettent à des assistants comme Claude, ChatGPT et Cursor d’utiliser directement ces outils.
Où s’insère cette étape
- Discuter avec vos documents : nous commencerions par Langfuse.
- Agent de service client : nous commencerions par LangSmith.
- Agent de code : nous commencerions par Langfuse.
- Recherche et graphe de connaissances : nous commencerions par Arize Phoenix.
- Assistant à mémoire longue : nous commencerions par Langfuse.
- Agent vocal : nous commencerions par Langfuse.
- Traitement de documents : nous commencerions par Opik.
- Votre propre modèle fine-tuné : nous commencerions par Langfuse.
- Automatisation de workflows : nous commencerions par Langfuse.