¿Qué es Braintrust?
Braintrust combina evaluación y observabilidad. Ejecutas experimentos que comparan prompts y modelos contra datasets, los puntúas con código, jueces LLM o revisión humana, y después registras trazas de producción y las puntúas en línea con los mismos scorers. También ofrece un playground de prompts, un AI gateway para enrutar llamadas a modelos, un servidor MCP, una herramienta de línea de comandos bt y Loop, un agente de IA que analiza logs y redacta evaluaciones.
Las trazas llegan mediante SDKs e integraciones para OpenAI, Anthropic, LangChain, LlamaIndex, Pydantic AI, Google ADK y otros, o mediante OpenTelemetry. Los SDKs pueden ocultar datos sensibles antes de subirlos. Su librería de código abierto autoevals (MIT) aporta scorers habituales.
El plan gratuito Starter incluye 1 GB de datos procesados, 10.000 puntuaciones, 10 $ de créditos de modelos y retención de 14 días con usuarios ilimitados. Pro cuesta 249 $ al mes por 5 GB, 50.000 puntuaciones, 100 $ de créditos de modelos y retención de 30 días (ampliable a 180 días a 0,50 $ por GB al mes). El autoalojamiento del plano de datos, SAML SSO y los acuerdos HIPAA son solo de Enterprise. Braintrust cerró una Serie B de 80 millones de dólares en febrero de 2026.
¿Cuánto cuesta Braintrust?
| Plan | Precio | Qué incluye |
|---|---|---|
| Starter | Free | 1 GB de datos, 10k puntuaciones, 10 $ en créditos de modelos, retención de 14 días, usuarios ilimitados; después 4 $/GB y 2,50 $ por 1.000 puntuaciones |
| Pro | $249/month | 5 GB, 50k puntuaciones, 100 $ en créditos de modelos, retención de 30 días; después 3 $/GB y 1,50 $ por 1.000 puntuaciones |
| Enterprise | Custom | SAML, BAA y plano de datos autoalojado |
Starter gratis (1 GB de datos, 10k puntuaciones, 10 $ en créditos de modelos, retención de 14 días, usuarios ilimitados; después 4 $/GB y 2,50 $ por 1.000 puntuaciones). Pro 249 $/mes (5 GB, 50k puntuaciones, 100 $ en créditos de modelos, retención de 30 días; después 3 $/GB y 1,50 $ por 1.000 puntuaciones). Enterprise a medida, con SAML, BAA y plano de datos autoalojado. Las startups que cumplen requisitos tienen Pro gratis de 6 a 12 meses.
¿Merece la pena Braintrust?
Cambias un prompt, la demo parece bien y una semana después un cliente encuentra la respuesta que rompió sin hacer ruido. Saber si un cambio ayudó de verdad es la parte difícil de lanzar un producto de IA.
Braintrust está construido primero en torno a esa pregunta y después en torno al registro. Tus ejecuciones de prueba, conjuntos de prueba guardados, reglas de puntuación y puntuación en vivo comparten un mismo modelo de datos, así que una mala respuesta de producción se convierte en un caso de prueba en unos pocos clics. El mismo scorer se ejecuta en tu CI antes de un merge y contra el tráfico real después.
Pagas por datos procesados y puntuaciones, no por personas, y todos los planes tienen usuarios ilimitados. Eso es más amable para una organización de producto de 40 personas que el modelo por puesto de LangSmith, y menos amable para un agente que escribe trazas largas. Los 249 $ al mes de Pro cubren 5 GB y 50.000 puntuaciones; por encima, cada GB cuesta 3 $ y cada 1.000 puntuaciones 1,50 $, así que puntuar cada petición de producción con un juez LLM es la partida que más rápido crece. Los datos se conservan por defecto 14 días en Starter y 30 en Pro, con 180 días disponibles en Pro a 0,50 $ por GB al mes.
La pega: guardar tus trazas en tu propia nube exige un contrato Enterprise, y el servidor no es de código abierto. El diseño en sí es sólido. Según la documentación de autoalojamiento, el plano de datos (API, Postgres, Redis, almacenamiento de objetos y el motor Brainstore) funciona en tu cuenta de AWS, GCP o Azure a partir de módulos oficiales de Terraform, los SDKs envían los datos directamente a él, y el plano de control alojado de Braintrust solo guarda metadatos como nombres de proyectos, claves de API cifradas con hash y datos de inicio de sesión. La telemetría de salud y facturación sigue volviendo por defecto. La página de seguridad de Braintrust declara SOC 2 Type II y ofrece BAAs, y la propia empresa recomienda un despliegue autoalojado o en tu propia nube en la UE para cumplir plenamente el GDPR.
Integrarlo apenas genera dependencia, porque la ingesta por OpenTelemetry y los scorers autoevals con licencia MIT funcionan en otros sitios. La dependencia es el historial de evaluaciones, los datasets y los scorers en línea que acumulas con el tiempo.
Nuestra opinión: cuanto más tiempo lleves la cuenta en Braintrust, más útil resulta y más difícil es irse. Esa forma de llevar la cuenta es justo lo que hace mejor que Langfuse o Arize Phoenix, así que entra sabiendo lo que intercambias.
Dónde se gana su sitio
Un equipo de seis ingenieros que lanza un agente de atención al cliente
Evitar que los cambios de prompt rompan respuestas sin que nadie lo note
Un dataset de referencia con tickets anteriores se ejecuta como experimento en cada pull request, puntuado con autoevals y un juez LLM; las regresiones bloquean el merge. En Pro, a 249 $ al mes, 50.000 puntuaciones cubren la CI más una muestra de puntuación en producción.
Un responsable de plataforma de ML en una fintech con clientes en la UE
Trazar llamadas a LLM sin enviar datos de clientes a un SaaS de EE. UU.
Un contrato Enterprise despliega el plano de datos en la propia cuenta de AWS o GCP de la empresa con Terraform; trazas, prompts y datasets se quedan en la región bajo sus propias claves KMS, mientras Braintrust solo aloja la interfaz y los metadatos.
Una responsable de producto en una startup de IA de 40 personas
Dar a PMs e ingenieros un único sitio para revisar la calidad del modelo
Con usuarios ilimitados no hay que negociar por puesto; los PMs añaden puntuaciones de revisión humana a las trazas mientras los ingenieros ejecutan experimentos. La factura sigue el volumen de datos, así que recortar cargas grandes importa más que el número de personas.
Antes de decidirte
- Puesta en marcha
- Crea un proyecto, instala el SDK de Python o TypeScript, envuelve el cliente del modelo y ejecuta un primer Eval() contra un dataset pequeño; los exportadores de OpenTelemetry existentes pueden apuntar a Braintrust.
- Integraciones
- SDKs y wrappers para OpenAI, Anthropic, LangChain, LlamaIndex, Pydantic AI y Google ADK; OpenTelemetry; AI gateway; servidor MCP; bt CLI.
- Datos y privacidad
- SOC 2 Type II; datos cifrados en reposo y en tránsito; las condiciones de autoservicio prohíben usar datos de clientes para entrenar o mejorar modelos de IA; políticas de retención configurables; plano de datos autoalojado, SAML y BAA solo en Enterprise.
- Coste a escala
- Un agente en producción que registra 20 GB al mes en Pro paga 249 $ más 15 GB a 3 $, unos 294 $, antes de puntuaciones extra a 1,50 $ por 1.000 y de la retención por encima de 30 días a 0,50 $ por GB al mes.
- Límites
- Starter conserva los datos 14 días y permite una puntuación de revisión humana por proyecto; Pro los conserva 30 días salvo ampliación; los gráficos y entornos personalizados requieren Pro.
Lo bueno
- Evaluaciones, datasets y puntuación en línea comparten un mismo modelo de datos
- Usuarios ilimitados en todos los planes, incluido el gratuito
- El autoalojamiento híbrido mantiene las trazas en tu cuenta de AWS, GCP o Azure
- Ingesta por OpenTelemetry y scorers autoevals de código abierto
- SOC 2 Type II; BAAs disponibles en Enterprise
Lo malo
- Pro empieza en 249 $ al mes, un gran salto desde el gratuito
- Puntuar el tráfico de producción con un juez LLM añade 1,50 $ por 1.000 puntuaciones en Pro
- Retención por defecto de 14 o 30 días
- Servidor no abierto; autoalojamiento y SAML solo en Enterprise
Ideal para
Equipos de producto que quieren desarrollo guiado por evaluaciones con trazado alojado y no les importa pagar por un servicio gestionado.
Alternativas a Braintrust
Braintrust: preguntas frecuentes
- ¿Merece la pena Braintrust?
- Braintrust es para equipos cuya pregunta más difícil es si el último cambio mejoró el producto, y factura por datos en lugar de por persona, lo que conviene a los equipos grandes y escuece a los agentes que registran mucho. Le damos un 4.3 sobre 5.
- ¿Cuánto cuesta Braintrust?
- Starter gratis (1 GB de datos, 10k puntuaciones, 10 $ en créditos de modelos, retención de 14 días, usuarios ilimitados; después 4 $/GB y 2,50 $ por 1.000 puntuaciones). Pro 249 $/mes (5 GB, 50k puntuaciones, 100 $ en créditos de modelos, retención de 30 días; después 3 $/GB y 1,50 $ por 1.000 puntuaciones). Enterprise a medida, con SAML, BAA y plano de datos autoalojado. Las startups que cumplen requisitos tienen Pro gratis de 6 a 12 meses.
- ¿Qué inconvenientes tiene Braintrust?
- Pro empieza en 249 $ al mes, un gran salto desde el gratuito; puntuar el tráfico de producción con un juez LLM añade 1,50 $ por 1.000 puntuaciones en Pro; retención por defecto de 14 o 30 días; servidor no abierto; autoalojamiento y SAML solo en Enterprise.
- ¿Para quién es Braintrust?
- Equipos de producto que quieren desarrollo guiado por evaluaciones con trazado alojado y no les importa pagar por un servicio gestionado.
- ¿Cuánto cuesta Braintrust para un equipo o en producción?
- Un agente en producción que registra 20 GB al mes en Pro paga 249 $ más 15 GB a 3 $, unos 294 $, antes de puntuaciones extra a 1,50 $ por 1.000 y de la retención por encima de 30 días a 0,50 $ por GB al mes.
- ¿Es Braintrust seguro para los datos de la empresa?
- SOC 2 Type II; datos cifrados en reposo y en tránsito; las condiciones de autoservicio prohíben usar datos de clientes para entrenar o mejorar modelos de IA; políticas de retención configurables; plano de datos autoalojado, SAML y BAA solo en Enterprise.
- ¿Cuáles son las mejores alternativas a Braintrust?
- Las alternativas más cercanas que hemos analizado son LangSmith.
Respuestas comprobadas el 26 oct 2026.