본문으로 건너뛰기
ReviewRamble

주간 브리프

AI 리뷰를 받은편지함으로.

  • 도구, 모델, MCP 서버, 저장소의 새 리뷰(결론부터)
  • 변경이 있을 때 다시 확인한 가격과 평점
  • 새로 발행된 분석 글

모델, 에이전트, MCP 서버, 그리고 정말 시간을 들일 만한 도구.

일주일에 한 통입니다. 각 브리프의 링크로 구독을 해지할 수 있습니다. 이메일 사용 방식

Arize AX

AI 에이전트를 추적하고 테스트하고 개선하는 Arize의 호스팅 플랫폼입니다. 지금은 Dynatrace 소유입니다.

리뷰어: Andrew Miller · 업데이트

Arize AX 방문 무료 플랜

평점

4.1/5

Arize AX는 개방형 계측 위에서 본격적인 에이전트 추적과 평가를 제공합니다. 다만 저렴한 요금제는 금방 바닥나고, 로드맵은 이제 Dynatrace의 손에 있습니다.

Arize AX의 개요

Arize AX는 LLM 애플리케이션과 에이전트를 관찰하고 개선하기 위한 Arize AI의 상용 플랫폼입니다. 모든 모델 호출, 도구 호출, 검색 단계의 트레이스를 기록하고, LLM 심사자, 에이전트 심사자, 코드로 점수를 매기며, 프롬프트, 모델, 검색 변경을 데이터셋에 대해 비교하는 실험을 실행할 수 있게 합니다. Signal은 반복되는 실패를 트레이스 근거와 함께 순위가 매겨진 이슈로 묶고, 제품에 내장된 어시스턴트 Alyx는 사용자의 트레이스에 관한 질문에 평범한 말로 답합니다.

OpenTelemetry와 Arize의 OpenInference 규약 위에 만들어졌으며, Arize의 오픈소스 Phoenix와 같은 계측 방식을 쓰고, 30개가 넘는 제공업체와 프레임워크용 기성 통합이 있습니다. AX Free는 월 25,000 스팬과 1 GB, 15일 보관이 무료이고, AX Pro는 월 $50에 50,000 스팬, 10 GB, 30일 보관이며, Enterprise는 맞춤형으로 SSO, 감사 로그, HIPAA, 자체 호스팅이 추가됩니다.

Dynatrace는 2026년 10월 1일 Arize 인수를 마쳤습니다. Dynatrace는 AX가 독립 제품으로 계속 제공되며 Arize의 기능이 시간을 두고 Dynatrace에 통합될 것이라고 말합니다. 가격이나 계약 변경은 발표되지 않았습니다.

Arize AX의 가격은 얼마입니까?

플랜가격포함 내용
AX Free$0월 25,000 스팬과 1 GB, 15일 보관, 사용자 무제한
AX Pro$50/month월 50,000 스팬과 10 GB, 30일 보관, 이메일 지원
AX EnterpriseCustomSSO, 감사 로그, HIPAA, SaaS 또는 자체 호스팅

AX Free $0(월 25,000 스팬, 1 GB, 15일 보관). AX Pro 월 $50(50,000 스팬, 10 GB, 30일 보관). Enterprise는 맞춤형으로 SSO, HIPAA, 자체 호스팅 포함. 모든 요금제에서 사용자 수 무제한.

Arize AX, 쓸 만한 가치가 있습니까?

데모에서는 잘 작동하던 에이전트가 이제 고객 50명 중 1명에게 이상한 답을 합니다. 이유를 찾으려면 에이전트가 거친 모든 단계를 읽어야 하는데, 로그만으로는 쉽지 않습니다.

Arize AX는 각 단계를 대신 기록합니다. 프롬프트, 모델의 답, 호출한 모든 도구와 각각의 비용입니다. 그다음 LLM 심사자, 에이전트 심사자, 직접 작성한 코드로 실행 결과에 점수를 매겨, 트레이스를 하나씩 읽는 대신 어떤 종류의 요청이 잘못되는지 보여 줍니다. Signal 기능은 반복되는 실패를 근거와 함께 순위 목록으로 묶고, 내장 어시스턴트 Alyx는 어떤 도구 호출이 가장 자주 실패하는지 같은 질문에 답합니다.

주목할 부분은 계측입니다. AX는 무료 Phoenix 프로젝트와 같은 OpenTelemetry와 Arize의 OpenInference 규약을 쓰며, OpenTelemetry는 2026년 6월 OpenInference 일부를 코드 기증으로 받아들였습니다. AX가 맞지 않게 되면 앱을 다시 작성하지 않고도 같은 트레이스를 Phoenix나 다른 OpenTelemetry 백엔드로 보낼 수 있습니다. LangSmith도 OpenTelemetry를 받지만 LangChain 코드에서 가장 잘 맞습니다.

주의할 점: 유료 요금제가 작습니다. AX Pro는 월 $50에 50,000 스팬을 주는데, 요청마다 도구를 10번 호출하는 에이전트는 대화 5,000건도 안 되어 이를 다 씁니다. 가격 페이지에 초과 요금이 없으므로 그 이상은 영업팀과 이야기해야 합니다. SSO, 감사 로그, HIPAA, 자체 호스팅은 모두 Enterprise 전용입니다. 그리고 소유주 문제가 있습니다. Dynatrace는 2026년 10월 1일 인수를 마쳤고, AX가 독립 제품으로 남는다고 하면서도 Arize가 시간을 두고 Dynatrace에 합쳐질 것이며 공동 로드맵은 아직 작성 중이라고 말합니다.

결론: 트레이스를 개방형 형식으로 소유하고 싶고 어차피 대기업 계약이 필요하리라 보는 팀에게 AX는 합리적인 선택입니다. 비용을 따지는 소규모 팀은 Braintrust의 무료 등급이나 Phoenix를 직접 운영하는 쪽에서 더 많은 여유를 얻습니다.

제 역할을 하는 곳

  • 보험금 청구 분류 에이전트를 운영하는 200명 규모 보험사의 ML 엔지니어

    어떤 청구 유형에서 에이전트가 잘못된 도구를 호출하는지 찾기

    OpenInference 자동 계측이 각 실행을 AX로 보내고, LLM 심사자가 모든 트레이스의 도구 선택에 점수를 매기며, Signal이 반복 실패의 순위를 정합니다. 운영 물량은 Pro의 50,000 스팬을 금방 넘으므로 Enterprise 견적을 예산에 넣으십시오.

  • 이미 Dynatrace에 돈을 내는 플랫폼팀

    AI 에이전트 트레이스를 나머지 모니터링과 같은 업체로 모으기

    AX는 당분간 별도 제품으로 남지만, Dynatrace는 시간을 두고 Phoenix와 AX 데이터를 자사의 더 넓은 관측 기능과 연결하겠다고 말합니다. 별도의 Arize 계약에 서명하기 전에 Dynatrace 계정 팀에 묶음 구매를 문의하십시오.

  • RAG 지원 봇을 만드는 2인 스타트업

    배포 전에 프롬프트 변경을 지난달의 실제 질문으로 테스트하기

    트레이스를 데이터셋으로 저장하고 새 프롬프트를 실험으로 실행해 AX Free에서 점수를 비교합니다. AX Free는 25,000 스팬과 무제한 사용자를 무료로 허용합니다. 보관 기간이 15일이므로 남기고 싶은 것은 내보내십시오.

도입 전 확인할 점

설정
arize-otel과 OpenInference 계측기를 설치하고 스페이스 ID와 API 키로 register()를 호출하면 트레이스가 나타납니다. Arize는 CLI와 코딩 에이전트용 단일 명령 설치 도구도 제공합니다.
연동
OpenInference를 통한 30개 이상의 제공업체와 프레임워크 통합, Python, JavaScript와 TypeScript, Go용 SDK 계측기가 있으며, 어떤 OpenTelemetry 익스포터든 OTLP 엔드포인트로 보낼 수 있습니다.
데이터와 개인정보
Arize 트러스트 센터에는 SOC 2 Type II, ISO 27001, PCI DSS 4.0, GDPR, HIPAA, EU 데이터 상주가 올라 있습니다. HIPAA, SSO, 자체 호스팅은 Enterprise에서만 판매됩니다.
대규모 사용 시 비용
Pro는 월 $50에 50,000 스팬과 10 GB입니다. 그 이상은 Enterprise에서 맞춤 가격이며 초과 요금은 공개되지 않았습니다.
제한
보관 기간은 Free 15일, Pro 30일입니다. Free는 스페이스 1개, Pro는 조직 1개에 스페이스 2개입니다.

좋은 점

  • OpenTelemetry와 OpenInference 기반이라 트레이스를 옮길 수 있습니다
  • 무료이며 자체 호스팅 가능한 Phoenix와 같은 계측 방식입니다
  • 모든 요금제에서 사용자와 평가가 무제한입니다
  • Signal이 반복 실패를 근거와 함께 순위 이슈로 묶습니다
  • 트러스트 센터에 따르면 SOC 2 Type II, ISO 27001, HIPAA, EU 데이터 상주를 지원합니다

아쉬운 점

  • AX Pro에는 월 50,000 스팬만 포함됩니다
  • 요금제 한도를 넘는 초과 요금이 공개되지 않았습니다
  • SSO, 감사 로그, HIPAA는 Enterprise 전용입니다
  • 2026년 10월 인수 이후 제품 로드맵을 Dynatrace와 함께 정합니다

추천 대상

운영 중인 에이전트에 개방적이고 이식 가능한 계측 기반의 호스팅 추적과 평가를 원하며, Enterprise 계약을 협상할 수 있는 엔지니어링 팀.

Arize AX 대안

Arize AX: 자주 묻는 질문

Arize AX, 쓸 만한 가치가 있습니까?
Arize AX는 개방형 계측 위에서 본격적인 에이전트 추적과 평가를 제공합니다. 다만 저렴한 요금제는 금방 바닥나고, 로드맵은 이제 Dynatrace의 손에 있습니다. 평점은 5점 만점에 4.1점입니다.
Arize AX의 가격은 얼마입니까?
AX Free $0(월 25,000 스팬, 1 GB, 15일 보관). AX Pro 월 $50(50,000 스팬, 10 GB, 30일 보관). Enterprise는 맞춤형으로 SSO, HIPAA, 자체 호스팅 포함. 모든 요금제에서 사용자 수 무제한.
Arize AX의 단점은 무엇입니까?
AX Pro에는 월 50,000 스팬만 포함됩니다; 요금제 한도를 넘는 초과 요금이 공개되지 않았습니다; SSO, 감사 로그, HIPAA는 Enterprise 전용입니다; 2026년 10월 인수 이후 제품 로드맵을 Dynatrace와 함께 정합니다.
Arize AX에 적합한 사람은 누구입니까?
운영 중인 에이전트에 개방적이고 이식 가능한 계측 기반의 호스팅 추적과 평가를 원하며, Enterprise 계약을 협상할 수 있는 엔지니어링 팀.
팀이나 프로덕션 환경에서 Arize AX의 비용은 얼마입니까?
Pro는 월 $50에 50,000 스팬과 10 GB입니다. 그 이상은 Enterprise에서 맞춤 가격이며 초과 요금은 공개되지 않았습니다.
Arize AX에 회사 데이터를 맡겨도 안전합니까?
Arize 트러스트 센터에는 SOC 2 Type II, ISO 27001, PCI DSS 4.0, GDPR, HIPAA, EU 데이터 상주가 올라 있습니다. HIPAA, SSO, 자체 호스팅은 Enterprise에서만 판매됩니다.
Arize AX의 가장 좋은 대안은 무엇입니까?
저희가 리뷰한 것 중 가장 가까운 대안은 LangSmith 및 Braintrust입니다.

답변 확인일: 2026년 10월 26일.

Arize AX 개발사입니까? 이 평점을 사이트에 표시하십시오ReviewRamble 평점: Arize AX, 5점 만점에 4.1점