Arize Phoenix의 개요
Phoenix는 LLM 애플리케이션을 트레이싱하고 평가하는 Arize의 공개 도구입니다. OpenTelemetry와 Arize의 OpenInference 계측을 기반으로 하며, Python, TypeScript, Java에서 LlamaIndex, LangChain, DSPy, Mastra, Vercel AI SDK, 그리고 OpenAI, Bedrock, Anthropic 클라이언트를 자동 계측합니다.
트레이스 외에도 LLM-as-judge와 코드 평가기(또는 Ragas와 DeepEval의 평가기), 앱 버전을 비교하는 데이터셋과 실험, 프롬프트 버전 관리, 플레이그라운드를 제공합니다. 로컬, Docker, 또는 Helm 차트로 Kubernetes에서 실행됩니다. Arize는 관리형 플랫폼 Arize AX를 판매하며, 월 25,000 스팬의 무료 등급과 월 $50의 Pro 요금제가 있습니다.
Phoenix는 Elastic License 2.0을 따르며, 사용과 수정은 허용하지만 타인에게 호스팅 서비스로 제공하는 것은 금지합니다. Dynatrace는 2026년 10월 1일 Arize를 9.15억 달러에 인수하는 절차를 마쳤고, Arize가 Phoenix 지원을 이어 간다고 밝혔습니다.
Arize Phoenix, 쓸 만한 가치가 있습니까?
Phoenix는 대시보드가 아니라 평가가 목적일 때 고를 트레이싱 도구이며, 이제 Dynatrace 제품입니다. Dynatrace는 2026년 10월 1일 Arize를 9.15억 달러에 사들이는 절차를 마쳤고 Phoenix를 계속 지원한다고 밝혔습니다. 개발은 느려지지 않았습니다. arize-phoenix 20.25.0은 2026년 10월 23일에 나왔고, 저장소 스타는 약 12,000개입니다.
토대는 개방형 표준입니다. 트레이스는 OpenTelemetry와 Arize의 OpenInference 규약을 쓰므로 계측이 Phoenix에 묶이지 않습니다. 2026년 6월 16일 OpenTelemetry 거버넌스 위원회는 OpenInference의 계측 코드를 기증받기로 의결했지만, 시맨틱 규약은 받지 않았습니다. 새 `px setup` 명령은 프레임워크를 감지해 알맞은 계측을 설치하고, `uvx arize-phoenix serve`는 설치 없이 앱 전체를 시작합니다.
강점은 평가 루프입니다. 트레이스로 만든 데이터셋, 이를 새 프롬프트나 모델로 다시 돌리는 실험, Ragas나 DeepEval의 평가기가 있어, 품질을 지켜보기만 하는 것이 아니라 개선하는 도구가 됩니다. 평가와 실험은 모든 AX 요금제에서 무제한이므로, 관리형 버전은 Phoenix가 가장 잘하는 부분에 요금을 매기지 않습니다.
운영 전에 기본값을 손봐야 합니다. Phoenix는 임시 폴더의 SQLite로 시작하므로 작업 디렉터리나 PostgreSQL을 설정하지 않으면 데이터가 사라집니다. 인증은 기본적으로 꺼져 있고, 나중에 켜면 API 키가 생길 때까지 트레이스 수집이 멈춥니다. PHOENIX_TELEMETRY_ENABLED=false로 설정하지 않으면 기본 UI 분석 데이터가 수집되지만, Arize는 트레이스 데이터는 보내지 않는다고 합니다. Elastic License 2.0은 Phoenix를 호스팅 서비스로 제공하는 것을 금지합니다. Langfuse의 MIT 핵심 코드와 Opik의 Apache 2.0에는 그런 조항이 없습니다.
제 역할을 하는 곳
노트북에서 RAG 챗봇을 디버깅하는 데이터 과학자
검색이 엉뚱한 구절을 돌려주는 이유 알아내기
Phoenix를 로컬에서 실행하고 LlamaIndex나 LangChain 앱을 자동 계측한 뒤, 각 검색 스팬을 답변과 나란히 살펴봅니다. 무료이고 계정이 필요 없으며, 끌 수 있는 UI 분석 데이터 말고는 머신 밖으로 나가는 것이 없습니다.
300명 규모 SaaS 기업의 ML 플랫폼 팀
LLM 기능 4개의 트레이싱과 회귀 테스트를 자체 호스팅하기
PostgreSQL 위에 Helm 차트로 배포하고, OAuth2나 LDAP와 함께 PHOENIX_ENABLE_AUTH를 켜고, 프롬프트를 바꿀 때마다 트레이스 데이터셋으로 실험을 돌립니다. 라이선스 비용은 없고, 비용은 데이터베이스와 작은 Kubernetes 배포입니다.
이미 Dynatrace 비용을 내는 엔지니어링 책임자
LLM 관측성을 어디에 둘지 결정하기
개발과 평가는 Phoenix로 무료로 해결되고, 월 $50인 Arize AX Pro는 30일 보존의 관리형 저장소를 더합니다. Dynatrace는 Arize를 점차 통합하겠다고 하는데, 통합에는 유리할 수 있지만 AX의 로드맵은 Dynatrace가 정하게 됩니다.
도입 전 확인할 점
- 설정
- `pip install arize-phoenix && phoenix serve`(Python 3.11~3.14) 또는 `uvx arize-phoenix serve`. UI와 트레이스 엔드포인트는 포트 6006을 함께 씁니다. 서버용으로 Docker 이미지와 Helm 차트가 있습니다.
- 연동
- Python, TypeScript, Java에서 LlamaIndex, LangChain, DSPy, Mastra, Vercel AI SDK, OpenAI, Bedrock, Anthropic 클라이언트 자동 계측. Ragas와 DeepEval의 평가기.
- 데이터와 개인정보
- 자체 호스팅 데이터는 사용자 인프라에 남고 에어갭으로도 운영할 수 있으며, 보존 기간은 기본적으로 무제한입니다. PHOENIX_ENABLE_AUTH와 PHOENIX_SECRET을 설정하기 전까지 인증은 꺼져 있습니다. UI 분석은 기본으로 켜져 있지만 트레이스 데이터는 수집하지 않습니다. Arize 가격 페이지는 AX에 SOC 2 Type II 배지를 표시하지만 어느 요금제가 해당하는지는 밝히지 않으며, HIPAA, 자체 호스팅, 감사 로그는 Enterprise에만 있다고 적습니다.
- 대규모 사용 시 비용
- 자체 호스팅은 사용량 제한 없이 무료이며, 운영용으로 PostgreSQL 인스턴스 비용을 잡아 두십시오. Arize AX: Free는 월 25k 스팬, Pro는 월 $50에 50k 스팬이며, 초과 요금은 공개되지 않았습니다.
- 제한
- 기본 SQLite는 영구 볼륨이 없으면 데이터를 잃습니다. 운영 중인 배포에서 인증을 켜면 키가 생길 때까지 수집이 막힙니다. Elastic License는 서비스로 재판매하는 것을 금지합니다. 열린 이슈와 풀 리퀘스트 약 1,200개.
좋은 점
- OpenTelemetry와 OpenInference 기반
- 데이터셋, 실험, 평가기가 하나의 루프에
- 명령 하나(`uvx arize-phoenix serve`)로 로컬 실행
- 거의 매주 릴리스, 2026년 10월 23일 20.25.0
아쉬운 점
- OSI 오픈소스가 아닌 Elastic License 2.0
- 2026년 10월부터 Dynatrace 소유
- 기본값은 인증 꺼짐, 임시 폴더의 SQLite
- AX Free는 데이터를 15일만 보존
추천 대상
노트북에서 시작해 강력한 평가 루프를 갖춘 표준 기반 트레이싱을 원하는 엔지니어와 데이터 과학자.
Arize Phoenix 대안
Arize Phoenix: 자주 묻는 질문
- Arize Phoenix, 쓸 만한 가치가 있습니까?
- Phoenix는 공개 트레이싱 도구 가운데 가장 강력한 평가 루프를 갖췄지만, 법무팀이 따져 보고 싶어 할 라이선스와 소유주를 안고 있습니다. 평점은 5점 만점에 4.2점입니다.
- Arize Phoenix의 가격은 얼마입니까?
- Elastic License 2.0으로 자체 호스팅은 무료입니다(소스 공개, 타인을 위한 서비스 호스팅 금지). 관리형 Arize AX: Free(월 25k 스팬, 15일 보존, 1 GB), Pro 월 $50(50k 스팬, 30일, 10 GB), Enterprise 별도 견적.
- Arize Phoenix의 단점은 무엇입니까?
- OSI 오픈소스가 아닌 Elastic License 2.0; 2026년 10월부터 Dynatrace 소유; 기본값은 인증 꺼짐, 임시 폴더의 SQLite; AX Free는 데이터를 15일만 보존.
- Arize Phoenix에 적합한 사람은 누구입니까?
- 노트북에서 시작해 강력한 평가 루프를 갖춘 표준 기반 트레이싱을 원하는 엔지니어와 데이터 과학자.
- 팀이나 프로덕션 환경에서 Arize Phoenix의 비용은 얼마입니까?
- 자체 호스팅은 사용량 제한 없이 무료이며, 운영용으로 PostgreSQL 인스턴스 비용을 잡아 두십시오. Arize AX: Free는 월 25k 스팬, Pro는 월 $50에 50k 스팬이며, 초과 요금은 공개되지 않았습니다.
- Arize Phoenix에 회사 데이터를 맡겨도 안전합니까?
- 자체 호스팅 데이터는 사용자 인프라에 남고 에어갭으로도 운영할 수 있으며, 보존 기간은 기본적으로 무제한입니다. PHOENIX_ENABLE_AUTH와 PHOENIX_SECRET을 설정하기 전까지 인증은 꺼져 있습니다. UI 분석은 기본으로 켜져 있지만 트레이스 데이터는 수집하지 않습니다. Arize 가격 페이지는 AX에 SOC 2 Type II 배지를 표시하지만 어느 요금제가 해당하는지는 밝히지 않으며, HIPAA, 자체 호스팅, 감사 로그는 Enterprise에만 있다고 적습니다.
- Arize Phoenix의 가장 좋은 대안은 무엇입니까?
- 저희가 리뷰한 것 중 가장 가까운 대안은 Langfuse, Opik 및 Ragas입니다.
답변 확인일: 2026년 10월 26일.
Arize Phoenix 개발사입니까? 이 평점을 사이트에 표시하십시오
