본문으로 건너뛰기
ReviewRamble

주간 브리프

AI 리뷰를 받은편지함으로.

  • 도구, 모델, MCP 서버, 저장소의 새 리뷰(결론부터)
  • 변경이 있을 때 다시 확인한 가격과 평점
  • 새로 발행된 분석 글

모델, 에이전트, MCP 서버, 그리고 정말 시간을 들일 만한 도구.

일주일에 한 통입니다. 각 브리프의 링크로 구독을 해지할 수 있습니다. 이메일 사용 방식

Nemotron 3.5 Embed (1B and 8B)

텍스트와 페이지 이미지를 하나의 벡터 공간에 담는 NVIDIA의 오픈 임베딩 모델로, ViDoRe v3.1 1위이며 OpenRouter에서 무료로 호출할 수 있습니다.

리뷰어: Andrew Miller · 업데이트

평점

4.4/5

Nemotron 3.5 Embed는 텍스트뿐 아니라 페이지 이미지도 읽고 시험해 보는 데 비용이 들지 않으므로, 문서 검색에서 먼저 써 볼 오픈 임베딩 모델입니다.

Nemotron 3.5 Embed (1B and 8B)의 개요

Nemotron 3.5 Embed는 NVIDIA가 2026년 10월 20일 허용적인 OpenMDW-1.1 라이선스로 공개한 오픈 임베딩 모델 두 종으로, 1B 모델(15.5억 파라미터)과 8B 모델(83.8억)입니다. 임베딩 모델은 검색 시스템이 가장 가까운 항목을 찾을 수 있도록 질의나 문서를 숫자 목록으로 바꿉니다. 이 모델들은 텍스트, 문서 페이지 이미지, 또는 둘을 함께 변환해 표, 차트, 인포그래픽이 있는 PDF 검색에 쓰이며, 질의는 텍스트만 가능합니다.

둘 다 Mistral의 Ministral 3 모델을 바탕으로, 2026년 7월에 나온 NVIDIA의 텍스트 전용 Nemotron 3 Embed에 Pixtral 이미지 인코더를 더했습니다. NVIDIA가 학습 중 텍스트 부분을 고정했기 때문에 텍스트 벡터는 Nemotron 3 Embed와 같고, 기존 텍스트 인덱스를 다시 만들 필요가 없습니다. 1B는 2,048차원 벡터를 내며 1,024나 512로 줄일 수 있고, 최대 32,768토큰을 읽으며, Blackwell GPU용 4비트 NVFP4 빌드도 있습니다.

Nemotron 3.5 Embed (1B and 8B), 쓸 만한 가치가 있습니까?

Nemotron 3.5 Embed는 표와 차트가 본문만큼 의미를 담는 업무 문서 검색에서 이제 가장 강력한 오픈 선택지입니다. 2026년 10월 20일 기준 시각 문서 검색 리더보드 ViDoRe v3.1에서 8B는 nDCG@10 61.17로 1위, 1B는 58.38로 더 큰 모델 점수의 95.4%를 유지했습니다. NVIDIA의 ViDoRe V3 페이지 이미지 표에서 1B는 58.02로 Qwen3-VL-Embedding-2B의 52.89를, 8B는 60.39로 Qwen3-VL-Embedding-8B의 58.29를 앞섭니다.

텍스트 쪽은 물려받은 것이며 이미 검증되었습니다. NVIDIA에 따르면 텍스트 전용 Nemotron 3 Embed 8B는 2026년 7월 다국어 RTEB 리더보드에서 78.5로 1위였고, 1B는 72.4, MMTEB 검색에서 71.0이었습니다. 3.5가 이 텍스트 벡터를 그대로 유지하므로, Nemotron 3 Embed를 쓰는 팀은 텍스트를 다시 임베딩하지 않고 같은 인덱스에 페이지 이미지를 추가할 수 있습니다. 버전이 바뀔 때마다 전면 재구축이 흔한 분야에서 보기 드문 배려입니다.

도입 비용은 거의 0입니다. 두 크기 모두 당분간 OpenRouter에서 무료이고, 라이선스는 상업적 사용을 허용하며, NVIDIA 테스트에서 NVFP4 1B는 GB200에서 BF16보다 27.1% 빠르면서 ViDoRe V3 정확도의 99.85%를 유지합니다. NVIDIA의 NIM 컨테이너는 RTX PRO 6000 Blackwell에서 초당 6,031건의 질의를 처리해 vLLM의 약 2.9배였습니다.

주의할 점: 위 수치는 모두 NVIDIA의 것이고, 소프트웨어 지원 범위가 좁습니다. 지원 하드웨어는 Linux의 NVIDIA Ampere, Hopper, Blackwell이며, 이미지 입력에는 Transformers 5.20.0이 필요합니다. 5.17.0부터 5.19.0까지는 FlashAttention 2에서 잘못된 결과를 낼 수 있기 때문입니다. 또한 페이지 이미지는 텍스트와 같은 32,768토큰 예산을 씁니다. 텍스트는 34개 언어, 이미지는 18개 언어로 평가되어 100개 이상을 내세우는 일부 경쟁 모델보다 적습니다.

결론: PDF, 슬라이드, 스캔 보고서를 다루는 RAG 시스템이라면 지금은 Nemotron 3.5 Embed 1B가 합리적인 기본값입니다. 8B의 추가 GPU는 재현율 몇 포인트가 실제 돈이 되는 곳에서만 값어치를 합니다.

제 역할을 하는 곳

  • 주식 리서치 회사의 검색 엔지니어

    수천 개의 애널리스트 PDF에서 원하는 차트나 표 찾기

    1B로 각 페이지를 이미지와 추출 텍스트로 함께 임베딩하고 2,048차원 벡터(저장 공간을 절반으로 줄이려면 1,024)를 저장한 뒤 일반 텍스트로 질의합니다. NVIDIA 기준 1B의 ViDoRe V3 이미지+텍스트 점수는 58.82입니다.

  • 이미 Nemotron 3 Embed로 텍스트 검색을 운영하는 플랫폼 팀

    수백만 개 텍스트 청크를 재색인하지 않고 스캔 계약서와 슬라이드 자료 추가하기

    모델을 Nemotron 3.5 Embed 1B로 바꾸고 새 페이지 이미지만 임베딩합니다. NVIDIA가 텍스트 가중치를 고정했으므로 기존 텍스트 벡터는 그대로 유효합니다.

  • 기억 기능이 있는 AI 에이전트를 시제품으로 만드는 2인 스타트업

    GPU에 투자하기 전에 강력한 임베딩 모델 시험하기

    시제품 단계에서는 OpenRouter의 nvidia/nemotron-3.5-embed-1b:free를 호출하고, 트래픽이 정당화되면 NVIDIA GPU 한 장의 vLLM이나 NIM 컨테이너로 옮깁니다.

도입 전 확인할 점

설정
pip install transformers 5.20.0과 sentence-transformers 후 nvidia/Nemotron-3.5-Embed-1B-BF16을 불러와 질의·구절 접두사를 붙여 주는 encode_query와 encode_document를 호출합니다. vLLM 0.32.0으로 vllm serve도 가능합니다.
연동
Transformers, Sentence Transformers, vLLM(검색용 /v2/embed 엔드포인트 포함), NVIDIA NIM. OpenRouter, Baseten, DeepInfra, FriendliAI. Elastic 지원은 곧 제공될 예정이라고 발표되었습니다.
데이터와 개인정보
OpenMDW-1.1은 상업적 사용을 허용합니다. 직접 호스팅하면 문서는 자체 하드웨어에 남습니다. 학습에는 상업적 사용이 허용된 공개 데이터셋과 Nemotron, Qwen, Gemma, gpt-oss 등의 모델이 만든 합성 데이터가 쓰였습니다.
대규모 사용 시 비용
가중치는 무료이고 OpenRouter는 현재 요금을 받지 않습니다. 직접 호스팅 시 NVIDIA는 NVFP4 1B를 GB200에서 초당 128.8개 문서, NIM을 RTX PRO 6000에서 초당 6,031건 질의로 측정했습니다.
제한
입력당 32,768토큰이며 텍스트와 이미지 토큰이 함께 씀. 이미지는 기본적으로 긴 변 1,120픽셀, 최대 1,540. 텍스트 질의만 가능. Linux의 NVIDIA GPU.

좋은 점

  • 8B가 ViDoRe v3.1에서 nDCG@10 61.17로 1위(2026년 10월 20일)
  • 텍스트, 페이지 이미지 또는 둘 다를 하나의 벡터 공간에 임베딩
  • 텍스트 벡터가 Nemotron 3 Embed와 동일해 텍스트 인덱스를 그대로 사용
  • 허용적인 OpenMDW-1.1 라이선스, OpenRouter에서 무료
  • NVFP4 빌드는 Blackwell에서 27.1% 더 빠름

아쉬운 점

  • 모든 벤치마크가 NVIDIA 자체 수치
  • Linux와 NVIDIA GPU 전용
  • 텍스트는 34개 언어, 이미지는 18개 언어로 평가
  • 질의는 텍스트만 가능하며 이미지 질의는 미지원
  • 버전에 민감: Transformers 5.17.0~5.19.0에서 FlashAttention 2 사용 시 이미지 입력 오류

추천 대상

PDF, 슬라이드, 보고서를 대상으로 검색이나 RAG를 구축하면서 텍스트와 페이지 이미지를 하나의 오픈 모델로 처리하려는 팀.

Nemotron 3.5 Embed (1B and 8B) 대안

Nemotron 3.5 Embed (1B and 8B): 자주 묻는 질문

Nemotron 3.5 Embed (1B and 8B), 쓸 만한 가치가 있습니까?
Nemotron 3.5 Embed는 텍스트뿐 아니라 페이지 이미지도 읽고 시험해 보는 데 비용이 들지 않으므로, 문서 검색에서 먼저 써 볼 오픈 임베딩 모델입니다. 평점은 5점 만점에 4.4점입니다.
Nemotron 3.5 Embed (1B and 8B)의 가격은 얼마입니까?
OpenMDW-1.1로 무료. 두 크기 모두 OpenRouter에서 무료로 호출할 수 있으며, Baseten, DeepInfra, FriendliAI도 호스팅하고, NVIDIA는 NIM 컨테이너를 제공합니다.
Nemotron 3.5 Embed (1B and 8B)의 단점은 무엇입니까?
모든 벤치마크가 NVIDIA 자체 수치; Linux와 NVIDIA GPU 전용; 텍스트는 34개 언어, 이미지는 18개 언어로 평가; 질의는 텍스트만 가능하며 이미지 질의는 미지원; 버전에 민감: Transformers 5.17.0~5.19.0에서 FlashAttention 2 사용 시 이미지 입력 오류.
Nemotron 3.5 Embed (1B and 8B)에 적합한 사람은 누구입니까?
PDF, 슬라이드, 보고서를 대상으로 검색이나 RAG를 구축하면서 텍스트와 페이지 이미지를 하나의 오픈 모델로 처리하려는 팀.
팀이나 프로덕션 환경에서 Nemotron 3.5 Embed (1B and 8B)의 비용은 얼마입니까?
가중치는 무료이고 OpenRouter는 현재 요금을 받지 않습니다. 직접 호스팅 시 NVIDIA는 NVFP4 1B를 GB200에서 초당 128.8개 문서, NIM을 RTX PRO 6000에서 초당 6,031건 질의로 측정했습니다.
Nemotron 3.5 Embed (1B and 8B)에 회사 데이터를 맡겨도 안전합니까?
OpenMDW-1.1은 상업적 사용을 허용합니다. 직접 호스팅하면 문서는 자체 하드웨어에 남습니다. 학습에는 상업적 사용이 허용된 공개 데이터셋과 Nemotron, Qwen, Gemma, gpt-oss 등의 모델이 만든 합성 데이터가 쓰였습니다.
Nemotron 3.5 Embed (1B and 8B)의 가장 좋은 대안은 무엇입니까?
저희가 리뷰한 것 중 가장 가까운 대안은 Qwen3-VL-Embedding, Nemotron ColEmbed V2, Cohere Embed 5, Harrier-OSS-v1 (270M, 0.6B, 27B) 및 Jina Embeddings v5입니다.

답변 확인일: 2026년 11월 7일.

Nemotron 3.5 Embed (1B and 8B) 개발사입니까? 이 평점을 사이트에 표시하십시오ReviewRamble 평점: Nemotron 3.5 Embed (1B and 8B), 5점 만점에 4.4점