Diffbot의 개요
Diffbot은 캘리포니아주 멘로파크의 Diffbot Technologies Corp.가 만든 서비스로, 대형 언어 모델 대신 컴퓨터 비전과 언어 처리로 웹페이지를 읽어 구조화된 JSON으로 돌려줍니다. Extract API에는 정해진 페이지 유형이 있습니다. Article, Product, Image, Video, Discussion에 베타인 Event, List, Job, 그리고 페이지 유형을 알아서 판별하는 Analyze가 있습니다. 사이트별 규칙은 필요 없습니다.
Extract 주변에는 시작 URL 하나에서 사이트 전체를 훑는 Crawl, 일반 텍스트에서 엔티티, 관계, 감정을 뽑는 Natural Language API, Web Search API, 그리고 Knowledge Graph가 있습니다. Knowledge Graph는 기업, 인물, 기사 등 100억 개가 넘는 엔티티를 공개 웹에서 구축한 것으로, Diffbot 자체 쿼리 언어인 DQL로 조회하거나 Enhance로 내 레코드와 대조합니다.
모든 비용은 크레딧으로 냅니다. 페이지 추출은 1크레딧(프록시 사용 시 2), 검색은 1, 10,000자 이하의 Natural Language 문서는 1, Knowledge Graph 엔티티는 25~100크레딧입니다.
Diffbot의 가격은 얼마입니까?
| 플랜 | 가격 | 포함 내용 |
|---|---|---|
| Free | Free | 월 10,000크레딧, 스레드 1개, 분당 5회. 크레딧을 다 쓰면 차단 |
| Startup | $299/month | 250,000크레딧, 초과 크레딧당 $0.001, 초당 5회 |
| Plus | $899/month | 1,000,000크레딧, 초과 크레딧당 $0.0009, Crawl, 좌석 3개, 초당 25회 |
| Enterprise | Custom | 활성 크롤 100개 이상, 맞춤형 한도와 좌석 |
Free: 월 10,000크레딧, 스레드 1개, 분당 5회, 카드 불필요. Startup 월 $299에 250,000크레딧(초과 시 크레딧당 $0.001). Plus 월 $899에 1,000,000크레딧(초과 시 크레딧당 $0.0009), Crawl과 좌석 3개 포함. Enterprise는 맞춤형. 페이지 추출 1크레딧, Knowledge Graph 엔티티 25크레딧. 학생은 Startup 단계를 무료로 씁니다.
Diffbot, 쓸 만한 가치가 있습니까?
서로 다른 사이트 100곳에서 상품 가격이나 뉴스 기사를 긁어 오려면 보통 파서도 100개가 필요하고, 사이트 디자인이 바뀌는 날마다 그중 하나가 조용히 망가집니다.
Diffbot은 그 잡일을 끝내려고 만들어졌습니다. URL을 보내면 CSS 선택자 대신 컴퓨터 비전으로 사람처럼 페이지를 읽고, 타입이 정해진 필드를 돌려줍니다. 상품이면 가격, 브랜드, 리뷰, 기사면 저자, 날짜, 본문입니다. 대형 언어 모델이 아니므로 페이지에 없는 가격을 지어내지 않습니다. 추출 한 번은 1크레딧입니다.
Knowledge Graph는 경쟁사가 싸게 따라 할 수 없는 부분입니다. Diffbot은 공개 웹을 직접 크롤링해 찾은 내용을 100억 개가 넘는 엔티티로 엮습니다. 직원 200명이 넘는 베를린의 소프트웨어 기업을 모두 달라고 하거나, CRM 행을 보내 빈칸을 채워 받을 수 있습니다. 엔티티당 25크레딧이므로 기업 레코드 10,000건이면 월 $299 Startup의 250,000크레딧을 모두 씁니다.
주의할 점: 무료 플랜은 시승이지 그 위에 무언가를 지을 단계가 아닙니다. 분당 5회, 스레드 1개, Knowledge Graph 엔티티 월 400건까지이고 Crawl은 없으며, 10,000크레딧을 다 쓰면 요청은 청구되지 않고 거부됩니다. 다음 단계는 월 $299이고, 사이트 전체 크롤링은 $899부터입니다. Diffbot은 또 쿼리 기록과 API 호출을 키에 연결해 보관하고 서비스 개선에 씁니다. 2025년 8월 29일 갱신된 개인정보 처리방침에는 보존 기간이 없고, 학습에 대해서는 어느 쪽으로도 언급하지 않습니다. 암호화하지 않은 http 호출은 암호화 없이 전송된다고 경고하니 https를 쓰세요.
결론: Diffbot은 열람 전용 참고 도서관이지 복사기가 아닙니다. 모델에 넣을 Markdown으로 페이지를 바꾸기만 하면 된다면 토큰 과금 리더가 더 쌉니다. 수천 개의 서로 다른 사이트에서 같은 필드를 뽑거나 그 뒤의 기업과 사람을 알아야 한다면, 모델의 추측 없이 그 일을 하는 곳이 Diffbot입니다.
제 역할을 하는 곳
소매점 300곳을 추적하는 가격 비교 사이트의 데이터 엔지니어
상점마다 파서를 쓰지 않고 상품 페이지에서 가격, 재고, 사양 가져오기
URL마다 Product 엔드포인트를 호출합니다. 페이지당 1크레딧이면 월 900,000페이지가 $899의 Plus에 들어가고, 초당 25회 한도라 매일 새로 고치는 것도 현실적입니다.
직원 60명 B2B 소프트웨어 회사의 레비뉴 오퍼레이션 책임자
CRM 계정 8,000개에 빠진 직원 수, 업종, 위치 채우기
레코드를 Knowledge Graph Enhance에 올립니다. 건당 25크레딧이면 8,000개 계정에 200,000크레딧이 들어 $299 Startup 한 달 안에 끝납니다. 보강한 레코드를 나중에 갱신하면 100크레딧입니다.
언론 보도를 연구하는 대학원생
뉴스 기사 수천 건을 저자와 날짜가 붙은 깔끔한 텍스트로 바꾸기
Diffbot for Students가 Startup 단계를 무료로 제공하므로 월 250,000건의 Article 추출에 비용이 들지 않습니다. 감정과 엔티티는 문서당 1크레딧인 Natural Language API에서 얻습니다.
도입 전 확인할 점
- 설정
- 카드 없이 가입해 토큰을 복사하고, token과 url을 붙여 Extract 엔드포인트에 GET을 보냅니다. Test Drive 페이지는 로그인 없이 됩니다.
- 연동
- Extract, Crawl, Natural Language, Knowledge Graph(DQL과 Enhance), Web Search용 REST API. Excel 추가 기능과 브라우저 확장 프로그램도 있습니다.
- 데이터와 개인정보
- Diffbot은 쿼리 기록과 API 호출을 키에 연결해 기록하고 사용 데이터를 서비스 개선에 씁니다. 저장은 미국의 Amazon S3와 EC2입니다. 보존 기간은 공개되지 않았 고, 계정 삭제는 privacy@diffbot.com으로 이메일을 보내 요청합니다.
- 대규모 사용 시 비용
- Plus에서 월 150만 크레딧을 쓰면 $899에 500,000 × $0.0009를 더해 약 $1,349입니다. Knowledge Graph 작업은 페이지 추출보다 25~100배 빠르게 크레딧을 씁니다.
- 제한
- Free는 분당 5회, Knowledge Graph 엔티티 월 400건, Natural Language 월 500회. Startup 초당 5회. Plus 초당 25회, 활성 크롤 25개. Free에서 크레딧을 다 쓰면 429가 반환됩니다.
좋은 점
- 사이트별 규칙 없이 어떤 기사나 상품 페이지에서도 타입이 있는 필드 추출
- 언어 모델이 아니므로 값을 지어내지 않음
- 자체 크롤링으로 만든 100억 개 이상의 엔티티 Knowledge Graph
- 계약 없이 월 단위로 해지하는 명확한 크레딧 요금
- 학생과 연구자는 Startup 단계 무료
아쉬운 점
- 무료 플랜은 분당 5회로 제한되고 크레딧을 다 쓰면 차단
- $0에서 월 $299로 바로 뜀
- 사이트 전체 Crawl은 월 $899부터
- Knowledge Graph 레코드는 건당 25~100크레딧
- 개인정보 처리방침에 쿼리 기록 보존 기간이 없음
추천 대상
스크레이퍼를 관리하지 않고 여러 사이트에서 일관된 필드나 기업·인물 레코드를 얻어야 하는 데이터 팀과 세일즈 인텔리전스 팀.
Diffbot 대안
Diffbot: 자주 묻는 질문
- Diffbot, 쓸 만한 가치가 있습니까?
- Diffbot은 규칙을 쓰지 않아도 페이지에서 깔끔한 필드를 뽑고, 다른 누구도 레코드 단위로 팔지 않는 기업·인물 그래프를 갖고 있지만, 무료에서 월 $299로 넘어가는 폭이 가파릅니다. 평점은 5점 만점에 3.9점입니다.
- Diffbot의 가격은 얼마입니까?
- Free: 월 10,000크레딧, 스레드 1개, 분당 5회, 카드 불필요. Startup 월 $299에 250,000크레딧(초과 시 크레딧당 $0.001). Plus 월 $899에 1,000,000크레딧(초과 시 크레딧당 $0.0009), Crawl과 좌석 3개 포함. Enterprise는 맞춤형. 페이지 추출 1크레딧, Knowledge Graph 엔티티 25크레딧. 학생은 Startup 단계를 무료로 씁니다.
- Diffbot의 단점은 무엇입니까?
- 무료 플랜은 분당 5회로 제한되고 크레딧을 다 쓰면 차단; $0에서 월 $299로 바로 뜀; 사이트 전체 Crawl은 월 $899부터; Knowledge Graph 레코드는 건당 25~100크레딧; 개인정보 처리방침에 쿼리 기록 보존 기간이 없음.
- Diffbot에 적합한 사람은 누구입니까?
- 스크레이퍼를 관리하지 않고 여러 사이트에서 일관된 필드나 기업·인물 레코드를 얻어야 하는 데이터 팀과 세일즈 인텔리전스 팀.
- 팀이나 프로덕션 환경에서 Diffbot의 비용은 얼마입니까?
- Plus에서 월 150만 크레딧을 쓰면 $899에 500,000 × $0.0009를 더해 약 $1,349입니다. Knowledge Graph 작업은 페이지 추출보다 25~100배 빠르게 크레딧을 씁니다.
- Diffbot에 회사 데이터를 맡겨도 안전합니까?
- Diffbot은 쿼리 기록과 API 호출을 키에 연결해 기록하고 사용 데이터를 서비스 개선에 씁니다. 저장은 미국의 Amazon S3와 EC2입니다. 보존 기간은 공개되지 않았고, 계정 삭제는 privacy@diffbot.com으로 이메일을 보내 요청합니다.
- Diffbot의 가장 좋은 대안은 무엇입니까?
- 저희가 리뷰한 것 중 가장 가까운 대안은 Apify, Jina Reader 및 TinyFish입니다.
답변 확인일: 2026년 11월 13일.