ScraperAPI Hobby 플랜에 가입하면 "100,000 credits"라는 숫자가 반겨요. 신나서 스크래핑을 돌리죠. 그런데 사흘 뒤 대시보드를 열어보면 크레딧의 80%가 증발해 있고, 정작 긁어온 페이지는 6천 개 남짓이에요. 어디서 새어나간 걸까요? 범인은 크레딧 배수 시스템이에요. 그리고 이게 ScraperAPI에서 가장 중요한 요소인데도, 대부분의 리뷰가 제대로 안 짚고 넘어가요. 저는 몇 주를 들여 ScraperAPI 문서를 파고, 경쟁사 다섯 곳의 실제 가격을 비교하고, Reddit과 Capterra 리뷰를 샅샅이 훑었어요. 우리 팀이 처음 스크래핑 API를 검토하던 시절, 누가 이런 글 하나 던져줬으면 했던 바로 그 내용이에요. 크레딧 실제 계산법, ScraperAPI가 강한 곳과 완전히 무너지는 곳, G2·Capterra·Reddit에서 사용자들이 실제로 하는 말, 그리고 애초에 스크래핑 API가 정말 필요한지까지 같이 따져볼게요.
ScraperAPI란 무엇이고, 누구를 위한 서비스인가?
ScraperAPI는 대규모 스크래핑 뒤에 깔린 복잡한 인프라를 대신 떠맡아주는 웹 스크래핑 API예요. 50개국 이상에 퍼진 4,000만+ IP 프록시 로테이션, 자동 CAPTCHA 해결, JavaScript 렌더링, 자동 재시도까지 알아서 처리해요. API 호출로 URL을 던지면 HTML을 돌려주고, 구조화 데이터 엔드포인트를 쓰면 파싱된 JSON도 받을 수 있어요. 2018년 Daniel Ni가 세웠고 본사는 라스베이거스에 있어요. 지금은 Deloitte, Sony, Alibaba를 포함한 1만 개 이상 브랜드를 지원하며, 월 360억 건의 API 요청을 처리해요.
주 타깃은 커스텀 스크래핑 파이프라인을 직접 짜는 개발팀과 기술 운영팀이에요. 코드를 안 쓴다면 ScraperAPI는 애초에 당신 도구가 아니에요. (이 부분은 뒤에서 더 풀어요.)
핵심 기능은 프록시 로테이션, JavaScript 렌더링, 지역 타깃팅, 인기 사이트용 구조화 데이터 엔드포인트, 실패 요청 자동 재시도예요.
그런데 대부분의 리뷰가 놓치는 결정적인 함정이 하나 있어요. ScraperAPI 가격 페이지에 적힌 크레딧 숫자는 배수 구조를 모르면 심하게 오해하기 쉬워요. 그래서 여기부터 먼저 짚어요.
ScraperAPI의 크레딧 시스템은 실제로 어떻게 굴러가나? (대부분의 리뷰가 건너뛰는 부분)
ScraperAPI는 크레딧 기반 과금을 써요. 기본 공식은 단순해요. 요청 1건 = 크레딧 1개. 하지만 현실에서는 이렇게 깔끔하게 안 돌아가요. 실제 크레딧 비용은 두 가지가 좌우해요. 어떤 도메인을 긁느냐, 그리고 어떤 기능을 켰느냐죠. 게다가 그 비용이 직관과 어긋나게 불어나요.
가입 전에 누구나 먼저 봐야 할 크레딧 배수 표
파라미터를 하나도 안 건드려도, 어떤 사이트를 긁느냐에 따라 기본 크레딧 비용이 달라져요.
| 도메인 카테고리 | 요청당 기본 크레딧 | 예시 |
|---|---|---|
| 일반 웹사이트 | 1 | 블로그, 뉴스 사이트, 단순 HTML |
| 이커머스 | 5 | Amazon, eBay, Walmart |
| SERP(검색엔진 결과) | 25 | Google, Bing |
| 소셜 미디어 | 30 |
여기에 기능 플래그가 크레딧을 더 얹어요.
| 파라미터 | 추가 크레딧 | 비고 |
|---|---|---|
render=true (JS 렌더링) | +10 | 모든 플랜 |
screenshot=true | +10 | 모든 플랜 |
premium=true (프리미엄 프록시) | +10 | 모든 플랜 |
ultra_premium=true | +30 | 유료 플랜만 |
| 안티봇 우회(Cloudflare, DataDome, PerimeterX) | 각 +10 | 자동 감지됨 — 직접 선택하는 항목 아님 |
premium=true + render=true 조합 | +25 | +20이 아님 |
ultra_premium=true + render=true 조합 | +75 | +40이 아님 |
마지막 두 줄이 핵심이에요. 기능을 묶어 쓰면 개별 비용을 단순히 더한 것보다 더 나와요. 프리미엄 프록시(+10)에 JavaScript 렌더링(+10)을 합치면 산수로는 +20일 것 같죠? ScraperAPI는 +25를 청구해요. 울트라 프리미엄(+30)에 렌더링(+10)을 합치면 +40 같지만 실제로는 +75, 거의 두 배예요. 이 비선형 누적 구조는 눈에 띄게 문서화돼 있지 않아요. 사용자가 크레딧이 예상보다 훨씬 빨리 녹는다고 느끼는 주된 이유죠.
추가 크레딧이 안 붙는 파라미터도 있어요. wait_for_selector, country_code, session_number, device_type, output_format, keep_headers=true, autoparse=true이에요.
Free부터 Enterprise까지, 각 플랜이 실제로 주는 것
ScraperAPI의 현재 플랜 구성은 이래요.
| 플랜 | 월 요금 | 연간(월 환산) | API 크레딧 | 동시 스레드 | 지역 타깃팅 |
|---|---|---|---|---|---|
| Free | $0 | — | 1,000 | 5 | 없음 |
| Hobby | $49 | $44 | 100,000 | 20 | 미국 및 EU만 |
| Startup | $149 | $134 | 1,000,000 | 50 | 미국 및 EU만 |
| Business | $299 | $269 | 3,000,000 | 100 | 국가 단위(50개+ 국가) |
| Scaling | $475 | $427 | 5,000,000 | 200 | 국가 단위 |
| Enterprise | 맞춤형 | 맞춤형 | 5,000,000+ | 200+ | 국가 단위 |
이제 배수를 반영한 요청 1,000건당 실효 비용을 볼게요.
| 플랜 | 일반(1×) | JS 렌더링(10×) | 이커머스(5×) | SERP(25×) | 울트라 프리미엄 + JS(75×) |
|---|---|---|---|---|---|
| Hobby ($49) | $0.49 | $4.90 | $2.45 | $12.25 | $36.75 |
| Startup ($149) | $0.15 | $1.49 | $0.75 | $3.73 | $11.18 |
| Business ($299) | $0.10 | $1.00 | $0.50 | $2.49 | $7.48 |
| Scaling ($475) | $0.10 | $0.95 | $0.48 | $2.38 | $7.13 |
"100,000 credits"를 내세우는 월 $49(약 6만 5천 원) 플랜은, 보호된 사이트를 울트라 프리미엄 + 렌더링으로 긁으면 실제로는 1,333건밖에 못 처리해요. 1,000페이지당 $36.75 수준이라, 완전 관리형 스크래핑 서비스보다 비싼 경우도 생겨요.
크레딧이 예상보다 빨리 녹는 이유
사용자들이 자주 당황하는 지점이 셋 있어요.
첫째, 도메인 기반 과금은 자동이에요. Amazon 5배나 Google 25배 배수를 사용자가 고르는 게 아니에요. ScraperAPI가 도메인을 감지하는 순간 자동으로 붙어요. 안티봇 우회 크레딧(Cloudflare, DataDome, PerimeterX 각 +10)도 감지되면 알아서 따라붙어요.
둘째, 크레딧은 이월이 안 돼요. 남은 크레딧은 결제 주기 끝에 그냥 만료돼요. 쌓아둘 수 없어요.
셋째, 꽤 아픈 부분인데, Pay-As-You-Go는 Scaling 플랜($475/월, 약 62만 원) 이상에서만 돼요. Hobby, Startup, Business 플랜에서 한창 작업 도중 크레딧이 바닥나면 다음 결제 주기까지 그냥 막혀요. 사실상 다음 단계로 업그레이드하는 것 말고는 길이 없어요.
Reddit의 한 사용자는 Amazon 요청당 1크레딧 기준으로 6천만 크레딧 견적을 $3,600에 받았는데, 결제 뒤 아무 고지 없이 5배 배수가 적용됐다고 해요. 결국 6천만 플랜이 실제로는 1,200만 요청분에 그쳐, 기대치 대비 80% 부족했다고 해요.
DataPipeline 크레딧 함정
ScraperAPI의 노코드 DataPipeline 기능(스케줄 스크래핑 + 웹훅 전달)은 따로 노는, 훨씬 비싼 크레딧 체계를 써요. 표준 API에서 1크레딧인 기본 일반 요청이, DataPipeline에서는 6크레딧이에요.
| 요청 유형 | 표준 API | DataPipeline | 비율 |
|---|---|---|---|
| 기본 일반 요청 | 1 | 6 | 6배 |
| 기본 이커머스 | 5 | 10 | 2배 |
| 기본 SERP | 25 | 30 | 1.2배 |
| 울트라 프리미엄 + JS(일반) | 75 | 80 | 1.07배 |
표준 크레딧 비용인 줄 알고 노코드 파이프라인을 만든 사용자들은, 기본 요청부터 6배가 빠져나가는 걸 뒤늦게 깨달아요. 문서에 있긴 한데, 직접 뒤져야 나와요.
실제 요청당 비용: ScraperAPI vs 경쟁사
배수를 반영하지 않으면 가격 표시는 의미가 없어요. 저는 5개 제공업체의 현재 가격을 끌어와, 약 $300/월 구간에서 세 가지 일반 시나리오로 맞춰 비교했어요.
기본 HTML 스크래핑(JS 없음, 프리미엄 프록시 없음)
| 제공업체 | 플랜 | 요청당 크레딧 | 실제 요청 수 | 1천 건당 비용 |
|---|---|---|---|---|
| ScrapingBee | Business $249 | 1 | 3,000,000 | $0.08 |
| ScraperAPI | Business $299 | 1 | 3,000,000 | $0.10 |
| Scrapfly | Startup $250 | 1 | 2,500,000 | $0.10 |
| ZenRows | Business $300 | $0.28/1K | ~1,071,000 | $0.28 |
| Bright Data | PAYG | $1.50/1K | ~200,000 | $1.50 |
JavaScript 렌더링이 필요한 경우
| 제공업체 | 플랜 | 요청당 크레딧 | 실제 요청 수 | 1천 건당 비용 |
|---|---|---|---|---|
| ScrapingBee | Business $249 | 5(기본 활성화) | 600,000 | $0.42 |
| Scrapfly | Startup $250 | 6 | 416,667 | $0.60 |
| ScraperAPI | Business $299 | 10 | 300,000 | $1.00 |
| ZenRows | Business $300 | 5× | ~214,000 | $1.40 |
| Bright Data | PAYG | 고정 요금 | ~200,000 | $1.50 |
프리미엄/주거용 프록시 + JavaScript 렌더링(보호된 사이트)
| 제공업체 | 플랜 | 요청당 크레딧 | 실제 요청 수 | 1천 건당 비용 |
|---|---|---|---|---|
| Bright Data | PAYG | 고정 요금 | ~200,000 | $1.50 |
| ScrapingBee | Business $249 | 25 | 120,000 | $2.08 |
| ScraperAPI | Business $299 | 25 | 120,000 | $2.49 |
| Scrapfly | Startup $250 | 31 | 80,645 | $3.10 |
| ZenRows | Business $300 | 25× | ~42,857 | $7.00 |
Bright Data의 Web Unlocker는 JavaScript 렌더링에 추가 요금을 안 붙이는 유일한 제공업체예요. 모든 요청이 같은 고정 요금으로 처리돼요. 약 $300 구간에서 보호된 사이트 기준으로는 ScrapingBee와 ScraperAPI가 경쟁력 있고, ZenRows가 가장 비싸요.
사용 습관 하나 꼭 짚을게요. ScrapingBee는 JavaScript 렌더링이 기본 활성화돼 있고 비용은 5배예요. ScrapingBee와 ScraperAPI를 맞붙일 땐 반드시 같은 렌더링 설정으로 비교하세요.
Scrape.do의 독립 분석에서는 ScraperAPI 평균 비용이 요청 1,000건당 $8.49로, 테스트한 모든 제공업체 중 가장 비쌌어요. 평균 응답 시간도 15.7초로 "가장 느린 제공업체 중 하나"였어요. 계약 전에 알아둘 만한 정보예요.
사이트별 성공률: ScraperAPI가 강한 곳, 약한 곳
스크래핑 API가 모든 사이트에서 똑같이 잘 도는 건 아니에요. Scrapeway의 2026년 4월 독립 벤치마크가 이걸 아주 선명하게 보여줘요.
사이트 카테고리별 성능
| 대상 사이트 | 성공률 | 평균 속도 | 1천 건당 비용(비즈니스 플랜) |
|---|---|---|---|
| Zillow | 100% | 10.5초 | $0.49 |
| Etsy | 99% | 4.8초 | $4.90 |
| Amazon | 98% | 6.5초 | $2.45 |
| 95% | 17.8초 | $14.70 | |
| Walmart | 93% | 11.4초 | $2.45 |
| Indeed | 90% | 15.8초 | $4.90 |
| StockX | 84% | 3.9초 | $4.90 |
| Realtor.com | 12% | 11.8초 | $0.49 |
| 0% | — | — | |
| Booking.com | 0% | — | — |
| Twitter/X | 0% | — | — |
전체 평균 성공률은 62.8~63.7%로, 업계 평균 58.259.5%보다 살짝 위예요. 평균 응답 시간은 5.27.3초로, 업계 평균 9.8초보다 빨라요.
ScraperAPI가 잘하는 영역
이커머스(Amazon, Walmart, Etsy)와 부동산(Zillow)에서 확실히 세요. 이 사이트들의 구조화 데이터 엔드포인트는 파싱된 JSON을 높은 신뢰도로 돌려줘요. 주 목적이 Amazon 상품 페이지나 Google SERP를 긁는 거라면, ScraperAPI는 충분히 괜찮은 선택이에요.
ScraperAPI가 약한 영역
소셜 미디어는 사실상 사각지대예요. Instagram, Twitter/X, Booking.com 모두 독립 테스트에서 성공률 0%를 찍었어요. LinkedIn은 95%로 되긴 하는데, 요청당 30크레딧이라 비용이 꽤 세요.
로그인이 필요한 사이트는 대놓고 불가예요. ScraperAPI는 session_number 파라미터로 세션 유지(여러 요청 간 동일 IP)를 지원하지만, 로그인 뒤 데이터를 긁는 건 금지해요. 폼 입력, 2단계 인증, 복잡한 인증 흐름은 못 다뤄요.
보호된 대상에서는 오래된 데이터가 나올 수 있어요. ScraperAPI는 어려운 대상에 10분 강제 결과 캐시를 거예요. 즉, 가격이나 재고처럼 시시각각 변하는 데이터라면 최대 10분 전 결과를 받을 수도 있어요.
Proxyway의 2025년 벤치마크에서 ScraperAPI는 Google 대상 전체 제공업체 중 가장 낮은 성공률인 81.72%를 기록했어요.
사이트 카테고리 성능 요약
| 사이트 카테고리 | ScraperAPI 성능 | 알려진 문제 | 대안 후보 |
|---|---|---|---|
| Amazon / 이커머스 | ✅ 강함(SDP 엔드포인트) | 대규모일수록 크레딧 부담 큼 | Thunderbit 템플릿 (1클릭, 템플릿 자체는 행당 크레딧 없음) |
| Google SERP | ✅ 강함 | 지역 타깃팅에 추가 비용 발생; 한 벤치마크에서는 Google 성공률이 가장 낮음 | — |
| 부동산(Zillow) | ✅ 매우 우수(100%) | — | — |
| Instagram / 소셜 미디어 | ❌ 성공률 0% | 완전 실패 | Playwright + 프록시(직접 구축) |
| JS가 많은 SPA | ⚠️ 보통 | 10배 크레딧의 헤드리스 렌더링 필요 | Scrapfly, ZenRows |
| 로그인이 필요한 사이트 | ❌ ToS상 금지 | 세션/인증 지원 없음 | Thunderbit 브라우저 스크래핑 (로그인 세션 사용) |
| Booking.com / 여행 | ❌ 성공률 0% | 완전 실패 | Bright Data |
실제 사용자 평가는 어떤가: G2, Capterra, Reddit 종합
세 플랫폼 피드백을 모아봤어요. 현재 평점은 이래요.
| 플랫폼 | 평점 | 리뷰 수 |
|---|---|---|
| G2 | 4.4/5 | 16 |
| Capterra | 4.6/5 | 62 |
| Trustpilot | 4.5/5 | 43 |
Capterra 세부 평점: 사용 편의성 4.9/5, 고객 지원 4.6/5, 기능 4.5/5, 가성비 4.5/5.
테마별 감성 요약
| 테마 | 긍정 신호 | 부정 신호 |
|---|---|---|
| 설정 난이도 / 문서 | "설정이 정말 쉽다. 몇 분 안에 스크래핑을 시작할 수 있다." — Latenode 커뮤니티; Capterra 사용 편의성 4.9/5 | — |
| 가격 투명성 | "입문 요금제가 합리적이다"(여러 Capterra 리뷰) | "크레딧 비용 구조가 헷갈릴 수 있다" — John S., Founder, Capterra (2025년 2월); "가격이 1000% 올랐고 품질은 떨어졌다" — CTO, Online Media, Capterra (2022년 9월) |
| 신뢰성 | "Amazon/Google에서는 잘 작동한다"(G2, Capterra) | "대량 작업에서는 ScraperAPI가 불안정해진다" — emcarter, Latenode; "일부 대상에서 실패율 80%"(Reddit) |
| 고객 지원 | "응답이 빠른 팀"(Capterra) | 한 사용자는 견적은 한 가격이었는데 청구는 5배로 됐다고 보고했고, 사전 고지가 없었다고 주장함(Reddit) |
| 장기적 가치 | 성공한 요청(200/404)만 과금 | "대규모 운영이라면 비용이 빠르게 누적된다"는 의견과 함께, 자체 인프라 구축이 "장기적으로 더 경제적"이라는 평가 — mikezhang, Latenode |
정리하면, ScraperAPI는 초기 설정이 쉽고 널리 지원되는 인기 대상에서 안정적이라는 평을 받아요. 불만은 주로 가격 충격(배수, 예고 없는 인상)과 까다로운 대상에서의 신뢰성에 몰려 있어요.
ScraperAPI의 구조화 데이터 엔드포인트: 프리미엄 크레딧을 낼 값을 할까?
ScraperAPI는 5개 플랫폼에 걸쳐 18개의 구조화 데이터 엔드포인트를 제공하고, 원시 HTML 대신 파싱된 JSON을 돌려줘요.
- Amazon(엔드포인트 3개): ASIN 기준 상품 상세, 검색 결과, 경쟁 오퍼. 가격, 평점, 설명, 리뷰, BSR, 이미지, 판매자 정보 등 18개 넘는 필드를 반환하고 21개 지역 마켓플레이스를 지원해요.
- Google(엔드포인트 5개): SERP(일반 결과, 지식 그래프, 동영상, 관련 질문, 페이지네이션), 쇼핑, 지도, 뉴스, 채용.
- Walmart(엔드포인트 4개): 상품, 검색, 카테고리, 리뷰.
- eBay(엔드포인트 2개): 상품, 검색.
- Redfin(엔드포인트 4개): 검색, 에이전트 상세, 임대 매물, 매매 매물.
SDE는 Free 포함 모든 플랜에서 돼요. ScraperAPI는 지원 SDE 도메인에서 99.99% 성공률을 내세우지만, 독립 벤치마크에서는 사이트마다 결과가 더 갈려요.
데이터 완성도
Amazon SDP는 ScraperAPI의 최강 기능이에요. 가격, 리뷰, BSR, 변형 옵션, 이미지, 판매자 정보까지 필드가 포괄적이에요. Google SERP SDP는 일반 검색 결과, 광고, 추천 스니펫, People Also Ask를 돌려줘요. 이 두 플랫폼에서는 데이터 완성도가 상당히 좋아요.
크레딧 효율: SDP vs 직접 파싱
Business 플랜($299/월, 300만 크레딧)에서 SDE로 Amazon 상품 10,000개를 긁으면 50,000크레딧(개당 5크레딧)이 들고, 플랜 가치로는 약 $5 수준이에요. 표준 요청(개당 1크레딧)으로 직접 파서를 짜면 10,000크레딧만 들지만, 파서 개발과 유지보수에 개발자 시간이 필요해요.
개발자가 없는 소규모 팀이라면 SDE가 실제로 시간을 아껴줘요.
반대로 대규모 스크래핑을 감당할 엔지니어링 역량이 있는 팀이라면 5배 크레딧 프리미엄은 정당화하기 어려워요.
SDP와 노코드 스크래퍼 템플릿 비교
이 비교가 대부분의 리뷰가 알려주는 것보다 더 중요해요. Thunderbit은 Amazon, Shopify, Zillow에 더해 50개 이상의 다른 사이트용 즉시 사용 가능한 스크래퍼 템플릿을 줘요. 코딩이 전혀 필요 없고, 템플릿 자체는 행당 크레딧 비용도 없어요.
Thunderbit 템플릿으로 1클릭 스크래핑 체험하기
| 비교 항목 | ScraperAPI SDP(Amazon) | Thunderbit Amazon 템플릿 |
|---|---|---|
| 설정 시간 | 30~60분(코드 + API 연동) | 약 2분(확장 프로그램 설치, Amazon 열기, 템플릿 클릭) |
| 상품 1,000개당 비용(Business 플랜) | 약 $5(50,000크레딧, 크레딧당 $0.10) | 약 $16.50(Pro 기준 크레딧당 $0.0165로 1,000행 × 1크레딧) |
| 반환 필드 | 18개 이상(포괄적) | 상품명, 가격, 평점, 리뷰, 이미지, URL 등 |
| 내보내기 옵션 | JSON(파싱 코드는 필요) | Excel, CSV, Google Sheets, Airtable, Notion — 1클릭 |
| 유지보수 | ScraperAPI가 SDP를 유지 | Thunderbit 팀이 템플릿 유지 |
| 기술 수준 | Python/Node.js 필요 | 없음 |
개발팀이 대량 Amazon 스크래핑을 운영한다면, ScraperAPI의 SDP는 규모가 커질수록 상품당 비용 효율이 좋아요. 반대로 코드 없이 Amazon 데이터를 스프레드시트로 받고 싶은 비기술 사용자라면 Thunderbit가 훨씬 빠르게 깔리고 쓰기도 쉬워요.
스크래핑 API가 정말 필요할까? 대부분의 리뷰가 놓치는 노코드 경로
"Scraper API 리뷰"를 검색하는 많은 사람은 아직 API 워크플로에 발을 들이기로 확정한 게 아니에요. 오히려 API가 정말 필요한지부터 가늠하는 단계죠.
생각보다 많은 사람이 결국 필요 없어요. 웹 스크래핑 API 시장은 20억 3천만 달러 규모로 연 14~18% 성장 중이지만, 그 성장의 대부분은 기업 엔지니어링 팀이 끌고 가요. 웹사이트에서 리드 500개만 뽑으면 되는 세일즈 운영 담당자를 위한 시장이 아니라는 뜻이에요.
스크래핑 API vs 노코드 도구: 한눈에 보는 의사결정 프레임워크
| 비교 항목 | 스크래핑 API(ScraperAPI 등) | 노코드 도구(Thunderbit 등) |
|---|---|---|---|
| 최적 사용자 | 대규모 데이터 파이프라인을 만드는 개발자 | 비즈니스 사용자, 마케터, 세일즈 팀, 리서처 |
| 필요한 기술 | Python/Node.js, HTTP 개념, JSON 파싱 | 없음 — 브라우저에서 클릭만 하면 됨 |
| 설정 시간 | 최소 12시간(코드 + 테스트 + 디버깅) | 5분 이내 |
| 안티봇 대응 | 프리미엄 프록시(요청당 1075크레딧) | 실제 브라우저 세션 — 지문 추적을 자연스럽게 우회 |
| 로그인 필요 사이트 | ❌ ScraperAPI ToS상 금지 | ✅ Browser Scraping으로 기존 세션 사용 |
| 규모(페이지/일) | 월 10만300만+ 요청 | 비정기적 사용, 보통 하루 1,000페이지 이하 |
| 데이터 출력 | 원시 HTML 또는 JSON(파싱 코드 필요) | 바로 쓸 수 있는 행/열 구조 |
| 내보내기 | JSON, CSV(코드 필요) | Excel, CSV, Google Sheets, Airtable, Notion, Word, JSON |
| 유지보수 | 셀렉터, 재시도 로직, 인프라를 직접 수정해야 함 | 없음 — AI가 매번 페이지 구조를 다시 읽음 |
| 과금 단위 | 요청당 크레딧(가변: 175크레딧/요청) | 행당 크레딧(1크레딧 = 1행, 하위 페이지는 2크레딧) |
| 진입 가격 | 100K 크레딧에 월 $49 | 연간 기준 월 $9, 5,000크레딧 |
| 무료 요금제 | 월 1,000크레딧, 동시 5개 | 월 6페이지, 페이지당 30크레딧 |
| 가격 예측 가능성 | 낮음 — 배수 때문에 예상치 못한 비용 발생 | 높음 — 1행은 항상 1크레딧 |
스크래핑 API가 맞는 경우
- 개발자 또는 엔지니어링 팀이 있다
- 하루 10만 페이지 이상을 프로그램으로 긁어야 한다
- 요청 헤더, 세션, 재시도 로직을 세밀하게 제어해야 한다
- 타깃 사이트가 잘 지원되는 편이다(Amazon, Google, Walmart, Zillow)
Thunderbit 같은 노코드 도구가 더 나은 경우
- 엔지니어링이 아니라 세일즈, 이커머스 운영, 마케팅, 부동산 업무를 한다
- 사이트마다 커스텀 파서를 짜지 않고 수십 개 사이트에서 데이터를 가져와야 한다
- Excel, Google Sheets, Airtable, Notion으로 바로 내보내고 싶다
- 로그인이 필요한 사이트도 긁어야 한다(Thunderbit의 browser scraping은 로그인 세션을 사용함)
- 사이트 레이아웃이 바뀌어도 코드 수정 없이 AI가 페이지를 매번 새로 읽어주길 원한다
- 하위 페이지 스크래핑이 필요하다: Thunderbit는 각 상세 페이지를 방문해 자동으로 행을 보강할 수 있다
Thunderbit Chrome 확장 프로그램의 사용 흐름은 정말 간단해요. 확장 프로그램을 깔고, 아무 페이지나 연 뒤, "AI Suggest Fields"를 누르고, "Scrape"를 누른 다음, 내보내면 끝. AI가 페이지 데이터를 파악해 열을 제안하니, 셀렉터도 코드도 쓸 일이 없어요. 작동 방식이 궁금하면 웹 스크래핑 입문 가이드를 참고하세요.
2024년 기업의 62%가 클라우드 비용 초과를 겪었고, 사용량 기반 과금에 안전장치가 없는 기업은 과금 충격 탓에 이탈률이 23% 더 높다고 해요. 변동형 API 비용에 한 번 데인 적이 있다면, 행당 크레딧 모델의 예측 가능성을 진지하게 따져볼 만해요.
한눈에 보는 ScraperAPI 장단점
| 장점 | 단점 |
|---|---|
| 강력한 프록시 인프라(4,000만+ IP, 50개+ 국가) | 혼란스러운 크레딧 배수 시스템 — 기능을 함께 쓰면 단순 합산보다 더 비쌈 |
| 뛰어난 문서와 쉬운 초기 설정(Capterra 사용 편의성 4.9/5) | 크레딧은 월별 이월되지 않음 |
| Amazon, Google, Zillow, Etsy에서 안정적 | Instagram, Twitter/X, Booking.com 성공률 0% |
| 성공한 요청(200/404)만 과금 | 404 응답도 크레딧을 소모함 |
| 파싱된 JSON을 반환하는 18개 구조화 데이터 엔드포인트 | 로그인 필요 사이트는 명시적으로 금지 |
| Free를 포함한 모든 플랜에서 사용 가능 | Pay-As-You-Go는 Scaling($475/월) 이상에서만 가능 |
| 7일 무조건 환불 정책 | 어려운 대상에 10분 강제 캐시 — 오래된 데이터 위험 |
| 30~35% YoY 매출 성장으로 개발이 활발한 편 | DataPipeline은 표준 API보다 최대 6배 크레딧 사용 |
| — | 미국 및 EU를 넘는 지역 타깃팅은 Business 플랜($299/월) 필요 |
| — | 사전 사용량 알림 없음 — 대시보드를 직접 확인해야 함 |
ScraperAPI를 제대로 뽑아 쓰려면: 실전 팁
크레딧 소모를 매일 확인하세요
ScraperAPI의 대시보드는 평균 지연 시간, 긁은 도메인, 동시성 같은 사용 통계를 보여줘요. 단, 사전 알림은 없어요. 크레딧이 떨어져갈 때 이메일이나 SMS로 안 알려줘요. 직접 봐야 해요. 분석 기록은 Hobby/Startup 플랜에서 2주, Business 이상에서 6개월로 제한돼요.
첫 달에는 매일 대시보드를 확인하도록 캘린더 리마인더를 걸어두세요. 자기 타깃에서 크레딧이 얼마나 빨리 녹는지 감을 잡아야 해요.
무료 티어로 대상 사이트부터 테스트하세요
유료 플랜에 들어가기 전에, 1,000 무료 크레딧(그리고 5,000 크레딧 7일 체험)으로 실제 타깃 사이트 성공률을 테스트하세요. 어떤 사이트가 JavaScript 렌더링이나 프리미엄 프록시를 요구하는지 적어두면, 배수를 반영한 현실적 월 비용을 가늠할 수 있어요.
프리미엄 기능은 꼭 필요할 때만 켜세요
ScraperAPI는 프리미엄 프록시나 렌더링을 자동으로 안 켜요. render=true, premium=true, ultra_premium=true를 명시적으로 켜야 해요. 하지만 도메인 기반 과금은 자동이에요. Amazon은 늘 5크레딧, Google은 늘 25크레딧, LinkedIn은 늘 30크레딧이에요. 안티봇 우회 크레딧(Cloudflare, DataDome, PerimeterX 각 +10)도 감지되면 자동으로 붙고요. 배치를 돌리기 전에 이 점을 꼭 이해하세요.
지원되는 사이트에서는 구조화 데이터 엔드포인트를 쓰세요
Amazon이나 Google을 긁는다면, SDE는 크레딧이 더 들어도 개발 시간을 아껴줘요. 지원 안 되는 사이트라면, 커스텀 파서를 짜기보다 노코드 도구가 더 빠르고 저렴한지 검토해보세요.
불안정한 대상엔 백업 플랜을 두세요
특정 사이트에서 ScraperAPI 성공률이 90% 아래라면, 그 요청을 다른 제공업체로 돌리거나 브라우저 기반 도구를 쓰는 게 좋아요. 로그인 필요한 사이트는 ScraperAPI로는 그냥 안 돼요. 대신 Thunderbit처럼 브라우저 세션 안에서 도는 도구가 필요해요.
함정을 미리 알아두세요
- 404 응답도 크레딧을 먹어요 — ScraperAPI는 200과 404 둘 다 과금해요
- 취소한 요청도 과금돼요 — 70초 처리 창이 끝나기 전에 취소하면 청구돼요
- 어려운 대상엔 10분 강제 캐시가 걸려요 — 오래된 데이터를 받을 수 있어요
- Pay-As-You-Go는 Scaling($475/월) 이상에서만 — 하위 플랜은 크레딧이 다 떨어지면 막혀요
- 미국·EU를 넘는 지역 타깃팅은 Business 플랜($299/월)이 필요해요
핵심 정리: ScraperAPI는 당신에게 맞는 도구일까?
여러 조사를 거친 뒤 제가 내린 결론은 이래요.
- 개발팀에게는 괜찮은 선택이에요. Amazon, Google, Walmart, Zillow처럼 대량이면서 잘 지원되는 타깃을 긁을 때 특히 그래요. 구조화 데이터 엔드포인트는 실제로 유용하고, 프록시 인프라도 크고, 문서 수준도 평균 이상이에요.
- 가장 큰 리스크는 크레딧 배수 시스템이에요. 배수가 어떻게 쌓이는지 모르면 과지출해요. 광고된 크레딧과 실제 요청 수의 격차는 5~75배까지 벌어질 수 있어요. 유료 플랜에 들어가기 전에 자기 사용 사례로 직접 계산해보세요.
- 신뢰성은 사이트마다 달라요. 이커머스와 부동산에서는 뛰어나지만, 구인 사이트와 소셜 미디어에서는 그저 그렇고, Instagram, Twitter/X, Booking.com에서는 사실상 무용지물이에요. 어디서나 똑같이 잘 될 거라 기대하면 안 돼요.
- 비기술 팀에게는 안 맞는 도구예요. 세일즈, 마케팅, 운영을 하면서 코딩 없이 구조화 데이터가 필요하다면, Thunderbit 같은 노코드 도구가 훨씬 적합해요. AI 기반 필드 감지, 스프레드시트로 바로 내보내기, 하위 페이지 보강, 유지보수 부담 제로까지 갖췄어요. Thunderbit Chrome 확장 프로그램을 확인하거나 Thunderbit YouTube 채널에서 튜토리얼을 보세요.
- 예산이 빠듯한 개발자라면, 먼저 ScraperAPI 무료 티어로 실제 타깃에서 테스트한 뒤, ScrapingBee·Scrapfly·Bright Data와 실효 요청당 비용을 비교해보세요. 가장 저렴한 옵션은 사용 목적과 필요한 기능에 따라 완전히 달라져요.
당신의 스크래핑 요구에 맞는 진짜 숫자가 궁금하다면, ScraperAPI 무료 티어로 대상 사이트를 테스트하거나, Thunderbit를 설치해서 클릭 두 번으로 어디까지 되는지 확인해보세요. 가격 관련 더 자세한 내용은 플랜 페이지를 참고하면 돼요.
FAQ
ScraperAPI는 무료인가요?
네, ScraperAPI는 월 1,000 API 크레딧이 포함된 무료 티어와 5,000 크레딧 7일 체험을 줘요. 다만 JavaScript 렌더링, 프리미엄 프록시, 비용 높은 도메인(Amazon = 5배, Google = 25배, LinkedIn = 30배)에 크레딧 배수가 적용되므로, 실제 처리량은 1,000 요청보다 훨씬 낮을 수 있어요. 무료 티어에서는 울트라 프리미엄 프록시를 못 써요.
ScraperAPI는 요청당 얼마인가요?
기능 플래그와 대상 도메인에 따라 크게 달라져요. 단순 HTML 사이트의 일반 요청은 1크레딧이에요. Amazon 요청은 5크레딧, Google SERP 요청은 25크레딧이에요. JavaScript 렌더링을 켜면 10크레딧이 추가돼요. 울트라 프리미엄 프록시와 렌더링을 같이 쓰면 요청당 75크레딧이에요. Hobby 플랜($49/월, 10만 크레딧) 기준으로는 요청당 $0.00049(일반)부터 $0.0368(울트라 프리미엄 + JS)까지 벌어져요. 자세한 건 위 비용 표를 참고하세요.
ScraperAPI는 Amazon 스크래핑에 좋은가요?
ScraperAPI의 Amazon Structured Data 엔드포인트는 최강 기능 중 하나로, 독립 벤치마크에서 98% 성공률을 보였고, 18개 넘는 필드를 담은 포괄적 파싱 JSON을 돌려줘요. 다만 Amazon 요청은 최소 5크레딧이라 규모가 커질수록 비용이 빠르게 붙어요. 코드 없이 Amazon 데이터를 스프레드시트로 받고 싶은 소규모 팀이라면, Thunderbit의 Amazon 템플릿이 직접 내보내기가 되는 1클릭 대안이 될 수 있어요.
ScraperAPI 대안으로는 뭐가 있나요?
개발자 기준으로는 ScrapingBee(기본 HTML에 가장 저렴), Scrapfly(JavaScript 렌더링 강점), Bright Data(보호된 사이트에 최적, 렌더링과 무관한 고정 요금), ZenRows가 있어요. 비기술 사용자에게는 Thunderbit가 있어요. Excel, Google Sheets, Airtable, Notion으로 바로 내보내는 노코드 AI Chrome 확장 프로그램이에요. 더 깊이 보려면 최고의 AI 웹 스크래퍼 비교를 참고하세요.
ScraperAPI는 로그인 필요한 사이트도 스크래핑할 수 있나요?
ScraperAPI는 session_number 파라미터로 세션 유지(여러 요청에서 같은 IP)를 지원하지만, 로그인 벽 뒤 데이터를 긁는 건 대놓고 금지해요. 폼 입력, 2단계 인증, 복잡한 인증 흐름은 못 다뤄요. 로그인 필요한 사이트라면, 쓰던 브라우저 세션을 활용해 보이는 내용을 긁는 Thunderbit 같은 브라우저 기반 도구가 더 안정적인 선택이에요.
더 알아보기
