eBay는 전 세계 마켓플레이스에서 매일 활성 상품 목록 20억 개 이상을 돌려요. 경쟁사 가격을 손으로 추적하거나, 판매 완료 목록에서 비교 사례를 찾거나, 그 데이터로 제품 DB를 만들어본 적 있다면 이미 답을 알 거예요. 이 방식은 규모를 키우기 어려워요.
Thunderbit에서 수년간 자동화 도구를 만들며 이커머스 판매자, 리셀러, 분석가들에게서 끊임없이 듣는 말이 있어요. eBay 스크래퍼 찾기 자체는 안 어렵다는 거예요. 진짜 어려운 건 eBay가 CAPTCHA, IP 차단, 세션 핑거프린팅으로 막기 시작한 뒤에도 계속 돌아가는 도구를 찾는 일이에요. 한 Reddit 사용자는 인증 장벽을 뚫는 데 "몇 분 동안 여러 번, 아마 10~15번은 시도해야 했다"고 했고, 다른 작성자는 "브라우저 3개와 네트워크 2개"를 옮겨다니며 같은 문제를 겪었다고 했어요.
이게 2026년 eBay 스크래핑의 현실이고, 이 가이드가 나온 배경이에요. Chrome 확장 프로그램, 데스크톱 앱, 클라우드 API, 엔터프라이즈 플랫폼을 아우르는 도구 9개—Thunderbit, Octoparse, Apify, ScrapingBee, Bright Data, ParseHub, Oxylabs, Crawlbase, Helium Scraper—를 살펴봤고, 대부분의 비교 글이 건너뛰는 작업도 했어요. 브라우저 확장형 스크래퍼를 한 카테고리로 넣었고, 가격은 1,000페이지당으로 정규화했고, 각 도구가 지금의 eBay 안티봇 스택을 실제로 어떻게 다루는지도 비교했어요.
2026년에 왜 eBay 데이터를 스크래핑해야 할까요?
eBay 데이터를 긁는 이유 자체는 크게 안 변했지만 필요성은 훨씬 커졌어요. eBay의 2025년 4분기/연간 실적에서 활성 구매자 1억 3,500만 명이 보고됐고, 블라인드 박스 같은 카테고리는 전년 대비 470% 넘게 성장하면서, 손으로는 못 따라갈 가격·수요 신호가 마켓플레이스 전반에 쏟아지고 있어요.
주요 활용 사례는 이렇게 나뉘어요:
| 활용 사례 | 필요한 데이터 | 스크래핑이 도움이 되는 이유 |
|---|---|---|
| 경쟁사 가격 모니터링 | 제목, 가격, 배송비, 상태, 판매자, 프로모션 | 검색 결과를 수동으로 확인하는 대신 실제 상품 변경 사항에 즉시 대응할 수 있음 |
| 판매 완료 목록 기반 수요 조사 | 판매 완료/종료된 목록, 최종 가격, 판매 날짜, 상태, 판매자 수 | 재고를 사기 전에 수요를 검증하고 비교 사례를 추정할 수 있음 |
| 제품 카탈로그 구축 | 제목, 상세 사양, 이미지 URL, 브랜드, UPC/MPN, 카테고리 | eBay 상품 목록을 구조화된 제품 데이터베이스로 변환할 수 있음 |
| 판매자 인텔리전스 | 판매자명, 피드백 점수, 판매 수량, 스토어 재고, 반품 정책 | 상위 판매자, 드롭시퍼, 가격 패턴을 파악할 수 있음 |
| 공급망 소싱 | 스토어 페이지, 위치, 묶음 수량, 배송비, 재고 수량 | 반복 판매자나 재고 공급원을 찾을 수 있음 |
여기서 대부분의 가이드가 놓치는 점이 둘 있어요. 첫째, eBay 공식 API는 실시간 마켓플레이스 데이터는 꽤 잘 다루지만 모든 활용 사례를 받쳐주진 않아요. 둘째, 판매 완료/종료된 목록 데이터가 바로 API의 한계에 부딪히는 영역이에요. eBay Marketplace Insights API는 Limited Release 상태에 카테고리 범위가 제한적이고 승인된 사용 사례로만 접근돼요. 2025~2026년 커뮤니티 글들은 예전 findCompletedItems 엔드포인트가 사라진 뒤 승인 안 된 개발자들이 남은 선택지를 직접 묻고 있다는 걸 보여줘요.
가격 비교, 판매 가격 조사, 상품 회전율 추적에 기대는 비즈니스라면, 웹 스크래핑이 사실상 유일한 실용적 경로인 경우가 많아요.
eBay API vs. 웹 스크래핑: 솔직한 판단 기준
도구를 고르기 전에 정말 스크래퍼가 필요한지부터 따져볼 만해요. eBay API가 업무 흐름을 충분히 덮는다면 더 깔끔하고 공식적으로도 허용된 방식이에요. 하지만 판매 완료 데이터, 더 풍부한 페이지 콘텐츠, 또는 공개 API 필드 밖 정보가 필요하다면 스크래핑이 실질적인 선택지가 돼요.
| 요소 | eBay 공식 API | 웹 스크래핑 |
|---|---|---|
| 활성 목록 접근 | 예, Browse API 통해 가능 | 예, 모든 도구에서 가능 |
| 판매 완료/종료 데이터 접근 | 제한적 — Marketplace Insights는 Limited Release | 예, 페이지가 공개적으로 접근 가능하다면 가능 |
| 속도 제한 | 엄격함 — 앱당 기본 하루 5,000회 호출, 검색 결과는 10,000개로 제한 | 도구, 프록시, 안티봇 처리 방식에 따라 다름 |
| 데이터 풍부함 | 구조화되어 있지만 노출된 필드에 한정됨 | 판매자 메모, 이미지, 상세 사양을 포함한 전체 페이지 콘텐츠 |
| 설정 복잡도 | OAuth, 앱 등록, 프로덕션 승인 필요 | 2클릭부터 맞춤 코드까지 다양함 |
| 법적 명확성 | eBay가 공식적으로 허용 | 회색지대 — ToS를 검토하고 책임감 있게 사용해야 함 |
2026년 현재 eBay API 상황은 이래요:
- Finding API는 2025년 2월 4일부로 종료돼서, 기존 판매 완료 목록 워크플로 상당수가 깨졌어요.
- Browse API 검색 결과는 최대 10,000개 결과 집합으로 제한돼요.
- 판매 완료 내역이 있는 Marketplace Insights API는 모두에게 열려 있지 않아요.
이 글의 나머지는 바로 이 전제 위에 서 있어요. 공식 API만으로 부족할 때 무엇을 써야 하는가예요.
최고의 eBay 스크래퍼를 가르는 기준은 무엇일까요? 평가 기준
저는 9개 도구를 사용자들이 가장 자주 겪는 문제와 바로 연결되는 8가지 기준으로 평가했어요.
- 사용 편의성 — 비기술 사용자도 코딩 없이 eBay에서 데이터를 꺼낼 수 있나요?
- eBay 안티봇 대응력 — 속도 제한, CAPTCHA, 핑거프린팅을 실제로 뚫나요?
- 정규화된 가격 — 요금 모델을 역으로 풀어보지 않고도 1,000페이지당 실질 비용을 가늠할 수 있나요?
- 내보내기 형식 — 데이터를 CSV, Excel, JSON, Sheets 또는 API로 깔끔하게 내보내나요?
- 서브페이지 보강 — 검색 결과에서 시작해 각 상품 페이지를 돌며 열을 더 붙이나요?
- 예약 실행 — 가격 모니터링이나 재고 추적을 위해 자동으로 다시 돌아가나요?
- 도구 유형 — 브라우저 확장, 클라우드 API, 데스크톱 앱은 설정, 유지보수, 로그인 처리에 영향을 줘요.
- 무료 플랜 또는 체험판 — 소규모 판매자는 보통 결제 전에 먼저 시험해봐요.
이 기준들은 실제 사용자 불만을 반영해요. 포럼 사용자들은 차단, API 제한, 프록시 스택이 필요 없는 노코드 옵션을 반복해서 짚어요. 비용도 중요하지만, 스크래퍼가 충분한 페이지를 살아남아야 비로소 비용을 따질 수 있어요.
브라우저 확장형 eBay 스크래퍼가 이 목록에 꼭 들어가야 하는 이유
대부분의 "최고의 eBay 스크래퍼" 목록은 API, 프록시 플랫폼, 데스크톱 빌더만 다뤄서 실제 수요의 한 갈래를 놓쳐요. 2025년 r/eBaySellers의 Reddit 스레드는 입찰 전에 판매 완료 가격 비교를 자동화할 브라우저 확장 프로그램을 대놓고 찾고 있었어요. 바로 이런 상황에서 확장형 도구가 중요해져요.
| 요소 | Chrome 확장 프로그램(예: Thunderbit) | 클라우드 API(예: ScrapingBee) | 데스크톱 앱(예: Octoparse) |
|---|---|---|---|
| 설정 시간 | 2분 이내 | 10~30분 | 5~15분 |
| 코딩 필요 여부 | 없음 | 보통 필요함 | 보통 필요 없음 |
| eBay 로그인 뒤에서 작동 | 예, 브라우저 스크래핑 모드에서 가능 | 세션 또는 쿠키 처리 필요 | 경우에 따라 가능 |
| 안티봇 대응 | 실제 브라우저 세션 사용 | 프록시 순환 기능 내장 | 설정에 따라 다름 |
브라우저 확장형 스크래퍼가 대규모에서 늘 가장 싼 건 아니지만 다른 문제를 풀어줘요. 이미 보고 있는 페이지를 비기술 사용자가 바로 긁게 해주고, 로그인된 세션 뒤의 페이지도 처리해요.
한눈에 보는 eBay 스크래퍼 9선
각 도구를 자세히 보기 전에 전체 비교 표부터 볼게요. 가격 참고: "1,000페이지당 비용" 열은 가능하면 각 벤더의 가장 낮은 실사용 유료 플랜 기준이에요. 페이지 과금이 없는 구독형 데스크톱 도구는 1,000페이지 작업이 한 달 요금 안에 들어간다고 봤고요. Helium Scraper는 일회성 라이선스를 10,000페이지에 상각한 값이에요.
| 도구 | 도구 유형 | 사용 편의성 | eBay 안티봇 | 1,000페이지당 비용(추정) | 내보내기 형식 | 서브페이지 보강 | 예약 실행 | 무료 플랜 | 추천 대상 |
|---|---|---|---|---|---|---|---|---|---|
| Thunderbit | Chrome 확장 + 클라우드 | 매우 쉬움 | 높음 | $12.67–$30 | CSV, JSON, Excel, Sheets, Airtable, Notion | 예 | 예 | 예 | 초보자, 노코드 사용자 |
| Octoparse | 데스크톱 + 클라우드 | 쉬움~보통 | 중간~높음 | $39–$83 | CSV, Excel, JSON, HTML, XML, DB, API | 일부~예 | 예 | 예 | 시각적 워크플로 구축 |
| Apify | 클라우드 마켓플레이스 | 보통 | 중간~높음 | $5–$50+ | JSON, CSV, Excel, API | 일부 Actor 가능 | 예 | 예 | 유연한 클라우드 워크플로 |
| ScrapingBee | API | 보통 | 높음 | $0.91–$3.16 | HTML, JSON, 맞춤 추출 | 맞춤 | 외부 | 체험판 | 개발자 |
| Bright Data | 엔터프라이즈 API + 데이터셋 | 보통~어려움 | 매우 높음 | $1.30–$1.50 | JSON, CSV, API, 전달형 | 예 | 예 | 체험판 | 대규모 엔터프라이즈 수집 |
| ParseHub | 데스크톱 + 클라우드 | 보통 | 중간 | $189+ | JSON, CSV, Sheets | 수동 | 유료 플랜 | 예 | 소규모 무료 프로젝트 |
| Oxylabs | API | 보통~어려움 | 매우 높음 | $1.10–$1.35 | HTML, 전달된 결과 | 맞춤 | 예 | 체험판 | 고볼륨 글로벌 데이터 |
| Crawlbase | API | 보통 | 중간~높음 | $0.60–$3.00 | JSON, CSV, Excel | 맞춤 | 예 | 예(1천 요청) | 익명 API 스크래핑 |
| Helium Scraper | Windows 데스크톱 | 보통~어려움 | 중간 | $9.90–$19.90 상각 기준 | CSV, XLSX, JSON, XML | 수동 | 일부 | 체험판 | 오프라인 Windows 프로젝트 |
이제 자세히 볼게요.
1. Thunderbit
Thunderbit은 워크플로를 짜거나 프록시를 설정하거나 코드 한 줄 쓰지 않고 eBay를 긁고 싶을 때 가장 깔끔한 답이에요. 제가 편향됐다는 건 인정해요. 제 팀이 만든 제품이니까요. 그래도 설명은 실제 사용 흐름과 잘 맞아요. eBay 검색 페이지나 상품 페이지를 열고 AI Suggest Fields를 누른 뒤 Scrape를 누르면 돼요. 초보자에겐 기능 개수보다 이게 더 중요해요.
주요 eBay 스크래핑 기능
Thunderbit에는 검색, 브랜드, 카테고리 페이지를 대놓고 지원하는 전용 eBay 스크래퍼 템플릿이 있어요. 확인된 필드에는 product name, price, member price, item number, rating, review count가 들어가요.
eBay 워크플로에서 Thunderbit이 돋보이는 이유는 이래요:
- AI Suggest Fields가 eBay 페이지를 읽고 열을 자동 제안 — CSS 선택자나 수동 매핑 불필요
- Scrape Subpages가 각 상품 페이지를 돌며 상태, 판매자, 배송, 상세 사양 열을 더 붙여줘요. 얕은 검색 결과를 완전한 제품 DB로 바꿔주죠.
- 브라우저 스크래핑 모드는 실제 Chrome 세션을 써서 로그인된 페이지에 유용하고, 봇 세션보다 덜 깨져요.
- 클라우드 스크래핑은 공개 목록에서 최대 50페이지를 한 번에 처리
- 반복 가격 모니터링용 내장 예약 실행
- Excel, Google Sheets, Airtable, Notion, CSV, JSON 무료 내보내기 — 별도 유료 장벽 없음
가격, 장점, 주의점
현재 Thunderbit 가격:
- 제한된 체험 사용이 가능한 무료 플랜
- Starter: 월 $15(약 2만 원, 연간 결제 시 약 월 $9), 월 500 크레딧
- Pro 1: 월 $38(약 5만 원, 연간 결제 시 약 월 $16.5), 월 3,000 크레딧
- 1 크레딧 = 출력 행 1개
대략적인 비용은 이래요:
- Starter: 약 1,000행/페이지당 $30
- Pro 1: 약 1,000행/페이지당 $12.67
장점:
- 이 목록에서 설정이 가장 빨라요 — 설치 후 데이터 확보까지 2분 이내
- 코드, 선택자, 프록시 설정이 전혀 필요 없어요
- AI가 eBay 레이아웃 변경에 고정 템플릿보다 더 잘 대응해요
- 하나의 워크플로 안에서 서브페이지 보강 가능
- 추가 비용 없이 폭넓은 내보내기 지원
주의점:
- 크레딧 가격은 투명하지만, 행 수가 아주 많아지면 비용이 빨리 올라갈 수 있어요
- 독립형 엔터프라이즈 API가 아니라 브라우저 중심 워크플로예요
- 일부 사용자는 Trustpilot에서 특정 사이트의 경우 페이지네이션이 일정 페이지 수 이후 멈춘다고 언급했어요
판매자, 리서처, 분석가라면 eBay 페이지에서 스프레드시트까지 가장 짧은 경로를 원할 텐데, 그 출발점으로 Thunderbit을 추천해요.
Thunderbit Chrome 확장 프로그램 체험하기
2. Octoparse
Octoparse는 지금 eBay용 전통 노코드 데스크톱 스크래퍼 중 가장 강한 선택지예요. 활성 eBay 전용 템플릿, 클라우드 모드, 예약 실행을 갖췄어요. Thunderbit만큼 즉각적이진 않지만, 시각적 빌더를 원한다면 설정을 더 세밀하게 다듬을 수 있어요.
eBay 템플릿에서 확인된 출력 필드에는 Title, Product_URL, Price, Condition, Shipping, Rating, Followers, Sales, Seller_Name, Positive_feedback, Ebay_item_number 조합이 들어가요.
가격, 장점, 주의점
- 무료 플랜 제공
- Basic: 월 $39
- Standard: 월 약 $83부터
- Professional: 월 약 $299부터
장점:
- 데스크톱 노코드 도구 중 지금 eBay 템플릿 커버리지가 가장 강해요
- 로컬 제어와 클라우드 자동화의 균형이 좋아요
- 예약 실행과 내보내기 기능이 성숙해 있어요
- CSV, Excel, JSON, HTML, XML, 데이터베이스, Google Sheets, Dropbox, S3, Zapier, API 연동 지원
주의점:
- 실제 비용은 추가 옵션으로 올라갈 수 있어요 — 주거용 프록시는 별도(대략 $3/GB), CAPTCHA 해결도 별도(대략 1,000개당 $1~$1.5)
- 빠르게 시작하기엔 Thunderbit보다 덜 매끄러워요
- 아주 동적인 페이지나 수동 조정이 필요한 워크플로에서는 애를 먹을 수 있어요
- Thunderbit처럼 AI 기반 서브페이지 보강을 한 번에 주진 않아요
eBay를 반복해서 긁을 계획이고, 코드로 들어가지 않으면서도 템플릿과 클라우드 자동화가 필요하다면 Octoparse가 더 안전한 시각적 선택이에요. 더 자세한 비교는 Octoparse 리뷰 및 대안을 참고하세요.
3. Apify
Apify는 하나의 eBay 스크래퍼가 아니라 eBay 전용 "Actors"가 모인 마켓플레이스예요. 이게 가장 큰 강점이자 위험이에요. 잘 관리되는 Actor를 고르면 비용 효율이 아주 높지만, eBay 레이아웃이 바뀐 뒤 관리자가 업데이트를 멈추면 그 불안정성을 그대로 떠안아요.
일부 Actor는 seller details, watchCount, soldCount, availableQuantity, shipping terms, return policies처럼 풍부한 필드를 줘요. 리셀러·비교 분석용으로 유용한 전용 eBay 판매 완료 목록 스크래퍼 Actor도 있어요.
가격, 장점, 주의점
- 플랫폼 요금제: Free, Starter $49, Scale $499, Business $999, 그리고 사용량 요금
- 예시 eBay Actor는 Actor에 따라 대략 1,000개 제품당 $5에서 1,000개 결과당 $50까지 다양함
장점:
- 유연성이 아주 높아 여러 eBay 스크래핑 워크플로를 빠르게 시험할 수 있어요
- 클라우드 실행과 내보내기를 원하는 개발자와 분석가에게 잘 맞아요
- JSON, CSV, Excel 형식의 내장 예약 실행, API 접근, 데이터셋 내보내기 지원
- 일부 Actor는 이미 검색→상세 페이지 또는 판매 완료 목록 워크플로를 처리해요
주의점:
- Actor 품질은 작성자마다 달라요 — 각 Actor를 작은 벤더처럼 봐야 해요
- 플랫폼 사용량, 저장소, 프록시, Actor 가격이 하나의 단순한 청구서로 정리되지 않아 총비용이 올라갈 수 있어요
- 비기술 사용자는 마켓플레이스 모델이 복잡하게 느껴질 수 있어요
하나의 제품 의견보다 사전 구축된 스크래퍼 마켓플레이스를 원한다면 Apify가 가장 잘 맞아요. 더 자세한 비교는 Apify 리뷰 및 대안을 확인하세요.
4. ScrapingBee
ScrapingBee는 시각적 도구 대신 단순한 API 호출을 원하는 개발자에게 가장 잘 맞아요. 프록시, 헤드리스 렌더링, 안티봇 인프라는 내부에서 처리하고, 파싱 로직은 대부분 사용자가 맡아요.
전용 eBay 스크래퍼 랜딩 페이지가 있고, JavaScript 렌더링, 프리미엄 프록시 순환, 지리 위치 타기팅, 구조화 출력을 위한 CSS/XPath + AI 추출을 지원해요.
가격, 장점, 주의점
대략 eBay 작업 1페이지당 11 크레딧 정도가 든다고 보면, 현재 가격은 대략 이래요:
- Freelance: 1,000페이지당 약 $3.16
- Business: 1,000페이지당 약 $0.91
장점:
- 개발자를 위한 깔끔한 API
- 자체 프록시 스택을 안 만들어도 강력한 안티봇 대응 가능
- 맞춤형 eBay 파이프라인에 적합
주의점:
- 코딩이 필요해요 — 비기술 사용자를 위한 시각적 빌더는 없어요
- 내장 "서브페이지 보강" 버튼이 없어 루프를 직접 만들어야 해요
- 실제 비용은 JS 렌더링과 프리미엄 프록시 모드가 필요한지에 따라 달라져요
이미 HTML 파싱을 할 줄 알고 안정적인 가져오기 계층만 원하는 팀이라면 ScrapingBee가 맞아요.
5. Bright Data
Bright Data는 이 비교에서 가장 엔터프라이즈에 가까운 옵션이에요. 스크래핑 인프라, 프록시 네트워크, 데이터셋 전달, eBay 전용 제품을 함께 줘요. 높은 처리량이 필요하거나, 코드를 직접 유지보수하지 않고 미리 수집된 데이터를 사고 싶다면 후보에 넣어야 해요.
주요 기능에는 명시적인 eBay 템플릿이 포함된 Web Scraper API, 배치 작업, 웹훅 전달이 포함된 예약 수집, 그리고 제목, 가격, 입찰, 이미지, 배송, 판매자 데이터, 판매 완료 워크플로를 아우르는 사전 수집 eBay 데이터셋 구매 옵션이 있어요.
가격, 장점, 주의점
- 사용량 기반 Web Scraper API: 1,000레코드당 약 $1.50
- Scale 플랜 실효 요율: 1,000레코드당 약 $1.30
- 데이터셋 가격은 가변적
- 비즈니스 무료 체험 제공
장점:
- 엔터프라이즈 팀을 위한 전체 신뢰성이 가장 높아요
- eBay 데이터를 얻는 방법이 다양해요: API, 브라우저 자동화, 데이터셋
- 강력한 주거용 프록시 및 언락커 인프라
- 사용 편의성보다 가동 시간이 더 중요하다면 대부분의 도구보다 잘 맞아요
주의점:
- 복잡한 대시보드와 높은 학습 곡선
- 취미용이나 소규모 판매자에겐 비싸요
- 가벼운 프로젝트엔 과해요
Bright Data는 eBay 스크래핑이 부가 업무가 아니라 핵심 데이터 파이프라인의 일부일 때 고를 만해요.
6. ParseHub
ParseHub는 무료 플랜이 있는 전통 데스크톱 스크래퍼를 원한다면 여전히 쓸 만하지만, 이제 eBay용으로 가장 세련된 시각적 옵션은 아니에요. 공식 eBay 튜토리얼은 검색 결과, 제품 페이지, 페이지네이션을 다루고, 확인된 필드에는 product name, URL, price, days left, shipping cost, units sold, seller name, seller rating, seller review count가 들어가요.
가격, 장점, 주의점
- 제한이 있는 무료 플랜(실행당 약 200페이지, 공개 프로젝트 제한)
- Standard: 월 $189
- Professional: 월 $599
장점:
- 무료 버전이 있어서 실험용으로 쓸 수 있어요
- JavaScript 페이지, 클릭, 페이지네이션 처리 가능
- 시각적 추출을 배우기 좋은 교육형 인터페이스
주의점:
- eBay 워크플로에서는 Thunderbit이나 Octoparse보다 수동 작업이 많아요
- 무료 플랜은 진지한 반복 작업엔 너무 제한적이에요
- 안티봇 대응이 프리미엄 API 제품보다 약해요
- 공개된 eBay 가이드가 경쟁 도구보다 오래됐어요
ParseHub는 소규모 프로젝트와 학습용으로는 여전히 의미가 있지만, 이 카테고리에서 가장 강력한 노코드 추천은 아니에요. 더 자세한 내용은 ParseHub 리뷰 및 대안을 참고하세요.
7. Oxylabs
Oxylabs는 처리량, 동시성, 글로벌 커버리지를 중시하는 팀을 위한 프리미엄 옵션이에요. 가장 쉬운 도구는 아니지만, 강력한 파싱 파이프라인과 함께 쓰면 가장 안정적인 축에 들어요.
검색·제품·일반 URL 스크래핑용 eBay 타깃, 높은 글로벌 프록시 커버리지, 스케줄러 지원, 더 어려운 페이지용 헤드리스 브라우저 제품을 줘요.
가격, 장점, 주의점
- JS 없이 1,000결과당 약 $1.15
- JS 사용 시 1,000결과당 약 $1.35
- Headless Browser는 별도로 월 약 $300부터
장점:
- 대규모 글로벌 스크래핑에 아주 적합
- 강력한 안티봇 및 프록시 인프라
- 취미 사용자보다 엔터프라이즈 구매자에게 더 잘 맞아요
주의점:
- 코딩이 필요해요
- 검색 및 제품 출력이 HTML 우선인 경우가 많아 파싱은 직접 해야 해요
- 판매 완료 목록 워크플로도 가능하지만, 전용 즉시 사용 제품처럼 제시되진 않아요
진지한 이커머스 데이터 수집을 짠다면 Oxylabs는 API 계층에서 가장 강력한 선택지 중 하나예요.
8. Crawlbase
Crawlbase(이전 ProxyCrawl)은 예산형 API 도구와 프리미엄 엔터프라이즈 스택의 중간 지점이에요. 엔터프라이즈급 약정 없이도 CAPTCHA 우회와 IP 순환이 되는 API 우선 경로를 줘요.
전용 eBay 스크래퍼 페이지가 있고, 익명 클라우드 스크래핑, CAPTCHA 우회, IP 순환, JSON/CSV/Excel 중심 출력을 지원해요.
가격, 장점, 주의점
- 첫 1,000요청 무료
- 유료 시작 사용량 기준 1,000요청당 대략 $3.00
- 고볼륨 구간에서는 1,000요청당 $0.60 수준까지 내려감
장점:
- 테스트용으로 유용한 무료 플랜
- 진입 장벽이 낮은 API
- 단순한 직접 작성 스크립트보다 안티봇 지원이 더 좋아요
주의점:
- 여전히 코딩이 필요해요
- Bright Data보다 eBay 특화 제품화가 덜해요
- 개발자가 아닌 사용자를 위한 세련된 워크플로 기능이 적어요
테스트 장벽이 낮은 익명 API 스크래퍼를 원한다면 Crawlbase가 매력적이에요.
9. Helium Scraper
Helium Scraper는 이 목록에서 가장 독특한 도구예요. Windows 데스크톱 제품에 일회성 라이선스 모델을 써요. 초보자용은 아니지만, 로컬 제어를 원하고 반복 구독을 싫어한다면 매력적이에요.
기능으로는 포인트 앤 클릭 추출 인터페이스, 맞춤 JavaScript 동작, 병렬 브라우저 지원, CSV·XLSX·JSON·XML로의 강력한 내보내기가 있고, 명령줄 자동화도 지원해요.
가격, 장점, 주의점
- Basic: $99
- Professional: $199
- Business: $399
- Enterprise: $699
라이선스를 10,000페이지에 나눠 쓴다고 가정한 상각 비용은 이래요:
- Basic: 1,000페이지당 약 $9.90
- Professional: 1,000페이지당 약 $19.90
장점:
- 일회성 구매 모델 — 월 구독료 없음
- 오프라인 또는 로컬 프로젝트에 적합
- 스크래핑 로직을 직접 만들 생각이 있다면 유연해요
주의점:
- Windows 전용
- 번들 클라우드, 언락커, 프록시 스택 없음
- 현재 공식 eBay 템플릿 없음
- 처음 보이는 것보다 학습 곡선이 가팔라요
- AI 기반 필드 제안이나 서브페이지 보강 기능 없음
Helium Scraper는 가장 쉬운 워크플로가 아니라, 로컬 데스크톱 도구를 원하는 기술 친화적인 Windows 사용자에게 가장 잘 맞아요.
1,000페이지당 비용: 아무도 제공하지 않는 가격 비교
벤더마다 행, 요청, 레코드, 크레딧, 월 좌석 수로 과금해서 직접 비교가 어려워요. 경쟁하는 "최고의 eBay 스크래퍼" 글 6개 중 5개가 가격은 다루지만 표준 지표로 정규화하진 않더라고요. 반면 사용자들은 비용을 가장 큰 장벽 중 하나로 계속 꼽아요.
아래 표는 가장 낮은 유료 플랜과, 유용한 경우 중간·스케일 플랜을 썼어요. 완벽하진 않아요. 일부는 출력 행 기준, 일부는 요청 기준으로 청구하니까요. 그래도 월 요금만 보는 것보다 훨씬 실용적이에요.
| 도구 | 최저 유료 플랜 | 중간/스케일 플랜 | 1,000페이지당 비용(추정) | 프록시/렌더링 포함 여부 | 비고 |
|---|---|---|---|---|---|
| Thunderbit | Starter | Pro 1 | $30 / $12.67 | 포함 | 1 크레딧 = 1행 |
| Octoparse | Basic | Standard | $39 / $83 | 아님 | 프록시와 CAPTCHA는 별도 |
| Apify | Actor별 상이 | Actor별 상이 | $5–$50+ | 일부 | Actor 요금 + 플랫폼 사용량 |
| ScrapingBee | Freelance | Business | $3.16 / $0.91 | 대부분 포함 | JS/프록시 크레딧 조합에 따라 다름 |
| Bright Data | PAYG | Scale | $1.50 / $1.30 | 대부분 포함 | 레코드 기준 |
| ParseHub | Standard | Professional | $189 / $599 | 일부 | 구독 플랜 > 페이지 과금 |
| Oxylabs | Micro | Starter | $1.15–$1.35 / $1.10–$1.30 | 대부분 포함 | JS와 헤드리스는 비용 상승 가능 |
| Crawlbase | 유료 시작 요금 | 고볼륨 | $3.00 / $0.60 | 대부분 포함 | 요청 기준 |
| Helium Scraper | Basic 라이선스 | Professional | $9.90 / $19.90 상각 기준 | 아님 | 일회성 데스크톱 라이선스 |
규모별로 가장 비용 효율적인 도구는?
- 월 5K페이지 이하: 속도를 원한다면 Thunderbit이 합리적이에요. Crawlbase 무료 플랜과 Apify 소형 Actor도 쓸 수 있어요.
- 월 5K~50K페이지: ScrapingBee, Bright Data, Oxylabs, 더 강한 Apify Actor가 보통 행 과금형 노코드 도구보다 더 나은 가치를 줘요.
- 월 50K페이지 이상: Bright Data와 Oxylabs가 가장 설득력 있는 엔터프라이즈 선택이에요. 이미 Actor·플랫폼 경제성을 믿는다면 Apify도 가능해요.
숨은 비용 패턴의 핵심은 이래요. 데스크톱·노코드 도구는 추가 옵션이나 인건비에, API 도구는 렌더링 배수·프록시 등급·추출 복잡도에 비용이 숨는 경우가 많아요.
2026년에 안티봇 방어를 실제로 통과하는 eBay 스크래퍼는?
eBay의 안티 스크래핑 스택은 여러 층이에요. 최근 커뮤니티 보고서, 벤더 문서, 봇 방어 연구가 모두 같은 패턴을 가리켜요. 속도 제한, CAPTCHA 도전, JavaScript 의존 검증, 쿠키/세션 체크, IP 신뢰도, 브라우저 핑거프린팅을 다 써요. 그래서 한두 페이지는 받아오더라도 취약한 스크립트는 쉽게 실패하는 경우가 많아요.
제3자 봇 데이터도 마켓플레이스 스크래핑이 왜 더 어려워졌는지 보여줘요. Akamai는 2024년에 봇이 전체 웹 트래픽의 42%였다고 보고했고, Radware는 2024년 연말 쇼핑 시즌 온라인 쇼핑 트래픽의 57%가 봇이었다고 밝혔어요.
| 도구 | 안티봇 접근 방식 | 주거용 프록시 | CAPTCHA 처리 | eBay에서의 일반적 성공률 |
|---|---|---|---|---|
| Thunderbit | 브라우저 모드에서 실제 브라우저 세션 사용, 공개 페이지용 클라우드 라우팅 내장 | 클라우드 모드에 포함 | 클라우드 모드에서 처리 | 비기술 워크플로에서 높음 |
| Octoparse | 클라우드 추출 + IP 순환 | 유료 플랜/애드온에서 제공 | 클라우드 스택으로 지원 | 중간~높음 |
| Apify | Actor에 따라 다름; 보통 Playwright + 프록시 지원 | 제공됨 | Actor별로 다름 | Actor가 유지 관리되면 중간~높음 |
| ScrapingBee | 렌더링된 브라우저 가져오기 + 프리미엄 프록시 | 프리미엄 라우팅 통해 제공 | 관리형 스택의 일부 | 높음 |
| Bright Data | Unlocker + 주거용 네트워크 + 브라우저 자동화 | 예 | 예 | 매우 높음 |
| ParseHub | 데스크톱/브라우저 시뮬레이션 + 유료 IP 순환 | 일부 | 일부 | 중간 |
| Oxylabs | 주거용/ISP/모바일 프록시 + 스크래퍼 API + 헤드리스 브라우저 | 예 | 플랫폼 수준에서 관리 | 매우 높음 |
| Crawlbase | 익명 API + IP 순환 + CAPTCHA 우회 | 관리형 | 관리형 | 중간~높음 |
| Helium Scraper | 사용자가 직접 만드는 브라우저 자동화, 설정 시 프록시 지원 | 직접 준비 | 수동/사용자 관리 | 중간 |
데이터센터 프록시 vs 주거용 프록시 논쟁
이건 벤더 가이드와 사용자 경험이 비교적 잘 맞는 몇 안 되는 영역이에요. Apify Actor 문서는 eBay가 데이터센터 IP를 더 공격적으로 차단하니 주거용 프록시를 권한다고 못박고, Oxylabs도 eBay 프록시 페이지에서 같은 얘기를 해요. 쉽게 말해 데이터센터 IP는 싸지만, 꾸준한 eBay 스크래핑을 견디려면 주거용이나 ISP 트래픽이 훨씬 유리해요.
안티봇 관점에서 Thunderbit의 브라우저 모드가 흥미로운 이유도 여기 있어요. 새 클라우드 전용 봇 신원이 아니라 사용자의 실제 세션에서 작업하니까, 흔한 스크래퍼 핑거프린팅 문제 일부를 우회해요.
검색 결과를 넘어: 판매 완료 목록, 서브페이지, 완전한 제품 데이터베이스
eBay 스크래핑 프로젝트는 대부분 검색 결과에서 안 끝나요. 실제 워크플로는 세 단계예요:
- 검색 결과 또는 판매 완료 결과 페이지를 스크래핑
- 각 목록 URL 방문
- 더 풍부한 세부 필드를 하나의 병합된 표에 추가
진지한 제품 조사엔 이 워크플로가 필요해요. 검색 페이지에는 모든 정보가 없으니까요. 상세 사양, 상태 메모, 판매자 정책, 배송 정보, 확장 설명은 상세 페이지에 있어요.
이 지점에서 eBay API의 공백이 가장 크게 다가와요. 공식 API는 활성 목록엔 괜찮지만 판매 완료 데이터는 여전히 제한적이에요. 비교 사례, 재판매 검증, 종료 목록 가격 이력 조사가 필요하다면, 이미 Marketplace Insights 승인을 받은 게 아닌 이상 웹 스크래핑이 여전히 실용적인 경로예요.
이 영역에서 도구별 차이는 꽤 커요:
- Thunderbit는 Scrape Subpages로 이를 기본 제공해요. 비기술 사용자에게 가장 큰 장점 중 하나예요. 버튼을 누르면 AI가 각 상품 URL을 방문해 원래 표에 새 열을 더해요.
- Octoparse와 ParseHub도 가능하지만, 워크플로가 더 수동적이고 별도 설정이 필요해요.
- Apify는 해당 Actor가 검색→상세 페이지 확장을 지원할 때 가능해요.
- Bright Data와 Oxylabs는 분명히 지원하지만, 보통 루프를 직접 만들거나 구조화된 데이터셋을 사야 해요.
- Helium Scraper는 로컬에서 가능하지만, 수동 프로젝트 설계가 필요해요.
목표가 제목·가격만 있는 얕은 목록이 아니라 완전한 제품 데이터베이스라면, 서브페이지 보강은 선택이 아니라 핵심 워크플로예요. 서브페이지 스크래핑이 실제로 어떻게 돌아가는지 더 알고 싶다면 웹 스크래퍼 만드는 방법 가이드를 참고하세요.
eBay 스크래핑의 합법성과 윤리에 대한 짧은 안내
짧게 말하면, 공개 데이터를 긁는 게 자동으로 불법은 아니지만 무제한 허용되는 것도 아니에요. hiQ v. LinkedIn 계열 판례는 공개 웹 스크래핑과 Computer Fraud and Abuse Act에 여전히 관련이 있고, Meta v. Bright Data 분쟁 같은 이후 판결도 특정 상황에선 공개 데이터 스크래핑 주장이 법정에서 받아들여질 수 있음을 보여줘요.
다만 eBay의 현재 User Agreement는 사전 명시적 허가가 없는 한 로봇, 스파이더, 스크래퍼, 데이터 마이닝 도구를 명시적으로 금지해요. 실제로는 이걸 지키세요:
- 공개적으로 접근 가능한 데이터에 집중하기
- 개인정보 데이터 스크래핑 피하기
- 책임감 있게 속도 제한 지키기
- eBay의 현재 약관과 robots 관련 기대사항 검토하기
- 상업적이거나 민감한 사용 사례는 법률 전문가와 상담하기
이 글은 도구에 관한 글이지 법률 자문이 아니에요. 법적 환경에 대해 더 알고 싶다면 웹 스크래핑의 법적 쟁점 글을 참고하세요.
당신에게 맞는 eBay 스크래퍼는 무엇일까요?
짧은 추천 매트릭스는 이래요:
- 초보자 / 노코드 사용자에게 최적: Thunderbit — 2클릭 설정, AI 필드 제안, 기본 서브페이지 보강, 브라우저 스크래핑 모드, 무료 내보내기
- API를 원하는 개발자에게 최적: ScrapingBee — 깔끔한 API, 강력한 안티봇, 시각적 부담 없음
- 엔터프라이즈 규모에 최적: Bright Data — 독보적 인프라, 데이터셋 전달, 주거용 프록시 네트워크
- 사전 구축된 스크래퍼 마켓플레이스에 최적: Apify — 거대한 Actor 라이브러리, 판매 완료 목록 커버리지, 유연한 클라우드
- 시각적 워크플로 구축(데스크톱)에 최적: Octoparse — 강력한 eBay 템플릿, 클라우드 모드, 예약 실행
- 소규모 프로젝트용 최고의 무료 데스크톱 옵션: ParseHub — 무료 플랜, 동적 페이지 처리, 학습에 적합
- 대규모 글로벌 데이터에 최적: Oxylabs — 엔터프라이즈 프록시 스택, 헤드리스 브라우저 지원, 강한 가동률
- 예산형 익명 API 스크래핑에 최적: Crawlbase — 낮은 진입 비용, 무료 요청, 안정적인 CAPTCHA 우회
- 일회성 라이선스 데스크톱 스크래퍼 중 최적: Helium Scraper — 로컬 제어, 월 요금 없음, 설정만 감당할 수 있다면 유연함
아직 확신이 안 선다면, 자신의 숙련도와 데이터 규모에 맞는 도구부터 시작하세요. 대부분의 비기술 사용자에겐 Thunderbit이 잘 맞아요. eBay 페이지에서 스프레드시트까지 두 번 클릭으로 가고 싶다면 더 그렇고요.
Thunderbit로 AI eBay 스크래핑 체험하기 Get Started Free
더 알아보기
