Shopify는 현재 전 세계에서 460만 개가 넘는 라이브 스토어를 운영하고 있어요. 이커머스 업계에 있다면, 경쟁사가 무엇을 어떤 가격에 팔고 있는지, 재고가 얼마나 빨리 움직이는지 알아보려고 반나절이나 주말을 써 본 적이 한 번쯤은 있을 거예요. 저도 그랬고요. 그리고 Shopify의 봇 차단 조치와 JS가 많은 테마가 끼어들면, 모든 스크래핑 도구가 똑같지 않다는 걸 뼈저리게 배웠어요.
지난 몇 달 동안 Thunderbit에서 가장 인기 있는 Shopify 스크래퍼 9개를 직접 테스트하고, 깨보고, 비교하면서 느낀 점을 이 가이드에 모두 담았습니다. 무료 브라우저 확장 프로그램부터 엔터프라이즈급 플랫폼까지, 각 도구가 실제로 무엇을 잘하는지 — 그리고 어디서 한계가 있는지 — 솔직하게 정리했어요. 혼자 드롭쉬핑을 하는 분이든, 이커머스 운영 책임자든, 데이터 파이프라인을 만드는 개발자든, 분명 맞는 도구를 찾으실 수 있을 거예요.
왜 Shopify 스토어를 스크래핑할까요? (그리고 누가 정말 필요할까요?)
Shopify 스크래핑은 개발자 취미가 아니에요. 수많은 이커머스 팀의 일상적인 업무 흐름이죠. 어떤 사람이 왜 이걸 활용하는지 살펴보면 다음과 같아요:
| 사용 사례 | 혜택을 받는 사람 | 얻을 수 있는 것 |
|---|---|---|
| 경쟁사 상품 조사 | 영업팀, 브랜드 매니저 | 상품 카탈로그, 가격, 신규 출시 |
| 가격 및 재고 모니터링 | 이커머스 운영, 가격 분석가 | 일별/주별 가격 변동, 재고 수준 |
| 드롭쉬핑 상품 발굴 | 드롭쉬퍼, 창업가 | 인기 상품, 베스트셀러, 공급업체 데이터 |
| 카탈로그 구축 및 마이그레이션 | 에이전시, 마켓플레이스 판매자 | 가져오기에 적합한 구조화된 상품 데이터 |
| 시장 분석 및 트렌드 파악 | 연구자, 분석가 | 카테고리별 가격, 상품 구색 변화 |
Shopify 스토어에서 벌어지는 일을 기준으로 의사결정을 하고 있다면, 내 스토어든 경쟁사 스토어든 그 데이터를 안정적으로 추출할 방법이 필요해요. 을 생각하면, 어떤 도구를 쓰느냐가 그 어느 때보다 중요합니다.
최고의 Shopify 스크래퍼를 구분 짓는 것
저는 각 도구를 9가지 기준으로 평가했어요. 제가 찾은 비교 글들은 대부분 3~5개 항목 정도만 다루고 있었기 때문에, 더 깊이 파고들었습니다. 제가 살펴본 항목과 각 기준이 중요한 이유는 다음과 같아요:
- 도구 유형: Chrome 확장 프로그램, 데스크톱 앱, API, 코드 라이브러리인지에 따라 실제로 누가 사용할 수 있는지가 달라져요.
- Shopify 특화 기능:
products.json, 컬렉션, 변형 옵션처럼 Shopify의 데이터 구조를 도구가 기본적으로 이해하나요? - 추출되는 데이터 필드: 제목, 가격, 변형, SKU, 설명, 이미지, 공급업체, 태그, 재고를 가져올 수 있나요?
- 내보내기 형식: CSV, JSON, Excel, Google Sheets, Airtable, Notion 등 어디로 데이터를 보낼 수 있나요?
- 무료 요금제 / 가격: 0원으로 무엇까지 할 수 있나요? (이건 정말 중요해요. 포럼마다 기본 추출조차 유료 도구를 꺼리는 사용자들이 많거든요.)
- 예약 / 자동화: 반복 스크래핑으로 계속 모니터링할 수 있나요?
- 봇 차단 대응: Shopify의 속도 제한과 차단을 어떻게 처리하나요?
- 설정 난이도: 첫 스크래핑까지 몇 분이나 걸리나요? 노코드인가요, 아니면 코드가 필요한가요?
- 하위 페이지 / 상세 페이지 스크래핑: 개별 상품 페이지를 자동으로 방문해서 변형, 설명, 모든 이미지를 보강할 수 있나요?
하위 페이지를 다룰 수 없는 도구라면, Shopify 스토어에서 유용한 데이터의 절반을 놓치게 돼요. 그게 바로 대부분의 “베스트” 목록이 놓치는 부분이에요.
products.json 바로가기 — 그리고 작동하지 않을 때 대처법
Shopify 스크래핑 포럼을 조금이라도 봤다면, Shopify 스토어 URL 뒤에 /products.json을 붙여 보라는 이야기를 한 번쯤은 보셨을 거예요. 이건 꽤 깔끔한 방법이에요. Shopify는 많은 스토어에서 상품 데이터를 JSON 엔드포인트로 제공하고, 페이지네이션을 돌면서 상품 제목, 가격, 이미지 등을 가져올 수 있거든요. 스크래퍼가 없어도 됩니다.
하지만 현실은 이래요. 일부 Shopify 스토어는 products.json을 차단하거나 비활성화합니다. 스토어 소유자가 개인정보 설정을 조정하거나, 헤드리스/Hydrogen 스토어프론트를 사용하거나, 커스텀 설정을 배포할 때 이런 일이 생겨요. 여러 Reddit 스레드와 Shopify 커뮤니티 글에서도 이 엔드포인트에 의존하는 사용자에게는 실제로 큰 장애물이라는 점이 확인됩니다.
간단한 판단 기준은 다음과 같아요:
/products.json을 사용할 수 있나요? 빠른 대량 내보내기에 활용하세요. 그리고 같은 스크래퍼로 보강하면 좋아요(변형 옵션, 전체 설명, 모든 이미지)./products.json이 차단되었나요? 렌더링된 페이지를 직접 읽는 브라우저 기반 AI 스크래퍼(Thunderbit, Octoparse)를 사용하세요. API에 의존하지 않습니다.- 지속적인 모니터링이 필요하신가요? 엔드포인트 사용 가능 여부와 상관없이 예약 스크래퍼를 쓰는 게 좋아요. 예를 들어 Thunderbit의 예약 스크래퍼는 사용자가 직접 설정한 자연어 일정으로 실행됩니다.
이건 경쟁사 글들이 솔직하게 다루지 않는 부분 중 하나예요. JSON 엔드포인트는 잘 작동할 때는 훌륭하지만, 안 될 때를 대비한 대안이 꼭 필요합니다.
한눈에 보는 Shopify 스크래퍼 9선
아래는 전체 비교표예요. Shopify 스크래퍼 비교 자료 중에서는 가장 포괄적인 수준으로 만들려고 했어요. 대부분의 글은 3~5개 항목에서 끝나거든요.
| 도구 | 유형 | Shopify 특화 | 주요 데이터 필드 | 내보내기 형식 | 무료 요금제 | 예약 | 봇 차단 / JS | 설정 난이도 | 하위 페이지 스크래핑 |
|---|---|---|---|---|---|---|---|---|---|
| Thunderbit | Chrome 확장 + API | ✅ 템플릿 | 제목, 가격, 변형, SKU, 설명, 이미지, 공급업체, 태그 | Excel, Sheets, Airtable, Notion, CSV, JSON | 월 6페이지 무료 | ✅ 자연어 | 클라우드 + 브라우저 스크래핑 | 매우 쉬움(2클릭) | ✅ |
| Octoparse | 데스크톱 + 클라우드 | ✅ 튜토리얼 | 제목, 가격, 설명, 이미지, 크기, 리뷰 | Excel, CSV, JSON, XML, DB, Sheets, S3 | 무료 플랜(제한 있음) | ✅ 클라우드 | IP 순환, CAPTCHA, 프록시 | 보통(시각적 편집기) | ✅ |
| Instant Data Scraper | Chrome 확장 | ❌ 범용 | 제목, 가격, 링크, 표시 텍스트 | CSV, Excel | 100% 무료 | ❌ | 로컬 브라우저 전용 | 매우 쉬움 | ❌ |
| ScrapingBee | API | ❌ 범용 | 무엇이든(커스텀 셀렉터) | JSON, HTML, 마크다운, 텍스트 | 1,000 무료 크레딧 | ❌(외부 트리거 필요) | 헤드리스 브라우저, 프록시 | 어려움(코드 필요) | ❌(커스텀 코드) |
| Bright Data | 엔터프라이즈 플랫폼 | ✅ Shopify 스크래퍼 + MCP | 전체 카탈로그, 가격, 이미지, 리뷰, 재고 | JSON, CSV, NDJSON, S3, Snowflake | 무료 체험 | ✅ Cron/플랫폼 | Web Unlocker, 프록시, CAPTCHA | 어려움(엔터프라이즈 설정) | ✅ |
| Koala Inspector | Chrome 확장 | ✅ Shopify 스파이 | 테마, 앱, 베스트셀러, 가격, 광고 | 브라우저 내(제한적 내보내기) | 무료 요금제 | ❌ | 해당 없음(스파이 도구이지 스크래퍼 아님) | 매우 쉬움 | ❌ |
| Parsehub | 데스크톱 앱 | ❌ 범용 | 제목, 가격, 이미지, 설명(설정 가능) | JSON, Excel, Sheets, API | 무료 프로젝트 5개 | ✅ 유료 플랜 | IP 순환 | 보통(시각적) | ✅(워크플로우) |
| Data Miner | Chrome 확장 | ❌ 범용 | 제목, 가격, 링크, 표시 텍스트 | CSV, Google Sheets | 무료(페이지 제한 있음) | ❌ | 로컬 브라우저 전용 | 쉬움 | ❌ |
| Apify | 클라우드 플랫폼 | ✅ Shopify 액터 | 제목, 가격, 변형, SKU, 설명, 이미지, 공급업체, 태그, 재고 | JSON, CSV, Excel, API, DB | 무료 요금제 | ✅ 대시보드 | 클라우드, 프록시 | 보통(액터 설정) | ✅ |
한 줄 평:
- Thunderbit: 비기술 사용자에게 Shopify 페이지에서 스프레드시트까지 가장 빠르게 가는 방법이에요.
- Octoparse: 코드 없이도 제어력을 원하는 사용자에게 가장 좋은 시각적 워크플로 빌더예요.
- Instant Data Scraper: 빠르게 가져오기가 필요할 때 가장 좋은 무상·무설정 옵션이에요.
- ScrapingBee: 커스텀 Shopify 추출 로직이 필요한 개발자에게 가장 좋은 API예요.
- Bright Data: 대규모 카탈로그에 가장 적합한 엔터프라이즈 인프라예요.
- Koala Inspector: Shopify 스토어 인텔리전스(앱, 테마, 광고)에 가장 좋아요.
- Parsehub: IP 순환이 가능한 최고의 무료 데스크톱 스크래퍼예요.
- Data Miner: 브라우저에서 구조화된 표를 추출할 때 가장 좋아요.
- Apify: 전용 Shopify 스크래핑 액터가 있는 최고의 클라우드 플랫폼이에요.
1. Thunderbit — 2클릭 AI Shopify 스크래퍼
은 저희 팀이 만든 도구라서, 그 점은 먼저 분명히 말씀드릴게요. 하지만 무엇을 잘하고, 무엇을 못하는지도 솔직하게 말씀드릴게요. 제품 자체가 충분히 말해 준다고 생각하거든요.
Thunderbit는 으로, AI가 어떤 Shopify 상품 목록 페이지에서도 데이터 필드를 자동으로 제안해 줘요. 셀렉터를 작성할 필요도, 워크플로를 설정할 필요도, 코드 한 줄을 만질 필요도 없어요. 흐름은 두 번 클릭이면 끝납니다. Shopify 컬렉션 페이지를 열고 “AI 필드 추천”을 누른 다음, 컬럼을 확인하고 “스크래핑”을 클릭하세요. AI는 페이지에 보이는 내용을 읽기 때문에, 스토어가 products.json을 비활성화했더라도 Thunderbit는 여전히 작동합니다.
Shopify 특화 강점:
- 가격, 상품 상세, 카탈로그 추출을 위한 전용 Shopify 템플릿
products.json이 차단된 렌더링 페이지에서도 작동- 변형, 설명, 이미지로 목록 데이터를 보강하는 하위 페이지 스크래핑 지원
- Excel, Google Sheets, Airtable, Notion, CSV, JSON으로 내보내기 가능
2. Octoparse — 최고의 시각적 워크플로 빌더
Octoparse는 시각적인 포인트 앤 클릭 워크플로 빌더를 제공하는 데스크톱 및 클라우드 스크래핑 플랫폼이에요. 셀렉터와 페이지네이션 로직을 더 세밀하게 제어하고 싶지만 코드는 쓰고 싶지 않을 때 Shopify에서 잘 맞아요.
상품 목록, 상세 페이지, 예약 실행까지 처리할 수 있지만, 설정은 Thunderbit보다 더 무거운 편이에요. 스크래핑 단계를 직접 하나하나 구성하는 걸 좋아하는 사용자에게는 강력한 선택지입니다.
3. Instant Data Scraper — 최고의 무료 빠른 수집 도구
Instant Data Scraper는 웹페이지에서 보이는 표와 목록을 추출하는 간단한 Chrome 확장 프로그램이에요. 완전히 무료고, 설정도 거의 필요 없어요.
단점은 범용 도구라는 점이에요. Shopify를 특별히 이해하지 못하고, 하위 페이지도 다루지 못하며, 페이지 레이아웃이 동적이거나 JS 상호작용 뒤에 데이터가 숨겨져 있으면 큰 도움이 되지 않아요.
4. ScrapingBee — 최고의 개발자용 API
ScrapingBee는 개발자를 위해 만들어진 웹 스크래핑 API예요. 브라우저 렌더링, 프록시, 봇 차단 완화를 처리해 주며, 커스텀 코드를 사용해 Shopify 데이터를 추출할 수 있어요.
추출 과정을 완전히 통제하고, 로직을 직접 만들 수 있는 분이라면 좋은 선택이에요. 다만 노코드 도구는 아니고, 비기술 사용자에게는 가장 빠른 길이 아닐 거예요.
5. Bright Data — 최고의 엔터프라이즈급 인프라
Bright Data는 강력한 프록시 인프라, CAPTCHA 처리, 전용 Shopify 스크래퍼를 갖춘 엔터프라이즈 스크래핑 플랫폼이에요. 신뢰성과 규정 준수 기능이 필요한 대규모 운영을 위해 만들어졌습니다.
팀이 대형 카탈로그를 스크래핑하거나 Snowflake 같은 시스템으로 연결되는 데이터 파이프라인이 필요하다면 Bright Data를 살펴볼 만해요. 다만 복잡성과 비용이 단점이에요.
6. Koala Inspector — 스토어 인텔리전스에 가장 적합
Koala Inspector는 스크래퍼라기보다 Shopify 스파이 도구에 가까워요. 테마, 앱, 베스트셀러, 광고, 스토어 수준의 인텔리전스를 파악하는 데 유용합니다.
목표가 깔끔한 상품 데이터를 내보내는 것보다 경쟁사 조사를 하는 데 있다면 도움이 될 수 있어요. 하지만 대규모 구조화 스크래핑을 하기엔 맞는 도구가 아닙니다.
7. Parsehub — IP 순환이 가능한 최고의 무료 데스크톱 스크래퍼
Parsehub는 복잡한 사이트와 일부 동적 상호작용을 처리할 수 있는 시각적 데스크톱 스크래퍼예요. 유료 플랜에서는 IP 순환을 제공하고, 하위 페이지와 페이지네이션 워크플로도 지원합니다.
간단한 확장 프로그램보다 유연하지만, 설정에 시간이 더 걸리고 학습 곡선도 더 가파른 편이에요.
8. Data Miner — 브라우저 기반 표 추출에 가장 적합
Data Miner는 보이는 데이터를 스프레드시트로 긁어오는 데 초점을 둔 Chrome 확장 프로그램이에요. 이미 표나 깔끔한 목록 형태로 정리된 단순한 Shopify 페이지에서 특히 유용합니다.
Instant Data Scraper와 마찬가지로 Shopify 전용 인식 기능은 없어서, 복잡한 스토어프론트보다 단순한 페이지에서 가장 잘 작동해요.
9. Apify — Shopify 액터가 있는 최고의 클라우드 플랫폼
Apify는 전용 Shopify 액터를 제공하는 클라우드 스크래핑 플랫폼이에요. 구조화된 출력, 예약, 하위 도구와의 연동을 지원합니다.
호스팅 스크래핑이 필요하고 액터 기반 설정에 익숙한 팀에게는 아주 좋은 선택지예요. 브라우저 확장 프로그램보다는 기술적이지만, 모든 걸 직접 구축하는 것보다는 인프라 부담이 적어요.
최종 결론: 어떤 Shopify 스크래퍼를 선택해야 할까요?
Shopify 스토어를 가장 빠르고 쉽고 유연하게 스크래핑하고 싶다면, Thunderbit가 대부분의 비기술 사용자에게 가장 잘 맞아요. 렌더링된 페이지를 처리하고, 하위 페이지 보강을 지원하며, 설정도 매우 간단합니다.
더 수동적인 시각적 빌더를 원한다면 Octoparse가 좋은 대안이에요. 개발자 수준의 제어가 필요하다면 ScrapingBee나 Apify를 보세요. 엔터프라이즈 규모 워크플로에는 Bright Data가 돋보입니다. 그냥 빠르게 무료로 가져오기만 하면 된다면 Instant Data Scraper로도 충분해요.
Shopify 모니터링, 상품 조사, 카탈로그 추출 도구를 비교하고 있다면, 하위 페이지와 예약까지 커버하는 가장 쉬운 옵션부터 시작하세요. 진짜 가치는 바로 그 지점에서 나오거든요.
더 알아보기