지난주에 저는 경쟁사 Shopify 스토어에서 제품명, 가격, 옵션 정보를 스프레드시트에 옮기느라 온 오후를 다 써 버렸어요. 한 줄씩, 탭 하나씩. 제품이 47개쯤 되자 제 선택을 진지하게 되돌아보게 되더라고요.
이런 경험이 낯설지 않다면, 당신만 그런 게 아니에요. 2026년 현재 가 운영되고 있고, CMA 조사에 따르면 가 경쟁사 가격을 적극적으로 모니터링하고 있어요. Shopify 제품 데이터 수요는 그 어느 때보다 높습니다. 하지만 이걸 수작업으로 모으려면—옵션, 이미지, 설명까지 생각하면 제품당 보수적으로도 이 걸리기 때문에—500개 제품 카탈로그를 정리하는 데 며칠씩 걸릴 수 있어요.
그래서 저는 실제 Shopify 스토어들(products.json이 비활성화된 곳도 포함)을 대상으로 Chrome 확장 프로그램 10개를 직접 테스트해 봤어요. 어떤 도구가 실제로 쓸 수 있는 데이터를 뽑아내는지, 그리고 어떤 도구가 화면만 그럴듯한지 확인하기 위해서였죠.
2026년에 Shopify 스크래퍼 Chrome 확장 프로그램이 필요한 이유
Shopify에는 "경쟁사 카탈로그 다운로드" 버튼이 없어요. 다른 스토어의 제품 데이터를 얻고 싶다면 직접 복사하거나 도구를 써야 해요. 생각보다 활용 범위도 넓고요:
| 활용 사례 | 필요한 데이터 필드 | 도움이 되는 사람 |
|---|---|---|
| 경쟁사 가격 조사 | 제품명, 가격, 비교 가격, 옵션 | 이커머스 매니저, 가격 분석가 |
| 드롭쉬핑 상품 발굴 | 제품명, 이미지, 설명, 공급업체, 가격 | 드롭쉬퍼, 상품 리서처 |
| 카탈로그 마이그레이션 | Shopify CSV 형식의 모든 필드 | 스토어 운영자, 개발자 |
| 판매 속도 추정 | 시간별 재고 수준, 새로 추가/삭제된 SKU | 시장 분석가, 투자자 |
| 리드 생성(소매업체 대상 판매) | 스토어 기술 스택, 앱, 테마, 연락처 | SaaS 영업팀 |
Chrome 확장 프로그램이 인기 있는 이유는 코딩이 전혀 필요 없고, 이미 쓰고 있는 브라우저 안에서 바로 동작하며, 1분 안에 설정할 수 있기 때문이에요. 진입장벽은 사실상 "버튼 하나 누를 수 있느냐" 수준이죠.
스크래퍼 vs. 스파이 도구: 시간을 아껴 주는 중요한 구분

목록을 보기 전에, "Shopify scraper"를 찾는 대부분의 사람이 헷갈리는 부분 하나를 짚고 넘어갈게요. 사실 이건 서로 완전히 다른 문제를 푸는 두 가지 도구 범주예요:
| 필요한 것이... | 도구 범주 | 하는 일 |
|---|---|---|
| 제품명, 가격, 옵션, 이미지, 설명을 스프레드시트로 내보내기 | 스크래퍼/내보내기 도구 | 카탈로그 데이터를 CSV, Excel, Sheets로 추출 |
| 테마 이름, 설치된 앱, 분석 도구, 결제 처리업체, 트래픽 추정치 | 스파이/인스펙터 도구 | 스토어의 기술 스택과 전략을 보여 줌 |
이 글에서 말하는 스크래퍼: Thunderbit, Instant Data Scraper, Web Scraper, Data Miner, Octoparse, Shopify Products Scraper & Exporter, Shopify Spy Scraper & Parser.
이 글에서 말하는 스파이 도구: Koala Inspector, BuiltWith, Wappalyzer.
경쟁사 가격표를 만들려는 거라면 스파이 도구는 도움이 안 돼요. 반대로 어떤 Shopify 앱을 성공한 스토어가 쓰는지 알고 싶다면 제품 스크래퍼는 과해요. 대부분의 이커머스 팀은 두 종류 중 하나씩은 필요합니다.
이 10가지 Shopify 스크래퍼 Chrome 확장 프로그램을 테스트한 방법
저는 통제된 Shopify 스토어 세트를 사용해 모든 도구를 같은 기준으로 평가했어요:
| 평가 기준 | Shopify에서 중요한 이유 |
|---|---|
| 설정의 쉬움 | Shopify 테마는 제각각이라 CSS 선택자를 계속 유지보수하고 싶지 않아요 |
| 추출되는 데이터 필드 | 목록 페이지에는 기본 정보만 보여요. 설명, 옵션, 모든 이미지를 가져와야 해요 |
| 하위 페이지 보강 | 실제 경쟁 정보는 제품 상세 페이지에 담겨 있어요 |
| 페이지네이션 처리 | 500개가 넘는 카탈로그는 여러 페이지에 걸쳐 있어요 |
| 엔드포인트 의존성 | /products.json만 의존하는 도구는 해당 엔드포인트가 막히면 실패해요 |
| 봇 차단 대응력 | 많은 스토어가 이제 Cloudflare를 쓰거나 공개 JSON을 비활성화해요 |
| 내보내기 형식 | 최소 CSV/Excel은 필요하고, Sheets/Airtable/Notion이 있으면 더 좋아요 |
| 예약 스크래핑 | 가격 모니터링에는 한 번만 가져오는 스냅샷으로는 부족해요 |
| 가격 투명성 | 크레딧, 페이지, 행은 서로 같은 의미가 아니에요 |
저는 세 가지 스토어 상황을 대상으로 테스트했어요: products.json이 사용 가능한 열린 스토어, products.json이 비활성화된 스토어, 그리고 일반 브라우저 접속은 되지만 직접 엔드포인트 호출은 안 되는 설정의 스토어예요.
1. Thunderbit — 코딩 없이 쓰는 AI 기반 Shopify 스크래퍼
은 구조화된 데이터를 코드 없이 뽑아야 하는 비즈니스 사용자를 위해 저희 팀이 만든 AI 웹 스크래퍼예요. Shopify 스크래핑에서는 이렇게 작동해요: 컬렉션 페이지를 열고 "AI 필드 추천"을 클릭하면, AI가 페이지 레이아웃을 읽고 열(제품명, 가격, 이미지 URL, 제품 링크 등)을 제안해 줘요. 두 번 클릭이면 바로 스크래핑이 시작돼요.
이 도구가 이 리스트의 다른 어떤 도구와도 진짜 다르게 느껴지는 이유는 하위 페이지 보강 때문이에요. 대부분의 스크래퍼는 컬렉션/목록 페이지에 보이는 것만 가져와요. 제품명, 가격, 썸네일 같은 정보죠. 하지만 진짜 경쟁 정보는 개별 제품 페이지에 있어요. 전체 설명, 모든 이미지 갤러리, 모든 옵션, 리뷰, 사이즈 차트까지요. Thunderbit의 AI는 각 제품 상세 페이지를 자동으로 방문해 그 필드까지 함께 수집한 뒤 내보내기에 반영할 수 있어요.
주요 기능:
- AI 필드 추천: 수동으로 선택자를 설정할 필요가 없어요. AI가 페이지를 읽고 관련 열을 제안해 줘요.
- 하위 페이지 보강: 목록을 스크래핑한 뒤 각 제품 페이지를 자동 방문해 전체 설명, 옵션 정보, 이미지 갤러리까지 가져와요.
- 클라우드 모드: 대규모 카탈로그를 위해 한 번에 최대 50페이지를 동시에 처리해요. 브라우저 모드는 세션 유지가 필요한 스토어에 적합해요.
- 예약 스크래핑: "매주 월요일 오전 9시"처럼 자연어로 반복 실행을 설정해 가격/재고를 꾸준히 모니터링할 수 있어요.
- 무료 내보내기: CSV, Excel, Google Sheets, Airtable, Notion, JSON까지 출력단에 유료 장벽이 없어요.
- 필드 AI 프롬프트: 추출 중에 데이터를 라벨링, 번역, 분류할 수 있어요. 예: "가격 기준으로 럭셔리/저가로 분류".
가격: 무료 요금제(6페이지), Starter는 500 크레딧(1 크레딧 = 1행) 기준 월 약 $9부터, Pro는 3,000 크레딧 기준 월 약 $38. 하위 페이지 방문은 추가 크레딧을 사용해요.
한계: 크레딧 기반 과금이라 대규모 스크래핑(월 5,000개+ 제품)은 비용이 빠르게 쌓일 수 있어요. 또 AI 필드 감지는 원시 JSON 엔드포인트 도구보다 행당 몇 초 더 걸릴 수 있어요.
추천 대상: 최소한의 설정과 코딩 없이, 깊이 있고 풍부한 제품 데이터가 필요한 이커머스 팀.
Shopify에서 하위 페이지 보강이 중요한 이유

목록 페이지 데이터만 있는 경우와 하위 페이지가 보강된 데이터의 차이는 아주 커요:
| 필드 | 목록 페이지만 있을 때 | 하위 페이지 보강 시 |
|---|---|---|
| 제품명 | ✅ | ✅ |
| 가격 | ✅ | ✅ |
| 썸네일 이미지 | ✅ | ✅ + 전체 갤러리 |
| 제품 설명 | ❌ | ✅ |
| 모든 옵션 | ❌ (색상 견본 정도일 수 있음) | ✅ |
| 리뷰/평점 | ❌ | ✅(렌더링되어 있다면) |
| 사이즈 차트, 사양 | ❌ | ✅ |
이 기능이 있어야 얕은 가격 목록이 실제 경쟁 정보 데이터셋으로 바뀌어요. Shopify 데이터를 내보내고 나서 "설명은 다 어디 갔지?"라고 생각한 적이 있다면, 그게 바로 하위 페이지 문제예요.
에서 Thunderbit를 사용해 보거나 를 확인해 보세요.
2. Instant Data Scraper — 설정 없이 바로 쓰는 무료 자동 감지 도구
은 "빠르게 내보내기만 하면 되고, 아무 설정도 하고 싶지 않다"는 분께 추천하는 도구예요. 완전히 무료이고, 휴리스틱 알고리즘으로 어떤 페이지든 표 형태 데이터를 자동 감지해 CSV나 XLSX로 내보내 줘요.
Shopify 컬렉션 페이지를 열고 확장 프로그램 아이콘을 클릭하면, 보통 제품 그리드를 바로 감지해요. 페이지네이션도 처리하고("다음 페이지"를 자동 클릭), Dawn 같은 표준 Shopify 테마에서 잘 작동해요.
주요 기능:
- 설정 필요 없음 — 페이지 열기, 아이콘 클릭, 데이터 표시
- 자동 페이지네이션 감지
- CSV 및 XLSX 내보내기
- Shopify뿐 아니라 어떤 웹사이트에서도 작동
가격: 완전 무료.
한계: 하위 페이지 스크래핑이 없고(목록 페이지에 보이는 것만 가져옴), AI 필드 감지도 없고, 예약 기능도 없고, 봇 차단 대응도 없어요. 비표준이거나 많이 커스터마이징된 테마에서는 잘못된 콘텐츠 블록을 가져오는 경우도 있어요. 제품명과 가격은 가져오지만 설명과 전체 옵션 정보는 놓칠 수 있어요.
추천 대상: 표준 레이아웃의 Shopify 스토어에서 표면적인 데이터만 빠르게 한 번 뽑고 싶고, 돈 한 푼도 쓰고 싶지 않은 경우.
3. Koala Inspector — 스토어 인텔리전스를 위한 Shopify 스파이 도구
는 대량 제품 스크래퍼가 아니라 스파이/인스펙터 도구예요. 이걸 포함한 이유는 "Shopify scraper"를 검색하는 많은 사람이 사실은 경쟁사가 어떤 앱, 테마, 기술 스택을 쓰는지 알고 싶어 하기 때문이에요. Koala는 그 용도에 잘 맞아요.
설치된 Shopify 앱, 테마 이름과 버전, 추정 트래픽, 베스트셀러 제품(공개 신호 기반), 스토어 생성일, Shopify 플랜 감지를 보여 줘요. Chrome 확장 프로그램을 설치하면 어떤 Shopify 스토어에 들어가자마자 깔끔한 대시보드가 나타나요.
주요 기능:
- Shopify 앱 감지(설치된 앱 확인)
- 테마 식별
- 트래픽 추정 및 베스트셀러 신호
- 스토어 생성일과 Shopify 플랜 감지
가격: 제한된 조회가 가능한 무료 요금제. Pro는 월 약 $9.99부터 더 넓은 접근 가능.
한계: 대량 제품 데이터를 CSV/Sheets로 내보내지 못해요. 가격표를 만들거나 카탈로그를 마이그레이션하는 데는 사용할 수 없어요. 오직 스토어가 어떻게 만들어졌고 어떤 도구를 쓰는지만 파악하는 용도예요.
추천 대상: 드롭쉬퍼와 마케터로서, 직접 스토어를 만들기 전에 성공한 스토어가 어떤 앱과 테마를 쓰는지 조사하려는 경우.
4. Shopify Products Scraper & Exporter — Shopify용 CSV 내보내기
는 한 가지 일에 특화된 도구예요. Shopify의 가져오기 형식과 호환되는 CSV 파일로 제품을 내보내는 것에 집중해요. 스토어 정보(제품 수, 컬렉션 수)를 보여 주고, 전체 또는 선택한 컬렉션만 내보낼 수 있으며, 제품당 여러 옵션과 이미지를 처리해요.
주요 기능:
- Shopify 가져오기용 CSV 출력
- 컬렉션 필터링(특정 컬렉션만 내보내기)
- 제품당 여러 옵션과 이미지 지원
- 스토어 제품/컬렉션 수 표시
가격: 무료(보고된 기준으로 CSV당 최대 500개 제품).
한계: /products.json 엔드포인트에 의존해요. 스토어가 이를 비활성화했다면 아무것도 가져오지 못해요. 하위 페이지 보강도 없고, 예약 기능도 없고, 봇 차단 대응도 없어요. Shopify 스토어에만 제한되며(다른 플랫폼에서는 작동하지 않음), 500개 제품 제한 때문에 큰 카탈로그는 여러 번 내보내야 할 수 있어요.
추천 대상: 소스 스토어의 products.json이 열려 있고, Shopify 네이티브 CSV 형식으로 데이터를 받아야 하는 Shopify 간 카탈로그 이전 작업.
5. Shopify Spy Scraper & Parser — 스토어 개요가 포함된 제품 내보내기
계열 확장 프로그램은 기본 스토어 개요 기능과 제품 내보내기를 결합한 도구예요. 이 분야는 이름이 조금 혼재되어 있어요(SPYScraper, Shopify Spy 등). 설치 전에 Chrome Web Store의 정확한 목록을 꼭 확인하세요.
이 도구는 "느린 모드"를 제공해서 옵션 바코드, 세금 코드, 무게 단위, 이미지 alt 텍스트 같은 추가 필드를 수집해요. CSV와 Excel로 내보낼 수 있어요.
주요 기능:
- 스토어 개요(기본 스파이 기능) + 제품 내보내기
- 설명을 포함한 세부 필드 추출용 "느린 모드"
- CSV 및 Excel 내보내기
- 일부 경쟁사 추적 기능(가격 변동, 제품 추가)
가격: 100개 제품까지 무료. 무제한 사용은 정확한 확장 프로그램 버전에 따라 월 약 $5.90 또는 연 $58.80의 프리미엄 요금이 적용돼요.
한계: products.json에 의존하고, 봇 차단 대응이 제한적이며, 세부 모드에서는 추출 속도가 느려요. 비슷한 이름의 제품이 많아 어떤 버전을 설치하는지 헷갈리기 쉬워요.
추천 대상: 빠른 스토어 개요와 기본 제품 내보내기를 한 도구에서 모두 원하지만, 엔드포인트 의존성은 감수할 수 있는 사용자.
6. Web Scraper — 시각적 사이트맵 기반 스크래핑
는 이 리스트에서 가장 유연한 무료 옵션이에요. 다만 유연한 만큼 학습 곡선이 있어요. 정확히 무엇을 어떻게 가져올지 시각적 "사이트맵"으로 정의하게 해 주고, 페이지 이동 규칙과 CSS 선택자를 직접 설정해야 해요.
주요 기능:
- 스크래핑 로직을 정의하는 시각적 사이트맵 빌더
- 어떤 웹사이트에서도 작동(Shopify 전용 아님)
- 다중 페이지 스크래핑을 위한 페이지네이션 및 링크 추적 지원
- 예약을 위한 클라우드 버전 제공($50/월부터)
- 로컬 확장 프로그램은 CSV로 내보내고, 클라우드는 Google Sheets, JSON, S3, API 추가 지원
가격: 브라우저 확장 프로그램은 무료. 클라우드 요금제는 월 $50부터(5,000 URL 크레딧), Professional은 월 $100, Business는 월 $200부터예요.
한계: CSS 선택자를 직접 설정해야 해요. 스토어 테마가 업데이트되거나 레이아웃이 바뀌면 선택자가 깨져요. 비기술 사용자에게는 학습 곡선이 가파른 편이에요. Shopify 컬렉션 페이지의 초기 설정만 해도 처음엔 15~30분이 걸릴 수 있어요.
추천 대상: 기본적인 웹 개념에 익숙하고, Shopify에만 국한되지 않는 유연한 무료 도구가 필요한 사용자.
7. Data Miner — 레시피 기반 데이터 추출
는 "레시피" 시스템을 사용해요. 페이지에서 어떤 데이터를 가져올지 정의한 미리 만들어진 템플릿이나 사용자 정의 추출 템플릿이죠. 커뮤니티가 레시피를 공유하므로 Shopify 전용 레시피를 이미 찾을 수도 있어요.
주요 기능:
- 커뮤니티 공유 추출 레시피 60,000개 이상
- 사용자 정의 스크래핑 규칙을 만드는 시각적 인터페이스
- 페이지네이션 및 크롤링 지원
- CSV, Excel, Google Sheets(유료)로 내보내기
가격: 무료 플랜: . Solo: 월 $19.99(500페이지, 사용자 정의 레시피, Google Sheets). Small Business: 월 $49(1,000페이지). Business Plus: 월 $200(9,000페이지).
한계: 스토어 레이아웃이 바뀌면 레시피가 깨져요. AI 기반 필드 감지가 없어요. 기본 하위 페이지 보강도 없어요. 쓰지 않은 크레딧은 이월되지 않아요. 무료 요금제는 가벼운 사용엔 넉넉하지만, 진지한 경쟁사 리서치에는 제한적이에요.
추천 대상: 코딩 없이 커뮤니티 공유 템플릿과 적당한 유연성을 원하고, 여러 사이트 유형을 자주 스크래핑하는 사용자.
8. Octoparse — 클라우드 옵션이 있는 데스크톱 기반 시각적 스크래퍼
Octoparse는 데스크톱 앱과 클라우드 서비스를 모두 제공하는 더 범용적인 시각적 스크래핑 플랫폼이에요. 클릭으로 워크플로를 만들고, 데이터 패턴을 자동 감지하며, 사전 제작된 Shopify 템플릿도 제공해요.
주요 기능:
- 시각적 노코드 워크플로 빌더
- 반복 스크래핑을 위한 클라우드 기반 예약 기능
- 사전 제작된 Shopify 템플릿
- 페이지네이션, 무한 스크롤, AJAX 콘텐츠 지원
- CSV, Excel, JSON, 데이터베이스, API로 내보내기
- 추가 기능: 주거용 프록시($3/GB), CAPTCHA 해결($1~1.50/천 회)
가격: 무료 플랜(10개 작업, 로컬 전용, 월 50K 행 내보내기 제한). 유료 요금제는 클라우드 추출, 예약, IP 로테이션, 통합 기능을 추가해요. 차단 방지 기능용 추가 비용도 있어요. 최신 세부 사항은 Octoparse 가격 페이지를 참고하세요.
한계: 복잡한 설정에서는 데스크톱 앱 의존도가 높아요. AI 기반 도구보다 학습 곡선이 가파른 편이에요. 클라우드/차단 방지 기능은 비용을 빠르게 올려요. Chrome 전용 솔루션보다 무겁게 느껴질 수 있어요.
추천 대상: 일정한 주기로 반복 스크래핑이 필요하고, 적당한 기술 이해도와 전용 스크래핑 플랫폼 예산이 있는 팀.
9. BuiltWith — 경쟁 조사용 기술 프로파일러
는 제품 스크래퍼가 아니라 기술 프로파일러예요. 웹사이트가 어떤 기술, 플랫폼, 도구를 쓰는지 식별해 줘요. 이커머스 플랫폼, 분석 도구, 결제 처리, 마케팅 도구, CDN, 호스팅, 특정 Shopify 앱까지요.
BuiltWith의 공개 데이터에 따르면 를 추적하고 있어요. 그래서 Shopify 판매자를 대상으로 영업 기회를 찾는 영업팀이나, 시장 기술 트렌드를 분석하는 리서처에게 강력한 도구예요.
주요 기능:
- 4억 1,400만+ 도메인의 기술 스택 식별(매주 업데이트)
- Shopify 전용: 설치된 앱, 픽셀, 결제 도구 감지
- Chrome 확장 프로그램으로 어떤 사이트든 즉시 기술 스택 표시
- 기술 사용 기반 리드 리스트 생성
- 리테일 및 키워드 리포트
가격: 개별 사이트 조회는 평생 무료. , Pro: 월 $495, Team: 월 $995.
한계: 제품 데이터는 추출하지 않아요. 가격, 제품명, 이미지, 카탈로그 내보내기는 불가해요. 순수한 기술 식별 및 영업 발굴 도구예요. 전체 접근 가격은 비싼 편이에요.
추천 대상: Shopify 판매처를 대상으로 영업하는 팀(예: "Klaviyo + Shopify Plus를 쓰는 모든 스토어 보여 줘") 또는 시장 기술 채택 트렌드를 분석하는 연구자.
10. Wappalyzer — 가벼운 기술 스택 감지 도구
는 BuiltWith와 비슷하지만 더 가볍고, 빠른 확인용으로 접근성이 좋아요. 브라우저 확장 프로그램이 어떤 웹사이트든 CMS, 이커머스 플랫폼, 프레임워크, 분석 도구, 마케팅 도구, 결제 시스템을 즉시 식별해 줘요.
을 추적하며, Shopify 앱과 테마도 포함돼요.
주요 기능:
- Chrome 확장 프로그램을 통한 즉시 기술 감지
- 깔끔하고 단순한 인터페이스
- 감지된 기술의 CSV 내보내기
- 유료 요금제에서 대량 조회 및 CRM 보강
- Shopify 앱 및 테마 감지
가격: 무료: , 웹사이트 알림 5개. Pro: 월 $250. Business: 월 $450. Enterprise: 월 $850+.
한계: 제품 데이터는 추출하지 않아요. 심층 리서치에서는 BuiltWith보다 세부 정보가 적어요. 순수한 기술 식별 도구예요.
추천 대상: 경쟁사를 살피거나 리드를 검증할 때 빠르게 기술 스택을 확인하고 싶을 때. 개별 조회에서는 BuiltWith보다 가볍고 빠른 편이에요.
2026년 봇 차단 현실: 보호된 스토어에서 여전히 작동하는 확장 프로그램은?
2026년의 많은 Shopify 스토어는 /products.json 엔드포인트를 비활성화했거나 Cloudflare 보호를 추가했어요. 에 따르면 악성 봇은 이제 전체 인터넷 트래픽의 37%를 차지하고, 리테일에서는 봇 트래픽이 59%에 달해요. 스토어들도 대응에 나서고 있죠.

그 JSON 엔드포인트에만 의존하는 확장 프로그램은 보호된 스토어에서 빈 데이터를 반환해요. 저는 각 도구를 세 가지 상황에서 테스트했어요:
| 도구 | 열린 컬렉션 페이지 | products.json 사용 가능 | products.json 사용 불가 | 메모 |
|---|---|---|---|---|
| Thunderbit | ✅ | ✅ | ✅(렌더링된 페이지 읽기) | 브라우저 모드는 엔드포인트와 무관하게 보이는 페이지에서 작동 |
| Instant Data Scraper | ✅ | 해당 없음 | ✅(목록 데이터만) | 보이는 것만 가져오고 하위 페이지 데이터는 놓침 |
| Koala Inspector | ✅(기술 신호) | 해당 없음 | 해당 없음 | 스파이 도구, 다른 데이터 유형 |
| Shopify Products Scraper & Exporter | ✅ | ✅ | ❌ | JSON 엔드포인트 의존 |
| Shopify Spy/SPYScraper | ✅ | ✅ | 부분적/실패 | 제품 데이터는 엔드포인트 의존 |
| Web Scraper | ✅(설정 후) | 렌더링된 페이지 사용 가능 | ✅(선택자가 작동하면) | 엔드포인트가 아니라 보이는 페이지를 읽음 |
| Data Miner | ✅(레시피 필요) | 보이는 페이지 사용 가능 | ✅(레시피가 작동하면) | 보이는 페이지를 읽음 |
| Octoparse | ✅(워크플로 후) | 렌더링된 페이지 사용 가능 | ✅(워크플로가 설정되면) | 클라우드 차단 방지 기능 제공 |
| BuiltWith | 기술 감지만 가능 | 해당 없음 | 해당 없음 | 다른 범주 |
| Wappalyzer | 기술 감지만 가능 | 해당 없음 | 해당 없음 | 다른 범주 |
핵심은 이거예요: 렌더링된 페이지를 읽는 브라우저 기반 스크래퍼(Thunderbit 브라우저 모드, Web Scraper, Data Miner 같은 도구)는 사람이 볼 수 있는 어떤 페이지에서도 작동해요. 엔드포인트 전용 도구는 스토어가 직접 JSON 접근을 막으면 실패해요.
도구를 고르기 전에 대상 스토어를 확인해 보세요. 브라우저에서 storename.myshopify.com/products.json에 접속해 보면 돼요. 제품 데이터가 뜨면 엔드포인트 의존 도구가 잘 작동할 거예요. 오류나 빈 페이지가 뜨면 렌더링된 페이지를 읽는 스크래퍼가 필요해요.
속도와 정확도 벤치마크: 500개 제품 Shopify 스토어 테스트
실제 성능을 측정하기 위해 같은 약 500개 제품의 공개 Shopify 스토어를 대상으로 각 스크래퍼 도구를 돌려 봤어요. 결과는 이랬어요:
| 확장 프로그램 | 시간(500개 제품) | 정확도 | 설명 수집? | 모든 옵션 수집? | 수동 수정 필요 |
|---|---|---|---|---|---|
| Thunderbit (클라우드) | 약 4분 | 약 97% | ✅(하위 페이지 통해) | ✅ | 0 |
| Thunderbit (브라우저) | 약 18분 | 약 97% | ✅(하위 페이지 통해) | ✅ | 0 |
| Instant Data Scraper | 약 12분 | 약 89% | ❌ | 부분적 | 2(페이지네이션 문제) |
| Shopify Products Scraper & Exporter | 약 3분 | 약 94% | 부분적(JSON 필드) | ✅ | 0(엔드포인트가 작동할 때) |
| Shopify Spy/SPYScraper(느린 모드) | 약 20분 | 약 91% | ✅(느린 모드) | ✅ | 1 |
| Web Scraper | 약 25분(설정 포함) | 약 92% | ❌(하위 페이지 설정 없을 때) | 부분적 | 3(선택자 수정) |
| Data Miner | 약 15분 | 약 88% | ❌ | 부분적 | 2(레시피 조정) |
| Octoparse | 약 10분(워크플로 후) | 약 93% | ✅(링크 추적 사용 시) | ✅ | 1(워크플로 수정) |
눈에 띄는 점 몇 가지가 있어요:
- Thunderbit의 클라우드 모드는 50페이지를 동시에 처리해서 보강된 전체 데이터셋 기준으로 가장 빨랐어요. 브라우저 모드는 더 느리지만 세션 컨텍스트가 필요한 스토어에서 작동해요.
- 엔드포인트 의존 도구(Shopify Products Scraper)는 엔드포인트가 작동할 때는 가장 빨랐지만, 보호된 스토어 버전에서는 아무것도 가져오지 못했어요.
- 무료 도구(Instant Data Scraper, Web Scraper)는 수동 개입이 더 많이 필요했고, 완성도도 떨어졌어요.
- 여기서 말하는 정확도는 "30개 제품 감사 샘플에서 올바르게 수집된 필드의 비율"이에요. 가장 흔한 실패는 옵션 누락, 설명 잘림, 잘못된 이미지 URL이었어요.
경쟁사 가격과 재고를 시간에 따라 추적하기
한 번만 스크래핑하면 스냅샷 하나를 얻는 데 그쳐요. 하지만 경쟁 정보를 제대로 활용하려면 반복 스냅샷이 필요해요. 그래야 이런 질문에 답할 수 있거든요:
- 어떤 제품이 빨리 팔리고 있나? (스크래핑 사이에 재고가 줄어듦)
- 경쟁사가 계절에 맞춰 가격을 조정하나?
- 언제 SKU를 추가하거나 삭제하나?
- 대략적인 판매 속도는 어느 정도인가?
제가 경험한 바로는, 스크래핑에서 가장 큰 가치를 얻는 팀은 모니터링을 자동화하고 사람의 시간을 데이터 수집이 아니라 분석과 실행에 쓰는 팀이에요.
이 도구들의 예약 기능 현황은 이렇습니다:
| 도구 | 예약 스크래핑? | 간격 옵션 | 출력 대상 |
|---|---|---|---|
| Thunderbit | ✅ | 자연어("매주 월요일 오전 9시") | Sheets, Airtable, Notion, Excel |
| Instant Data Scraper | ❌ | — | — |
| Koala Inspector | 제한적(알림, 대량 아님) | — | — |
| Shopify Products Scraper & Exporter | ❌ | — | — |
| Shopify Spy/SPYScraper | 제한적/버전별 상이 | — | — |
| Web Scraper | ✅(클라우드, 월 $50부터) | 시간별/일별/주별 | CSV, Sheets, S3, API |
| Data Miner | ✅(유료 요금제) | 자동 크롤 작업 | CSV, Excel, Sheets |
| Octoparse | ✅(클라우드/프리미엄) | 유연한 예약 | CSV, Excel, JSON, DB, API |
| BuiltWith | 알림만 제공(기술 변경) | — | — |
| Wappalyzer | 알림만 제공(기술 변경) | — | — |
제가 실제로 세팅한 실용적인 워크플로는 이래요: Thunderbit이 경쟁사의 "신상품" 컬렉션을 매주 실행해서 Google Sheets로 내보내고, 저는 간단한 조건부 서식을 사용해 가격 변동과 새로 추가/삭제된 제품을 강조 표시해요. 전체 설정은 5분 정도밖에 안 걸렸고, 매달 수동 확인 시간을 몇 시간씩 아껴 주고 있어요.
Shopify 스크래핑의 실제 비용: 무료 요금제, 크레딧, 정액제
저는 "월 $99를 내다가도 크레딧 한도에 계속 걸려서 지쳤다" 같은 답답한 포럼 글을 충분히 봤어요. 그래서 가격 투명성이 중요하다는 걸 잘 알고 있어요. 5개 경쟁사 스토어에서 월 1,000개 제품을 처리한다고 했을 때, 각 도구의 실제 비용은 이렇습니다:
| 도구 | 무료 요금제 | 무료로 실제로 얻는 것 | ~1,000개 제품/월 비용 | 가격 모델 |
|---|---|---|---|---|
| Thunderbit | 6페이지 | 약 600행(페이지 밀도에 따라 다름) | 약 $38/월(Pro, 3,000 크레딧) | 크레딧/행 구독형 |
| Instant Data Scraper | 무제한 | 보이는 목록 데이터 전체 | $0 | 완전 무료 |
| Koala Inspector | 제한된 조회 | 앱/테마만, 대량 내보내기 없음 | 제품 스크래핑에는 해당 없음 | 구독형(Pro 월 $9.99) |
| Shopify Products Scraper & Exporter | CSV당 500개 제품 | 엔드포인트가 작동할 때 전체 제품 데이터 | $0 | 무료 확장 프로그램 |
| SPYScraper | 100개 제품 | 기본 제품 내보내기 | 약 $5.90/월 | 구독형 |
| Web Scraper | 로컬 무료 | 무제한 로컬 스크래핑 | 로컬은 $0, 예약이 필요하면 월 $50 | URL-크레딧 클라우드 구독형 |
| Data Miner | 월 500페이지 | 약 500페이지 추출 | 사용량에 따라 월 $19.99~$49 | 페이지 스크래핑 구독형 |
| Octoparse | 10개 작업, 로컬 | 월 50K 행 내보내기, 로컬 전용 | 무료도 가능하지만 클라우드는 비용 추가 | 작업/클라우드/애드온 모델 |
| BuiltWith | 무료 조회 | 개별 사이트 기술 프로필 | 제품 스크래핑에는 해당 없음 | 테크노그래픽 구독형(월 $295+) |
| Wappalyzer | 월 50회 조회 | 기본 기술 감지 | 제품 스크래핑에는 해당 없음 | 테크노그래픽 구독형(월 $250+) |
솔직하게 말하면: 무료 도구는 돈은 안 들지만, 설정과 수작업에 시간이 들어요. 유료 도구는 돈이 들지만 시간을 아껴 줘요. 무료 도구가 놓친 데이터를 수동으로 보강하거나, 선택자를 수정하거나, 깨진 레시피를 고치는 데 15~30분을 쓴다고 가정해서, 제품당 실제 비용을 계산해 보세요.
Thunderbit의 내보내기(CSV, Sheets, Airtable, Notion)는 요금제와 상관없이 무료예요. 한 번 스크래핑한 뒤 데이터를 꺼내는 데는 유료 장벽이 없어요. 크레딧은 추출에 쓰이고, 내보내기에는 쓰이지 않아요.
나란히 보는 비교: Shopify 스크래퍼 Chrome 확장 프로그램 10개
| 도구 | 가장 적합한 용도 | products.json 필요? | 봇 차단 대응 | 하위 페이지 보강 | 예약 스크래핑 | 내보내기 옵션 | 가격 |
|---|---|---|---|---|---|---|---|
| Thunderbit | 깊은 제품 데이터, 비개발자 | 아니요(렌더링된 페이지 읽음) | 브라우저 모드가 강함 | ✅ AI 기반 | ✅ 자연어 | Excel, CSV, Sheets, Airtable, Notion, JSON | 무료 체험, 월 약 $9부터 |
| Instant Data Scraper | 빠른 무료 내보내기 | 아니요(보이는 페이지 읽음) | 없음 | ❌ | ❌ | CSV, XLSX | 무료 |
| Koala Inspector | 스토어 기술/앱 조사 | 해당 없음(스파이 도구) | 해당 없음 | 해당 없음 | 제한적 알림 | 앱 내 대시보드 | 무료, Pro 월 약 $9.99 |
| Shopify Products Scraper | Shopify CSV 마이그레이션 | 예 | 없음 | ❌ | ❌ | Shopify 형식 CSV | 무료(500개 제품) |
| Shopify Spy/SPYScraper | 제품 내보내기 + 개요 | 예(대부분) | 제한적 | 부분적(느린 모드) | 제한적 | CSV, Excel | 100개 제품 무료, 월 약 $5.90 |
| Web Scraper | 유연한 다중 사이트 스크래핑 | 아니요(렌더링된 페이지 읽음) | 내장 없음 | 수동 설정 필요 | ✅(클라우드, 월 $50+) | CSV, XLSX, JSON, Sheets, S3 | 로컬 무료, 클라우드 월 $50부터 |
| Data Miner | 레시피/템플릿 기반 추출 | 아니요(보이는 페이지 읽음) | 없음 | ❌ | ✅(유료) | CSV, Excel, Sheets | 월 500페이지 무료, 월 $19.99부터 |
| Octoparse | 예약 가능한 시각적 스크래핑 | 아니요(렌더링된 페이지 읽음) | 유료 애드온 제공 | ✅(워크플로 사용 시) | ✅(클라우드) | CSV, Excel, JSON, DB, API | 로컬 무료, 클라우드 유료 |
| BuiltWith | 기술 기반 영업 발굴 | 해당 없음(기술 프로파일러) | 해당 없음 | 해당 없음 | 기술 알림 | 리포트, CSV, API | 무료 조회, 월 $295부터 |
| Wappalyzer | 빠른 기술 스택 확인 | 해당 없음(기술 프로파일러) | 해당 없음 | 해당 없음 | 기술 알림 | CSV, JSON | 월 50회 무료, 월 $250부터 |
어떤 Shopify 스크래퍼 Chrome 확장 프로그램을 골라야 할까?
10개를 모두 테스트한 뒤, 상황별 추천은 이렇습니다:
"최소 설정, 코딩 없이 깊은 제품 데이터가 필요해요." → Thunderbit부터 시작하세요. AI 필드 추천과 하위 페이지 보강 덕분에 선택자를 설정하지 않아도 완전한 데이터를 얻을 수 있어요. 정기적인 경쟁사 리서치에는 크레딧 모델도 잘 맞아요.
"표준 스토어에서 빠르고 무료로 내보내기만 하면 돼요." → Instant Data Scraper. 비용도 없고 설정도 없어요. 다만 목록 페이지 데이터만 얻는다는 점은 받아들여야 해요.
"경쟁사가 어떤 앱과 테마를 쓰는지 알고 싶어요." → Shopify 전용 인사이트는 Koala Inspector, 빠른 크로스플랫폼 기술 확인은 Wappalyzer.
"Shopify 가져오기용 CSV가 필요해요." → Shopify Products Scraper & Exporter. 단, 소스 스토어의 products.json이 열려 있어야 해요.
"시각적 선택자를 다룰 줄 알고, 여러 사이트에서 유연하게 쓰고 싶어요." → Web Scraper(무료) 또는 Octoparse(유료, 예약 포함).
"SaaS 제품을 위해 Shopify 판매자를 발굴하고 있어요." → 기술 기반 리드 리스트는 BuiltWith, 가벼운 개별 조회는 Wappalyzer.
"지속적인 가격과 재고 모니터링이 필요해요." → Thunderbit(가장 쉬운 예약 설정), Web Scraper Cloud, 또는 Octoparse Cloud.
대부분의 이커머스 팀이 경쟁사 조사를 할 때는 제품 데이터 추출용 Thunderbit와 기술 스택 조사용 Koala Inspector 또는 Wappalyzer를 함께 쓰는 걸 추천해요. 이 조합이면 "무엇을 얼마에 팔고 있는가?"와 "스토어는 어떻게 만들어졌는가?"를 모두 커버할 수 있어요.
AI 기반 Shopify 스크래핑이 실제로 어떻게 보이는지 보고 싶다면, 으로 실제 대상 스토어에서 바로 테스트해 볼 수 있어요. 그리고 도구가 다양한 스크래핑 상황을 어떻게 처리하는지 더 자세히 보고 싶다면 을 확인해 보세요.
자주 묻는 질문
1. Shopify 스토어의 데이터를 스크래핑하는 건 합법인가요?
공개적으로 접근 가능한 제품 데이터(가격, 제품명, 누구나 볼 수 있는 이미지)를 스크래핑하는 것은 일반적으로 비교적 낮은 위험으로 여겨져요. 특히 미국의 hiQ v. LinkedIn 판결처럼 공개 데이터 접근을 지지한 사례 이후에는 더 그렇죠. 다만 robots.txt 지침, 스토어 이용약관, 요청 속도 제한을 항상 존중해야 하고, 개인 정보나 비공개 데이터를 스크래핑하면 안 돼요. 로그인 벽, CAPTCHA, 기술적 접근 제어를 우회하지 마세요. 이건 실무 지침이지 법률 자문은 아니므로, 구체적 상황은 법률 전문가와 상의하세요.
2. Shopify 스크래퍼 확장 프로그램은 모든 Shopify 스토어에서 작동하나요?
아니요. 일부 스토어는 /products.json 엔드포인트를 비활성화하거나 Cloudflare 보호를 사용해요. 그 JSON 엔드포인트에만 의존하는 도구(예: Shopify Products Scraper & Exporter)는 보호된 스토어에서 실패해요. Thunderbit처럼 렌더링된 페이지, 즉 일반 브라우징에서 보이는 같은 페이지를 읽는 브라우저 기반 스크래퍼는 실제로 보이는 내용에서 추출하기 때문에 이런 상황을 더 잘 처리해요.
3. 스크래핑한 Shopify 데이터를 Google Sheets나 Excel로 내보낼 수 있나요?
네. 대부분의 스크래퍼 도구는 최소한 CSV와 Excel 내보내기를 지원해요. Thunderbit은 추가 비용 없이 Google Sheets, Airtable, Notion으로도 직접 내보낼 수 있어요. Web Scraper Cloud와 Data Miner(유료)도 Google Sheets를 지원해요. 스파이 도구(Koala, BuiltWith, Wappalyzer)는 제품 카탈로그가 아니라 기술 데이터를 내보내요.
4. Shopify 스크래퍼와 Shopify 스파이 도구의 차이는 뭔가요?
스크래퍼는 대량 제품 카탈로그 데이터—제품명, 가격, 설명, 이미지, 옵션—를 스프레드시트로 추출해 경쟁 분석, 가격 조사, 카탈로그 이전에 사용해요. 스파이 도구는 설치된 앱, 사용하는 테마, 운영 중인 분석·결제 도구 같은 스토어의 기술 스택을 보여 줘서 전략 조사와 영업 발굴에 도움을 줘요. 대부분의 이커머스 팀은 두 가지를 모두 갖추면 좋아요.
5. 무료로 몇 개 제품까지 스크래핑할 수 있나요?
도구마다 차이가 커요. Instant Data Scraper는 제품 제한 없이 완전 무료지만 기능은 제한적이에요. Thunderbit의 무료 요금제는 약 6페이지 추출을 제공해요. Shopify Products Scraper & Exporter는 무료로 CSV당 최대 500개 제품을 처리한다고 알려져 있어요. SPYScraper는 100개 제품을 무료로 제공해요. Data Miner는 월 500페이지 무료 스크래핑을 제공해요. Web Scraper의 로컬 확장 프로그램은 무제한 로컬 사용이 무료예요. 매달 수천 개의 제품을 다루는 진지한 경쟁사 리서치라면 유료 도구에 투자할 가능성이 높아요. 다만 직접 수집하느라 아끼는 시간을 꼭 함께 계산해 보세요.
더 알아보기
