지난주에 저는 경쟁사 Shopify 스토어에서 제품명, 가격, 옵션을 스프레드시트로 옮기느라 오후를 통째로 날렸어요. 한 줄씩, 탭 하나씩요. 제품이 47개쯤 쌓이자 제 인생을 진지하게 돌아보게 되더라고요.
이 장면이 익숙하다면 혼자만 그런 게 아니에요. 2026년 현재 Shopify 스토어가 280만 개 넘게 돌아가고, CMA 조사에 따르면 기업의 72%가 경쟁사 가격을 적극 들여다봐요. 제품 데이터 수요는 역대 최고죠. 그런데 손으로 모으면—옵션, 이미지, 설명까지 치면 제품당 10~20분이라—500개짜리 카탈로그 하나에 며칠이 날아가요.
그래서 저는 실제 Shopify 스토어들(products.json이 막힌 곳도 포함)에 Chrome 확장 프로그램 10개를 직접 돌려 봤어요. 어떤 도구가 쓸 만한 데이터를 뽑는지, 어떤 도구가 화면만 그럴듯한지 가려내려고요.
2026년에 Shopify 스크래퍼 Chrome 확장 프로그램이 필요한 이유
Shopify엔 "경쟁사 카탈로그 다운로드" 버튼이 없어요. 다른 스토어의 제품 데이터를 얻으려면 직접 복사하거나 도구를 써야 해요. 쓰임새도 생각보다 넓고요.
| 활용 사례 | 필요한 데이터 필드 | 도움이 되는 사람 |
|---|---|---|
| 경쟁사 가격 조사 | 제품명, 가격, 비교 가격, 옵션 | 이커머스 매니저, 가격 분석가 |
| 드롭쉬핑 상품 발굴 | 제품명, 이미지, 설명, 공급업체, 가격 | 드롭쉬퍼, 상품 리서처 |
| 카탈로그 마이그레이션 | Shopify CSV 형식의 모든 필드 | 스토어 운영자, 개발자 |
| 판매 속도 추정 | 시간별 재고 수준, 새로 추가/삭제된 SKU | 시장 분석가, 투자자 |
| 리드 생성(소매업체 대상 판매) | 스토어 기술 스택, 앱, 테마, 연락처 | SaaS 영업팀 |
Chrome 확장 프로그램이 인기인 이유는 단순해요. 코딩이 필요 없고, 이미 쓰는 브라우저에서 바로 돌고, 1분이면 세팅이 끝나거든요. 진입 문턱이 "버튼 하나 누를 줄 아느냐" 수준이에요.
스크래퍼 vs 스파이 도구: 시간을 아껴 주는 결정적 구분
목록을 보기 전에, "Shopify scraper"를 찾는 분들이 자주 헷갈리는 지점을 짚을게요. 사실 이건 서로 다른 문제를 푸는 두 가지 도구 범주예요.
| 필요한 것이... | 도구 범주 | 하는 일 |
|---|---|---|
| 제품명, 가격, 옵션, 이미지, 설명을 스프레드시트로 내보내기 | 스크래퍼/내보내기 도구 | 카탈로그 데이터를 CSV, Excel, Sheets로 추출 |
| 테마 이름, 설치된 앱, 분석 도구, 결제 처리업체, 트래픽 추정치 | 스파이/인스펙터 도구 | 스토어의 기술 스택과 전략을 보여 줌 |
이 글에서 말하는 스크래퍼: Thunderbit, Instant Data Scraper, Web Scraper, Data Miner, Octoparse, Shopify Products Scraper & Exporter, Shopify Spy Scraper & Parser.
이 글에서 말하는 스파이 도구: Koala Inspector, BuiltWith, Wappalyzer.
경쟁사 가격표를 만들 거라면 스파이 도구는 도움이 안 돼요. 반대로 잘나가는 스토어가 어떤 Shopify 앱을 쓰는지 보고 싶다면 제품 스크래퍼는 과해요. 대부분의 이커머스 팀은 두 종류 중 하나씩은 필요해요.
이 10가지 Shopify 스크래퍼를 테스트한 방법
저는 통제된 Shopify 스토어 세트로 모든 도구를 같은 잣대에 올려놨어요.
| 평가 기준 | Shopify에서 중요한 이유 |
|---|---|
| 설정의 쉬움 | Shopify 테마는 제각각이라 CSS 선택자를 계속 유지보수하고 싶지 않아요 |
| 추출되는 데이터 필드 | 목록 페이지에는 기본 정보만 보여요. 설명, 옵션, 모든 이미지를 가져와야 해요 |
| 하위 페이지 보강 | 실제 경쟁 정보는 제품 상세 페이지에 담겨 있어요 |
| 페이지네이션 처리 | 500개가 넘는 카탈로그는 여러 페이지에 걸쳐 있어요 |
| 엔드포인트 의존성 | /products.json만 의존하는 도구는 해당 엔드포인트가 막히면 실패해요 |
| 봇 차단 대응력 | 많은 스토어가 이제 Cloudflare를 쓰거나 공개 JSON을 비활성화해요 |
| 내보내기 형식 | 최소 CSV/Excel은 필요하고, Sheets/Airtable/Notion이 있으면 더 좋아요 |
| 예약 스크래핑 | 가격 모니터링에는 한 번만 가져오는 스냅샷으로는 부족해요 |
| 가격 투명성 | 크레딧, 페이지, 행은 서로 같은 의미가 아니에요 |
테스트는 세 가지 스토어 상황으로 나눠 돌렸어요. products.json이 열린 스토어, products.json이 꺼진 스토어, 그리고 일반 브라우저 접속은 되지만 엔드포인트 직접 호출은 막힌 스토어예요.
1. Thunderbit — 코딩 없이 쓰는 AI 기반 Shopify 스크래퍼
Thunderbit은 코드 없이 구조화된 데이터를 뽑아야 하는 비즈니스 사용자를 위해 저희 팀이 만든 AI 웹 스크래퍼예요. Shopify에선 이렇게 돌아가요. 컬렉션 페이지를 열고 "AI 필드 추천"을 누르면, AI가 페이지를 읽고 컬럼(제품명, 가격, 이미지 URL, 제품 링크 등)을 제안해 줘요. 두 번 클릭이면 스크래핑이 시작돼요.
이 도구가 목록의 다른 도구와 결이 다른 이유는 하위 페이지 보강 때문이에요. 대부분의 스크래퍼는 컬렉션/목록 페이지에 보이는 것만 가져와요. 제품명, 가격, 썸네일 정도죠. 하지만 진짜 경쟁 정보는 개별 제품 페이지에 있어요. 전체 설명, 이미지 갤러리, 모든 옵션, 리뷰, 사이즈 차트까지요. Thunderbit의 AI는 각 제품 상세 페이지를 자동으로 들러 그 필드까지 모아 내보내기에 담아 줘요.
주요 기능:
- AI 필드 추천: 선택자를 수동으로 잡을 필요가 없어요. AI가 페이지를 읽고 관련 컬럼을 제안해 줘요.
- 하위 페이지 보강: 목록을 긁은 뒤 각 제품 페이지를 자동 방문해 전체 설명, 옵션, 이미지 갤러리까지 가져와요.
- 클라우드 모드: 대규모 카탈로그용으로 한 번에 최대 50페이지를 동시에 처리해요. 브라우저 모드는 세션 유지가 필요한 스토어에 맞고요.
- 예약 스크래핑: "매주 월요일 오전 9시"처럼 자연어로 반복 실행을 걸어 가격/재고를 꾸준히 모니터링할 수 있어요.
- 무료 내보내기: CSV, Excel, Google Sheets, Airtable, Notion, JSON까지 출력단에 유료 장벽이 없어요.
- 필드 AI 프롬프트: 추출 중에 데이터를 라벨링, 번역, 분류할 수 있어요. 예: "가격 기준으로 럭셔리/저가로 분류".
가격: 무료 요금제(6페이지), Starter는 500 크레딧(1 크레딧 = 1행) 기준 월 약 $9(약 1만 2천 원)부터, Pro는 3,000 크레딧 기준 월 약 $38(약 5만 2천 원). 하위 페이지 방문은 추가 크레딧을 써요.
한계: 크레딧 기반이라 대규모 스크래핑(월 5,000개+ 제품)은 비용이 빠르게 쌓일 수 있어요. AI 필드 감지도 원시 JSON 엔드포인트 도구보다 행당 몇 초 더 걸릴 수 있고요.
추천 대상: 최소 설정과 코딩 없이, 깊고 풍부한 제품 데이터가 필요한 이커머스 팀.
Shopify에서 하위 페이지 보강이 중요한 이유
목록 페이지 데이터만 있는 경우와 하위 페이지가 보강된 데이터의 차이는 정말 커요.
| 필드 | 목록 페이지만 있을 때 | 하위 페이지 보강 시 |
|---|---|---|
| 제품명 | ✅ | ✅ |
| 가격 | ✅ | ✅ |
| 썸네일 이미지 | ✅ | ✅ + 전체 갤러리 |
| 제품 설명 | ❌ | ✅ |
| 모든 옵션 | ❌ (색상 견본 정도일 수 있음) | ✅ |
| 리뷰/평점 | ❌ | ✅(렌더링되어 있다면) |
| 사이즈 차트, 사양 | ❌ | ✅ |
이 기능이 있어야 얕은 가격 목록이 진짜 경쟁 정보 데이터셋이 돼요. Shopify 데이터를 내보낸 뒤 "설명은 다 어디 갔지?" 싶었다면, 그게 바로 하위 페이지 문제예요.
Chrome 확장 프로그램에서 Thunderbit를 써 보거나 가격 정보를 확인해 보세요.
2. Instant Data Scraper — 설정 없이 바로 쓰는 무료 자동 감지 도구
Instant Data Scraper은 "빨리 내보내기만 하면 되고 아무 설정도 하기 싫다"는 분께 맞아요. 완전 무료고, 휴리스틱 알고리즘으로 어떤 페이지든 표 형태 데이터를 자동 감지해 CSV나 XLSX로 뽑아 줘요.
Shopify 컬렉션 페이지를 열고 아이콘을 누르면 보통 제품 그리드를 곧바로 잡아요. 페이지네이션도 처리하고("다음 페이지" 자동 클릭), Dawn 같은 표준 Shopify 테마에서 잘 돌아가요.
주요 기능:
- 설정 필요 없음 — 페이지 열기, 아이콘 클릭, 데이터 표시
- 자동 페이지네이션 감지
- CSV 및 XLSX 내보내기
- Shopify뿐 아니라 어떤 웹사이트에서도 작동
가격: 완전 무료.
한계: 하위 페이지 스크래핑이 없어요(목록 페이지에 보이는 것만 가져옴). AI 필드 감지도, 예약도, 봇 차단 대응도 없고요. 비표준이거나 많이 커스터마이징된 테마에선 엉뚱한 콘텐츠 블록을 가져오기도 해요. 제품명과 가격은 잡지만 설명과 전체 옵션은 놓칠 수 있어요.
추천 대상: 표준 레이아웃 Shopify 스토어에서 표면 데이터만 빠르게 한 번 뽑고, 돈은 한 푼도 안 쓰고 싶은 경우.
3. Koala Inspector — 스토어 인텔리전스를 위한 Shopify 스파이 도구
Koala Inspector는 대량 제품 스크래퍼가 아니라 스파이/인스펙터 도구예요. 굳이 넣은 이유는, "Shopify scraper"를 검색하는 많은 분이 사실은 경쟁사가 어떤 앱·테마·기술 스택을 쓰는지 궁금해하기 때문이에요. Koala는 그 용도에 잘 맞아요.
설치된 Shopify 앱, 테마 이름과 버전, 추정 트래픽, 베스트셀러 제품(공개 신호 기반), 스토어 생성일, Shopify 플랜 감지를 보여 줘요. Chrome 확장 프로그램을 깔면 어떤 Shopify 스토어든 들어가는 순간 깔끔한 대시보드가 떠요.
주요 기능:
- Shopify 앱 감지(설치된 앱 확인)
- 테마 식별
- 트래픽 추정 및 베스트셀러 신호
- 스토어 생성일과 Shopify 플랜 감지
가격: 제한 조회가 되는 무료 요금제. Pro는 월 약 $9.99(약 1만 4천 원)부터 더 넓게 열려요.
한계: 대량 제품 데이터를 CSV/Sheets로 못 뽑아요. 가격표 제작이나 카탈로그 마이그레이션엔 못 써요. 오직 스토어가 어떻게 만들어졌고 어떤 도구를 쓰는지만 파악하는 용도예요.
추천 대상: 직접 스토어를 차리기 전에, 잘나가는 스토어가 어떤 앱과 테마를 쓰는지 조사하려는 드롭쉬퍼와 마케터.
4. Shopify Products Scraper & Exporter — Shopify용 CSV 내보내기
Meetanshi의 Shopify Products Scraper & Exporter는 한 가지에 특화된 도구예요. Shopify 가져오기 형식과 호환되는 CSV로 제품을 내보내는 데 집중해요. 스토어 정보(제품 수, 컬렉션 수)를 보여 주고, 전체 또는 선택 컬렉션만 내보낼 수 있으며, 제품당 여러 옵션과 이미지를 처리해요.
주요 기능:
- Shopify 가져오기용 CSV 출력
- 컬렉션 필터링(특정 컬렉션만 내보내기)
- 제품당 여러 옵션과 이미지 지원
- 스토어 제품/컬렉션 수 표시
가격: 무료(보고된 기준으로 CSV당 최대 500개 제품).
한계: /products.json 엔드포인트에 의존해요. 스토어가 이걸 꺼 놨다면 아무것도 못 가져와요. 하위 페이지 보강도, 예약도, 봇 차단 대응도 없어요. Shopify 스토어에만 묶이고(다른 플랫폼에선 안 됨), 500개 제한 때문에 큰 카탈로그는 여러 번 나눠 내보내야 할 수 있어요.
추천 대상: 소스 스토어의 products.json이 열려 있고, Shopify 네이티브 CSV 형식으로 데이터를 받아야 하는 Shopify 간 카탈로그 이전 작업.
5. Shopify Spy Scraper & Parser — 스토어 개요가 붙은 제품 내보내기
Shopify Spy / SPYScraper 계열 확장 프로그램은 기본 스토어 개요와 제품 내보내기를 합친 도구예요. 이 분야는 이름이 좀 뒤섞여 있어요(SPYScraper, Shopify Spy 등). 설치 전에 Chrome 웹스토어의 정확한 목록을 꼭 확인하세요.
이 도구는 "느린 모드"를 줘서 옵션 바코드, 세금 코드, 무게 단위, 이미지 alt 텍스트 같은 추가 필드를 모아요. CSV와 Excel로 내보낼 수 있고요.
주요 기능:
- 스토어 개요(기본 스파이 기능) + 제품 내보내기
- 설명을 포함한 세부 필드 추출용 "느린 모드"
- CSV 및 Excel 내보내기
- 일부 경쟁사 추적 기능(가격 변동, 제품 추가)
가격: 100개 제품까지 무료. 무제한은 정확한 버전에 따라 월 약 $5.90 또는 연 $58.80의 프리미엄이 붙어요.
한계: products.json에 의존하고, 봇 차단 대응이 제한적이며, 세부 모드에선 추출이 느려요. 비슷한 이름이 많아 어떤 버전을 까는지 헷갈리기 쉽고요.
추천 대상: 빠른 스토어 개요와 기본 제품 내보내기를 한 도구에서 다 하고 싶지만, 엔드포인트 의존성은 감수할 수 있는 사용자.
6. Web Scraper — 시각적 사이트맵 기반 스크래핑
Web Scraper는 이 목록에서 가장 유연한 무료 옵션이에요. 다만 유연한 만큼 학습 곡선이 따라와요. 무엇을 어떻게 가져올지 시각적 "사이트맵"으로 정의하게 해 주고, 페이지 이동 규칙과 CSS 선택자를 직접 잡아야 해요.
주요 기능:
- 스크래핑 로직을 정의하는 시각적 사이트맵 빌더
- 어떤 웹사이트에서도 작동(Shopify 전용 아님)
- 다중 페이지 스크래핑을 위한 페이지네이션 및 링크 추적 지원
- 예약을 위한 클라우드 버전 제공($50/월부터)
- 로컬 확장 프로그램은 CSV로 내보내고, 클라우드는 Google Sheets, JSON, S3, API 추가 지원
가격: 브라우저 확장 프로그램은 무료. 클라우드는 월 $50(약 6만 9천 원, 5,000 URL 크레딧)부터, Professional은 월 $100, Business는 월 $200부터예요.
한계: CSS 선택자를 직접 잡아야 해요. 테마가 업데이트되거나 레이아웃이 바뀌면 선택자가 깨지고요. 비기술 사용자에겐 학습 곡선이 가팔라요. Shopify 컬렉션 페이지 초기 설정만 해도 처음엔 15~30분이 걸릴 수 있어요.
추천 대상: 기본적인 웹 개념에 익숙하고, Shopify에만 묶이지 않는 유연한 무료 도구가 필요한 사용자.
7. Data Miner — 레시피 기반 데이터 추출
Data Miner는 "레시피" 시스템을 써요. 페이지에서 무엇을 가져올지 정의한 사전 제작 템플릿이나 사용자 정의 템플릿이죠. 커뮤니티가 레시피를 공유해서 Shopify 전용 레시피를 이미 찾을 수도 있어요.
주요 기능:
- 커뮤니티 공유 추출 레시피 60,000개 이상
- 사용자 정의 스크래핑 규칙을 만드는 시각적 인터페이스
- 페이지네이션 및 크롤링 지원
- CSV, Excel, Google Sheets(유료)로 내보내기
가격: 무료 플랜: 월 500페이지 스크래핑. Solo: 월 $19.99(500페이지, 사용자 정의 레시피, Google Sheets). Small Business: 월 $49(1,000페이지). Business Plus: 월 $200(9,000페이지).
한계: 스토어 레이아웃이 바뀌면 레시피가 깨져요. AI 기반 필드 감지가 없어요. 기본 하위 페이지 보강도 없고요. 안 쓴 크레딧은 이월되지 않아요. 무료 요금제는 가벼운 용도엔 넉넉하지만, 진지한 경쟁사 리서치엔 빠듯해요.
추천 대상: 코딩 없이 커뮤니티 템플릿과 적당한 유연성을 원하고, 여러 사이트 유형을 자주 긁는 사용자.
8. Octoparse — 클라우드 옵션이 있는 데스크톱 시각적 스크래퍼
Octoparse는 데스크톱 앱과 클라우드 서비스를 둘 다 주는 범용 시각적 스크래핑 플랫폼이에요. 클릭으로 워크플로를 짜고, 데이터 패턴을 자동 감지하며, 사전 제작 Shopify 템플릿도 줘요.
주요 기능:
- 시각적 노코드 워크플로 빌더
- 반복 스크래핑을 위한 클라우드 기반 예약 기능
- 사전 제작된 Shopify 템플릿
- 페이지네이션, 무한 스크롤, AJAX 콘텐츠 지원
- CSV, Excel, JSON, 데이터베이스, API로 내보내기
- 추가 기능: 주거용 프록시($3/GB), CAPTCHA 해결($1~1.50/천 회)
가격: 무료 플랜(10개 작업, 로컬 전용, 월 50K 행 내보내기 제한). 유료는 클라우드 추출, 예약, IP 로테이션, 통합을 더해요. 차단 방지 기능엔 추가 비용도 붙고요. 최신 세부 사항은 Octoparse 가격 페이지를 참고하세요.
한계: 복잡한 설정에선 데스크톱 앱 의존도가 높아요. AI 기반 도구보다 학습 곡선이 가파르고요. 클라우드/차단 방지 기능은 비용을 빠르게 올려요. Chrome 전용 솔루션보다 무겁게 느껴질 수 있어요.
추천 대상: 일정한 주기로 반복 스크래핑이 필요하고, 적당한 기술 이해도와 전용 스크래핑 플랫폼 예산이 있는 팀.
9. BuiltWith — 경쟁 조사용 기술 프로파일러
BuiltWith는 제품 스크래퍼가 아니라 기술 프로파일러예요. 웹사이트가 어떤 기술, 플랫폼, 도구를 쓰는지 식별해 줘요. 이커머스 플랫폼, 분석 도구, 결제 처리, 마케팅 도구, CDN, 호스팅, 특정 Shopify 앱까지요.
BuiltWith의 공개 데이터에 따르면 Shopify 웹사이트를 680만 개 넘게 추적하고 있어요. 그래서 Shopify 판매자를 겨냥해 영업 기회를 찾는 팀이나, 시장 기술 트렌드를 분석하는 리서처에게 든든한 도구예요.
주요 기능:
- 4억 1,400만+ 도메인의 기술 스택 식별(매주 업데이트)
- Shopify 전용: 설치된 앱, 픽셀, 결제 도구 감지
- Chrome 확장 프로그램으로 어떤 사이트든 즉시 기술 스택 표시
- 기술 사용 기반 리드 리스트 생성
- 리테일 및 키워드 리포트
가격: 개별 사이트 조회는 평생 무료. Basic: 월 $295(약 40만 원), Pro: 월 $495, Team: 월 $995.
한계: 제품 데이터는 안 뽑아요. 가격, 제품명, 이미지, 카탈로그 내보내기는 안 돼요. 순수한 기술 식별·영업 발굴 도구예요. 전체 접근 가격은 비싼 편이고요.
추천 대상: Shopify 판매처를 겨냥해 영업하는 팀(예: "Klaviyo + Shopify Plus를 쓰는 모든 스토어 보여 줘") 또는 시장 기술 채택 트렌드를 보는 연구자.
10. Wappalyzer — 가벼운 기술 스택 감지 도구
Wappalyzer는 BuiltWith와 비슷하지만 더 가볍고, 빠른 확인용으로 손이 잘 가요. 브라우저 확장 프로그램이 어떤 웹사이트든 CMS, 이커머스 플랫폼, 프레임워크, 분석 도구, 마케팅 도구, 결제 시스템을 즉시 잡아 줘요.
106개 카테고리에서 8,028개의 웹 기술을 추적하며, Shopify 앱과 테마도 포함돼요.
주요 기능:
- Chrome 확장 프로그램을 통한 즉시 기술 감지
- 깔끔하고 단순한 인터페이스
- 감지된 기술의 CSV 내보내기
- 유료 요금제에서 대량 조회 및 CRM 보강
- Shopify 앱 및 테마 감지
가격: 무료: 월 50회 기술 조회, 웹사이트 알림 5개. Pro: 월 $250(약 34만 원). Business: 월 $450. Enterprise: 월 $850+.
한계: 제품 데이터는 안 뽑아요. 심층 리서치에선 BuiltWith보다 세부 정보가 적고요. 순수한 기술 식별 도구예요.
추천 대상: 경쟁사를 살피거나 리드를 검증할 때 기술 스택을 빠르게 확인하고 싶을 때. 개별 조회에선 BuiltWith보다 가볍고 빨라요.
2026년 봇 차단 현실: 보호된 스토어에서도 도는 확장 프로그램은?
2026년의 많은 Shopify 스토어는 /products.json을 껐거나 Cloudflare 보호를 더했어요. Imperva 2025 Bad Bot Report에 따르면 악성 봇은 이제 전체 인터넷 트래픽의 37%, 리테일에선 봇 트래픽이 59%에 달해요. 스토어도 가만있지 않는 거죠.
그 JSON 엔드포인트에만 의존하는 확장 프로그램은 보호된 스토어에서 빈 데이터만 토해 내요. 저는 각 도구를 세 가지 상황에서 돌려 봤어요.
| 도구 | 열린 컬렉션 페이지 | products.json 사용 가능 | products.json 사용 불가 | 메모 |
|---|---|---|---|---|
| Thunderbit | ✅ | ✅ | ✅(렌더링된 페이지 읽기) | 브라우저 모드는 엔드포인트와 무관하게 보이는 페이지에서 작동 |
| Instant Data Scraper | ✅ | 해당 없음 | ✅(목록 데이터만) | 보이는 것만 가져오고 하위 페이지 데이터는 놓침 |
| Koala Inspector | ✅(기술 신호) | 해당 없음 | 해당 없음 | 스파이 도구, 다른 데이터 유형 |
| Shopify Products Scraper & Exporter | ✅ | ✅ | ❌ | JSON 엔드포인트 의존 |
| Shopify Spy/SPYScraper | ✅ | ✅ | 부분적/실패 | 제품 데이터는 엔드포인트 의존 |
| Web Scraper | ✅(설정 후) | 렌더링된 페이지 사용 가능 | ✅(선택자가 작동하면) | 엔드포인트가 아니라 보이는 페이지를 읽음 |
| Data Miner | ✅(레시피 필요) | 보이는 페이지 사용 가능 | ✅(레시피가 작동하면) | 보이는 페이지를 읽음 |
| Octoparse | ✅(워크플로 후) | 렌더링된 페이지 사용 가능 | ✅(워크플로가 설정되면) | 클라우드 차단 방지 기능 제공 |
| BuiltWith | 기술 감지만 가능 | 해당 없음 | 해당 없음 | 다른 범주 |
| Wappalyzer | 기술 감지만 가능 | 해당 없음 | 해당 없음 | 다른 범주 |
핵심은 이거예요. 렌더링된 페이지를 읽는 브라우저 기반 스크래퍼(Thunderbit 브라우저 모드, Web Scraper, Data Miner 같은 도구)는 사람이 볼 수 있는 어떤 페이지에서도 작동해요. 엔드포인트 전용 도구는 스토어가 JSON 직접 접근을 막으면 실패하고요.
도구를 고르기 전에 대상 스토어부터 확인해 보세요. 브라우저에서 storename.myshopify.com/products.json에 들어가 보면 돼요. 제품 데이터가 뜨면 엔드포인트 의존 도구가 잘 돌 거예요. 오류나 빈 페이지가 뜨면 렌더링된 페이지를 읽는 스크래퍼가 필요해요.
속도와 정확도 벤치마크: 제품 500개 Shopify 스토어 테스트
실제 성능을 재려고 같은 약 500개 제품의 공개 Shopify 스토어에 각 스크래퍼를 돌려 봤어요. 결과는 이랬어요.
| 확장 프로그램 | 시간(500개 제품) | 정확도 | 설명 수집? | 모든 옵션 수집? | 수동 수정 필요 |
|---|---|---|---|---|---|
| Thunderbit (클라우드) | 약 4분 | 약 97% | ✅(하위 페이지 통해) | ✅ | 0 |
| Thunderbit (브라우저) | 약 18분 | 약 97% | ✅(하위 페이지 통해) | ✅ | 0 |
| Instant Data Scraper | 약 12분 | 약 89% | ❌ | 부분적 | 2(페이지네이션 문제) |
| Shopify Products Scraper & Exporter | 약 3분 | 약 94% | 부분적(JSON 필드) | ✅ | 0(엔드포인트가 작동할 때) |
| Shopify Spy/SPYScraper(느린 모드) | 약 20분 | 약 91% | ✅(느린 모드) | ✅ | 1 |
| Web Scraper | 약 25분(설정 포함) | 약 92% | ❌(하위 페이지 설정 없을 때) | 부분적 | 3(선택자 수정) |
| Data Miner | 약 15분 | 약 88% | ❌ | 부분적 | 2(레시피 조정) |
| Octoparse | 약 10분(워크플로 후) | 약 93% | ✅(링크 추적 사용 시) | ✅ | 1(워크플로 수정) |
눈에 띄는 점 몇 가지예요.
- Thunderbit 클라우드 모드는 50페이지를 동시에 처리해서 보강된 전체 데이터셋 기준으로 가장 빨랐어요. 브라우저 모드는 더 느리지만 세션 컨텍스트가 필요한 스토어에서 작동하고요.
- 엔드포인트 의존 도구(Shopify Products Scraper)는 엔드포인트가 살아 있을 땐 가장 빨랐지만, 보호된 스토어 버전에선 아무것도 못 가져왔어요.
- 무료 도구(Instant Data Scraper, Web Scraper)는 손이 더 많이 갔고, 완성도도 떨어졌어요.
- 여기서 말하는 정확도는 "30개 제품 감사 샘플에서 올바르게 수집된 필드 비율"이에요. 가장 흔한 실패는 옵션 누락, 설명 잘림, 잘못된 이미지 URL이었어요.
경쟁사 가격과 재고를 시간 흐름에 따라 추적하기
한 번만 긁으면 스냅샷 하나로 끝나요. 하지만 경쟁 정보를 제대로 살리려면 반복 스냅샷이 필요해요. 그래야 이런 질문에 답할 수 있거든요.
- 어떤 제품이 빨리 팔리나? (스크래핑 사이에 재고가 줄어듦)
- 경쟁사가 계절에 맞춰 가격을 손보나?
- 언제 SKU를 추가하거나 빼나?
- 대략적인 판매 속도는 어느 정도인가?
제 경험상, 스크래핑에서 가장 큰 가치를 뽑는 팀은 모니터링을 자동화하고 사람의 시간을 수집이 아니라 분석과 실행에 쓰는 팀이에요.
이 도구들의 예약 기능 현황은 이래요.
| 도구 | 예약 스크래핑? | 간격 옵션 | 출력 대상 |
|---|---|---|---|
| Thunderbit | ✅ | 자연어("매주 월요일 오전 9시") | Sheets, Airtable, Notion, Excel |
| Instant Data Scraper | ❌ | — | — |
| Koala Inspector | 제한적(알림, 대량 아님) | — | — |
| Shopify Products Scraper & Exporter | ❌ | — | — |
| Shopify Spy/SPYScraper | 제한적/버전별 상이 | — | — |
| Web Scraper | ✅(클라우드, 월 $50부터) | 시간별/일별/주별 | CSV, Sheets, S3, API |
| Data Miner | ✅(유료 요금제) | 자동 크롤 작업 | CSV, Excel, Sheets |
| Octoparse | ✅(클라우드/프리미엄) | 유연한 예약 | CSV, Excel, JSON, DB, API |
| BuiltWith | 알림만 제공(기술 변경) | — | — |
| Wappalyzer | 알림만 제공(기술 변경) | — | — |
제가 실제로 세팅한 실용적인 워크플로는 이래요. Thunderbit이 경쟁사의 "신상품" 컬렉션을 매주 돌려 Google Sheets로 내보내고, 저는 간단한 조건부 서식으로 가격 변동과 새로 추가/삭제된 제품을 강조해요. 전체 설정은 5분쯤 걸렸고, 매달 수동 확인 시간을 몇 시간씩 아껴 줘요.
Shopify 스크래핑의 실제 비용: 무료 요금제, 크레딧, 정액제
저는 "월 $99를 내는데도 크레딧 한도에 계속 걸려 지쳤다" 같은 답답한 포럼 글을 충분히 봤어요. 그래서 가격 투명성이 왜 중요한지 잘 알아요. 5개 경쟁사 스토어에서 월 1,000개 제품을 처리한다고 했을 때, 각 도구의 실제 비용은 이래요.
| 도구 | 무료 요금제 | 무료로 실제로 얻는 것 | ~1,000개 제품/월 비용 | 가격 모델 |
|---|---|---|---|---|
| Thunderbit | 6페이지 | 약 600행(페이지 밀도에 따라 다름) | 약 $38/월(Pro, 3,000 크레딧) | 크레딧/행 구독형 |
| Instant Data Scraper | 무제한 | 보이는 목록 데이터 전체 | $0 | 완전 무료 |
| Koala Inspector | 제한된 조회 | 앱/테마만, 대량 내보내기 없음 | 제품 스크래핑에는 해당 없음 | 구독형(Pro 월 $9.99) |
| Shopify Products Scraper & Exporter | CSV당 500개 제품 | 엔드포인트가 작동할 때 전체 제품 데이터 | $0 | 무료 확장 프로그램 |
| SPYScraper | 100개 제품 | 기본 제품 내보내기 | 약 $5.90/월 | 구독형 |
| Web Scraper | 로컬 무료 | 무제한 로컬 스크래핑 | 로컬은 $0, 예약이 필요하면 월 $50 | URL-크레딧 클라우드 구독형 |
| Data Miner | 월 500페이지 | 약 500페이지 추출 | 사용량에 따라 월 $19.99~$49 | 페이지 스크래핑 구독형 |
| Octoparse | 10개 작업, 로컬 | 월 50K 행 내보내기, 로컬 전용 | 무료도 가능하지만 클라우드는 비용 추가 | 작업/클라우드/애드온 모델 |
| BuiltWith | 무료 조회 | 개별 사이트 기술 프로필 | 제품 스크래핑에는 해당 없음 | 테크노그래픽 구독형(월 $295+) |
| Wappalyzer | 월 50회 조회 | 기본 기술 감지 | 제품 스크래핑에는 해당 없음 | 테크노그래픽 구독형(월 $250+) |
솔직히 말하면 무료 도구는 돈은 안 들지만 설정과 손작업에 시간이 들어요. 유료 도구는 돈이 들지만 시간을 아껴 주고요. 무료 도구가 놓친 데이터를 손으로 채우거나 선택자를 고치는 데 15~30분을 쓴다고 잡고, 제품당 실제 비용을 따져 보세요.
Thunderbit의 내보내기(CSV, Sheets, Airtable, Notion)는 요금제와 상관없이 무료예요. 한 번 긁은 뒤 데이터를 꺼내는 데는 유료 장벽이 없어요. 크레딧은 추출에 쓰이지, 내보내기엔 안 쓰여요.
나란히 보는 비교: Shopify 스크래퍼 Chrome 확장 프로그램 10개
| 도구 | 가장 적합한 용도 | products.json 필요? | 봇 차단 대응 | 하위 페이지 보강 | 예약 스크래핑 | 내보내기 옵션 | 가격 |
|---|---|---|---|---|---|---|---|
| Thunderbit | 깊은 제품 데이터, 비개발자 | 아니요(렌더링된 페이지 읽음) | 브라우저 모드가 강함 | ✅ AI 기반 | ✅ 자연어 | Excel, CSV, Sheets, Airtable, Notion, JSON | 무료 체험, 월 약 $9부터 |
| Instant Data Scraper | 빠른 무료 내보내기 | 아니요(보이는 페이지 읽음) | 없음 | ❌ | ❌ | CSV, XLSX | 무료 |
| Koala Inspector | 스토어 기술/앱 조사 | 해당 없음(스파이 도구) | 해당 없음 | 해당 없음 | 제한적 알림 | 앱 내 대시보드 | 무료, Pro 월 약 $9.99 |
| Shopify Products Scraper | Shopify CSV 마이그레이션 | 예 | 없음 | ❌ | ❌ | Shopify 형식 CSV | 무료(500개 제품) |
| Shopify Spy/SPYScraper | 제품 내보내기 + 개요 | 예(대부분) | 제한적 | 부분적(느린 모드) | 제한적 | CSV, Excel | 100개 제품 무료, 월 약 $5.90 |
| Web Scraper | 유연한 다중 사이트 스크래핑 | 아니요(렌더링된 페이지 읽음) | 내장 없음 | 수동 설정 필요 | ✅(클라우드, 월 $50+) | CSV, XLSX, JSON, Sheets, S3 | 로컬 무료, 클라우드 월 $50부터 |
| Data Miner | 레시피/템플릿 기반 추출 | 아니요(보이는 페이지 읽음) | 없음 | ❌ | ✅(유료) | CSV, Excel, Sheets | 월 500페이지 무료, 월 $19.99부터 |
| Octoparse | 예약 가능한 시각적 스크래핑 | 아니요(렌더링된 페이지 읽음) | 유료 애드온 제공 | ✅(워크플로 사용 시) | ✅(클라우드) | CSV, Excel, JSON, DB, API | 로컬 무료, 클라우드 유료 |
| BuiltWith | 기술 기반 영업 발굴 | 해당 없음(기술 프로파일러) | 해당 없음 | 해당 없음 | 기술 알림 | 리포트, CSV, API | 무료 조회, 월 $295부터 |
| Wappalyzer | 빠른 기술 스택 확인 | 해당 없음(기술 프로파일러) | 해당 없음 | 해당 없음 | 기술 알림 | CSV, JSON | 월 50회 무료, 월 $250부터 |
어떤 Shopify 스크래퍼 Chrome 확장 프로그램을 골라야 할까?
10개를 다 돌려 본 뒤, 상황별 추천은 이래요.
"최소 설정, 코딩 없이 깊은 제품 데이터가 필요해요." → Thunderbit부터 시작하세요. AI 필드 추천과 하위 페이지 보강 덕분에 선택자를 안 잡아도 완전한 데이터를 얻어요. 정기 경쟁사 리서치엔 크레딧 모델도 잘 맞고요.
"표준 스토어에서 빠르고 무료로 내보내기만 하면 돼요." → Instant Data Scraper. 비용도 설정도 없어요. 다만 목록 페이지 데이터만 얻는다는 점은 받아들여야 해요.
"경쟁사가 어떤 앱과 테마를 쓰는지 알고 싶어요." → Shopify 전용 인사이트는 Koala Inspector, 빠른 크로스플랫폼 기술 확인은 Wappalyzer.
"Shopify 가져오기용 CSV가 필요해요." → Shopify Products Scraper & Exporter. 단, 소스 스토어의 products.json이 열려 있어야 해요.
"시각적 선택자를 다룰 줄 알고, 여러 사이트에서 유연하게 쓰고 싶어요." → Web Scraper(무료) 또는 Octoparse(유료, 예약 포함).
"SaaS 제품을 위해 Shopify 판매자를 발굴 중이에요." → 기술 기반 리드 리스트는 BuiltWith, 가벼운 개별 조회는 Wappalyzer.
"가격과 재고를 꾸준히 모니터링해야 해요." → Thunderbit(예약 설정이 가장 쉬움), Web Scraper Cloud, 또는 Octoparse Cloud.
대부분의 이커머스 팀이 경쟁사 조사를 할 땐 제품 데이터 추출용 Thunderbit와 기술 스택 조사용 Koala Inspector 또는 Wappalyzer를 같이 쓰는 걸 추천해요. 이 조합이면 "무엇을 얼마에 파나?"와 "스토어는 어떻게 만들어졌나?"를 둘 다 커버해요.
AI Shopify 스크래핑이 실제로 어떤지 궁금하다면, Thunderbit 무료 체험으로 실제 대상 스토어에서 바로 테스트해 보세요. 도구가 다양한 상황을 어떻게 다루는지 더 보려면 Thunderbit YouTube 채널도 확인해 보세요.
자주 묻는 질문
1. Shopify 스토어의 데이터를 스크래핑하는 건 합법인가요?
공개적으로 접근 가능한 제품 데이터(가격, 제품명, 누구나 보는 이미지)를 긁는 건 일반적으로 비교적 낮은 위험으로 봐요. 특히 미국의 hiQ v. LinkedIn 판결처럼 공개 데이터 접근을 지지한 사례 이후엔 더 그렇고요. 다만 robots.txt, 스토어 이용약관, 요청 속도 제한은 늘 존중하고, 개인 정보나 비공개 데이터는 긁으면 안 돼요. 로그인 벽, CAPTCHA, 기술적 접근 제어도 우회하지 마세요. 이건 실무 지침이지 법률 자문은 아니니, 구체적 상황은 법률 전문가와 상의하세요.
2. Shopify 스크래퍼 확장 프로그램은 모든 Shopify 스토어에서 작동하나요?
아니요. 일부 스토어는 /products.json 엔드포인트를 껐거나 Cloudflare 보호를 써요. 그 JSON 엔드포인트에만 의존하는 도구(예: Shopify Products Scraper & Exporter)는 보호된 스토어에서 실패해요. Thunderbit처럼 렌더링된 페이지, 즉 일반 브라우징에서 보이는 그 페이지를 읽는 브라우저 기반 스크래퍼는 실제로 보이는 내용에서 추출하기 때문에 이런 상황을 더 잘 다뤄요.
3. 스크래핑한 Shopify 데이터를 Google Sheets나 Excel로 내보낼 수 있나요?
네. 대부분의 스크래퍼는 최소한 CSV와 Excel 내보내기를 지원해요. Thunderbit은 추가 비용 없이 Google Sheets, Airtable, Notion으로도 바로 내보낼 수 있고요. Web Scraper Cloud와 Data Miner(유료)도 Google Sheets를 지원해요. 스파이 도구(Koala, BuiltWith, Wappalyzer)는 제품 카탈로그가 아니라 기술 데이터를 내보내요.
4. Shopify 스크래퍼와 Shopify 스파이 도구의 차이는 뭔가요?
스크래퍼는 대량 제품 카탈로그 데이터—제품명, 가격, 설명, 이미지, 옵션—를 스프레드시트로 뽑아 경쟁 분석, 가격 조사, 카탈로그 이전에 써요. 스파이 도구는 설치된 앱, 쓰는 테마, 돌아가는 분석·결제 도구 같은 스토어의 기술 스택을 보여 줘서 전략 조사와 영업 발굴에 도움을 줘요. 대부분의 이커머스 팀은 둘 다 갖추면 좋아요.
5. 무료로 몇 개 제품까지 스크래핑할 수 있나요?
도구마다 차이가 커요. Instant Data Scraper는 제품 제한 없이 완전 무료지만 기능은 제한적이에요. Thunderbit 무료 요금제는 약 6페이지 추출을 주고요. Shopify Products Scraper & Exporter는 무료로 CSV당 최대 500개, SPYScraper는 100개 제품을 줘요. Data Miner는 월 500페이지, Web Scraper 로컬 확장 프로그램은 무제한 로컬 사용이 무료고요. 매달 수천 개 제품을 다루는 진지한 리서치라면 유료로 갈 가능성이 높아요. 다만 직접 모으느라 아끼는 시간을 꼭 함께 따져 보세요.
Thunderbit로 AI Shopify 스크래핑 체험하기 Get Started Free
더 알아보기
