지난주에 한 사용자가 이런 메시지를 보냈어요. "금요일까지 경쟁사 Shopify 스토어 14곳에서 가격, 설명, 옵션 데이터를 뽑아야 해요." 상품 페이지로 따지면 약 4,000개예요. 손으로 복사해 붙이기엔 어림도 없죠.
Shopify 스토어에서 상품 데이터를 빼 본 적 있다면 — 가격, 이미지, 설명, 옵션, 리뷰까지 — 그 답답함을 잘 아실 거예요. 2026년 기준 실제로 돌아가는 Shopify 스토어가 280만 개를 넘는데, 그 어디에도 데이터를 한 번에 내려받는 버튼은 없어요. 한편 기업의 72%는 경쟁사 가격을 적극적으로 들여다본다고 답했어요. 이커머스 대행사들은 옵션과 이미지가 붙은 상품 하나를 손으로 올리는 데만 15~30분이 걸린다고 해요. 상품이 몇백 개만 돼도 그 순간 일주일이 통째로 날아가요.
그래서 Shopify 스크래퍼 Chrome 확장은 이커머스 도구상자의 기본 품목이 됐어요. 경쟁사 리서치, 드롭쉬핑 상품 발굴, 카탈로그 이전까지 쓰임이 다양하죠. 그런데 대부분의 "최고의 스크래퍼" 글은 기능만 나열하고, 정작 실제 Shopify 스토어에 돌렸을 때 뭐가 나오는지는 안 보여 줘요. 이 글은 달라요. 진짜 스토어에 확장 8개를 돌려 보고, 봇 차단 장벽도 직접 마주하면서, 어떤 도구가 필요한 깊이까지 데이터를 가져오는지, 어떤 도구가 겉만 훑고 끝나는지 확인했어요.
이커머스 팀이 Shopify 스크래퍼 Chrome 확장을 찾는 이유
Shopify 스토어는 장사에 쓸모 있는 상품 데이터의 노다지예요. 하지만 외부 입장에선 CSV를 바로 못 내려받아요. 보이는 건 고객이 보는 가게 페이지뿐이죠. 이 가게 페이지를 바로 쓸 수 있는 데이터로 바꾸려면 스크래퍼가 필요해요. 그리고 쓰임새는 "상품명 목록 좀 필요해요" 수준보다 훨씬 넓어요.
진짜 질문은 이거예요. 어떤 데이터를, 어떤 업무 흐름에 맞춰 가져올 거냐예요. 가장 흔한 이커머스 쓰임새가 어떤 데이터 항목과 연결되는지 하나씩 볼게요.
경쟁사 가격 리서치
필요한 데이터: 상품 제목, 가격, 비교가, 옵션별 가격. 다이내믹 프라이싱 전략의 뼈대예요. 경쟁사가 얼마 받는지뿐 아니라, 어떻게 할인하고 묶어 파는지, 사이즈·색상별로 가격을 어떻게 매기는지까지 알아야 하니까요.
드롭쉬핑 상품 발굴
필요한 데이터: 제목, 썸네일만이 아니라 모든 이미지, 전체 설명, 게시일. 게시일을 최신순으로 정렬하면 시장이 포화되기 전에 뜨는 상품이나 신상을 더 빨리 잡을 수 있어요.
내 스토어로 카탈로그 가져오기
필요한 데이터: 제목, 본문 HTML, 모든 이미지, 옵션, SKU, 가격. 이왕이면 Shopify 가져오기용 CSV 형식이면 좋고요. 이걸 깔끔하게 만들어 주는 도구가 다 있는 건 아니에요.
판매 속도 추정
필요한 데이터: 상품 제목과 재고 수량을 시간에 따라 추적한 데이터. 재고를 일정 주기로 스냅샷처럼 찍어 두면 경쟁사 판매 속도를 어림잡을 수 있어요. 직접 판매 데이터가 없을 때 꽤 쓸 만한 대체 지표예요.
리드 생성(스토어 운영자 찾기)
필요한 데이터: 스토어 이름, 연락 이메일, 전화번호, 그리고 가끔은 그 스토어가 쓰는 앱이나 기술 스택. 영업팀은 이걸로 업종이나 기술별로 나눈 영업 대상 리스트를 만들어요.
간단한 참고 표는 아래와 같아요.
| 활용 사례 | 필요한 핵심 데이터 항목 | 추천 작업 흐름 |
|---|---|---|
| 경쟁사 가격 리서치 | 제목, 가격, 비교가, 옵션 가격 | 목록 페이지 스크래핑 + 옵션용 하위 페이지 보강 |
| 드롭쉬핑 상품 발굴 | 제목, 가격, 이미지(전체), 설명, 게시일 | 하위 페이지 스크래핑 + 최신 게시일순 정렬 |
| 내 스토어로 카탈로그 가져오기 | 제목, 본문 HTML, 이미지, 옵션, SKU, 가격 | 전체 하위 페이지 스크래핑 → Shopify 가져오기용 CSV로 내보내기 |
| 판매 추정 | 제목, 재고 수량(시간 경과) | 예약 스크래핑 → Google Sheets 추적 |
| 리드 생성(스토어 운영자) | 스토어 이름, 이메일, 전화번호, 사용 앱 | 스토어 연락처 페이지 스크래핑 + 이메일/전화 추출기 |
이 8개 Shopify 스크래퍼 Chrome 확장, 이렇게 평가했어요
확장 8개를 전부 설치해서 똑같은 실제 Shopify 스토어 세트에 돌렸어요. 공개 스토어, Cloudflare로 보호된 스토어, products.json이 꺼진 스토어까지 넣었죠. 기능 목록만 본 게 아니에요. 진짜 Shopify 컬렉션 페이지에서 "스크래핑"을 눌렀을 때 무슨 일이 벌어지는지 보고 싶었어요.
Shopify에 특히 중요한 8가지 기준과 그 이유는 아래와 같아요.
| 기준 | Shopify 스크래핑에서 중요한 이유 |
|---|---|
| 설정의 쉬움 | 비기술적인 드롭쉬퍼도 5분 안에 스크래핑을 시작할 수 있나요? |
| 추출되는 데이터 항목 | 제목, 가격, 이미지, 설명, 옵션, 그리고 리뷰까지 가져오나요, 아니면 표면적인 데이터만 가져오나요? |
| 하위 페이지 보강 | 목록 페이지를 스크래핑한 뒤, 각 상품 페이지를 자동으로 방문해 전체 세부 정보를 가져올 수 있나요? |
| 페이지네이션 처리 | 첫 페이지를 넘어 상품을 계속 스크래핑할 수 있나요? (페이지 이동 클릭 또는 무한 스크롤) |
| 봇 차단 대응력 | Cloudflare Turnstile이나 Shopify 봇 보호를 깨지지 않고 처리하나요? |
| 내보내기 형식 | CSV, Excel, Google Sheets, Airtable, Notion, Shopify 가져오기용 CSV? |
| 예약/반복 스크래핑 | 시간이 지나면서 가격이나 재고 변화를 자동으로 모니터링할 수 있나요? |
| 가격 투명성 | 무료 플랜 한도, 크레딧 체계, 정액 요금 — 그리고 실제로 무엇을 얻는지 |
이 기준으로 각 도구가 어땠는지 하나씩 볼게요.
1. Thunderbit — 비전문가를 위한 AI 기반 Shopify 스크래퍼
Thunderbit은 Thunderbit이 직접 만든 도구예요. 코드도, CSS 선택자 설정도, 20분짜리 세팅도 없이 깊이 있는 상품 데이터를 원하는 비즈니스 사용자를 위해 만들었어요. Shopify 스토어에서의 작업도 진짜 두 번 클릭이면 끝나요. 컬렉션 페이지를 열고 "AI 필드 제안"을 누르면 AI가 페이지를 읽고 열(제목, 가격, 이미지 등)을 짚어 줘요. 이어서 "스크래핑"을 누르면 목록 페이지 작업은 끝이에요.
그런데 대부분의 경쟁 글이 놓치는 진짜 차이는 그다음에 나와요.
하위 페이지 보강: 판을 바꾸는 기능
목록 페이지를 긁은 뒤 "하위 페이지 스크래핑"을 눌러요. 그러면 Thunderbit AI가 각 상품 URL을 하나씩 방문해, 상세 페이지 데이터를 원래 표에 덧붙여 줘요. 전체 설명, 모든 갤러리 이미지, 옵션, SKU, 리뷰 수까지요. 이 단계가 얕은 스프레드시트를 실제로 쓸 수 있는 경쟁 리서치 데이터셋으로 바꿔 줘요.
이게 왜 중요한지, 전후가 어떻게 다른지는 아래 전용 섹션에서 더 자세히 풀게요.
Shopify 스크래핑에서 강한 점
- AI 필드 제안이 Shopify 페이지를 읽고 알맞은 열 구조를 자동으로 짜 줘요. CSS 선택자도, 수동 설정도 없어요
- 하위 페이지 스크래핑이 목록 페이지에서 빠지기 쉬운 데이터(전체 설명, 옵션, 이미지 갤러리, 리뷰)를 채워 줘요
- 클라우드 스크래핑 모드는 공개 스토어에서 빠른 대량 추출에 좋고, 브라우저 스크래핑 모드는 Cloudflare로 보호되거나 로그인이 필요한 스토어에 좋아요
- 페이지네이션 처리(클릭 기반 및 무한 스크롤)
- 예약 스크래핑으로 가격·재고를 상시 모니터링할 수 있어요 — 일정은 "매주 월요일 오전 9시"처럼 자연어로 적으면 돼요
- 무료 이메일/전화 추출기가 있어 리드 생성에도 써요
- Excel, Google Sheets, Airtable, Notion, CSV, JSON으로 내보내요 — Shopify 가져오기 친화적 형식도 포함해서요
- 필드 AI 프롬프트로 열마다 맞춤 지시를 넣을 수 있어요(예: "상품 유형 3개로 분류", "설명을 영어로 번역")
아쉬운 점
- 크레딧 기반 요금제라, 수만 개 상품급 초대형 스크래핑은 유료 플랜이 필요해요
- 아주 단순한 페이지에선 AI 처리 때문에 템플릿 기반 스크래퍼보다 행당 몇 초 더 걸릴 수 있어요
가격
- 무료 플랜: 6페이지(무료 체험 시 최대 10페이지), 모든 내보내기 무료
- 스타터: 월 15달러(약 2만 원), 월 500크레딧
- 프로페셔널 플랜: 월 38달러(약 5만 원, 3,000크레딧)부터 최대 월 249달러(약 33만 원, 20,000크레딧)
- 크레딧 규칙: 웹 스크래핑은 출력 행 1개 = 1크레딧, 하위 페이지 스크래핑은 출력 행 1개 = 2크레딧, 내보내기는 늘 무료
추천 대상: 최소한의 설정으로 가장 깊은 Shopify 상품 데이터를 원하고, 시간을 두고 경쟁사를 모니터링하고 싶은 비기술 이커머스 팀.
Shopify 스크래핑용 Thunderbit 사용해 보기
2. Instant Data Scraper — 설정 없는 자동 감지 옵션
Instant Data Scraper는 웹페이지의 표 형식 데이터를 휴리스틱 알고리즘으로 자동 감지하는 무료 Chrome 확장이에요. 설정이 아예 없어요. Shopify 컬렉션 페이지를 열고 확장 아이콘을 누르면, 상품 데이터를 표로 잡아 보여 주려고 시도해요.
직접 돌려 보니, 표준 Shopify Dawn 테마 컬렉션 페이지에선 잘 됐어요. 제목, 가격, 썸네일 이미지 URL을 몇 초 만에 잡았죠. 하지만 표준이 아닌 레이아웃의 스토어에선 상품 대신 내비게이션 링크나 푸터 콘텐츠를 가져오기도 했어요. 결과를 눈으로 한 번 봐야 해요.
Shopify 스크래핑에서 강한 점
- 사용량 제한 없이 완전 무료
- 자동 감지라 설정 시간이 거의 0이에요 — 빠른 일회성 내보내기에 좋아요
- 페이지네이션 지원("다음 페이지"를 자동으로 눌러 줘요)
- CSV와 XLSX로 내보내요
아쉬운 점
- 비표준 레이아웃 스토어에선 자동 감지가 들쑥날쑥해요
- 하위 페이지 보강이 없어요. 목록 페이지에 있는 것(제목, 가격, 썸네일)만 가져오고, 전체 설명·옵션·리뷰는 못 가져와요
- AI가 없어서 데이터를 정리하거나 라벨링하거나 변환하지 못해요
- 예약 기능 없음, 클라우드 스크래핑 없음
- Google Sheets, Airtable, Notion으로 바로 내보내는 기능이 없어요
가격
- 완전 무료
추천 대상: 표준 Shopify 스토어에서 보이는 목록 페이지 데이터를 빠르고 무료로, 설정 없이 내보내고 싶은 사람.
3. Web Scraper — 시각적 사이트맵 빌더
Web Scraper(webscraper.io)는 페이지에서 요소를 골라 스크래핑 흐름을 정의하는 "사이트맵"을 만드는, 클래식한 포인트 앤 클릭 Chrome 확장이에요. Shopify에선 상품 제목, 가격, 이미지 등을 클릭해 사이트맵을 만들고, 페이지네이션과 링크 추적 규칙도 정의해요.
Shopify 스크래핑에서 강한 점
- 시각적 선택자 빌더가 자동 감지 도구보다 더 많은 제어권을 줘요
- 하위 페이지(상품 상세) 링크를 따라갈 수 있어요 — 다만 사이트맵에서 부모-자식 선택자를 손으로 잡아야 해요
- 제대로 설정하면 페이지네이션을 처리해요
- 브라우저 기반 무료 스크래핑; 유료 클라우드 스크래핑 플랜도 있어요(월 50달러부터)
- CSV로 내보내고, 클라우드 플랜은 Google Sheets와 다른 형식도 지원해요
아쉬운 점
- 설정 시간이 더 들어요. 새 Shopify 스토어에서 부모-자식 선택자로 사이트맵 만드는 데 15분쯤 걸렸어요
- 하위 페이지 스크래핑은 링크 선택자와 자식 사이트맵을 손으로 설정해야 해요. 원클릭 보강이 아니에요
- Shopify 스토어가 레이아웃이나 CSS 클래스를 바꾸면 사이트맵이 깨질 수 있어요
- AI 기반 대안보다 익히는 데 시간이 더 들어요
가격
- 브라우저 확장 프로그램: 무료
- 클라우드 플랜: Project 월 50달러, Professional 월 100달러, Scale 월 200달러부터
추천 대상: 스크래핑 흐름을 세밀하게 제어하고 싶고, 레시피를 직접 만드는 게 부담 없는 기술 사용자.
4. Data Miner — 레시피 기반 스크래퍼
Data Miner(dataminer.io)는 페이지에 적용하는 사전 제작·사용자 정의 스크래핑 템플릿, 즉 "레시피"를 중심에 둔 도구예요. 공개 레시피 라이브러리도 있어서 다른 사용자가 공유한 Shopify 템플릿을 찾을 수도 있고, 페이지에서 요소를 골라 직접 만들 수도 있어요.
Shopify 스크래핑에서 강한 점
- 다른 사용자가 공유한 사전 제작 Shopify 템플릿이 레시피 라이브러리에 있을 수 있어요
- 사용자 정의 스크래핑 구성을 위한 시각적 레시피 빌더가 있어요
- 레시피 설정으로 페이지네이션을 처리해요
- CSV, Excel, Google Sheets, TSV로 내보내요
- 목록 페이지를 방문한 뒤 상세 페이지까지 가는 크롤 워크플로가 있어요
아쉬운 점
- 무료 플랜은 월 500페이지로 묶여요
- 레시피가 CSS 선택자 기반이라, 스토어 레이아웃이 바뀌면 깨져요
- AI 기반 필드 제안이나 데이터 변환 기능이 없어요
- 상세 페이지용 원클릭 하위 페이지 보강 워크플로가 없어요. 별도 크롤 레시피가 필요해요
- 예약 크롤은 있지만, 예약 경험이 가장 간단한 편은 아니에요
가격
- 무료: 월 500페이지
- Solo: 월 19.99달러
- Small Business: 월 49달러
- Business: 월 99달러
- Business Plus: 월 200달러
추천 대상: 템플릿 중심 작업을 좋아하고, 자주 쓰는 사이트에서 설정을 빠르게 시작할 레시피 라이브러리가 필요한 사용자.
5. Simplescraper — 가벼운 추출기
Simplescraper(simplescraper.io)는 단순함을 앞세운 미니멀 Chrome 확장이자 클라우드 기반 스크래퍼예요. Shopify 페이지에서 데이터 요소를 누르면 Simplescraper가 CSS 선택자를 만들어 일치하는 데이터를 뽑아요.
Shopify 스크래핑에서 강한 점
- 깔끔하고 미니멀한 인터페이스 — 배우기 쉬워요
- 예약 및 대량 작업용 클라우드 스크래핑 제공
- 추출 데이터를 워크플로에 엮고 싶은 개발자를 위한 API 접근 제공
- CSV, JSON, Google Sheets, Airtable, 웹훅으로 내보내기 가능
- 상세 페이지 링크를 따라가는 딥 스크래핑 개념 제공
- 세션 민감형 스토어를 위한 로그인 지원 워크플로 가능
아쉬운 점
- 수동 선택자 기반이라 AI로 필드를 자동 감지하지 못해요
- 하위 페이지 스크래핑엔 추가 설정이 필요해요
- Web Scraper나 Data Miner보다 커뮤니티가 작고 사전 제작 템플릿도 적어요
- 무료 플랜: 100크레딧(자바스크립트 렌더링 페이지 1개 = 2크레딧)
- 유료 플랜 가격 정보는 공식 사이트에서 동종 서비스보다 덜 투명해요
가격
- 무료: 100크레딧
- 유료 플랜: G2 가격 데이터 기준으로, 외부 자료에선 Plus 약 월 39달러, Pro 약 월 70달러, Premium 약 월 150달러로 안내돼요
추천 대상: AI 기반 필드 감지는 필요 없고, 가볍고 현대적인 클라우드 스크래퍼와 좋은 연동을 원하는 사용자.
6. Octoparse — 데스크톱 기반 Chrome 확장
Octoparse(octoparse.com)는 주로 데스크톱 애플리케이션이고, 함께 쓰는 Chrome 확장이 있어요. 시각적 워크플로 빌더와 인기 사이트용 사전 제작 템플릿을 제공하고, Shopify 전용 스크래핑 튜토리얼도 들어 있어요.
Shopify 스크래핑에서 강한 점
- 흔한 작업용 사전 제작 Shopify 템플릿 제공
- IP 회전, 예약 스크래핑, 클라우드 추출 같은 고급 기능이 있는 강력한 데스크톱 앱
- 페이지네이션, 무한 스크롤, AJAX 로드 콘텐츠를 잘 처리해요
- 이 리스트에서 문서화된 봇 차단 대응이 가장 강해요. 자동 CAPTCHA 처리도 포함해서요
- CSV, Excel, JSON, HTML, XML, 데이터베이스, Google Sheets로 내보내요
아쉬운 점
- Chrome 확장만으로는 제한적이에요. 강력한 기능 대부분은 데스크톱 앱이 필요해요
- 시각적 워크플로 빌더가 있어서 데스크톱 앱을 익히는 데 시간이 더 들어요
- 무료 플랜은 제한적이라, 의미 있게 쓰려면 유료 플랜이 필요해요
- 순수 Chrome 확장보다 설정이 무거워서 5분짜리 빠른 스크래핑엔 별로예요
- 데스크톱 앱은 Windows/Mac 전용이에요(완전한 브라우저 기반은 아님)
가격
- 무료 플랜 제공
- Basic: 월 39달러
- Standard: 월 약 83달러(월간), 연간 약 75달러
- Professional: 월 약 299달러(월간), 연간 약 208달러
- Enterprise: 맞춤형
추천 대상: IP 회전, 봇 차단 대응, 반복 클라우드 작업이 필요한 엔터프라이즈급 스크래핑 팀 — 데스크톱 앱을 써도 괜찮다면요.
7. Bardeen — 자동화 우선 스크래퍼
Bardeen(bardeen.ai)은 웹 스크래핑과 워크플로 자동화를 묶은 브라우저 자동화 플랫폼이에요. 데이터를 긁은 뒤 다른 앱으로 보내는 "플레이북"을 만들 수 있어요. 쉽게 말해 "이걸 긁고, 그다음 CRM으로 보내기"예요.
Shopify 스크래핑에서 강한 점
- 스크래핑을 넘는 워크플로 자동화: Shopify 데이터 스크래핑 → 보강 → CRM이나 스프레드시트로 전송을 플레이북 하나로 처리
- Google Sheets, Airtable, Notion, HubSpot, Slack 등 100개 이상 앱과 연동
- 데이터 추출·분류를 위한 AI 기능 제공
- 브라우저에서 돌아가니까 데스크톱 앱이 필요 없어요
- 시간/날짜 기반 자동화로 예약 가능
아쉬운 점
- 주로 자동화 도구지 전용 스크래퍼는 아니에요. 스크래핑 깊이는 전문 도구보다 얕아요
- 상품 목록만 뽑고 싶은 사용자에겐 플레이북 만들기가 헷갈릴 수 있어요
- 무료 플랜은 100크레딧으로 묶여요
- 하위 페이지 보강과 페이지네이션 처리가 전용 스크래핑 도구보다 덜 직관적이에요
- 데이터만 긁으면 되고 후속 자동화가 필요 없다면 과한 선택이에요
가격
- 무료: 100크레딧
- Basic: 월 10달러, 월 100크레딧
- Premium: 월 50달러, 월 1,000크레딧(연간 약 월 40달러)
- Enterprise: 맞춤형
- 크레딧 모델: 스크래퍼 행당 1크레딧, 보강 행당 3크레딧
추천 대상: Shopify 데이터를 긁은 뒤 바로 CRM, 스프레드시트, Slack 같은 후속 앱으로 자동 전송하고 싶은 팀.
8. Listly — 목록을 스프레드시트로 바꾸는 도구
Listly(listly.io)는 웹페이지의 목록과 표를 스프레드시트용 데이터로 바꾸는 데 특화돼 있어요. Shopify 컬렉션 페이지에서 확장을 누르면 상품 목록을 잡아 스프레드시트로 내보내려고 시도해요.
Shopify 스크래핑에서 강한 점
- 매우 단순한 인터페이스 — 원클릭 목록 추출용으로 설계됨
- 반복되는 목록 구조(상품 그리드 같은 것) 감지가 잘 돼요
- Excel과 Google Sheets로 바로 내보내요
- 여러 URL을 한 번에 처리하는 그룹 스크래핑 기능 제공
- Business 플랜에선 예약 기능 제공
아쉬운 점
- 페이지에서 자동 감지한 것만 가져와요. 사용자 정의 필드 설정은 없어요
- 하위 페이지 보강 없음 — 목록 페이지 수준 데이터만 내보내요
- 비표준 Shopify 테마나 JavaScript 렌더링이 강한 스토어에선 버거워해요
- 무료 플랜이 매우 제한적이에요(월 10개 URL)
- 경쟁사보다 내보내기 옵션이 적어요(주로 Excel과 Sheets)
가격
- 무료: 월 10개 URL, 기본 1페이지 추출, Excel 다운로드, Google Sheet 내보내기
- Light: 월 30달러(연간 187.20달러)
- Business: 월 90달러(연간 993.60달러) — 고급 추출, 그룹 추출, 예약, 자동 스크롤/클릭, API 베타 추가
추천 대상: Shopify 컬렉션 페이지에서 스프레드시트로 가는 가장 쉬운 길을 원하고, 깊은 상품 데이터는 필요 없는 사용자.
8개 Shopify 스크래퍼 Chrome 확장 비교
아래에 전체 비교를 한자리에 정리했어요. 체크박스만 채우는 대신, 각 칸을 최대한 구체적으로 적으려 했어요. "페이지네이션 지원"이라는 말도 도구마다 의미가 꽤 다르니까요.
| 도구 | 설정의 쉬움 | 데이터 항목 | 하위 페이지 보강 | 페이지네이션 | 봇 차단 처리 | 내보내기 형식 | 예약 기능 | 무료 플랜 / 가격 |
|---|---|---|---|---|---|---|---|---|
| Thunderbit | 매우 쉬움(AI 기반, 2번 클릭) | 비기술 사용자에게 가장 강함(AI가 관련 필드를 모두 제안) | 예 — 원클릭 보강 | 예(클릭 + 무한 스크롤) | 공개 스토어는 클라우드, 보호된 스토어는 브라우저 | Sheets, Airtable, Notion, CSV, JSON, Excel | 예(자연어 예약) | 무료 6페이지; 유료는 월 15달러부터 |
| Instant Data Scraper | 매우 쉬움(설정 없음) | 목록 수준 데이터에만 적합 | 아니오 | 예(다음 페이지 자동 감지) | 브라우저 전용, 봇 차단 대응 없음 | CSV, XLSX | 아니오 | 무료 |
| Web Scraper | 보통~어려움(수동 사이트맵) | 사이트맵을 잘 만들면 유연함 | 예, 하지만 링크 선택자로 수동 처리 | 예(사이트맵 설정 시) | 로컬 브라우저; 클라우드 플랜은 프록시 회전 | 로컬은 CSV, 클라우드는 더 넓은 형식 지원 | 클라우드 플랜에서 가능 | 확장 프로그램 무료; 클라우드는 월 50달러부터 |
| Data Miner | 보통(레시피 기반) | 레시피가 있거나 만들면 좋음 | 예, 하지만 다단계 크롤 설정 필요 | 예(레시피 설정) | 주로 브라우저 측 | CSV, Excel, Sheets, TSV | 자동 크롤 있음 | 무료 월 500페이지; 유료는 월 19.99달러부터 |
| Simplescraper | 쉬움~보통(선택자 기반) | 가벼운 추출에 적합 | 딥 스크래핑은 가능하지만 원클릭은 아님 | 예(무한 스크롤 지원) | 프록시 회전 및 로그인 친화적 | CSV, JSON, Sheets, Airtable, 웹훅 | 예 | 무료 100크레딧; 유료 플랜 있음 |
| Octoparse | 더 어려움(데스크톱 앱) | 설정하면 매우 강함 | 예, 워크플로 또는 템플릿 통해 | 예(AJAX, 무한 스크롤) | 봇 차단 대응이 가장 강함(IP 회전, CAPTCHA) | CSV, Excel, JSON, HTML, XML, DB, Sheets | Standard 이상에서 가능 | 무료; Basic 월 39달러; 클라우드는 약 월 83달러부터 |
| Bardeen | 보통(플레이북 빌더) | 자동화와 연결하면 좋음 | 워크플로 로직으로 가능, Shopify 우선은 아님 | 가능 | 브라우저에서 실행, 봇 차단 대응이 핵심은 아님 | CSV, Sheets, Airtable, Notion | 자동화로 가능 | 무료 100크레딧; Basic 월 10달러; Premium 월 50달러 |
| Listly | 매우 쉬움(원클릭 목록 감지) | 보이는 목록 행만 보면 가장 좋음 | 아니오 | 감지된 목록 구조에 한정 | 최소 수준 | Business에서 Excel, Sheets, CSV/JSON API | Business에서 가능 | 무료 월 10개 URL; Light 월 30달러; Business 월 90달러 |
우선순위별 빠른 결론
가장 깊은 Shopify 상품 데이터를 최소 설정으로 원한다면, Thunderbit의 AI + 하위 페이지 보강 조합이 제일 강해요. 완전 무료에 빠르고 대충 쓰는 내보내기가 필요하면 Instant Data Scraper가 단순한 페이지에 잘 맞고요. 완전한 제어가 필요하고 레시피를 직접 만들어도 괜찮다면 Web Scraper나 Octoparse가 그 힘을 줘요. 그리고 진짜 목표가 스크래핑 → 자동화 → CRM 전송이라면 Bardeen이 들여다볼 만한 워크플로 플랫폼이에요.
목록 페이지 스크래핑은 절반일 뿐: 하위 페이지 보강 워크플로
이 섹션은 다른 Shopify 스크래퍼 글에도 꼭 들어갔으면 하는 부분이에요. 경쟁 콘텐츠의 가장 큰 빈틈이자, 이커머스 사용자들에게 제가 제일 자주 듣는 불만이거든요.
Shopify 컬렉션 페이지(목록 페이지)를 긁으면 겉만 훑은 데이터만 나와요. 제목, 가격, 썸네일, 가끔은 잘린 설명 정도죠. 하지만 경쟁사 분석, 카탈로그 가져오기, 드롭쉬핑 리서치에 진짜 필요한 필드는 개별 상품 상세 페이지에 있어요.
목록 페이지만 가져왔을 때 vs. 하위 페이지 보강 후
| 데이터 항목 | 목록 페이지에서만 | 하위 페이지 보강 후 |
|---|---|---|
| 상품 제목 | ✅ | ✅ |
| 가격 | ✅ | ✅ |
| 썸네일 이미지 | ✅ | ✅ + 모든 갤러리 이미지 |
| 짧은 설명 | ⚠️ 잘림 | ✅ 전체 HTML 설명 |
| 옵션(사이즈, 색상) | ❌ | ✅ |
| SKU / 재고 | ❌ | ✅ |
| 리뷰 / 평점 | ❌ | ✅ |
차이가 어마어마하죠.
목록 페이지만 내보내면 얕은 스프레드시트가 나와요. 하위 페이지까지 보강한 내보내기는 실제로 쓸 수 있는 경쟁 리서치 데이터셋이 돼요.
Thunderbit에서 하위 페이지 스크래핑이 돌아가는 방식(단계별)
- Shopify 스토어의 컬렉션/목록 페이지로 가요
- **"AI 필드 제안"**을 눌러요 — Thunderbit이 페이지를 읽고 열(제목, 가격, 이미지, 링크 등)을 짚어 줘요
- **"스크래핑"**을 눌러 목록 페이지 데이터를 뽑아요
- **"하위 페이지 스크래핑"**을 눌러요 — AI가 각 상품 URL을 방문해 상세 페이지 데이터(전체 설명, 모든 이미지, 옵션, 리뷰)를 원래 표에 덧붙여 줘요
- 보강된 표를 Excel, Google Sheets, Airtable, Notion 또는 CSV로 내보내요
이 전체 과정은 보통 컬렉션 기준으로 몇 분이면 끝나고, 손으로 했다면 몇 시간 걸렸을 데이터셋이 완성돼요.
다른 도구들도 하위 페이지 보강을 지원하나요?
- Web Scraper: 예, 하지만 링크 선택자와 자식 사이트맵을 손으로 설정해야 해요. 스토어당 15~20분 정도 설정 시간을 잡으세요
- Octoparse: 예, 워크플로 빌더나 템플릿으로 가능해요 — 강력하지만 설정이 더 무거워요
- Data Miner: 예, 다단계 크롤 워크플로로 가능해요 — 원클릭 방식은 아니에요
- Simplescraper: 딥 스크래핑 개념은 있지만, 턴키 형태는 덜해요
- Instant Data Scraper, Listly, Bardeen: Shopify용 원클릭 하위 페이지 보강에 대한 문서화된 지원은 없어요
"20분쯤 손으로 설정하면 기술적으론 링크를 따라갈 수 있음"과 "원클릭 보강"의 차이는, 스크래퍼 엔지니어용 도구와 이커머스 운영자용 도구의 차이예요.
Shopify의 products.json이 실패할 때 — Chrome 확장이 백업 플랜인 이유
다른 Shopify 스크래핑 가이드를 읽어 봤다면 /products.json 꼼수를 본 적 있을 거예요. Shopify 스토어 URL 뒤에 /products.json을 붙이면 구조화된 상품 데이터를 JSON으로 받는다는 방법이죠. 실제 엔드포인트이고, 먹힐 땐 꽤 편해요.
products.json 작동 방식
Shopify 스토어는 /products.json에 JSON API 엔드포인트를 두고 구조화된 상품 데이터를 돌려줘요. ?page=2&limit=250으로 페이지네이션할 수 있어요(페이지당 최대 250개 상품).
보통 돌아오는 필드엔 title, body_html, vendor, product_type, tags, published_at, variants(가격, compare_at_price, sku, available 포함), images가 있어요.
products.json이 놓치는 것
- 리뷰 데이터나 평점 수가 없어요
- 렌더링된 페이지에 비해 설명 서식이 제한돼요
- 커스텀 metafield는 자주 안 들어가요
- 옵션별 이미지가 일관되지 않을 수 있어요
- 렌더링된 머천다이징 콘텐츠, 배지, 소셜 증거가 없어요
products.json이 깨지는 경우
2026년 4월 27일에 실제 Shopify 스토어 8곳에 직접 HTTP 체크를 했어요. 결과가 꽤 의미 있었어요.
| 스토어 | 결과 |
|---|---|
| kith.com | ✅ 작동 — 깔끔한 JSON |
| colourpop.com | ✅ 작동 |
| allbirds.com | ✅ 작동 |
| brooklinen.com | ✅ 작동 |
| negativeunderwear.com | ✅ 작동 |
| gymshark.com | ❌ 차단 — JSON 대신 403 HTML |
| mvmt.com | ⚠️ 부분 비활성화 — JSON이 아닌 200 HTML 페이지 |
| fashionnova.com | ❌ 비활성화 — 404 |
8곳 중 5곳은 깔끔한 JSON을 돌려줬어요. 3곳은 아니었고요.
포럼 사용자들도 비슷한 얘길 해요. 「이상하게도 어떤 Shopify 스토어는 products.json을 안 열어 두더라.」 비밀번호 보호 스토어, 커스텀 API 설정이 있는 스토어, Cloudflare 보호 도메인 모두 이 패턴을 깨뜨릴 수 있어요.
Chrome 확장 대안
products.json을 못 쓸 때, Chrome 확장 스크래퍼는 렌더링된 페이지(DOM)에서 직접 데이터를 뽑아요. 이게 브라우저 기반 스크래퍼의 핵심 가치예요. 브라우저에서 보이는 걸 그대로 보고 뽑으니까, API가 있든 없든 상관없죠. 그래서 Chrome 확장은 믿을 만한 대안이고, 리뷰·머천다이징 콘텐츠·전체 이미지 갤러리처럼 렌더링된 페이지 데이터가 필요할 땐 오히려 첫 번째 선택이 되기도 해요.
봇 차단 보호: Shopify 스토어를 긁으면 실제로 무슨 일이 벌어지나
대부분의 Shopify 스크래퍼 글은 모든 스토어가 활짝 열려 있다고 가정해요. 하지만 현실은 안 그래요. Store Leads는 Shopify 스토어의 99.2%가 Cloudflare 인프라를 쓴다고 보고해요. 그렇다고 모든 스토어가 공격적으로 스크래퍼를 막는다는 뜻은 아니지만, 막을 인프라는 어디에나 깔려 있다는 거죠.
실제로는 상황이 이렇게 나뉘어요.
스크래핑이 쉬운 경우
- 공격적인 Cloudflare 보호가 없는 공개 스토어
- products.json이 활성화된 스토어
- 표준 Shopify 테마를 쓰는 스토어(일관된 DOM 구조)
스크래핑이 어려운 경우
- Cloudflare로 보호된 스토어(CAPTCHA 도전, Turnstile)
- 로그인 필요 또는 비밀번호 보호 스토어
- 커스텀 보안 레이어가 있는 Shopify Plus 스토어
- 공격적인 속도 제한을 쓰는 스토어
각 도구의 봇 차단 대응 방식
| 상황 | 최선의 접근 방식 | 처리 가능한 도구 |
|---|---|---|
| 공개 스토어, 봇 차단 없음 | 클라우드 스크래핑(빠름) | Thunderbit(클라우드 모드), Instant Data Scraper, 대부분의 다른 도구 |
| Cloudflare로 보호된 스토어 | 브라우저 기반 스크래핑(내 세션 사용) | Thunderbit(브라우저 모드), Web Scraper, Octoparse |
| 로그인 필요 / 비공개 스토어 | 로그인된 세션을 사용하는 브라우저 스크래핑 | Thunderbit(브라우저 모드), Web Scraper, Simplescraper |
| products.json 비활성화 | 렌더링된 페이지의 DOM 기반 추출 | 모든 Chrome 확장 프로그램(이게 이들의 강점) |
Thunderbit의 클라우드/브라우저 이중 모드는 여기서 진짜 중요해요. 클라우드 모드는 공개 스토어를 대량으로 빠르게 긁을 때 유리하고, 브라우저 모드는 봇 차단이 걸릴 때 진짜 Chrome 세션을 써요. 저는 gymshark.com에서 이 유연함 덕분에 살았어요. 클라우드 요청은 막혔지만 브라우저 모드는 문제없이 돌았거든요.
예약 Shopify 스크래핑: 시간을 두고 가격과 재고 모니터링하기
한 번만 긁는 것도 쓸모 있어요. 하지만 이커머스 운영 팀은 보통 단일 스냅샷보다 상시 경쟁사 인텔리전스가 필요해요. 가격 변경, 재고 변동, 신상 출시가 계속 일어나니까요. 어떤 포럼 사용자는 이렇게 말했어요. 「현재 재고 수준과 그게 줄어드는 스냅샷을 보는 게 더 도움 돼요.」
그런데 예약·반복 스크래핑을 다루는 경쟁 글은 거의 없어요. 분명한 사각지대죠.
예약 Shopify 모니터링은 어떻게 돌아가나요?
- 경쟁사 컬렉션 페이지나 상품 페이지를 반복 스크래핑하도록 걸어 둬요
- 실행할 때마다 데이터가 Google Sheets(또는 Airtable)로 내보내져 가격·재고의 시계열이 쌓여요
- 이 데이터로 다음을 추적해요: 가격 인하/인상, 품절, 신상 추가, 계절성 패턴
Thunderbit으로 예약 스크래핑 걸기
Thunderbit은 이걸 말도 안 되게 쉽게 만들어 줘요.
일정을 "매주 월요일 오전 9시"처럼 자연어로 적고, Shopify 스토어 URL을 넣은 뒤 "예약"을 누르면 돼요. Thunderbit이 알아서 긁어서 원하는 곳으로 내보내요. cron 작업도, 코드도, 서드파티 스케줄러도 필요 없어요.
8개 도구의 예약 지원 여부
| 도구 | 예약 기능? |
|---|---|
| Thunderbit | 예 — 자연어 예약 |
| Instant Data Scraper | 아니오 |
| Web Scraper | 예 — 클라우드 플랜에서 |
| Data Miner | 자동 크롤은 있지만, 가장 간단한 예약 방식은 아님 |
| Simplescraper | 예 |
| Octoparse | 예 — Standard 이상 |
| Bardeen | 예 — 시간/날짜 자동화로 |
| Listly | 예 — Business 플랜에서 |
상시 경쟁사 모니터링이 워크플로의 일부라면, 이건 정말 중요한 차이예요. 대부분의 무료 Chrome 확장은 아예 이 기능이 없어요.
내 사용 사례에 맞는 Shopify 스크래퍼 Chrome 확장은?
흔한 "마음에 드는 거 고르세요"식 정리 대신, 구체적인 사용 사례에 맞춘 결정 표를 볼게요.
| 사용 사례 | 가장 추천하는 도구 | 이유 |
|---|---|---|
| 경쟁사 가격 리서치 | Thunderbit | 목록 + 하위 페이지 보강 + 예약 = 완전한 가격 워크플로 |
| 빠른 일회성 내보내기 | Instant Data Scraper | 보이는 목록 데이터만 있으면 가장 빠른 무료 경로 |
| 내 Shopify 스토어로 카탈로그 가져오기 | Thunderbit | 전체 하위 페이지 데이터 + Shopify 가져오기 친화적 CSV/Excel 내보내기 |
| 지속적인 가격/재고 모니터링 | Thunderbit 또는 Octoparse | 가장 쉬운 노코드 예약 vs. 가장 강력한 엔터프라이즈급 예약 |
| 리드 생성(스토어 운영자 연락처) | Thunderbit | 내장 이메일/전화 추출기 + 구조화된 내보내기 |
| 복잡한 다단계 자동화 | Bardeen | 스크래핑, 보강, 후속 앱 전송을 하나의 워크플로로 |
| 완전한 제어를 원하는 기술 사용자 | Web Scraper 또는 Octoparse | 선택자, 흐름, 추출 로직을 가장 세밀하게 제어 가능 |
마무리
2026년의 Shopify 스크래핑은 상품 데이터를 가져올 수 있느냐의 문제가 아니에요. 얼마나 깊게, 얼마나 빠르게, 얼마나 반복 가능하게 워크플로를 짜느냐가 핵심이에요. 이 분야의 대부분 글은 목록 페이지에서 멈춰요. 진짜 가치는 하위 페이지 보강, 예약 모니터링, 그리고 실제 Shopify 스토어가 던지는 봇 차단 변수를 얼마나 잘 받아내느냐에 있어요.
컬렉션 페이지에서 몇 번 클릭만으로 완전히 보강된 데이터셋까지 가는 과정을 직접 보고 싶다면 Thunderbit을 한번 써 보세요. Thunderbit이 딱 안 맞더라도, Instant Data Scraper는 단순한 작업의 괜찮은 무료 출발점이고, Web Scraper와 Octoparse는 더 많은 제어권이 필요한 기술 사용자에게 강력한 선택지예요.
상품 데이터가 늘 완전하고, 구조화돼 있고, 옵션 정보까지 풍부하길 바라요.
Shopify 스크래핑용 Thunderbit 사용해 보기 Get Started Free
자주 묻는 질문
1. Shopify 스토어의 데이터를 스크래핑하는 건 합법인가요?
Shopify 스토어에 공개된 상품 데이터는 보통 사이트를 방문하는 누구나 볼 수 있어요. 다만 합법성은 관할 지역, 스토어 이용약관, 그리고 데이터를 어떻게 쓰느냐에 달려 있어요. 경쟁사 분석을 위해 공개 가격을 긁는 건 흔한 관행이지만, 콘텐츠를 통째로 베껴 다시 올리는 건 위험이 훨씬 커요. 이건 법률 자문이 아니니, 본인 상황은 전문가와 상담하세요.
2. 로그인이나 비밀번호가 필요한 Shopify 스토어도 스크래핑할 수 있나요?
네, 하지만 로그인된 Chrome 세션을 쓰는 브라우저 기반 스크래퍼가 필요해요. 클라우드 스크래퍼는 보통 로그인 차단 페이지에 못 들어가요. Thunderbit 브라우저 모드, Web Scraper(로컬), Simplescraper의 로그인 워크플로가 이 상황을 지원해요.
3. 한 번에 Shopify 스토어에서 몇 개 상품까지 스크래핑할 수 있나요?
도구와 플랜에 따라 달라요. Shopify의 products.json 엔드포인트는 페이지당 250개 상품으로 페이지네이션돼요. Thunderbit 클라우드 모드는 한 번에 최대 50페이지까지 처리해요. 대부분 도구의 무료 플랜은 페이지·행·크레딧에 제한이 있으니, 큰 작업 전에 플랜 한도를 확인하세요.
4. Shopify에서 클라우드 스크래핑과 브라우저 스크래핑의 차이는 뭔가요?
클라우드 스크래핑은 원격 서버에서 돌아요. 더 빠르고, 봇 차단이 없는 공개 스토어에 더 좋아요. 브라우저 스크래핑은 로컬 Chrome 세션을 쓰니까, Cloudflare 보호, 로그인 필요, 지역 민감 스토어도 처리할 수 있어요. Thunderbit은 두 모드를 다 주고, 선택은 보통 스토어가 원격 요청을 막는지에 달려 있어요.
5. 스크래핑한 Shopify 데이터를 Google Sheets나 Airtable로 바로 내보낼 수 있나요?
네, 하지만 모든 도구가 되는 건 아니에요. Thunderbit은 Google Sheets, Airtable, Notion, Excel, CSV, JSON으로 전부 무료 내보내기를 지원해요. Data Miner와 Listly는 Google Sheets를 지원하고요. Simplescraper는 Sheets와 Airtable을, Octoparse는 프리미엄 플랜에서 Google Sheets를 지원해요. Bardeen은 Sheets, Airtable, Notion과 연동되고요. Instant Data Scraper는 직접 Sheets 연동 없이 CSV와 XLSX로만 내보내요.
더 알아보기
