Amazon에는 와 이 카탈로그에 있어요. 제품 제목, 가격, 평점, ASIN을 스프레드시트에 하나하나 복사해 넣어 본 적이 있다면, 그 일이 얼마나 고된지 잘 아실 거예요. 게다가 이런 작업은 금방 규모가 커집니다.
저는 에서 일하고 있고, 저희는 AI 웹 스크래퍼를 만들고 있어요. 그래서 사람들이 웹사이트에서 데이터를 추출하는 방식에 늘 관심이 많습니다. 이번 글에서는 다른 정리 글에서 잘 하지 않는 방식으로 접근해 보려고 했어요. 실제로 설치해서 Amazon에서 돌려볼 수 있는 Chrome 확장 프로그램 7개를 한자리에 놓고, 같은 페이지에서 테스트한 다음, 무엇이 잘 작동하고 무엇이 안 되는지, 그리고 각 도구가 어디에 잘 맞는지 솔직하게 정리해 보려는 거였죠. 저는 AI 필드 감지, 하위 페이지 스크래핑, 차단 위험, 무료 플랜, 내보내기 옵션처럼 포럼과 저희 사용자들로부터 자주 나오는 불만과 직접 연결되는 8가지 기준으로 각 확장 프로그램을 평가했습니다. Amazon 셀러든, 마케터든, 아니면 단순히 복사·붙여넣기에 지친 분이든, 이 가이드가 분명 도움이 될 거예요.
왜 애초에 Amazon 상품 데이터를 스크래핑해야 할까요?
그렇다면 실제로 누가 Amazon을 스크래핑하고, 왜 할까요?
짧게 답하면, 온라인에서 상품을 판매하거나 마케팅하거나 조사하는 거의 모든 사람이 해당돼요. Amazon은 자사 스토어 매출의 고 밝히고 있고, 그런 판매자들은 서로를 계속 주시하고 있습니다. 제가 자주 보는 대표적인 활용 사례는 아래와 같아요.
| 활용 사례 | 누가 사용하나 | 얻을 수 있는 것 |
|---|---|---|
| 경쟁사 가격 모니터링 | 셀러, 가격 팀, 에이전시 | 경쟁 상품의 실시간 가격 및 재고 정보 |
| 상품 리서치 및 트렌드 추적 | Amazon 셀러, 시장 조사자 | 떠오르는 카테고리, 신규 진입자, 수요 변화 파악 |
| 리뷰 감성 분석 | 자체 브랜드 셀러, 브랜드 팀 | 반복되는 불만, 기능 공백, 기회 포착 |
| 리드 생성(판매자 연락처) | 도매 팀, 에이전시 | 판매자 이름, 스토어프론트, 연락처 정보 |
| 카탈로그 및 재고 모니터링 | 이커머스 운영, 브랜드 보호 | 재고 수준, 상품 등록 변경, 무단 판매자 추적 |
| 키워드 및 상품 페이지 최적화 | 브랜드 소유자, 마켓플레이스 운영자 | 검색어 데이터, 상품 설명 문구, 경쟁사 키워드 |
성과도 꽤 분명합니다. Amazon 자체 사례 연구에 따르면, 구조화된 데이터를 활용해 상위 검색어에 맞게 최적화한 뒤 했다고 해요. 또 에 따르면, 사람들은 반복적인 데이터 입력에 주당 9시간 이상을 쓰고 있었습니다. 그 일부만 자동화해도 실제 의사결정에 쓸 수 있는 시간이 꽤 많이 생깁니다.
훌륭한 Amazon 스크래퍼 Chrome 확장 프로그램의 조건은 무엇일까요? 제 테스트 기준
모든 Chrome 확장 프로그램이 같은 수준은 아니에요. 그런데 비교 글들 중에는 API, 데스크톱 앱, 브라우저 확장 프로그램을 마치 서로 바꿔 쓸 수 있는 것처럼 한데 묶는 경우가 많습니다. 사실 그렇지 않죠. 제가 사용한 기준과 각 항목이 중요한 이유는 다음과 같습니다.
- 설정의 쉬움 - 비전문가도 5분 안에 결과를 얻을 수 있나? (포럼에서도 가장 중요한 문제로 확인됩니다.)
- AI 기반 필드 감지 - 도구가 상품 필드를 자동으로 감지하나요, 아니면 셀렉터를 직접 설정해야 하나요? (이걸 별도 범주로 다루는 경쟁 글은 거의 없었어요.)
- 하위 페이지 / 상세 페이지 스크래핑 - 한 번의 작업 흐름으로 목록 페이지 데이터에 상품 상세 페이지 정보를 더할 수 있나요?
- 안티봇 / 차단 위험 대응 - Amazon의 강한 봇 탐지를 어떻게 처리하나요? (사용자 포럼에서 입니다.)
- 페이지네이션 지원 - 여러 결과 페이지를 자동으로 넘기며 스크래핑할 수 있나요?
- 무료 플랜 / 가격 - 실제로 결제 없이 무엇을 쓸 수 있나요? (사용자들은 무료 옵션을 분명히 묻고, 경쟁 도구들은 실용적인 답을 잘 주지 않아요.)
- 내보내기 옵션 - CSV, Excel, Google Sheets, Airtable, Notion?
- 예약 실행 및 자동화 - 반복적으로 실행되도록 설정할 수 있나요?
저는 Amazon US 검색 결과와 상품 상세 페이지에서 같은 검색어, 같은 조건으로 각 확장 프로그램을 테스트했습니다.

AI 기반 스크래핑 vs 셀렉터 기반 스크래핑: Amazon에서 왜 중요할까요?
다른 Amazon 스크래퍼 총정리 글에서는 잘 다루지 않지만, 이 차이는 스크래퍼 유지보수 난이도를 결정하는 가장 큰 요소예요.
대부분의 Chrome 확장 프로그램 스크래퍼는 CSS 셀렉터를 데이터 필드에 매핑하는 방식으로 작동합니다. 사용자가(또는 도구의 템플릿이) HTML 요소 중 "가격"이나 "제목"에 해당하는 부분을 지정하면, 스크래퍼가 그 값을 가져오는 식이죠. 문제는 Amazon이 스크래퍼를 무력화하려고 HTML과 CSS를 입니다. 포럼 사용자들은 해시 처리되거나 바뀌는 클래스 이름을 으로 설명합니다.
세 가지 주요 방식은 아래처럼 비교할 수 있어요.
| 방식 | 작동 방식 | Amazon 레이아웃이 바뀌면 |
|---|---|---|
| 셀렉터 기반(전통 방식) | 사용자가 CSS 셀렉터를 필드에 직접 매핑 | 깨짐 - 사용자가 다시 설정해야 함 |
| 템플릿 기반 | Amazon 페이지용으로 미리 만들어진 레시피 | 개발자가 템플릿을 업데이트할 때까지 깨짐 |
| AI 기반(예: Thunderbit) | AI가 페이지 내용을 읽고 필드를 자동 감지 | 자동으로 적응 - 유지보수 불필요 |
제가 테스트한 7개 확장 프로그램 중 AI 필드 감지를 기본 설정 경로로 사용하는 건 Thunderbit 하나뿐이었어요. 나머지는 셀렉터나 템플릿에 의존하는데, Amazon이 페이지를 조금만 바꿔도 유지보수가 더 필요하다는 뜻이죠. 이 차이를 이해하면 나중에 훨씬 덜 답답합니다.
1. Thunderbit - AI 기반 Amazon 스크래퍼 Chrome 확장 프로그램
은 저희 회사에서 만든 도구라서, 그 점은 먼저 분명히 말씀드릴게요. 하지만 비전문 사용자 입장에서 셀렉터나 코드를 씨름하지 않고도 빠르고 정확한 Amazon 데이터를 얻고 싶다면 가장 잘 맞는 선택이라고 진심으로 생각합니다.
핵심 차별점은 AI 필드 추천입니다. Amazon 검색 결과 페이지를 열고 버튼을 누르면 Thunderbit의 AI가 페이지를 읽고 열 이름을 제안해 줘요. 제목, 가격, 평점, ASIN, 리뷰 수, 상품 URL 등 다양한 항목을 자동으로 파악합니다. 따로 설정할 게 없습니다. AI가 페이지에 무엇이 있는지 파악하고, 적절한 필드와 데이터 유형을 제안해 줍니다.

일반적인 Amazon 스크래핑 작업 흐름은 다음과 같습니다.
- 을 설치하고 Amazon 검색 결과 페이지를 엽니다.
- AI 필드 추천을 클릭합니다 - AI가 열을 감지하고 제안합니다.
- 스크래핑을 클릭합니다 - 데이터가 즉시 채워집니다.
- 인기 있는 Amazon 페이지라면 미리 만들어진 을 사용해 진짜 1클릭 경험을 할 수도 있습니다.
Thunderbit를 정말 돋보이게 만드는 건 하위 페이지 스크래핑입니다. 목록 페이지를 스크래핑한 뒤 하위 페이지 스크래핑을 누르면 Thunderbit가 각 상품 URL을 방문해 상세 필드(전체 설명, 핵심 포인트, 판매자 정보, 이미지 URL 등)를 같은 표에 덧붙입니다. 대부분의 경쟁 확장 프로그램은 이 기능을 아예 제공하지 않아요.
또한 클라우드 / 브라우저 전환 기능도 있습니다. 클라우드 모드는 공개 목록 기준으로 최대 50페이지를 동시에 스크래핑합니다. 브라우저 모드는 본인의 Chrome 세션을 사용해요. Seller Central에 로그인한 상태이거나 너무 눈에 띄지 않게 작업해야 할 때 이상적입니다.
예약 실행은 아주 직관적이에요. 원하는 시간 간격을 말하면 AI가 그걸 일정으로 바꿔줍니다.
내보내기 옵션은 Excel, Google Sheets, Airtable, Notion, CSV, JSON까지 모두 지원하며, 무료 플랜에도 포함되어 있습니다.
Thunderbit 장단점
장점:
- AI가 필드를 자동 감지 - 셀렉터 설정이 필요 없고, Amazon 레이아웃이 바뀌어도 유지보수가 적음
- 하위 페이지 보강을 한 번에 처리
- 클라우드/브라우저 전환으로 유연하고 차단 위험을 낮춤
- 가장 넓은 내보내기 옵션(Sheets, Airtable, Notion, Excel, CSV, JSON)
- 자연어로 예약 실행 가능
- 즉시 결과를 위한 미리 만들어진 Amazon 템플릿
단점:
- 크레딧 기반이라 많은 사용자는 유료 플랜이 필요함
- AI 필드 감지는 몇 초 정도의 짧은 처리 시간이 추가됨
- 비교적 새로운 도구라, 오래된 옵션보다 커뮤니티 문서가 적음
Thunderbit 가격
- 무료 플랜: 6페이지(체험 부스트 포함 10페이지), AI 기능과 모든 내보내기 형식 포함
- 유료 플랜: 500 크레딧 기준 연간 결제 시 월 약 $9부터 시작, 1크레딧 = 1행 출력
- 최신 정보는 에서 확인하세요
2. Instant Data Scraper - 무료로 쓸 수 있는 무난한 옵션
Instant Data Scraper는 휴리스틱 알고리즘을 사용해 웹페이지의 표 형태 데이터를 자동으로 감지하는 Chrome 확장 프로그램이에요. 나온 지 꽤 되었고, 지금도 Chrome Web Store에서 가장 많이 다운로드되는 무료 스크래퍼 중 하나입니다.
Amazon에서는 검색 결과 페이지에서 확장 프로그램을 실행하면 데이터 표를 자동으로 감지하려고 시도합니다. 첫 번째 감지가 정확하지 않으면 "다른 표 시도"를 눌러야 할 때도 있어요. 단순하고 한 번만 하는 스크래핑이라면 꽤 괜찮게 작동합니다.
다만 2026년 기준으로 중요한 점이 하나 있어요. 공식 랜딩 페이지에는 이제 Instant Data Scraper가 더 이상 Web Robots가 소유하거나 개발하거나 지원하지 않는다고 명시되어 있습니다. 즉, 업데이트도, 버그 수정도, 새 기능도 없다는 뜻이죠. 한 에서는 한 개요 페이지는 처리했지만 상세 단계 클릭이 필요할 때 멈췄다고 보고했습니다.

Instant Data Scraper 장단점
장점:
- 100% 무료, 계정 불필요
- 단순한 표에는 가볍고 빠름
- 기본적인 페이지네이션 지원("다음" 버튼 클릭)
단점:
- AI 필드 감지 없음(Amazon의 복잡한 레이아웃을 잘못 읽을 수 있는 패턴 매칭에 의존)
- 하위 페이지 스크래핑 없음
- CSV/Excel 내보내기만 지원
- 예약 실행 없음, 클라우드 옵션 없음
- 더 이상 유지보수되지 않음 - Amazon 레이아웃이 바뀌면 깨지는데, 고쳐주는 사람이 없음
3. Web Scraper - 수동 설정에 강한 베테랑 확장 프로그램
Web Scraper는 시각적 사이트맵 빌더를 중심으로 만들어진, 가장 오래되고 검증된 Chrome 확장 프로그램 스크래퍼 중 하나예요. DevTools를 열고, 클릭으로 셀렉터를 정의해 "사이트맵"을 만든 뒤, 페이지네이션을 설정하고, 상품 상세 페이지 링크도 따라갈 수 있습니다.
Web Scraper는 마켓플레이스에서 Amazon Products Listings Scraper 템플릿도 제공하는데, 이 템플릿은 탐색, 페이지네이션, 상품 페이지 추출을 처리합니다. 단계별 가이드는 설치, 셀렉터 생성, 페이지네이션 설정, 상품 링크 따라가기, 로컬 또는 클라우드 실행까지 8단계 설정 과정을 안내합니다.
클라우드 버전에는 예약 실행, API 접근, 프록시 회전, CAPTCHA 우회, Google Sheets 연동 기능이 추가됩니다.

Web Scraper 장단점
장점:
- 성숙했고, 문서가 잘 갖춰져 있으며, 커뮤니티 지원이 있음
- 무료 브라우저 확장 프로그램(로컬에서는 무제한 사용 가능)
- Amazon용 마켓플레이스 템플릿 제공
- 확장을 위한 클라우드 옵션(예약 실행, IP 회전, 연동)
- 상품 상세 페이지 링크를 따라갈 수 있음(부분적 하위 페이지 보강)
단점:
- 셀렉터를 직접 설정해야 해서 비전문 사용자에게는 학습 곡선이 큼
- AI 기반 자동 필드 감지 없음
- Amazon이 레이아웃을 바꾸면 템플릿이 깨질 수 있음
- 고급 기능은 유료 클라우드 플랜 뒤에 잠겨 있음
Web Scraper 가격
- 무료: Chrome 확장 프로그램, 로컬에서는 무제한 스크래핑
- 클라우드 플랜: Project 월 $50부터, Professional 월 $100, Scale는 월 $200부터
4. Octoparse - 기능이 풍부한 플랫폼(Chrome 확장 프로그램은 예외가 있음)
Octoparse는 상품 상세, 키워드 검색, 리뷰용 미리 만들어진 Amazon 템플릿을 갖춘 강력한 노코드 스크래핑 플랫폼이에요. 클라우드 스크래핑, 예약 실행, 다단계 워크플로를 지원합니다.
다만 중요한 차이가 있어요. Octoparse의 Chrome Web Store 확장 프로그램은 현재 Octoparse AI Web Automation으로 등록되어 있고, Windows에서 Octoparse AI Bot과 함께 사용할 때만 작동한다고 명시합니다. 즉, 실제 스크래핑 경험은 확장 프로그램 중심이 아니라 플랫폼 중심입니다. Chrome에 설치해서 바로 스크래핑하는 순수한 흐름을 찾는다면, Octoparse는 브라우저 도우미가 붙은 데스크톱 앱에 더 가깝습니다.
그래도 템플릿 자체는 훌륭합니다. 검색 URL을 넣으면 Octoparse가 상품 데이터를 자동 추출하고, 클릭으로 셀렉터를 지정하면서 커스텀 워크플로를 만들 수 있습니다. 페이지네이션과 링크 따라가기로 상세 페이지까지 연결할 수도 있어요.

Octoparse 장단점
장점:
- Amazon 템플릿이 포함된 강력한 기능 세트
- 속도, 예약 실행, 워크플로를 통한 하위 페이지 추출을 위한 클라우드 노드
- 페이지네이션을 잘 처리함
- 복잡한 다단계 스크래핑 파이프라인에 적합
단점:
- 모든 기능을 쓰려면 데스크톱 앱이 필요함 - 순수한 Chrome 확장 프로그램 경험은 아님
- AI 자동 필드 추천 없음(Chat4Data라는 별도 제품은 있지만 다른 확장 프로그램임)
- 무료 플랜은 월 약 5만 건 내보내기, 내보내기당 1만 행으로 제한됨
- 초보자에게는 인터페이스가 복잡하게 느껴질 수 있음
Octoparse 가격
- 무료: 제한적(로컬 추출, 5만 건 내보내기 제한)
- Standard: 월 약 $75-$83
- Professional: 월 약 $208-$249
- 추가 옵션: IP 회전 $3/GB, CAPTCHA 해결 $2-$2.50/1,000건
5. Axiom.ai - 노코드 봇 빌더
Axiom.ai는 노코드 시각 빌더로 브라우저 자동화 봇을 만드는 Chrome 확장 프로그램이에요. 전용 스크래퍼라기보다 범용 자동화 도구에 가깝지만, Amazon 스크래핑 템플릿과 ASIN 추출 가이드도 제공합니다.
Google Sheet에 있는 상품 URL을 반복 처리하는 봇을 만들거나 템플릿을 가져와 각 페이지를 방문하고, 클릭 기반 셀렉터로 데이터를 추출한 뒤, 결과를 다시 Sheet에 적어 넣는 방식입니다. 예약 실행은 유료 플랜에서 사용할 수 있고, 클라우드 실행도 현재 Starter와 Pro에서 클라우드 봇 1개부터 제공되며 Ultimate에서는 최대 20개의 동시 클라우드 봇을 지원합니다.

Axiom.ai 장단점
장점:
- 다용도 노코드 자동화(스크래핑만이 아님)
- Google Sheets와의 기본 연동
- 유료 플랜에서 예약 실행 및 클라우드 실행 지원
- Amazon용 템플릿 제공
- 데이터 추출을 넘어선 다단계 워크플로에 적합
단점:
- 단순 스크래핑치고는 설정이 무거움(봇 설계, Google Sheet 설정, 루프 테스트 필요)
- AI 필드 감지 없음
- 원클릭 하위 페이지 보강 없음(별도 봇 단계를 만들어야 함)
- 내보내기가 Google Sheets 또는 CSV로 제한됨
Axiom.ai 가격
- 무료: 실행 시간 2시간
- Starter: 월 $15
- Pro: 월 $50
- Pro Max: 월 $150
- Ultimate: 월 $250
6. Data Miner - 레시피 기반 확장 프로그램
Data Miner는 "레시피"를 사용해 데이터를 추출하는 데 초점을 맞춘 Chrome 확장 프로그램이에요. 레시피는 미리 정의된 또는 사용자 지정 스크래핑 템플릿입니다. 공개 라이브러리에서 기존 Amazon 레시피를 찾거나, 페이지 요소를 선택해서 직접 만들 수 있습니다.
Data Miner는 Next Page Automation 기능으로 페이지네이션을 지원하고, 상세 URL을 방문해 두 번째 레시피를 적용하는 Crawl Scrape 워크플로도 제공합니다. 그래서 "하위 페이지 스크래핑이 없다"고 하긴 어렵지만, 원클릭 보강이 아니라 수동의 다단계 과정입니다.
가장 큰 제한은 무료 플랜이에요. 월 500페이지이며, 일부 도메인은 무료에서 제한됩니다. 레시피는 사이트별로 다르고, Data Miner 자체 문서에서도 사이트가 바뀌고 참조 HTML 코드가 바뀌면 레시피가 작동하지 않을 것이라고 경고합니다.

Data Miner 장단점
장점:
- 기존 레시피를 쉽게 실행할 수 있음
- 커뮤니티 레시피 라이브러리
- 페이지네이션과 상세 페이지 크롤링 지원(수동 설정)
- 단순한 인터페이스
단점:
- 무료 플랜이 월 500페이지로 제한됨
- AI 필드 감지 없음
- Amazon이 레이아웃을 바꾸면 레시피가 깨짐
- 공개 문서 기준 클라우드 스크래핑 없음, 예약 실행 없음
- 내보내기: CSV, Excel, 클립보드; Google Sheets는 유료 플랜에서 지원
Data Miner 가격
- 무료: 월 500페이지
- 유료: 월 $19.99, $49, $99, $200 플랜으로 갈수록 제한과 기능이 늘어남
7. Helium 10 - Amazon 셀러 인텔리전스 스위트
Helium 10은 범용 웹 스크래퍼가 아니라, Amazon 셀러를 위한 종합 도구 모음이에요. Chrome 확장 프로그램(Xray)은 Amazon 검색 결과 위에 직접 데이터를 오버레이해서 예상 매출, 수익, 리뷰 추세, BSR 등을 보여줍니다. 원시 페이지 데이터를 추출하는 용도라기보다는, Amazon 셀러의 상품 리서치용으로 설계된 도구예요.
Helium 10은 2026년 기준으로 무료 플랜도 있지만, Chrome 확장 프로그램 접근은 무료에서 제한됩니다. 확장 프로그램은 CSV 또는 Excel 형식으로 결과를 내보낼 수 있고, 클립보드 워크플로도 지원합니다.

Helium 10 장단점
장점:
- Amazon 전용의 깊은 인사이트(매출 추정, 키워드 데이터, BSR 추세)
- 전문 셀러들이 신뢰함
- 키워드/순위 추적을 위한 클라우드 기반 데이터와 예약 실행
- 무료 플랜 제공(제한적)
단점:
- 일반 스크래퍼가 아님 - 임의의 페이지에서 사용자 지정 데이터 필드를 추출할 수 없음
- 스크래핑 중심 도구에 비해 비쌈
- 내보내기 형식이 제한적(CSV, Excel)
- AI 필드 감지도 없고, 스크래핑 의미의 하위 페이지 보강도 없음
Helium 10 가격
- 무료: Chrome 확장 프로그램을 포함한 제한적 접근
- Starter: 월 $49
- Platinum: 월 $229
- Diamond: 월 $359
Amazon Scraper Chrome 확장 프로그램 비교: 전체 나란히 보기
아래는 솔직한 비교표입니다. 직접 테스트하고 2026년 기준으로 검증하면서 이전 초안의 몇 가지 가정도 수정했어요.

| 기능 | Thunderbit | Instant Data Scraper | Web Scraper | Octoparse | Axiom.ai | Data Miner | Helium 10 |
|---|---|---|---|---|---|---|---|
| 주요 범주 | AI 스크래퍼 확장 프로그램 | 무료 휴리스틱 스크래퍼 | 셀렉터/템플릿 스크래퍼 | 노코드 스크래핑 플랫폼 | 브라우저 자동화 봇 빌더 | 레시피 기반 스크래퍼 확장 프로그램 | 셀러 리서치 오버레이 |
| AI 자동 필드 추천 | 예 | 아니요 | 아니요 | 아니요(별도 Chat4Data) | 아니요 | 아니요 | 아니요 |
| 하위 페이지 보강 | 예(1클릭) | 아니요 | 예(수동 사이트맵) | 예(워크플로) | 예(수동 봇 단계) | 예(수동 크롤링) | 해당 없음 |
| 클라우드 스크래핑 | 예 | 아니요 | 예(유료) | 예(유료) | 예(유료) | 아니요 | 클라우드 기반 분석 |
| 예약 실행 | 예 | 아니요 | 예(유료) | 예(유료) | 예(유료) | 아니요 | 예(키워드/순위 추적) |
| 무료 플랜 | 예(6~10페이지) | 예(완전 무료) | 예(브라우저만) | 예(제한적) | 예(실행 2시간) | 예(월 500페이지) | 예(제한적) |
| Amazon 미리 만들어진 템플릿 | 예 | 아니요 | 예 | 예 | 예(가이드) | 레시피 라이브러리 | 해당 없음 |
| Sheets/Airtable/Notion으로 내보내기 | 예(모두) | CSV/Excel만 | CSV, Excel, JSON; Sheets는 클라우드 통해 | CSV, Excel, JSON 등 | Google Sheets, CSV | CSV, Excel; 유료 플랜에서 Sheets | CSV, Excel |
몇 가지가 특히 눈에 띕니다. Thunderbit는 AI 필드 감지와 무료 플랜에서 가장 넓은 내보내기 옵션을 모두 갖춘 유일한 확장 프로그램입니다. Instant Data Scraper는 가장 단순한 무료 옵션이지만, 더 이상 유지보수되지 않아요. Web Scraper와 Octoparse는 설정에 시간을 들일 의향이 있는 사용자에게 강력하지만, 둘 다 진짜 의미의 "설치하고 바로 쓰는" 확장 프로그램은 아닙니다. Axiom.ai는 스크래핑을 넘어선 다단계 자동화에 가장 적합합니다. Data Miner는 기존 레시피를 돌리기엔 편하지만 무료 플랜이 빠듯합니다. Helium 10은 일반 스크래퍼가 아니라 셀러 인텔리전스 도구예요.
Amazon의 클라우드 vs 브라우저 스크래핑: 차단 위험에 대해 알아야 할 것
이건 누구나 가장 궁금해하는 부분이에요. Amazon은 자동 스크래핑을 적극적으로 탐지하고 차단합니다. Reddit 사용자들은 고 보고하고, Amazon의 에도 라이선스에 "데이터 마이닝, 로봇 또는 유사한 데이터 수집 및 추출 도구의 사용"이 포함되지 않는다고 명시돼 있습니다.
그렇다면 브라우저 스크래핑과 클라우드 스크래핑의 실제 차이는 뭘까요?
- 브라우저 스크래핑은 본인의 Chrome 세션에서 실행됩니다. 실제 쿠키, 로그인 상태, 자연스러운 브라우징 동작을 사용해요. 적은 양에서는 더 사람처럼 보이지만 브라우저를 점유합니다.
- 클라우드 스크래핑은 원격 서버를 사용해 속도를 높입니다(Thunderbit는 클라우드 모드에서 한 번에 50페이지를 처리합니다). 하지만 탐지를 피하려면 속도 제한과 프록시 회전이 필요해요.
제가 사용하는 의사결정 매트릭스는 다음과 같습니다.
| 상황 | 권장 모드 | 이유 |
|---|---|---|
| 리서치용으로 상품 20개 스크래핑 | 브라우저 | 적은 양, 자연스러운 동작 |
| 경쟁사 SKU 500개를 매주 모니터링 | 클라우드 | 속도가 중요하고 공개 데이터이기 때문 |
| Seller Central에 로그인한 상태에서 스크래핑 | 브라우저 | 로그인 세션이 필요함 |
| 카테고리 전체를 한 번에 대량 내보내기 | 클라우드 | 병렬 스크래핑으로 속도 확보 |
제가 검토한 7개 확장 프로그램 중 클라우드 스크래핑을 제공하는 것은 Thunderbit, Web Scraper(유료), Octoparse(유료), Axiom.ai(유료), 그리고 Helium 10(분석용)입니다. Instant Data Scraper와 Data Miner는 브라우저 전용입니다.
차단 위험을 줄이는 실용적인 팁: 요청 간격을 적절히 유지하고, 피크 시간에는 스크래핑을 피하고, 도구가 지원한다면 사용자 에이전트를 회전하세요. 그리고 "완전한 안전"을 스스로 약속하지는 마세요. 그냥 위험을 관리하는 겁니다.
목록 페이지에서 상품 상세 페이지까지: Amazon에서 하위 페이지 스크래핑이 작동하는 방식
이 워크플로는 충분히 주목받지 못하고 있고, 경쟁 글 중에서 이 과정을 끝까지 보여주는 경우도 거의 없습니다.
Amazon 검색 결과 페이지를 스크래핑하면 상품 제목, 가격, 평점, ASIN, 상품 URL 같은 요약 데이터를 얻습니다. 그런데 실제로는 상세 페이지 데이터도 필요할 때가 많아요. 전체 설명, 핵심 포인트, 이미지 URL, 판매자 정보, 리뷰 세부 내역 같은 것들 말이죠. 이럴 때 하위 페이지 스크래핑이 필요합니다.
Thunderbit에서는 작업 흐름이 이렇게 진행됩니다.
- Amazon 검색 결과 페이지 스크래핑 -> 상품 표를 얻습니다(제목, 가격, 평점, ASIN, 상품 URL).
- "하위 페이지 스크래핑" 클릭 -> Thunderbit가 각 상품 URL을 방문해 상세 필드(설명, 리뷰 수, 판매자명, 이미지 URL 등)를 같은 표에 덧붙입니다.
- 보강된 표를 내보내기 -> Google Sheets, Airtable, Notion, Excel로 보냅니다.
AI가 하위 페이지 구조를 감지해 자동으로 표를 보강합니다. 수동 설정이 필요 없어요. 제 경험상, 이 방식은 상품 페이지를 하나씩 열어 필드를 직접 복사하는 것보다 배치마다 최소 1시간은 절약해 줍니다.
다른 도구들도 할 수는 있지만, 더 많은 수고가 듭니다.
- Web Scraper: 상품 링크를 따라가도록 사이트맵을 구성하고 각 상세 필드의 셀렉터를 정의해야 합니다. 작동은 하지만 다단계 수동 과정입니다.
- Octoparse: 링크 따라가기 단계가 포함된 워크플로를 직접 만들어야 합니다. 강력하지만 원클릭은 아니에요.
- Axiom.ai: 각 URL을 방문해 데이터를 추출하는 봇 루프를 설계해야 합니다. 유연하지만 봇 제작 능력이 필요합니다.
- Data Miner: Crawl Scrape 기능으로 저장된 URL을 방문하고 두 번째 레시피를 적용합니다. 수동이며 레시피 의존적입니다.
- Instant Data Scraper와 Helium 10: 하위 페이지 보강 워크플로가 없습니다.
목록 수준 데이터와 상세 수준 Amazon 데이터가 모두 자주 필요하다면, 선택하는 도구는 이 워크플로를 단순히 가능하게 하는 수준이 아니라, 쉽게 만들어야 합니다.
솔직한 무료 플랜 분석: 결제 없이 실제로 무엇을 얻을 수 있을까?
포럼 사용자들은 이것을 가장 많이 묻고, 경쟁 글들은 그 답을 투명하게 하지 않습니다.
| 확장 프로그램 | 무료 플랜 | 무료로 제공되는 것 | 업그레이드가 필요한 시점 |
|---|---|---|---|
| Thunderbit | 예(6페이지, 체험 시 10페이지) | AI 필드 추천, 모든 내보내기 형식(Excel, Sheets, Airtable, Notion), 이메일/전화 추출기 | 더 많은 페이지가 필요하거나 예약 스크래핑이 필요할 때 |
| Instant Data Scraper | 예(완전 무료) | 기본 표 감지, CSV/Excel 내보내기 | 해당 없음(유료 플랜은 없지만 업데이트도 없음) |
| Web Scraper | 예(브라우저만) | 브라우저 스크래핑, CSV 내보내기 | 클라우드 스크래핑, 예약 실행, 연동 |
| Octoparse | 예(제한적) | 월 약 5만 건 내보내기, 로컬 추출 | 더 많은 레코드, 클라우드 노드 |
| Axiom.ai | 예(실행 2시간) | 기본 자동화, Google Sheets | 더 많은 실행, 예약 실행, 클라우드 |
| Data Miner | 예(월 500페이지) | 레시피, CSV/Excel, Next Page Automation | 더 많은 페이지, Sheets, 크롤링 기능 |
| Helium 10 | 예(제한적) | 제한된 Chrome 확장 프로그램 접근 | 전체 Xray, 키워드 도구, 예약 실행 |
핵심은 이거예요. Thunderbit의 무료 플랜에는 AI 기능과 모든 내보내기 형식이 포함되어 있어서, 대부분의 경쟁 도구가 유료 플랜 뒤에 숨겨두는 고급 내보내기나 AI를 바로 쓸 수 있습니다. Instant Data Scraper는 완전히 무료지만 AI, 하위 페이지, 예약 실행이 없습니다(그리고 더 이상 유지보수되지도 않아요). Helium 10도 무료 플랜은 있지만 확장 프로그램 접근이 제한적이고, 일반 스크래퍼는 아닙니다.
상황별 추천:
- "일단 시험 삼아 써보는 중" -> Instant Data Scraper(완전 무료) 또는 Thunderbit 무료 플랜
- "정기적이고 안정적인 스크래핑이 필요" -> Thunderbit 또는 Web Scraper 유료 플랜
- "Amazon 셀러로서 시장 인사이트가 필요" -> Helium 10
어떤 Amazon 스크래퍼 Chrome 확장 프로그램을 골라야 할까요?
7개를 모두 테스트해본 뒤, 솔직한 제 생각은 이렇습니다.
- 비전문 사용자 중 빠르고 AI 기반 결과를 원하는 분께 가장 좋음: Thunderbit. AI가 필드를 자동 감지하고, 하위 페이지 보강이 한 번에 되며, 내보내기 옵션이 가장 넓고, 클라우드/브라우저 전환도 됩니다. Amazon 페이지에서 스프레드시트까지 2분 안에 가고 싶다면 이걸 고르세요.
- 빠르고 한 번만 쓰는 작업에 가장 좋은 완전 무료 옵션: Instant Data Scraper. 비용이 없고 계정도 필요 없지만 기능이 제한적이고 더 이상 유지보수되지 않습니다.
- 수동 설정에 익숙한 사용자에게 가장 좋음: Web Scraper. 유연한 사이트맵 빌더, 괜찮은 클라우드 옵션, 잘 정리된 문서가 장점입니다.
- 복잡한 다단계 스크래핑 파이프라인에 가장 좋음: Octoparse(데스크톱 + 확장 프로그램) 또는 Axiom.ai(브라우저 봇). 둘 다 강력하지만, 순수한 "설치하고 바로 쓰는" Chrome 확장 프로그램은 아닙니다.
- 간단한 레시피 기반 추출에 가장 좋음: Data Miner. 기존 레시피를 쉽게 쓸 수 있지만, 무료 플랜이 제한적이고 AI는 없습니다.
- Amazon 셀러 인텔리전스에 가장 좋음(일반 스크래핑용 아님): Helium 10. 목적에 맞게 설계됐고, 자체 데이터가 강력하지만 비싸고 일반 스크래퍼는 아닙니다.
AI 기반 Amazon 스크래핑이 실제로 어떤 모습인지 보고 싶다면, . 몇 번의 클릭만으로 얼마나 많은 일을 해낼 수 있는지 아마 놀라실 거예요. 그리고 Thunderbit가 완벽하게 맞지 않더라도, 이 목록의 다른 도구들을 몇 개 써보세요. 복사와 붙여넣기를 멈추고 더 똑똑하게 스크래핑하기 시작하기에 지금만큼 좋은 때는 없어요.
더 많은 Amazon 스크래핑 팁은 , , 가이드를 참고해 보세요. 에서도 튜토리얼을 볼 수 있습니다.
자주 묻는 질문
1. Amazon 상품 데이터를 스크래핑하는 것은 합법인가요?
공개적으로 보이는 데이터를 스크래핑하는 것은 일반적으로 허용되지만, Amazon의 에는 서면 동의 없이 데이터 마이닝과 자동 추출을 명시적으로 금지하고 있습니다. 이 글은 법률 자문이 아니며, 대규모로 스크래핑하기 전에는 항상 Amazon의 약관을 검토해야 합니다.
2. Amazon이 Chrome 확장 프로그램 스크래퍼를 감지하고 차단할 수 있나요?
네. Amazon에는 CAPTCHA를 유발하거나 요청 속도를 제한하거나 IP를 차단하는 안티봇 시스템이 있습니다. 합리적인 요청 속도를 유지하고, 소규모 작업은 브라우저 기반 스크래핑을 사용하고, 대규모 작업은 속도 제한이 있는 클라우드 스크래핑을 사용하면 위험을 줄일 수 있습니다. 실용적인 판단 기준은 위의 클라우드 vs 브라우저 섹션을 참고하세요.
3. Chrome 확장 프로그램으로 Amazon에서 어떤 데이터를 스크래핑할 수 있나요?
보통 상품 제목, 가격, 평점, 리뷰 수, ASIN, 판매자명, 설명, 이미지 URL, 재고 여부, 배송 정보 등을 가져올 수 있습니다. Thunderbit 같은 AI 기반 도구는 수동 설정 없이 이런 필드를 자동으로 감지하고 제안할 수 있습니다.
4. Amazon 스크래퍼 Chrome 확장 프로그램을 쓰려면 코딩이 필요한가요?
아니요. 제가 테스트한 7개 도구는 모두 비전문 사용자를 위해 만들어졌습니다. 일부(Web Scraper, Octoparse, Axiom.ai)는 설정이 더 필요하고, 다른 도구들(Thunderbit, Instant Data Scraper)은 거의 설정이 없습니다. 보통의 차이는 유연성과 사용 편의성 사이에 있습니다.
5. 어떤 Amazon 스크래퍼 Chrome 확장 프로그램의 무료 플랜이 가장 좋나요?
Thunderbit의 무료 플랜에는 AI 필드 감지와 모든 내보내기 형식(Sheets, Airtable, Notion, Excel, CSV, JSON)이 포함되어 있는데, 대부분의 경쟁 도구는 이를 유료 플랜 뒤에 둡니다. Instant Data Scraper는 완전 무료지만 AI, 하위 페이지, 예약 실행이 없습니다. Data Miner는 월 500페이지를 무료로 제공합니다. Helium 10의 무료 플랜은 제한적이며 일반 스크래핑보다 셀러 리서치에 초점이 맞춰져 있습니다.
더 알아보기