Trustpilot에는 3억 6,100만 개의 활성 리뷰가 127만 개 기업에 걸쳐 쌓여 있지만, 이 데이터를 추출하도록 만들어진 스크래퍼의 대부분은 몇 달 전에 이미 무너졌습니다. 최근 리뷰를 가져오려다 보면, 악명 높은 10페이지 로그인 벽에 막혀 도구가 에러만 뱉는 상황을 이미 겪어보셨을 겁니다.
저는 지난 몇 주 동안 2026년에도 Trustpilot 리뷰 데이터를 안정적으로 추출할 수 있는 도구들을 테스트하고, 조사하고, 비교해봤습니다. 시장은 크게 바뀌었습니다. Trustpilot의 봇 차단은 훨씬 더 강력해졌고, Next.js 기반 프론트엔드는 배포할 때마다 클래스명이 바뀌며, 무엇보다 인증되지 않은 접근은 이제 리뷰 10페이지에서 끊깁니다. 2025년 말의 Reddit 스레드는 이런 답답함을 정확히 보여줬습니다. “스토어에 있는 actor 중 아무것도 작동하지 않는다.”
그렇다면 실제로 제대로 되는 도구는 무엇일까요? 저는 로그인 벽 대응, 봇 차단 우회 방식, 유지보수 부담, 그리고 마케터와 개발자 모두의 실사용 관점까지 기준으로 5가지를 평가했습니다.
2026년에 Trustpilot 리뷰 크롤링이 생각보다 훨씬 어려운 이유
Trustpilot은 단순한 정적 웹사이트가 아닙니다. 기본 HTTP 요청을 보내고 BeautifulSoup으로 파싱하면 끝나는 구조가 아니죠. 이 서비스는 Next.js로 만들어진 현대적인 동적 플랫폼이며, 지난 1년 사이 방어도 눈에 띄게 강화됐습니다.
실제로 마주해야 하는 문제는 다음과 같습니다:
10페이지 로그인 벽. 가장 큰 장애물입니다. Web Scraper의 2026년 3월 Trustpilot 가이드에서도 Trustpilot은 리뷰 10페이지까지만 허용하고 그 이후에는 로그인 프롬프트를 띄운다고 밝히고 있습니다. 리뷰가 2,000개인 기업이라면(페이지당 20개 기준 약 100페이지), 인증 세션이 없다면 전체 데이터의 90%를 볼 수 없습니다.
봇 차단 장치. Trustpilot은 reCAPTCHA, 세션 기반 차단, CDN 수준의 요청 필터링, 브라우저 지문 수집을 사용합니다. About 페이지에도 사이트가 “reCAPTCHA로 보호된다”는 점과 디바이스 및 상호작용 신호를 수집한다는 내용이 명시돼 있습니다.
동적 CSS 클래스명. Trustpilot은 Next.js와 CSS modules를 사용하기 때문에 styles_reviewCardInner__EwDq2 같은 클래스명이 빌드 시 생성되고, Trustpilot이 업데이트를 배포할 때마다 바뀝니다. ScraperAPI의 튜토리얼도 바로 이런 셀렉터에 의존하고 있는데, 즉 이 튜토리얼을 그대로 따른 코드는 Trustpilot이 프론트엔드를 바꾸는 순간 깨집니다.
DOM 구조 변경. 클래스명만 바뀌는 게 아닙니다. 실제 HTML 계층 구조도 달라질 수 있습니다. 요소가 다른 방식으로 중첩되거나, 새 래퍼가 생기거나, 페이지네이션 컴포넌트가 재구성될 수 있습니다.
즉, CSS 셀렉터 기반 스크래퍼는 Apify Actor든, Octoparse 워크플로우든, 커스텀 Python 스크립트든 Trustpilot에서는 구조적으로 취약합니다. 되는 듯하다가, 어느 순간 갑자기 안 됩니다. 그리고 그 “어느 순간”은 종종 몇 달이 아니라 몇 주 단위입니다.
최고의 Trustpilot 리뷰 스크래퍼를 고를 때 살펴본 기준
저는 이 도구들을 단순히 “웹페이지를 스크래핑할 수 있나” 수준으로 평가하지 않았습니다. 이 목록에 있는 도구라면 단순한 HTML 페이지 정도는 다 가져올 수 있습니다.
진짜 질문은 이것입니다. 2026년의 Trustpilot을, 그 특유의 까다로운 구조까지 감안해서 제대로 처리할 수 있느냐는 것이죠.
가장 중요했던 기준은 다음과 같습니다:
| 평가 기준 | Trustpilot에서 중요한 이유 |
|---|---|
| 로그인 벽 대응(10페이지 이상) | 대부분의 기업은 리뷰 200개를 훌쩍 넘깁니다. 10페이지 제한이 있으면 과거 데이터 대부분이 빠집니다. |
| 봇 차단 우회 방식 | reCAPTCHA, 세션 차단, CDN 필터링은 허술한 스크래퍼를 바로 막아버립니다. |
| 셀렉터 내구성 / 유지보수성 | 생성형 CSS 클래스는 셀렉터 기반 도구를 자주 무너뜨립니다. 도구가 스스로 복구할 수 있나요? |
| 페이지네이션 지원 | 리뷰는 수백 페이지에 걸쳐 있습니다. 페이지를 하나씩 수동으로 처리하는 방식은 불가능합니다. |
| 노코드 vs. 코드 필요 여부 | 마케터는 클릭 기반을 원하고, 개발자는 완전한 제어권을 원합니다. |
| 가격 / 무료 플랜 | 예산이 중요한 팀이라면 먼저 비용 구조를 분명히 알아야 합니다. |
| 내보내기 옵션 | 비즈니스 사용자에게는 단순 JSON보다 Google Sheets, Airtable, Notion이 더 중요합니다. |
로그인 벽이 사실상 승부를 가릅니다.
도구가 10페이지를 넘지 못하거나, 최소한 인증된 접근 경로를 명확히 제공하지 못한다면 2026년 기준으로는 Trustpilot 스크래퍼로 쓰기 어렵습니다.
한눈에 보는 최고의 Trustpilot 리뷰 스크래퍼
전체 비교는 다음과 같습니다:
| 도구 | 숙련도 | 로그인 벽 대응 | 봇 차단 대응 방식 | 페이지네이션 | 무료 플랜 | 내보내기 옵션 |
|---|---|---|---|---|---|---|
| Thunderbit | 노코드 | 브라우저 모드(로그인된 Chrome 세션 사용) | AI 의미 기반 추출로 레이아웃 변화에 적응 | 자동 감지, 다중 페이지 | 월 6페이지 무료 | Excel, Sheets, Airtable, Notion, CSV, JSON |
| Apify | 로우코드 | Actor별 상이, 일부는 10페이지 초과 시 쿠키 설정 필요 | 내장 프록시 로테이션, Actor별 상이 | Actor별 설정 가능 | 월 $5 상당 무료 플랫폼 크레딧 | JSON, CSV, Excel, XML, RSS |
| Octoparse | 노코드(시각적) | 수동 쿠키/세션 설정 필요 | IP 로테이션, 리지덴셜 프록시, CAPTCHA 해결(유료) | 클릭/스크롤 워크플로우 | 무료 플랜 + 14일 프리미엄 체험 | CSV, Excel, JSON, HTML, XML, 데이터베이스 |
| Web Scraper | 노코드(sitemap 방식) | 제한적 — 자체 가이드에서도 10페이지 제한을 문서화 | 유료 플랜에서 클라우드 + 프록시 | 설정 가능, JS 클릭 권장 | 무료 Chrome 확장 프로그램 | CSV, XLSX |
| ScraperAPI | 개발자용(Python) | 코드 수준의 세션/쿠키 관리 필요 | 4천만+ 리지덴셜 프록시, JS 렌더링, CAPTCHA 처리 | 코드 기반 | 7일 체험, 5,000 API 크레딧 | 개발자가 정의(예: CSV, JSON 등) |
1. Thunderbit
Thunderbit은 웹사이트에서 구조화된 데이터를 코드 없이 가져와야 하는 비즈니스 팀을 위해 만든 AI 기반 Chrome 확장 프로그램입니다. Trustpilot용으로는 전용 리뷰 스크래핑 템플릿이 있어, 리뷰어 이름, 평점, 리뷰 제목, 리뷰 본문, 날짜, 기업 답변까지 한 번에 추출할 수 있습니다.
저는 이 회사에서 일하고 있어서 약간 편향됐을 수 있지만, Thunderbit을 이렇게 설계한 이유는 Trustpilot 스크래핑이 왜 어려운지와 직결됩니다. Thunderbit의 AI는 CSS 셀렉터에 의존하지 않고 페이지를 의미 단위로 읽습니다. Trustpilot이 클래스명을 바꾸거나 DOM 구조를 재편해도, Thunderbit은 HTML 주소가 아니라 요소의 의미를 보고 있기 때문에 적응할 수 있습니다.
Trustpilot 스크래핑용 Thunderbit 체험하기
Thunderbit은 10페이지 로그인 벽을 어떻게 처리하나
여기서 브라우저 모드가 핵심입니다. Thunderbit은 여러분이 이미 Trustpilot에 로그인해 둔 바로 그 Chrome 브라우저 안에서 동작합니다. 브라우저 스크래핑 모드로 전환하면, 확장 프로그램은 인증 세션에서 실제로 보이는 페이지를 읽습니다. 별도의 프록시 꼼수도, 쿠키 주입도, Playwright 세션 풀도 필요 없습니다.
실제 사용 흐름은 간단합니다. Chrome에서 Trustpilot에 로그인한 뒤 원하는 리뷰 페이지로 이동하고 확장 프로그램을 열면 됩니다. 한 번 클릭하면 AI가 페이지에 어떤 리뷰 필드가 있는지 파악하고 자동으로 추출합니다. 다른 형태의 데이터가 필요하다면, 원하는 형식을 설명하면 AI가 그에 맞게 가져옵니다. 이후 페이지네이션은 자동으로 진행되며, Thunderbit은 브라우저 세션이 접근 가능한 모든 페이지를 순차적으로 처리합니다.
Trustpilot이 바뀌어도 Thunderbit이 잘 깨지지 않는 이유
Trustpilot 템플릿 페이지에서도 이를 직접 비교합니다. 기존 스크래퍼는 레이아웃이 바뀌고 CSS 셀렉터를 수정해야 할 때 쉽게 깨집니다. Thunderbit은 특정 CSS에 기대지 않는 의미 기반 AI를 사용해 콘텐츠를 이해하고, 동적 콘텐츠를 처리하며, 자동 페이지네이션까지 관리합니다.
예를 들어 ScraperAPI 튜토리얼 코드는 styles_reviewCardInner__EwDq2 같은 클래스명으로 파싱합니다. Trustpilot이 다음 배포를 하면 이 셀렉터는 바로 무너질 가능성이 큽니다. 반면 Thunderbit의 AI는 “이 페이지에서 리뷰 텍스트가 어디 있지?”라고 묻지, “이 특정 div 클래스 안에 뭐가 들어 있지?”라고 묻지 않습니다.
Trustpilot 스크래핑을 위한 핵심 기능
- AI가 자동 감지하는 필드: 확장 프로그램이 리뷰 필드를 스스로 찾습니다(이름, 평점, 날짜, 제목, 텍스트, 기업 답변). 수동 설정이 필요 없고, 원하는 필드가 따로 있으면 그렇게 지시할 수도 있습니다.
- 원클릭 워크플로우: 한 번 클릭하면 끝입니다. 완성된 표가 바로 나옵니다.
- 로그인 필요한 페이지용 브라우저 모드: 로그인된 Chrome 세션 안에서 동작해 10페이지 이후도 접근 가능
- 자동 페이지네이션: 수동 개입 없이 여러 페이지의 리뷰를 처리
- 서브페이지 스크래핑: 개별 리뷰어 프로필을 방문해 추가 정보를 보강 가능
- 예약 스크래핑: 평판 모니터링을 위해 주간 또는 월간 리뷰 수집 자동화 가능
- 내보내기: Google Sheets, Airtable, Notion, CSV, JSON — 모두 무료 포함
가격
- 무료 플랜: 월 6페이지, 카드 등록 불필요
- 크레딧 기반: 1 크레딧 = 출력 행 1개
- 유료 플랜: 월 $15, 또는 연간 결제 시 월 약 $9(가격 페이지)
추천 대상: 코드 없이 Trustpilot 리뷰가 필요한 마케팅팀, 운영팀, 비즈니스 사용자 — 그리고 몇 주마다 깨지는 스크래퍼를 계속 유지보수하고 싶지 않은 분들.
2. Apify
Apify는 미리 만들어진 “Actor”를 마켓플레이스 형태로 제공하는 클라우드 기반 스크래핑 플랫폼입니다. 여기서 Actor는 다른 사용자나 Apify 팀이 만들어 둔 스크래핑 템플릿을 뜻합니다. Trustpilot용으로는 커뮤니티가 관리하는 여러 Actor가 있고, 신뢰성은 제각각입니다.
Apify의 장점은 강력할 수 있다는 점이지만, 동시에 파편화돼 있다는 점입니다. 어떤 Actor는 잘 작동하고, 어떤 것은 deprecated 상태이며, 어떤 것은 10페이지 이후 쿠키가 필요합니다. Reddit에서 “스토어의 actor 중 아무것도 작동하지 않는다”는 불만이 나오는 이유도 실제로 여기에 있습니다. Trustpilot의 변경이 Actor별 로직을 얼마나 빨리 무너뜨리는지 보여주는 사례입니다.
Trustpilot Actor와 알려진 한계
Apify Store에는 여러 Trustpilot Actor가 있습니다. 적어도 하나(개발자 “burbn” 작성)는 10페이지를 넘는 구간에서 쿠키 입력이 필요하다고 명시합니다. 다른 것들은 평점이 0.0이거나, 사용자 수가 매우 적거나, 최근 수정일이 너무 가까운 경우가 있는데, 이는 유지보수가 진행 중이지만 신뢰성은 들쭉날쭉하다는 신호입니다.
deprecated된 Actor도 눈여겨볼 만합니다. 예전의 한 Actor는 Trustpilot에 내장된 __NEXT_DATA__ JSON을 직접 읽었는데, DOM 파싱보다 빠른 영리한 방식이었지만 Trustpilot이 데이터 구조를 바꾸자 결국 깨졌습니다.
로그인 벽과 봇 차단 대응
- 로그인 벽: 선택한 Actor에 전적으로 달려 있습니다. 어떤 것은 10페이지 이후 쿠키 주입을 지원하고, 어떤 것은 그렇지 않습니다.
- 봇 차단: Apify 플랫폼은 프록시 로테이션과 컴퓨팅 유닛 기반 인프라를 포함합니다. 리지덴셜 프록시는 Free/Starter 플랜에서 GB당 $8에 이용 가능합니다.
- 유지보수: Actor가 깨지면, 유지보수자가 고쳐주길 기다리거나, 다른 Actor로 갈아타거나, 맞춤형 비공개 Actor를 따로 제작해야 합니다.
가격
- 무료 플랜: 월 $5 선결제 사용량, 카드 불필요
- Starter: 월 $9 + 사용량 기반 과금
- Scale: 월 $99 + 사용량 기반 과금
- 내보내기: JSON, CSV, Excel, XML, RSS(Actor에 따라 다름)
추천 대상: 여러 Actor를 비교하고, 쿠키를 설정하고, 문제가 생겼을 때 직접 해결할 수 있는 기술 친화적인 사용자. 손대지 않고 오래 두는 용도로는 적합하지 않습니다.
3. Octoparse
Octoparse는 시각적 클릭형 워크플로우 빌더를 제공하는 데스크톱 기반 노코드 스크래퍼입니다. Thunderbit의 원클릭 간편함과 ScraperAPI의 개발자 자유도 사이에 있는 도구라고 볼 수 있습니다. 코드는 쓰지 않지만, 여전히 워크플로우를 직접 만들고 유지해야 합니다.
Octoparse에서 Trustpilot 스크래핑 설정하기
설정은 비교적 직관적이지만 수동 작업이 필요합니다:
- Trustpilot 비즈니스 리뷰 URL을 붙여넣기
- 리뷰 요소(제목, 본문, 평점, 날짜, 리뷰어 이름)를 시각적으로 선택
- 다음 페이지 버튼으로 페이지네이션 루프 정의
- 대기 시간 설정(reCAPTCHA를 피하려면 2~5초 권장)
- 소규모 샘플은 로컬 실행, 대량 작업은 클라우드 실행
도구에 익숙한 사람이라면 10~15분 정도면 설정할 수 있습니다. 다만 Octoparse는 DOM 요소에 연결된 시각적 셀렉터를 쓰기 때문에, Trustpilot이 페이지 구조를 바꿀 때마다 워크플로우를 수정해야 합니다.
로그인 벽과 봇 차단 대응
- 로그인 벽: 수동 로그인/쿠키/세션 설정이 필요합니다. 자동으로 처리되지는 않습니다.
- 봇 차단: 유료 플랜에는 IP 로테이션, 리지덴셜 프록시($3/GB), 자동 CAPTCHA 해결($천 회당 $1~1.5)이 포함됩니다.
- 유지보수: 중간 정도입니다. Trustpilot이 프론트엔드를 업데이트하면 워크플로우를 다시 만들거나 조정해야 할 가능성이 높습니다.
가격
- 무료 플랜: 영구 무료, 작업 10개, 기기 1대, 로컬 추출, 월 최대 5만 행
- Standard: 월 $69(연간 청구)
- Professional: 월 $149
- 14일 프리미엄 체험: 클라우드 추출, 예약, API, 템플릿 포함
- 내보내기: Excel, CSV, JSON, HTML, XML; 상위 요금제에서는 데이터베이스와 Google Sheets 지원
추천 대상: 시각적 워크플로우 제어를 원하고, 초기 세팅 시간을 감수할 수 있으며, 페이지가 바뀔 때 워크플로우를 유지보수하는 데 익숙한 사용자. 원클릭 도구보다 세밀한 설정은 필요하지만 Python을 직접 쓰는 것보다는 단순해야 하는 팀에 잘 맞습니다.
4. Web Scraper
Web Scraper는 sitemap 기반 접근 방식을 사용하는 Chrome 확장 프로그램이자 클라우드 플랫폼입니다. Trustpilot에서 가장 강점이 있는 부분은 사전 제작된 비즈니스 페이지 템플릿으로, 회사명, 카테고리, 주소, 평점, 리뷰 수, TrustScore, 웹사이트 URL 같은 기업 수준 데이터를 추출합니다.
리뷰 스크래핑 관점에서는, 꼭 짚고 넘어가야 할 제한이 하나 있습니다.
사전 제작 템플릿 vs. 커스텀 설정
마켓플레이스 템플릿은 Trustpilot 카테고리 전반의 비즈니스 프로필을 긁어오는 기업 탐색용으로는 잘 맞습니다. 커스텀 리뷰 추출이 필요하다면 Sitemap Wizard를 사용해 Chrome 확장 프로그램 안에서 시각적으로 스크래퍼를 만들 수 있습니다.
Web Scraper의 2026년 3월 가이드는 Trustpilot이 페이지 간 콘텐츠를 동적으로 재정렬할 수 있어 결과가 밀릴 수 있으므로, URL 기반 페이지네이션보다 JavaScript 클릭 페이지네이션을 권장합니다.
로그인 벽과 봇 차단 대응
여기서는 솔직함이 중요합니다. Web Scraper의 공식 가이드에는 Trustpilot이 리뷰 10페이지까지만 허용하고 그 이후에는 로그인 프롬프트를 띄운다고 명확히 적혀 있습니다. 이 가이드는 우회 방법을 제시하기보다 이 제한을 이미 알려진 한계로 문서화하고 있습니다.
- 로그인 벽: 제한적 대응. 10페이지 리뷰 제한이 자체 가이드에 명시돼 있습니다.
- 봇 차단: 클라우드 플랜에는 프록시 지원이 포함되며, 가이드에서는 2~5초 지연과 동시성 축소를 권장합니다.
- 페이지네이션: 설정은 가능하지만, 인증되지 않은 접근에서는 사실상 첫 10페이지까지만 가능합니다.
가격
- 무료 Chrome 확장: 로컬 스크래핑, 제한된 기능
- Project: 월 $50(URL 크레딧 5,000개)
- Professional: 월 $100(URL 크레딧 20,000개)
- Scale: 월 $200부터(조건부 무제한 URL 크레딧)
- 유료 클라우드 플랜 7일 무료 체험
- 내보내기: CSV, XLSX
추천 대상: Trustpilot 기업 프로필을 긁어오는 기성 템플릿이 필요하거나, 첫 10페이지만 필요한 사용자. 리뷰 수가 많은 기업의 전체 리뷰 히스토리가 필요하다면 적합하지 않습니다.
5. ScraperAPI
ScraperAPI는 개발자를 위한 스크래핑 인프라입니다. 클릭 한 번으로 쓰는 도구가 아니라, 파싱 로직은 직접 작성하고 봇 차단 대응은 프록시/렌더링 레이어가 맡는 구조입니다. Trustpilot 솔루션 페이지에서는 JS 렌더링, CAPTCHA 처리, 4천만 개 이상의 프록시를 내세웁니다.
Python 개발자이고 추출 로직을 완전히 내 손에 두고 싶다면, ScraperAPI가 기반 시설을 제공합니다.
그 대신 유지보수도 직접 맡아야 합니다.
ScraperAPI로 커스텀 Trustpilot 스크래퍼 만들기
ScraperAPI의 2026년 1월 튜토리얼은 Python + BeautifulSoup 워크플로우를 보여줍니다:
import requests
from bs4 import BeautifulSoup
payload = {
"api_key": "YOUR_API_KEY",
"url": "https://www.trustpilot.com/review/example.com",
"render": "true",
"keep_headers": "true",
}
html = requests.get("https://api.scraperapi.com", params=payload).text
soup = BeautifulSoup(html, "html.parser")
이 튜토리얼의 완성 코드에서는 pages_to_scrape = 10으로 설정되어 있어, 사실상 공개 접근은 10페이지까지라는 점을 암묵적으로 인정합니다. 10페이지를 넘는 구간에서는 개발자가 인증 세션, 쿠키, 토큰을 직접 관리해야 합니다.
로그인 벽과 봇 차단 대응
- 로그인 벽: 코드 수준의 세션/쿠키 관리가 필요합니다. ScraperAPI가 프록시와 렌더링을 처리하고, 인증 로직은 여러분이 맡습니다.
- 봇 차단: 자동 IP 로테이션이 포함된 리지덴셜 프록시 풀,
render=true를 통한 JS 렌더링, 스마트 프록시 로테이션을 통한 CAPTCHA 처리. 모든 플랜에서 이용 가능. - 유지보수: Trustpilot이 클래스명을 바꾸면(실제로 자주 바꿉니다) 파싱 코드를 수정해야 합니다. 튜토리얼에 나온
styles_reviewCardInner__EwDq2셀렉터는 이미 시간문제에 가깝습니다.
가격
- 7일 체험: 5,000 API 크레딧 무료, 카드 불필요
- Hobby: 월 $49(API 크레딧 100,000개)
- Startup: 월 $149(1,000,000 크레딧)
- Business: 월 $299(3,000,000 크레딧)
- 내보내기: 코드가 만드는 대로(보통 CSV, JSON, DB 기록 등)
추천 대상: 완전한 커스터마이징을 원하고, 직접 파싱 스크립트를 유지보수할 수 있으며, 세션 관리·페이지네이션 로직·데이터 구조를 프로그래밍 방식으로 제어해야 하는 개발자. 비기술 사용자에게는 적합하지 않습니다.
Trustpilot 스크래퍼가 계속 깨지는 이유와, 안 깨지는 도구를 고르는 법
Trustpilot 스크래퍼를 고를 때 가장 과소평가되는 요소가 바로 이것입니다. 핵심 질문은 “오늘 이 도구가 작동하느냐?”가 아닙니다. “3주 뒤에도 작동할까?”입니다.
Trustpilot에서 스크래퍼가 깨지는 이유는 주로 네 가지입니다:
-
생성된 CSS 클래스 변경. Next.js CSS modules는
styles_reviewCardInner__EwDq2같은 클래스명을 만들어냅니다. 이 값은 프론트엔드 배포마다 달라집니다. 이런 클래스를 타깃으로 한 스크래퍼는 쉽게 깨집니다. -
DOM 구조 변경. Trustpilot은 HTML 계층을 재구성할 수 있습니다. 리뷰 카드의 중첩 방식이 바뀌거나, 래퍼 요소가 달라지거나, 메타데이터 위치가 바뀔 수 있습니다.
-
봇 차단 트리거 변경. reCAPTCHA 임계값이 달라지고, 세션 토큰 로테이션이 더 공격적으로 변하고, CDN 필터링 규칙이 업데이트됩니다.
-
인증/세션 변경. 10페이지 로그인 벽은 2025년 후반에 도입되었거나 더 엄격해졌습니다. 앞으로도 접근 제한은 언제든 생길 수 있습니다.
근본적인 구조 차이는 셀렉터 기반 추출과 의미 기반 추출 사이에 있습니다:
-
셀렉터 기반 도구(Apify Actor, Octoparse 워크플로우, ScraperAPI 스크립트, Web Scraper sitemap)는 “정확히 이 CSS 경로에 있는 요소를 찾아라”라고 묻습니다. 경로가 바뀌면 조용히 실패하거나 빈 데이터를 돌려줍니다.
-
의미/AI 기반 도구(Thunderbit)는 “이 페이지에서 리뷰 텍스트, 평점, 날짜를 찾아라”라고 묻습니다. AI는 HTML 주소가 아니라 의미로 페이지 콘텐츠를 해석합니다. 레이아웃이 바뀌어도 의미가 같다면 깨지지 않습니다.
제 추천은 다음과 같습니다:
- 유지보수 거의 0원하나요? → AI 기반(Thunderbit)
- 약간의 유지보수는 괜찮고, 클라우드 자동화를 원하나요? → Apify(Actor 선택과 모니터링 필요)
- 시각적 제어와 중간 정도의 유지보수면 충분한가요? → Octoparse
- 템플릿 기반, 범위가 제한된 도구가 필요한가요? → Web Scraper
- 완전한 제어권이 필요한가요? → ScraperAPI
스크래핑한 Trustpilot 리뷰를 어떻게 활용할까
리뷰를 추출하는 건 첫 단계일 뿐입니다. 포럼에서 가장 자주 보는 질문도 결국 이겁니다. “데이터는 있는데, 이제 뭘 하지?”
감성 분석
가장 간단한 흐름은 리뷰를 Google Sheets로 내보낸 뒤, AI 도구(ChatGPT, Claude, 또는 Sheets의 AI 함수)를 이용해 각 리뷰를 긍정/중립/부정으로 분류하는 것입니다. 여기에 불만 유형, 긴급도, 권장 조치 우선순위 같은 열도 추가할 수 있습니다.
데이터가 많다면 CSV를 ChatGPT에 업로드하고 이렇게 요청해보세요. “이 리뷰들을 감성별로 분류하고, 대표 인용문과 함께 상위 5개 불만 주제를 정리해줘.”
경쟁사 모니터링
Thunderbit의 예약 스크래핑을 사용해 경쟁사 리뷰를 주간 또는 월간 단위로 수집하세요. 다음 지표를 추적하면 됩니다:
- 시간에 따른 평균 평점 추세
- 1점 및 2점 리뷰 비중
- 리뷰 수 변화(리뷰가 늘고 있는지, 줄고 있는지)
- 가장 자주 언급되는 불만 주제
- 기업 답변 비율과 응답 속도
평점과 날짜 기준 피벗 테이블이 있는 간단한 Google Sheets 대시보드만으로도 자동 업데이트되는 경쟁 인텔리전스 피드를 만들 수 있습니다.
주제 추출
리뷰를 다음과 같은 범주로 묶어보세요: 배송/배달, 고객 지원, 환불, 제품 품질, 청구/결제, 앱 사용성, 가격/가성비, 사기 우려. 결과물은 다음 열을 포함한 표가 좋습니다: 주제, 건수, 평균 평점, 대표 인용문, 권장 비즈니스 액션.
이 방식은 워드클라우드보다 훨씬 실용적입니다. 실제로 무엇이 만족과 불만을 만드는지 알려주니까요.
대량 다중 기업 분석
카테고리 단위 리서치라면 같은 Trustpilot 카테고리 안의 여러 기업에서 리뷰를 수집해보세요. 각 시장 세그먼트별로 리뷰 수, 평점, 별점 분포, 주제 비중을 비교할 수 있습니다. Web Scraper의 비즈니스 목록 템플릿은 기업을 찾는 데 유용하고, 각 기업의 리뷰 수준 샘플링은 Thunderbit 또는 ScraperAPI로 처리할 수 있습니다.
Trustpilot 스크래핑의 법적·윤리적 고려사항
저는 변호사가 아니며, 이 글은 법률 자문이 아닙니다. 하지만 컴플라이언스 현실은 분명히 중요합니다.
Trustpilot 이용 약관은 명확합니다. 사용자가 Trustpilot이 제공하거나 명시적으로 승인한 방식 외의 수단으로 콘텐츠에 접근하거나 수집하는 것을 금지하고 있으며, 특히 명시적 허가 없는 텍스트 마이닝, 데이터 마이닝, 웹 스크래핑을 언급합니다.
위험 수준은 대체로 다음과 같습니다:
- 낮은 위험: 자사 리뷰를 내부 분석용으로 내보내는 경우, 특히 Trustpilot의 공식 비즈니스 도구나 API를 사용하는 경우
- 중간 위험: 시장 조사를 위해 공개 경쟁사 페이지를 저빈도로 스크래핑하는 경우. 그래도 약관과 개인정보 의무는 적용됩니다.
- 높은 위험: 인증 벽 뒤의 10페이지 이상 콘텐츠를 스크래핑하거나, 기술적 통제를 우회하거나, 리뷰어 데이터를 재배포하거나, 스크래핑한 리뷰를 AI 모델 학습에 사용하는 경우
GDPR 고려사항: 리뷰어 이름, 프로필 링크, 리뷰 텍스트, 위치 정보는 EU 개인정보법상 개인 데이터가 될 수 있습니다. 실무적으로는 필요한 필드만 수집하고, 내부 분석용으로는 리뷰어 이름을 해시 처리하며, 데이터 보관 기간을 설정하고, 원문 리뷰를 대규모로 재게시하지 않는 등의 안전장치가 필요합니다.
공개 데이터 vs. 인증 데이터: 누구나 볼 수 있는 페이지(첫 10개 리뷰 페이지)를 스크래핑하는 것과, 인증 벽 뒤의 데이터를 가져오는 것은 법적·윤리적으로 의미 있는 차이가 있습니다. 공개 데이터만 다루는 도구는 로그인 자격 증명이 필요한 도구보다 컴플라이언스 위험이 낮습니다.
도구 선택에서도 이 점을 반드시 고려해야 합니다. Thunderbit의 브라우저 모드는 여러분 자신의 세션에서 보이는 페이지를 사용하는 것이지, 인증을 독자적으로 우회하지 않습니다. ScraperAPI는 개발자에게 완전한 제어권을 주지만, 세션 관리의 적법성까지 전부 책임져야 합니다.
적합한 Trustpilot 리뷰 스크래퍼 고르는 법
페르소나별 의사결정 프레임은 다음과 같습니다:
- 코드 없이 리뷰가 필요한 비기술 마케터? → Thunderbit. 한 번 클릭하면 나머지는 AI가 처리하고, Sheets/Notion/Airtable로 내보낼 수 있습니다.
- 설정과 디버깅에 익숙한 로우코드 사용자? → Apify. Actor를 선택하고, 10페이지 이후용 쿠키를 설정하고, 깨짐 여부를 모니터링하세요.
- 워크플로우 제어가 필요한 시각적 빌더 사용자? → Octoparse. 클릭형 설정이 가능하지만 Trustpilot이 바뀌면 유지보수를 예상해야 합니다.
- 기업 수준 데이터나 첫 10페이지 리뷰만 필요? → Web Scraper. 비즈니스 프로필용 사전 제작 템플릿이 강점입니다.
- 완전한 커스터마이징이 필요한 개발자? → ScraperAPI. 파싱 로직, 세션 관리, 데이터 파이프라인을 직접 책임집니다.
유지보수 허용도가 가장 중요하다면 스펙트럼은 Thunderbit(거의 유지보수 없음)에서 ScraperAPI(모든 것을 직접 유지보수)까지 이어집니다. 예산 측면에서는 이 목록의 모든 도구에 무료 진입점이 있으니, 결제 전에 먼저 사용해보는 게 좋습니다.
결론
Trustpilot 리뷰 데이터는 경쟁사 분석, 평판 모니터링, 고객 인사이트 확보에 정말 유용합니다.
하지만 2026년에는 이 데이터를 안정적으로 추출하려면 10페이지 로그인 벽을 처리하고, DOM 변경에 적응하며, 봇 차단을 수동 개입 없이 넘길 수 있는 도구가 필요합니다.
대부분의 비즈니스 사용자에게는 Thunderbit가 가장 수월한 선택입니다. 원클릭, AI 기반 필드 감지, 인증 페이지를 위한 브라우저 모드, 그리고 Trustpilot이 프론트엔드를 바꿔도 유지보수가 거의 필요 없습니다. 카드 없이 월 6페이지까지 무료로 체험할 수 있습니다.
완전한 제어권이 필요한 개발자라면 ScraperAPI가 인프라를 제공합니다. 그 사이에 있는 사용자에게는 Apify, Octoparse, Web Scraper가 각각의 니치를 채워줍니다. 중요한 것은 여러분의 기술 수준, 유지보수 허용도, 컴플라이언스 요구사항에 맞는 도구를 고르는 것입니다.
Thunderbit이 Trustpilot을 어떻게 처리하는지 직접 보고 싶다면, YouTube 채널에 안내 영상이 있습니다. 그리고 코딩 없이 웹 스크래핑하는 방법이나 웹 스크래핑이 정확히 무엇인지 같은 더 넓은 맥락이 궁금하다면, 관련 가이드도 함께 참고해보세요.
자주 묻는 질문
1. Trustpilot 리뷰를 10페이지 이후까지 스크래핑할 수 있나요?
가능하지만, 인증 경로가 있어야 합니다. Trustpilot은 인증되지 않은 접근을 첫 10개 리뷰 페이지 이후로 차단합니다. Thunderbit의 브라우저 모드는 로그인된 Chrome 세션 안에서 동작하므로, 여러분이 볼 수 있는 페이지에 접근할 수 있습니다. ScraperAPI는 코드 수준의 세션/쿠키 관리가 필요하고, Apify Actor는 쿠키 설정이 필요합니다. Octoparse는 수동 로그인/쿠키 설정이 필요합니다. Web Scraper의 공식 문서도 10페이지 제한을 인정하지만, 내장 우회 방법은 제공하지 않습니다.
2. Trustpilot 리뷰를 스크래핑하는 것은 합법인가요?
Trustpilot 이용 약관은 명시적 허가 없는 자동화된 데이터 수집을 금지합니다. 법적 위험은 방식과 사용 목적에 따라 달라집니다. 자사 공개 리뷰를 스크래핑하는 것보다, 인증 벽을 우회해 경쟁사 데이터를 가져오는 쪽이 더 위험합니다. EU 리뷰어 데이터에는 GDPR이 적용됩니다. 이는 법률 자문이 아니므로, 대규모 또는 상업적 스크래핑 프로젝트라면 반드시 법률 전문가와 상의하세요.
3. Trustpilot에서 어떤 데이터를 추출할 수 있나요?
일반적으로 추출 가능한 필드는 다음과 같습니다: 리뷰어 이름, 별점, 리뷰 제목, 리뷰 본문, 게시 날짜, 경험 날짜, 구매 인증 여부, 리뷰어 위치, 기업 답변 텍스트, 회사명, TrustScore, 전체 리뷰 수, 별점 분포, 리뷰 URL.
4. Trustpilot 스크래퍼는 얼마나 자주 깨지나요?
셀렉터 기반 도구(Apify Actor, Octoparse 워크플로우, 커스텀 Python 스크립트)는 Trustpilot이 CSS 클래스나 DOM 구조를 바꿀 때마다 깨질 수 있습니다. 이런 변화는 한 달에 여러 번 일어날 수도 있습니다. Thunderbit 같은 AI 의미 기반 도구는 특정 셀렉터를 타깃하지 않고 페이지의 의미를 해석하기 때문에 자동으로 적응합니다. 다만 10페이지 로그인 벽처럼 큰 접근 제어 변경에는 어떤 도구도 완전히 안전하지 않습니다.
5. Trustpilot 리뷰를 무료로 스크래핑할 수 있나요?
이 목록의 모든 도구에는 무료 진입점이 있습니다. Thunderbit은 월 6페이지 무료, ScraperAPI는 7일 동안 5,000 무료 API 크레딧, Web Scraper는 로컬 사용용 무료 Chrome 확장 프로그램, Octoparse는 평생 무료 플랜(작업 10개, 월 50,000행), Apify는 월 $5의 무료 플랫폼 크레딧을 제공합니다. 소규모 샘플링이나 테스트라면 모두 결제 없이 사용할 수 있습니다.
Trustpilot 리뷰 스크래핑용 Thunderbit 체험하기 Get Started Free
더 알아보기
