指南
反爬與 JS 渲染
Thunderbit 自動處理什麼 —— 又有什麼不處理
網頁擷取的摩擦多半來自基礎設施:輪換代理、解 CAPTCHA、渲染 JavaScript、處理地理封鎖。Thunderbit 把這些扛下來,讓你的程式碼專注在資料本身。
我們處理的
- JavaScript 渲染 —— SPA、注水、async 載入內容(見 渲染模式)
- CAPTCHA / 反爬牆 —— 對支援的挑戰類型自動求解
- 代理輪換 —— 住宅與資料中心代理池,每個請求輪換
- 地理路由 —— 用
countryCode鎖定國家(如"DE"、"JP") - 反指紋 —— 多樣化的 User Agent、Header、視窗
- 暫時性失敗重試 —— DNS / 連線 / 5xx 錯誤
我們不處理的
- 登入態 session —— 你可以透過
headers傳 cookie,但互動式登入流程不支援 - 以網域聲譽封鎖我們的站點 —— 罕見,但有可能;請洽詢企業白名單方案
- 覆寫
robots.txt—— 預設遵守;企業方案可在提供授權證明後申請覆寫
你能調的旋鈕
| 參數 | 何時設定 |
|---|---|
renderMode | 頁面需要 JS 才能渲染 |
waitFor | SPA 注水比預設更久 |
countryCode | 與地理位置相關的站點(價格、搜尋結果) |
headers | 自訂驗證 token 或 cookie |
本頁正在補充疑難排解步驟 —— 敬請回訪。