Anleitungen
Anti-Bot & JS-Rendering
Was Thunderbit automatisch übernimmt — und was nicht
Ein großer Teil der Reibung bei der Web-Extraktion kommt aus der Infrastruktur: Proxies rotieren, CAPTCHAs lösen, JavaScript rendern, mit Geo-Sperren umgehen. Thunderbit absorbiert das, damit dein Code auf den Daten fokussiert bleibt.
Was wir übernehmen
- JavaScript-Rendering — SPAs, Hydration, asynchron geladene Inhalte (siehe Render-Modi)
- CAPTCHA / Bot-Schranken — automatische Lösung bei unterstützten Challenge-Typen
- Proxy-Rotation — Residential- und Datacenter-Pools, pro Anfrage rotiert
- Geo-Routing — Land per
countryCodefestlegen (z. B."DE","JP") - Anti-Fingerprinting — variierte User Agents, Header, Viewport
- Wiederholung bei transienten Fehlern — DNS- / Verbindungs- / 5xx-Fehler
Was wir nicht übernehmen
- Authentifizierte Sessions — du kannst Cookies via
headersmitgeben, aber interaktive Login-Flows werden nicht unterstützt - Sites, die uns wegen Domain-Reputation blockieren — selten, aber möglich; melde dich für Enterprise-Allowlisting
robots.txt-Overrides — wird standardmäßig respektiert; Enterprise-Pläne können einen Override mit Autorisierungsnachweis anfordern
Stellschrauben
| Parameter | Wann setzen |
|---|---|
renderMode | Seite braucht JS zum Rendern |
waitFor | SPA-Hydration dauert länger als der Default |
countryCode | Geo-bewusste Site (Preise, Suchergebnisse) |
headers | Custom-Auth-Tokens oder Cookies |
Diese Seite wird mit Troubleshooting-Schritten erweitert — schau bald wieder vorbei.