Gidsen
Anti-bot & JS-rendering
Wat Thunderbit automatisch afhandelt — en wat niet
Veel van de wrijving in web-extractie komt voort uit infrastructuur: proxies roteren, CAPTCHA's oplossen, JavaScript renderen, omgaan met geo-blokkades. Thunderbit absorbeert dat zodat jouw code zich op de data blijft richten.
Wat wij afhandelen
- JavaScript-rendering — SPA's, hydratie, async-geladen inhoud (zie Render Modes)
- CAPTCHA / bot-muren — automatisch oplossen op ondersteunde challenge-types
- Proxy-rotatie — residentiële en datacenter-pools, geroteerd per request
- Geo-routing — fixeer een land met
countryCode(bijv."DE","JP") - Anti-fingerprinting — gevarieerde user agents, Headers, viewport
- Retry bij tijdelijke storingen — DNS- / verbindings- / 5xx-fouten
Wat wij niet afhandelen
- Geauthenticeerde sessies — je kunt cookies meegeven via
headers, maar interactieve loginflows worden niet ondersteund - Sites die ons blokkeren op basis van domeinreputatie — zeldzaam, maar mogelijk; neem contact op voor enterprise-allowlisting
robots.txt-overrides — standaard gerespecteerd; enterprise-plannen kunnen override aanvragen met bewijs van autorisatie
Knoppen die je kunt verdraaien
| Parameter | Wanneer instellen |
|---|---|
renderMode | Pagina heeft JS nodig om te renderen |
waitFor | SPA-hydratie duurt langer dan standaard |
countryCode | Geo-bewuste site (prijzen, zoekresultaten) |
headers | Aangepaste auth-Tokens of cookies |
Deze pagina wordt uitgebreid met troubleshooting-stappen — kom snel terug.