KI-gestützter Web Scraper API

Kein Wartungsaufwand. Nie.

Ein API-Aufruf, um jede Webseite in Markdown oder Tabellen zu verwandeln. Versorgen Sie Ihren Agenten mit aktuellen Webdaten, bauen Sie RAG auf und reichern Sie Datenbanken an — wir übernehmen die Infrastruktur.

In wenigen Minuten einsatzbereit

Jetzt direkt im Terminal ausprobieren.

>_
URL zu Markdown
1import requests
2
3resp = requests.post(
4 "https://openapi.thunderbit.com/openapi/v1/distill",
5 headers={"Authorization": f"Bearer {API_KEY}"},
6 json={"url": "https://example.com/article"}
7)
8
9markdown = resp.json()["data"]["markdown"]
Core API

Zwei Kernfunktionen

Distill für saubere Inhalte, Extract für strukturierte Daten

Distill
URLMarkdown
Entfernt Werbung, Navigation und Störfaktoren — behält nur den relevanten Inhalt
Vollständiges JS-Rendering und Anti-Bot-Bypass integriert
Bis zu 100 URLs pro Anfrage im Batch
Extract
URL + SchemaJSON / CSV
Ein Schema funktioniert für alle Websites — keine Wartung pro Website
Übersteht Website-Redesigns automatisch
Bis zu 50 URLs pro Anfrage im Batch
Vorteile

Warum Thunderbit nutzen

Die Scraping-/Datenextraktions-Infrastruktur, die Ihr KI-Agent verdient

Definieren, was, nicht wie
Keine CSS-Selektoren, kein XPath, keine Regeln pro Website. Beschreiben Sie die benötigten Daten mit einem JSON Schema — die KI findet heraus, wo sie sich befinden und wie man sie erhält.
Ein Schema, jede Website
Dasselbe Schema funktioniert für E-Commerce-Websites, Verkaufsanzeigen oder jede beliebige URL. Eine neue Datenquelle hinzuzufügen ist eine Konfigurationsänderung, kein Engineering-Sprint.
Funktioniert weiter, wenn Websites sich ändern
Traditionelle Scraper scheitern bei jedem Redesign. Thunderbit liest die Bedeutung, nicht die DOM-Struktur — daher funktioniert die Extraktion weiter, selbst wenn sich das HTML darunter ändert.
Branchen

Anwendungsfälle

Was Sie mit Thunderbit bauen können

KI-Agenten mit Webzugriff
Geben Sie Ihrem Agenten die Fähigkeit, jede Webseite zu lesen und zu verstehen. Ein API-Aufruf liefert strukturierten Kontext, bereit für den nächsten Schritt Ihres Agenten.
RAG & Wissensdatenbanken
Verwandeln Sie jede URL in sauberes Markdown und speisen Sie es direkt in Ihre Vektordatenbank ein. Kein HTML-Parsing, keine Skripte zur Inhaltsbereinigung.
Jede Website in eine API verwandeln
Schema definieren, URL angeben, JSON zurückerhalten. Erstellen Sie eine Produktpreis-API, eine Jobanzeigen-API oder eine News-Feed-API — ohne einen einzigen Scraper zu schreiben.
Datenbank-Anreicherung
Halten Sie Ihre Datenbank mit aktuellen Webdaten frisch. Rufen Sie Firmenprofile, Kontaktdaten oder Anzeigen-Details nach Zeitplan ab — das Schema bleibt gleich, auch wenn sich die Quellen ändern.
Wettbewerbsmonitoring
Verfolgen Sie Preise, Lagerbestände, Bewertungen oder Inhaltsänderungen über Hunderte von Seiten hinweg. Gleiches Schema, gleiche Pipeline, neue Quellen in Sekunden hinzufügen.
Datensatz-Erstellung
Erstellen Sie Trainingsdatensätze, Evaluierungs-Benchmarks oder Forschungsdatensätze aus dem offenen Web. Verarbeiten Sie Tausende von URLs im Batch zu einheitlich strukturierten Ausgaben.

Wir bauen Thunderbit auf dieser API

Dieselbe API, die Sie hier sehen, treibt Thunderbits Chrome-Erweiterung und Web-App an — genutzt von über 200.000 Nutzern, um jeden Monat zig Millionen Seiten zu extrahieren. Das ist kein Nebenprojekt. Es ist die Infrastruktur, auf die wir unser eigenes Produkt setzen.

0M+
Monatlich verarbeitete Seiten und wachsend
0K+
Nutzer der Thunderbit-Erweiterung
0%
Verfügbarkeit
Plan

Preise

Kostenlos starten, mit dem Wachstum zahlen

Kostenlos
Eine unkomplizierte Möglichkeit, Scraping auszuprobieren. Kostenlos, keine Karte, kein Aufwand.
600 Einheiten / einmalig
$0einmalig
 
Distill 600 Seiten
  • Distill: 1 Page = 1 API Unit
  • Extract: 1 Page = 20 API Unit
Extract 30 Seiten
  • Distill: 1 Page = 1 API Unit
  • Extract: 1 Page = 20 API Unit
2 gleichzeitige Anfragen
Starter
Ideal für Nebenprojekte und kleine Tools. Schnell, einfach, ohne Overkill.
60,000 API-Einheiten / Jahr
$16/Monat
Jährliche Abrechnung. Alle Einheiten im Voraus.
Distill 60,000 Seiten
  • Distill: 1 Page = 1 API Unit
  • Extract: 1 Page = 20 API Unit
Extract 3,000 Seiten
  • Distill: 1 Page = 1 API Unit
  • Extract: 1 Page = 20 API Unit
30 gleichzeitige Anfragen
Basis-Support
Pro1Am beliebtesten
Für hohes Volumen und hohe Geschwindigkeit entwickelt. Thunderbit in voller Stärke.
600,000 API-Einheiten / Jahr
$40/Monat
Jährliche Abrechnung. Alle Einheiten im Voraus.
600K1200K2400K4800K
Distill 600,000 Seiten
  • Distill: 1 Page = 1 API Unit
  • Extract: 1 Page = 20 API Unit
Extract 30,000 Seiten
  • Distill: 1 Page = 1 API Unit
  • Extract: 1 Page = 20 API Unit
50 gleichzeitige Anfragen
Prioritäts-Support

Häufig gestellte Fragen

Alles, was Sie über das Produkt und die Abrechnung wissen müssen.