AI-Powered Web Scraper API

Sıfır bakım. Her zaman.

Herhangi bir web sayfasını Markdown'a veya tablolara dönüştürmek için tek bir API çağrısı yeterli. Ajanınızı canlı web verileriyle besleyin, RAG oluşturun ve veritabanlarını zenginleştirin — altyapıyı biz yönetiriz.

Dakikalar içinde hazır

Hemen terminalinizde deneyin.

>_
URL'den Markdown'a
1import requests
2
3resp = requests.post(
4 "https://openapi.thunderbit.com/openapi/v1/distill",
5 headers={"Authorization": f"Bearer {API_KEY}"},
6 json={"url": "https://example.com/article"}
7)
8
9markdown = resp.json()["data"]["markdown"]
Core API

İki temel özellik

Temiz içerik için Distill, yapılandırılmış veri için Extract

Distill
URLMarkdown
Reklamları, menüleri ve gereksiz öğeleri kaldırır — sadece önemli içeriği bırakır
Tam JS render etme ve bot engeli aşma dahildir
İstek başına en fazla 100 URL
Extract
URL + ŞemaJSON / CSV
Tek şema tüm web sitelerinde çalışır — site bazlı bakım gerekmez
Site tasarım değişikliklerine otomatik olarak dayanır
İstek başına en fazla 50 URL
Avantajlar

Thunderbit neden kullanılır

AI ajanın hak ettiği kazıma / veri çıkarma altyapısı

Nasıl değil, neyi tanımlayın
CSS seçiciler yok, XPath yok, siteye özel kurallar yok. İhtiyacınız olan veriyi bir JSON Şeması ile tanımlayın — AI bunun nerede olduğunu ve nasıl alınacağını bulur.
Tek şema, her web sitesi
Aynı şema e-ticaret sitelerinde, satış ilanlarında veya verdiğiniz herhangi bir URL'de çalışır. Yeni bir veri kaynağı eklemek, mühendislik sprinti değil bir yapılandırma değişikliğidir.
Siteler bozulsa bile çalışmaya devam eder
Geleneksel kazıyıcılar her yeniden tasarımda bozulur. Thunderbit DOM yapısını değil, anlamı okur — bu yüzden HTML altta değişse bile veri çekme çalışmaya devam eder.
Sektörler

Kullanım alanları

Thunderbit ile neler geliştirebilirsiniz

Web erişimli AI Ajanları
Ajanınıza herhangi bir web sayfasını okuyup anlama yeteneği kazandırın. Tek bir API çağrısı, ajanın bir sonraki adımı için hazır yapılandırılmış bağlam döndürür.
RAG ve Bilgi Tabanları
Herhangi bir URL'yi temiz Markdown'a dönüştürün ve doğrudan vektör veritabanınıza aktarın. HTML ayrıştırma yok, içerik temizleme betikleri yok.
Her Web Sitesini Bir API'ye Dönüştürün
Bir şema tanımlayın, bir URL verin, JSON alın. Tek bir kazıyıcı yazmadan bir ürün fiyatı API'si, iş ilanı API'si veya haber akışı API'si oluşturun.
Veritabanı zenginleştirme
Canlı web verileriyle veritabanınızı güncel tutun. Şirket profillerini, iletişim bilgilerini veya ilan detaylarını planlı şekilde çekin — kaynaklar değişse bile şema aynı kalır.
Rakip takibi
Yüzlerce sayfa genelinde fiyatları, stok durumunu, yorumları veya içerik değişikliklerini takip edin. Aynı şema, aynı işlem hattı; yeni kaynakları saniyeler içinde ekleyin.
Veri seti oluşturma
Açık web'den eğitim setleri, değerlendirme kıyaslamaları veya araştırma veri setleri oluşturun. Binlerce URL'yi toplu işleyerek tutarlı yapıdaki çıktıya dönüştürün.

Thunderbit'i bu API üzerine inşa ediyoruz

Şu anda baktığınız aynı API, Thunderbit'in Chrome Extension ve web uygulamasını çalıştırır — 200.000'den fazla kullanıcı tarafından her ay on milyonlarca sayfayı çıkarmak için kullanılır. Bu bir yan proje değil. Kendi ürünümüzü üzerine inşa ettiğimiz altyapı bu.

0M+
Aylık işlenen sayfalar ve artıyor
0K+
Thunderbit Uzantısını Kullananlar
0%
Çalışma süresi
Plan

Fiyatlandırma

Ücretsiz başlayın, büyüdükçe ödeyin

Ücretsiz
Kazımayı denemenin hafif bir yolu. Ücretsiz, kartsız, zahmetsiz.
600 birim / tek seferlik
$0tek seferlik
 
600 sayfayı Distill
  • Distill: 1 Page = 1 API Unit
  • Extract: 1 Page = 20 API Unit
30 sayfayı Extract
  • Distill: 1 Page = 1 API Unit
  • Extract: 1 Page = 20 API Unit
2 eşzamanlı istek
Başlangıç
Yan projeler ve küçük araçlar için harika. Hızlı, basit, gereksiz karmaşıklık yok.
Yıllık 60,000 API birimi
$16/ay
Yıllık faturalandırma. Tüm birimler peşin.
60,000 sayfayı Distill
  • Distill: 1 Page = 1 API Unit
  • Extract: 1 Page = 20 API Unit
3,000 sayfayı Extract
  • Distill: 1 Page = 1 API Unit
  • Extract: 1 Page = 20 API Unit
30 eşzamanlı istek
Temel destek
Pro1En popüler
Yüksek hacim ve hız için tasarlandı. Thunderbit'in tam gücüyle.
Yıllık 600,000 API birimi
$40/ay
Yıllık faturalandırma. Tüm birimler peşin.
600K1200K2400K4800K
600,000 sayfayı Distill
  • Distill: 1 Page = 1 API Unit
  • Extract: 1 Page = 20 API Unit
30,000 sayfayı Extract
  • Distill: 1 Page = 1 API Unit
  • Extract: 1 Page = 20 API Unit
50 eşzamanlı istek
Öncelikli destek

Sıkça sorulan sorular

Ürün ve faturalandırma hakkında bilmeniz gereken her şey.