AI 驱动的 Web Scraper API

零维护,永远如此。

一次 API 调用即可将任何网页转换为 Markdown 或表格。用实时网页数据为你的 Agent 提供支持,构建 RAG 并丰富数据库——基础设施交给我们。

几分钟内即可上线运行

现在就在终端中试用。

>_
URL 转 Markdown
1import requests
2
3resp = requests.post(
4 "https://openapi.thunderbit.com/openapi/v1/distill",
5 headers={"Authorization": f"Bearer {API_KEY}"},
6 json={"url": "https://example.com/article"}
7)
8
9markdown = resp.json()["data"]["markdown"]
核心 API

两大核心能力

Distill 用于清理内容,Extract 用于结构化数据

提炼
URLMarkdown
去除广告、导航和杂讯——只保留真正重要的内容
内置完整 JS 渲染和反爬绕过
每个请求最多批量处理 100 个 URL
提取
URL + SchemaJSON / CSV
一套 Schema 适用于所有网站——无需按站点维护
自动适应网站改版
每个请求最多批量处理 50 个 URL
优势

为什么使用 Thunderbit

你的 AI Agent 应该拥有的抓取 / 数据提取基础设施

定义要什么,而不是怎么做
无需 CSS 选择器、无需 XPath、无需按站点编写规则。只需用 JSON Schema 描述你需要的数据——AI 会判断数据在哪里以及如何获取。
一套 Schema,适用于所有网站
同一套 schema 适用于电商网站、销售列表或你输入的任何 URL。添加新的数据源只是一次配置变更,而不是一场工程冲刺。
即使网站改版也能继续工作
传统爬虫每次改版都会失效。Thunderbit 读取的是语义,而不是 DOM 结构——因此即使底层 HTML 发生变化,提取依然能正常工作。
行业

使用场景

你可以用 Thunderbit 构建什么

具备网页访问能力的 AI Agent
让你的 Agent 能够读取并理解任何网页。一次 API 调用即可返回结构化上下文,供你的 Agent 执行下一步。
RAG 与知识库
将任意 URL 提炼为干净的 Markdown,并直接输入向量数据库。无需 HTML 解析,也无需内容清理脚本。
将任何网站转换为 API
定义一个 schema,指向一个 URL,即可返回 JSON。构建商品价格 API、职位列表 API 或新闻源 API——无需编写任何爬虫。
数据库丰富
用实时网页数据保持数据库最新。按计划抓取公司资料、联系信息或列表详情——即使数据源变化,schema 也保持不变。
竞品监控
跟踪数百个页面中的价格、库存、评论或内容变化。相同的 Schema、相同的流程,几秒内即可添加新数据源。
数据集构建
从开放网络构建训练集、评测基准或研究数据集。批量处理成千上万个 URL,输出始终保持一致的结构。

我们基于这个 API 构建 Thunderbit

你正在查看的同一个 API 为 Thunderbit 的 Chrome 扩展 和网页应用提供支持——已有 200,000+ 用户每月提取数千万个页面。 这不是一个副项目。这是我们把自己的产品押注其上的基础设施 we bet our own product on

0M+
每月处理的页面数持续增长
0K+
Thunderbit 扩展用户
0%
可用性
套餐

价格

免费开始,按需付费

免费版
轻松试用抓取功能。无需费用、无需信用卡、毫无负担。
600 单位 / 一次性
$0一次性
 
提炼 600 个页面
  • 提炼: 1 Page = 1 API Unit
  • 提取: 1 Page = 20 API Unit
提取 30 个页面
  • 提炼: 1 Page = 1 API Unit
  • 提取: 1 Page = 20 API Unit
2 个并发请求
入门版
非常适合副项目和小工具。快速、简单、不过度设计。
60,000 API 单位 / 年
$16/月
按年计费,所有单位一次性预付。
提炼 60,000 个页面
  • 提炼: 1 Page = 1 API Unit
  • 提取: 1 Page = 20 API Unit
提取 3,000 个页面
  • 提炼: 1 Page = 1 API Unit
  • 提取: 1 Page = 20 API Unit
30 个并发请求
基础支持
专业版1最受欢迎
为高并发和高速而生。Thunderbit 全力驱动。
600,000 API 单位 / 年
$40/月
按年计费,所有单位一次性预付。
600K1200K2400K4800K
提炼 600,000 个页面
  • 提炼: 1 Page = 1 API Unit
  • 提取: 1 Page = 20 API Unit
提取 30,000 个页面
  • 提炼: 1 Page = 1 API Unit
  • 提取: 1 Page = 20 API Unit
50 个并发请求
优先支持

常见 问题

了解产品与计费所需的一切信息。