Web Scraping API
Web Scraping 爬取网站 API
爬取一个网站，在一个标准化响应中返回最多 10 个页面的干净文本内容，适合把网站内容输入 LLM 和搜索索引。
POST/v1/run/web.crawl
可用率
98.72%
30d · 1,093 次调用
请求数
1,093
30d
响应时间
6.3s
中位数 · 30d
试一试
发出你的第一个请求
示例响应
免费运行只返回前 3 条结果。为密钥充值即可获得完整响应。
{
"found": true,
"data": {
"items": [
{
"url": "https://www.example.com",
"title": "Example - Build something great",
"text": "Example is the platform teams use to ship faster…"
},
{
"url": "https://www.example.com/pricing",
"title": "Pricing - Example",
"text": "Simple plans for teams of every size…"
}
]
}
}响应类型定义
interface WebCrawlResponse {
data: {
items: {
domain: string;
text: string;
}[];
} | null;
found: boolean;
reason?: "not_found";
}完整的参数与响应参考：这个接口的每个字段、类型和示例。
参考
请求、响应与价格
最近验证于 2026-09-29 · 可用率和延迟按 30d 统计POST /v1/run/web.crawl
curl -X POST https://api.getanyapi.com/v1/run/web.crawl \
-H "Authorization: Bearer $ANYAPI_KEY" \
-H "Content-Type: application/json" \
-d '{"url":"https://www.example.com"}'| 字段 | 类型 | 示例值 |
|---|---|---|
| 请求体 | ||
| url | string | "https://www.example.com"要爬取的网站 URL 或域名。 |
| limit | integer | 最多返回的结果数（1-10，默认 10）。按返回的结果数扣费，所以上限越低，费用越少。 |
| 响应 | ||
| found | boolean | true |
| data | object | |
| data.items | array | |
| data.items[].url | string | "https://www.example.com" |
| data.items[].title | string | "Example - Build something great" |
| data.items[].text | string | "Example is the platform teams use to ship faster…" |
| 价格 | ||
| 每次请求价格（上限） | USD | US$0.0347 |
| 价格（/千条结果） | USD | US$3.15 |
常见问题
关于 Web Scraping 爬取网站 API
AnyAPI 的 Web Scraping 爬取网站 API 只需一次 POST 请求 /v1/run/web.crawl，就以统一格式的 JSON 返回 Web Scraping 数据。爬取一个网站，在一个标准化响应中返回最多 10 个页面的干净文本内容，适合把网站内容输入 LLM 和搜索索引。无论哪个数据源提供服务，AnyAPI 都返回同一套统一的 schema。费用：每千条结果 US$3.15，单次请求最多 US$0.0347，以美元计价，无需订阅，也没有每月最低消费。过去 30 天，通过 AnyAPI 发起的 Web Scraping 爬取网站 API 调用中有 98.7% 成功，响应时间中位数为 6.3 秒，共测量 1,093 次调用。
费用：每千条结果 US$3.15，单次请求最多 US$0.0347，以美元计价，无需订阅，也没有每月最低消费。你只需为一个美元钱包充值，每次调用从中扣费。部分由钱包付费的失败请求会产生处理费用，我们按成本原价转嫁，不加价；错误响应会显示收取的金额。
爬取一个网站，在一个标准化响应中返回最多 10 个页面的干净文本内容，适合把网站内容输入 LLM 和搜索索引。响应是统一格式的 JSON，外层结构与每个 AnyAPI 接口相同，所以解析另一个接口只需换一个 URL，别的都不用改。
过去 30 天，通过 AnyAPI 发起的 Web Scraping 爬取网站 API 调用中有 98.7% 成功，响应时间中位数为 6.3 秒，共测量 1,093 次调用。这些是 AnyAPI 对经过网关的流量的自有测量，持续重新计算，并非公开承诺的服务等级目标。