网页抓取 API

只需传入目标 URL,自动启用 AI 能力云端调度全球住宅与移动 IP,绕过 WAF 与验证码,按需进行 JS 渲染,返回干净的 HTML、Markdown、JSON 格式数据。

仅成功计费 · 失败不扣费 自动绕过 WAF 与验证码 云端 JS 渲染 · 无需自建浏览器 200+ 国家地理定向 Amazon / Google / YouTube JSON 接口

自建爬虫 + 代理 IP vs 网页抓取 API

无需繁琐配置与编程,轻松获取采集数据。

您要做什么 自建爬虫 + 代理 IP 网页抓取 API
接入方式 购买代理后,自己写程序访问网页并处理各种情况 提交网页地址,平台负责访问并返回结果
反爬 / 验证码 自己维护规则与重试 平台自动处理
JavaScript 页面 自建无头浏览器集群 URL 加 render=true
高风控站点 自行换住宅/移动 IP 与指纹 加 super=true 等参数
请求失败 代理与服务器成本仍可能产生 不扣积分
Amazon / Google / YouTube 自己抓网页、写解析程序;网站一改版,程序也要跟着修改 直接调用现成接口,返回整理好的 JSON 数据,不用自己写解析程序
典型产出 自己解析 HTML HTML / Markdown / JSON

四步开始抓取

1. 购买积分

在控制台购买 API 积分包,积分永久有效,不会过期。

2. 获取访问令牌并请求

在 API 中心复制网页抓取专用访问令牌,调用 GET /v1/fetch,传入网页地址和可选参数。

3. 云端自动抓取

系统自动选择访问线路、模拟浏览器、按需加载动态内容,并在失败时重试。

4. 成功才扣积分

只有成功拿到网页内容才扣积分;超时、被拦截或没有内容时不收费。

一次 API 调用,覆盖完整抓取链路

自动处理网站拦截

自动应对 Cloudflare 等网站安全防护和验证码,并在需要时重新尝试。

自动加载动态网页

加上 render=true,系统会运行网页脚本,加载单页应用和滚动后才出现的内容,不需要自己安装浏览器程序。

住宅与移动网络

对容易拦截普通请求的网站开启 super=true,改用真实家庭宽带或 4G/5G 移动网络访问(成功请求 10 积分起)。

国家与地区定位

通过 geoCode、regionalGeoCode 指定国家或区域,查看当地价格、搜索结果和网页内容。

按成功结果计费

目标站超时、封禁、空响应均不扣费;积分只在拿到有效响应时扣除,成本可预期。

专用访问令牌

这个令牌只用于网页抓取,与代理提取和账户管理使用的令牌分开,更方便控制权限和更换令牌。

常见业务用法

电商与价格监控

按国家抓取竞品标价、库存与目录页,配合定时任务做比价与告警。

SEO 与搜索监测

从目标城市获取当地搜索结果、摘要和排名,减少服务器 IP 带来的偏差。

市场与舆情研究

汇总公开列表、评论、目录与资讯页,支撑研究与报表。

AI 与数据流水线

直接输出 HTML 或 Markdown,接入 AI 应用和数据处理流程,少维护一套自建爬虫。

主流平台开箱即用 JSON

无需维护易失效的 HTML 解析规则,专用端点直接返回 Amazon、Google、YouTube 等结构化数据。

Amazon

成功请求约 1 积分起

获取商品详情、价格、卖家报价和搜索结果,也可以指定站点和邮编。

  • 商品详情(ASIN)
  • 卖家报价与 Buy Box
  • 关键词搜索与分页
在 API 中心试用 →

Google 套件

成功请求约 10 积分起

获取搜索、地图、酒店、航班和购物结果,并可指定语言和国家。

  • 网页搜索与 AI 模式
  • 地图:搜索、地点、评论
  • 酒店、航班、购物等垂直搜索
在 API 中心试用 →

YouTube

成功请求约 10 积分起

获取视频搜索结果,支持筛选和翻页,不用自己解析视频页面。

  • 关键词搜索(排序与 sp 筛选)
  • hl / gl 语言与国家
  • device 桌面或移动结果
在 API 中心试用 →

API 怎么调用

先在控制台获取访问令牌,再提交网页地址。需要加载动态内容或指定访问地区时,再选择下面的设置。

调用示例

把示例中的访问令牌和网页地址换成您自己的值即可。


      
参数作用说明
通用参数
url目标页面地址(必填)
tokenScraping API Token(必填)
super=true使用住宅/移动 IP,适合高风控站点(成功约 10 积分)
geoCode指定从哪个国家访问网站,如 us(美国)、gb(英国)、de(德国)
sessionId粘性会话,用于登录、加购等多步流程
device选择模拟电脑、手机或平板访问
output返回网页源代码,或更适合阅读和 AI 处理的 Markdown
动态网页(render=true,成功约 5 积分)
render=true运行网页 JavaScript,显示动态加载的内容
waitSelector等网页中的指定内容出现后再返回,例如商品价格。
blockResources不加载图片、字体和广告,让页面更快返回。
playWithBrowser先点击、滚动或输入,再抓取操作后的页面内容。

API 流量包

7 档预设 + 自定义用量:$5 起(约 $0.50/千积分),旗舰档 $1,500(约 1500 万积分、200 并发)。积分永久有效;在余额未用完前,并发档位随所购最高套餐保持,不会因消耗积分而降级。

成功请求的积分消耗(失败不扣费)

不同抓取能力消耗不同积分;只有成功拿到内容才扣积分。

请求类型积分
标准抓取(数据中心出口)1 积分
JavaScript 渲染(render=true)5 积分
住宅/移动 IP(super=true)10 积分
住宅/移动 + JS 渲染(高风控站点)25 积分

准备开始抓取?

进入控制台购买积分,在 API 中心在线试跑,并复制 cURL / Python 等集成示例。

进入控制台