推荐方案:住宅 · 动态 IP

数据采集方案

为 Scrapy、Playwright 或自研采集器提供稳定的动态住宅 IP,适合公开网页的数据采集任务。

已有采集器时选择动态住宅 IP;如希望直接提交 URL 获取页面内容,可选择 Web Scraping API。

已有采集器、需要网络出口的团队

爬虫团队

已有 HTML 解析能力,需要更可靠的住宅出口。

价格监控

高量公开 商品列表,自控重试与并发。

内部数据平台

ETL 已有——代理只是网络统一入口。

有爬虫栈的机构

一套动态代理套餐,多任务,GB 统一账单。

代理出口与页面抓取是两种模式

动态住宅 IP 提供网络出口,采集代码由团队维护;Web Scraping API 直接返回页面内容。根据工作方式选择。

🚫

机房 403

托管网络类型 是现代站点首先封的。动态住宅 IP是默认修复。

🔄

办公室 IP 封禁

公司 办公室共享网络 爬虫会占用整段公司 IP,不只是机器人。

🌍

地理数据错误

国家级 VPN 出口返回错误目录。extract URL 按城市筛选。

⚙️

重试风暴

无限并发加出错动态 IP耗尽 GB 仍失败。

🔐

登录态爬虫

会话中动态 IP导致 Cookie 失效——该任务用静态 IP,不是本套餐。

💸

一开始购买全部产品

初期不需要移动、商务与机房。

动态住宅 IP,为自有采集器提供出口

已有 Scrapy、Playwright 或自研采集器时使用动态住宅 IP;不想维护浏览器时选择 Web Scraping API。

产品 计费 适用场景
动态住宅 IP 推荐产品组合 按 GB 计费 建议——公开页面与自有爬虫,按 GB 计费。
Web Scraping API 积分 · 按成功计费 替代——无爬虫、JS 渲染、仅成功付费。

两种常见使用方案

路径 A — 动态住宅 IP(建议)

继续使用 Scrapy/Playwright,JoyProxy 提供网络出口。

  1. 购买动态住宅 IP套餐(先小份)。
  2. 在「白名单与用户」中设置白名单或账密。
  3. 通过控制台或 /v1/extract 生成国家/城市端点。
  4. 每请求动态 IP;限制 任务进程 避免过高并发导致任务不稳定。
住宅代理 →

路径 B — Web Scraping API(无爬虫)

提交 URL,返回 HTML/JSON。

  1. 没有采集器请打开 Web Scraping API 页,可直接使用路径 B。
  2. 在 API Center 测试一个 URL,必要时 render。
  3. 仅成功才扣积分。
  4. 不建议把相同 URL 再泵进动态 IP GB。
Web Scraping API 方案 →

按是否已有采集器选择产品

以下情况买动态住宅 IP

  • 已有爬虫框架。
  • 目标是公开页面,不是登录后台。
  • 需要 TCP 级控制头与时序。

以下情况买 Web Scraping API

  • 不想维护无头 Chrome。
  • 页面需要 JS 渲染或托管处理反爬。
  • 失败不应花钱。

上手检查清单

常见问题

与 Web Scraping API 相同?

不是。本页是给爬虫的代理 IP。API 替用户抓页——见 products/web-unblocker.html。

为什么不先机房?

便宜直到被封——多数零售与搜索目标立刻封托管网络类型。

何时需要静态 IP?

登录会话、伙伴白名单或卖家账号——见账号或电商方案。

移动代理?

仅当目标是移动 App 或仅移动端商店页——见移动 App 数据。

同一任务混用 API 与代理?

可以,但按 URL 类型拆分:简单量走动态 IP,难页走 API。建议减少重复抓取。

了解更多

为采集器配置动态住宅 IP

已有采集器可直接接入动态住宅 IP;没有采集器时选择 Web Scraping API。