一次项目覆盖多洲竞品页。
本地货币货架,不是总部 IP 价格。
没有爬虫平台团队也要做品类快照。
限期把区域 HTML 入库。
公开商品、价格和评论页面适合动态住宅 IP;复杂 JavaScript 页面则需要 Web Scraping API。先按页面类型选择产品。
总部看到的商品网格不等于当地市场。
出版商会注意研究公司的 办公室共享网络。
评论组件在 JS 里渲染——裸 curl 无用。
不建议在动态 IP 上采集客户登录后内容。
200 URL 审计不应等完整爬虫搭建。
先住宅;仅失败 URL 再加 API。
常规公开页面使用动态住宅 IP;需要渲染或页面处理时,选择 Web Scraping API。
| 产品 | 计费 | 适用场景 |
|---|---|---|
| 动态住宅 IP 推荐产品组合 | 按 GB 计费 | 建议——公开 商品列表、评论、定价页,地理正确。 |
| Web Scraping API | 积分 · 按成功计费 | 替代——JS 组件、反爬页,无需本地浏览器。 |
浏览器或轻脚本,地理端点。
路径 A 返回空 DOM 时。
推荐 产品 相同,任务不同。本页是分析师 brief;那页是生产爬虫。
不建议——研究应像许多消费者,不是单一身份。
仅应用内商店——见移动 App 数据。
已有权采集的公开页面。遵守站点条款。
除非来源是宽松开放数据集,否则跳过。