Scrapeless 每周更新日志:2026 年 10 月 19–25 日更新
Scraping and Proxy Management Expert
简要总结:
- 开源 Scrapeless CLI 已在 GitHub 和 npm 上线。 只需一条终端命令即可覆盖 Web Unlocker、Crawl、AI Scraper、代理 URL 生成和云浏览器操作。
- ChatGPT Scraper 现在会捕获后续表单数据。 同时优化了商品数据的解析。
- Perplexity Scraper 现已返回购物数据。 商品推荐可包含来源域名、图片、标题和目标 URL。
- Google Search API 新增 People Also Ask 数据。 默认返回第一层,展开更深层级将计为额外请求。
- AI Scraper 与订阅和账单常见问题已更新。 文档进一步说明了结果处理、获取时间以及账户计费相关的问题。
10 月 19–25 日的更新将 Scrapeless 引入终端工作流,并扩展了从 AI 答案和 Google 搜索结果中可获取的数据类型。本周重点是开源 CLI,其次是 ChatGPT 后续表单、Perplexity 购物推荐以及 Google Search API 对 People Also Ask 的支持。
Scrapeless CLI 开源并已在 npm 上线
Scrapeless CLI 提供一个 scrapeless 命令来调用多个 Scrapeless 服务。公开的 Scrapeless CLI 仓库 包含源码,而 scrapeless npm 包 提供可安装的发行版本。
CLI 适合希望在终端中运行采集任务或从自动化脚本中调用的开发者。其命令覆盖范围包括:
| Capability | Command |
|---|---|
| 使用 Web Unlocker 获取页面内容 | scrapeless unlock |
| 创建网站爬取任务 | scrapeless crawl |
| 收集受支持的 AI 引擎回答 | scrapeless ai |
| 生成代理 URL | scrapeless proxy create |
| 运行云浏览器操作 | scrapeless browser |
当前的 Scrapeless CLI 文档 介绍了安装、认证、输出处理以及可用的工作流。该开源客户端在需要时会使用需认证的 Scrapeless 服务;云端请求和代理流量会消耗账户点数。
ChatGPT 新增后续表单数据
当 ChatGPT 返回用于收集偏好或细化推荐的表单时,ChatGPT Scraper 现在会捕获 follow_up_form 数据。ChatGPT Scraper 参考文档 记录了表单中的问题、可选项、已选值、提示模板以及完整的后续提示词。
对于推荐分析而言,这能暴露出 ChatGPT 在收窄答案前所提出的问题。团队可以将表单与生成的响应一同保留,以了解哪些偏好塑造了下一步的回答。
ChatGPT 商品数据的解析也得到优化。本次更新改进了返回商品内容的解读方式,但并未在本更新日志中引入独立的商品模式(schema)。
开始使用 Scrapeless 进行抓取
使用 Scrapeless 提升你的网页抓取和自动化工作流!
立即注册即可获得 $5 免费点数 —— 无需信用卡。现在就前往 Scrapeless 控制台 领取你的免费点数。
Perplexity 新增购物推荐
Perplexity Scraper 的响应现在可以包含一个带有商品推荐的 shopping 数组。每个条目都包含 domain、image、title 和 url 字段,详见 Perplexity Scraper 参考文档。
这种结构化输出有助于团队审查出现在 Perplexity 推荐中的商品及其来源网站。请将返回的对象与答案一同保存,而不是将其简化为纯文本;JSON 数据交换标准 定义了本数据所使用的对象和数组结构。
购物数据依赖于 Perplexity 返回的内容。新增字段并不意味着每条提示词都会产生商品推荐。
Google Search API 新增 People Also Ask
Google Search API 现在会返回 People Also Ask(PAA)数据。默认包含第一层内容,为团队提供与搜索主题相关问题的另一种视角。
更深层的 PAA 展开会计为额外请求。正在探索多层级的团队在规划采集范围和用量时应将这些请求计算在内;默认响应不应被视为无限制的问题树。
PAA 有助于问题发现、内容规划和搜索意图研究。Google Search API 参考文档提供了更广泛的服务背景。本次公告并未引入未公开的展开参数或按次固定定价。
更新的 AI Scraper 和计费常见问题
更新后的 AI Scraper 常见问题涵盖任务状态、webhooks、可选输出字段以及结果获取。成功的结果在完成后会保留四分钟,因此应用程序应在该时间窗口内获取并保存结果。
订阅与计费常见问题对订阅、余额、续费、支付问题以及特定产品计费进行了说明。文档还解释了即使应用程序从未获取某个已完成的 AI Scraper 任务的结果,该任务仍可能产生费用。
结论
Scrapeless CLI 为开发者提供了一个全新的终端入口,而更丰富的 ChatGPT 和 Perplexity 输出则覆盖了更多推荐体验。Google Search API 新增的 PAA 功能支持问题发现,随着团队向更深层展开,请求计数仍保持透明可见。
在规划用量时,请查看 Scrapeless 价格。TikTok Scraper API 指南介绍了平台上的另一种结构化采集工作流。
准备好用 Scrapeless 构建了吗?
加入正在 Scrapeless 社区中构建 AI 回答和网页数据工作流的开发者:Discord · Telegram。
前往 app.scrapeless.com 注册并开始使用。
常见问题
问:在哪里可以获取 Scrapeless CLI?
源代码可在官方的 scrapeless-ai/scrapeless-cli GitHub 仓库中获取,可安装的 npm 包名称为 scrapeless。
问:Google Search API 默认会返回所有 PAA 层级吗?
不会。默认响应只包含第一层 PAA。展开更深层级会计为额外请求。
问:Perplexity 可以返回哪些购物字段?
Perplexity 的 shopping 数组可以包含来源 domain、产品 image、推荐 title 和目标 url。
在Scrapeless,我们仅访问公开可用的数据,并严格遵循适用的法律、法规和网站隐私政策。本博客中的内容仅供演示之用,不涉及任何非法或侵权活动。我们对使用本博客或第三方链接中的信息不做任何保证,并免除所有责任。在进行任何抓取活动之前,请咨询您的法律顾问,并审查目标网站的服务条款或获取必要的许可。



