Scrapeless产品升级——让您的数据抓取更快更便宜！

Emily Chen

Advanced Data Extraction Specialist

27-Jan-2025

数据抓取不再是可选的，而是许多公司的必备技能。无论您从事电商、旅游还是SEO分析，抓取网络数据的需求几乎无处不在。然而，验证码(verification code)往往成为抓取过程中最大的障碍。您可能会遇到这种情况：在抓取产品信息时，网站突然弹出验证码，这使得整个抓取过程停滞不前，甚至需要额外付费使用第三方验证码解决方案服务。这不仅浪费时间，也增加了成本。

然而，问题不仅仅是成本。验证码问题往往带来运营复杂性和低效率。您可能习惯了手动解决验证码，或者高价聘请第三方验证码解决方案。然而，结果往往是数据抓取效率低下，自动化流程不顺畅，甚至因技术对接问题而受阻。

今天，我们很高兴地推出Scrapeless的最新更新，它不仅解决了验证码问题，而且大大降低了抓取成本，让您的抓取任务更智能、更高效。接下来，我们将深入探讨这些更新如何帮助您更好地应对实际工作中的挑战。

🚀 Scrapeless的新功能：加速您的抓取速度

Scrapeless的此次功能升级可以显著加快您的网络抓取任务速度，同时保持高精度。无论您是大规模抓取数据还是处理时间敏感型项目，此升级都能帮助您更高效地获得结果，从而实现更流畅、更快的流程。

升级1：优化的验证码自动解决方案：验证码不再是障碍

在数据抓取方面，最大的问题之一是验证码(CAPTCHA)。许多网站使用验证码来防止机器人抓取数据，但这同时也给合法的我们数据抓取者带来了麻烦。

您是否经常遇到以下问题：

当您频繁遇到验证码时，您的抓取任务将被中断甚至停滞。
一些验证码识别工具需要额外付费，并且技术上无法100%解决所有类型的验证码。
如果您手动解决验证码，数据抓取过程将严重减慢。

Scrapeless的最新优化使我们的验证码自动求解器能够修复Scraping browser中的验证码识别问题，解决了因验证码无法识别或识别错误而导致请求站点无法访问的问题。

您可以从本次更新中获得什么好处？

无缝抓取：无论您是抓取电商数据、航班信息还是酒店数据，Scrapeless都能帮助您轻松绕过验证码并继续抓取数据。
100%免费：与许多需要额外收费的竞争对手不同，Scrapeless的验证码求解器已包含在内，且完全免费！这不仅简化了您的抓取流程，而且大大降低了成本，帮助您节省购买第三方验证码解决方案的费用。

升级2：CDP API更新：使自动化更顺畅

许多用户反馈，在自动化过程中，验证码的出现往往需要人工干预，严重影响工作效率。当他们想将验证码求解过程集成到自动化工具中时，很多工具需要复杂的技术配置且不够稳定。

现在不用担心了，因为：

Scrapeless的新功能不仅提高了抓取成功率，还升级了CDP API。现在，Scrapeless可以通过Captcha Solved回调事件，让您在自动化抓取过程中直接接收验证码token。这意味着您可以直接通过Puppeteer等自动化工具集成验证码求解，简化工作流程并提高效率。

本次更新能为您带来哪些好处？

更高效的自动化流程：您不再需要手动解决验证码。通过回调事件，您的自动化流程可以持续向前推进，节省宝贵的时间。
更顺畅的集成：回调事件可以在您的自动化工具中直接触发，无需人工干预，使抓取任务更高效。

升级3：SERP API降价：更快更便宜

高昂的API费用使得抓取成本难以承受，尤其是在抓取大量数据时。Scrapeless不仅在验证码求解方面进行了优化，也及时关注到这一用户痛点。Scrapeless的SERP API价格也下降到每千次查询仅需0.8美元（相比行业内许多竞争对手，我们的价格便宜了10倍），使Scrapeless成为市场上最便宜、最快的抓取解决方案。

需要频繁查询搜索引擎结果的用户往往受制于高价的API提供商，影响抓取效率。Scrapeless Serp API现价仅需0.8美元/千次。

您也可以申请免费试用。点击即可获得免费试用机会！

用户评价：
总的来说，Scrapeless是一个非常高效的抓取工具，可以帮助各种规模的企业解决数据提取问题。它速度快、功能强大，是电商、市场调研、SEO分析等领域的理想选择。 - Users

🛠️ Scrapeless带来的实用功能

1. 免费验证码求解功能

我们知道，许多抓取工具都需要您额外付费才能使用第三方验证码求解服务，这给预算有限的企业带来了很大的压力。与其他工具不同，Scrapeless在我们的Scraping Browser和Web Unlocker中内置的验证码求解功能是完全免费的，无需额外购买。

主要功能：

节省额外的验证码求解成本
简化工具对接，无需与第三方验证码服务对接
高效解决reCaptcha v2（5-8秒）和reCaptcha v3（0-4秒）验证码，准确率超过95%

2. 更快的验证码识别速度和更高的准确率

随着技术的进步，Scrapeless的验证码求解器已经能够以极高的速度和准确率解决各种验证码，尤其是在reCaptcha v2和reCaptcha v3的识别能力上达到了95%以上的准确率。

我们还专门修复了以下问题：

**reCaptcha嵌套问题：**我们修复了页面嵌套导致验证码无法识别的问题，尤其是在某些特定网站上。
**Turnstile挑战问题：**之前我们的求解器会错误地将其识别为Cloudflare挑战，现在已修复。

实现示例 - 验证码求解器

Node.js（Puppeteer）

Copy

// Listen for CAPTCHA solving events
const client = await page.createCDPSession();

client.on('Captcha.detected', (result) => {
  console.log('Captcha detected:', result);
});

await new Promise((resolve, reject) => {
  client.on('Captcha.solveFinished', (result) => {
    if (result.success) resolve();
  });
  client.on('Captcha.solveFailed', () =>
    reject(new Error('Captcha solve failed'))
  );
  setTimeout(() =>
      reject(new Error('Captcha solve timeout')),
    5 * 60 * 1000
  );
});

Python(Playwright)

Copy

page = await browser.contexts[0].new_page()
client = await page.context.new_cdp_session(page)

client.on('Captcha.detected', lambda c: print('Captcha detected:', c))
client.on('Captcha.solveFinished', lambda _: print('Captcha solved!'))
client.on('Captcha.solveFailed', lambda _: print('Captcha failed!'))

👥 Scrapeless如何为不同行业提供解决方案？

Scrapeless不仅仅是一个简单的抓取工具，它可以帮助电商、旅游、SEO等行业的公司解决具体的抓取难题。

1. 电商行业

电商平台上的数据抓取经常受到验证码的阻碍。电商公司需要监控竞争对手的价格并抓取产品信息，而Scrapeless验证码求解器能够提供精准识别和快速响应，确保95%以上的准确率，为电商公司提供可持续的竞争力。

2. 旅游行业

旅游公司经常需要抓取航班和酒店等信息，而很多旅游网站都使用验证码来防止数据抓取。使用Scrapeless，旅游公司可以轻松突破这些验证码，快速获取最新的市场数据。此外，Scrapeless还提供强大的Google Flights抓取API，帮助企业实时抓取航班信息，提高决策效率。您可以访问Scrapeless的API完成文档了解更多信息。

3. SEO行业

SEO分析师和营销人员依赖搜索引擎数据来跟踪排名、分析竞争对手等等。Scrapeless SERP API帮助他们高效地从搜索引擎结果页面(SERPs)收集数据，而无需担心验证码带来的干扰。同时，Scrapeless还提供Google Trends API，让用户能够深入挖掘趋势数据，分析关键词流行度和市场动态。这种组合不仅提高了数据收集的效率，也为营销策略的制定提供了更准确的依据，帮助企业在竞争激烈的市场中保持领先地位。