スクレイプレスクローリング：スケールウェブデータのスクレイピングとクローリングのソリューション

npm install @scrapeless-ai/sdk

pnpm add @scrapeless-ai/sdk

import { Scrapeless } from "@scrapeless-ai/sdk";

// クライアントを初期化
const client = new Scrapeless({
  apiKey: "your-api-key", // https://scrapeless.com からAPIキーを取得
});

(async () => {
  const result = await client.scrapingCrawl.scrape.scrapeUrl(
    "https://example.com"
  );

  console.log(result);
})();

import { Scrapeless } from "@scrapeless-ai/sdk";

// クライアントの初期化
const client = new Scrapeless({
  apiKey: "your-api-key", // APIキーは https://scrapeless.com から取得してください
});

(async () => {
  const result = await client.scrapingCrawl.scrapeUrl(
    "https://example.com",
    {
      browserOptions: {
        proxy_country: "ANY",
        session_name: "Crawl",
        session_recording: true,
        session_ttl: 900,
      },
    }
  );

  console.log(result);
})();

import { ScrapingCrawl } from "@scrapeless-ai/sdk";

// クライアントの初期化
const client = new ScrapingCrawl({
  apiKey: "your-api-key", // APIキーは https://scrapeless.com から取得してください
});

(async () => {
  const result = await client.scrapeUrl(
    "https://example.com",
    {
      formats: ["markdown", "html", "links"],
      onlyMainContent: false,
      timeout: 15000,
    }
  );

  console.log(result);
})();

import { ScrapingCrawl } from "@scrapeless-ai/sdk";

// クライアントの初期化
const client = new ScrapingCrawl({
  apiKey: "your-api-key", // APIキーは https://scrapeless.com から取得してください
});

(async () => {
  const result = await client.batchScrapeUrls(
    ["https://example.com", "https://scrapeless.com"],
    {
      formats: ["markdown", "html", "links"],
      onlyMainContent: false,
      timeout: 15000,
      browserOptions: {
        proxy_country: "ANY",
        session_name: "Crawl",
        session_recording: true,
        session_ttl: 900,
      },
    }
  );

  console.log(result);
})();

import { ScrapingCrawl } from "@scrapeless-ai/sdk";

// クライアントの初期化
const client = new ScrapingCrawl({
  apiKey: "your-api-key", // APIキーは https://scrapeless.com から取得してください
});

(async () => {
  const result = await client.crawlUrl(
    "https://example.com",
    {
      limit: 2,
      scrapeOptions: {
        formats: ["markdown", "html", "links"],
        onlyMainContent: false,
        timeout: 15000,
      },
      browserOptions: {
        proxy_country: "ANY",
        session_name: "Crawl",
        session_recording: true,
        session_ttl: 900,
      },
    }
  );

  console.log(result);
})();

{
  "success": true,
  "status": "completed",
  "completed": 2,
  "total": 2,
  "data": [
    {
      "url": "https://example.com",
      "metadata": {
        "title": "Example Page",
        "description": "サンプルウェブページ"
      },
      "markdown": "# Example Page\nこのコンテンツは...",
      ...
    },
    ...
  ]
}

import { ScrapingCrawl } from "@scrapeless-ai/sdk";

// クライアントの初期化
const client = new ScrapingCrawl({
  apiKey: "your-api-key", // APIキーは https://scrapeless.com から取得してください
});

(async () => {
  const result = await client.crawlUrl(
    "https://example.com",
    {
      limit: 2,
      browserOptions: {
        proxy_country: "ANY",
        session_name: "Crawl",
        session_recording: true,
        session_ttl: 900,
      },
    }
  );

  console.log(result);
})();

import { ScrapingCrawl } from "@scrapeless-ai/sdk";

// クライアントの初期化
const client = new ScrapingCrawl({
  apiKey: "your-api-key", // APIキーは https://scrapeless.com から取得してください
});

クロールエンドポイントの完全なリファレンスについては、[APIリファレンス](https://apidocs.scrapeless.com/api-17509010)を確認してください。

## **クロールの多様な使用例を探る**
開発者がコードをテストしデバッグするための組み込みのプレイグラウンドが用意されており、Crawlはさまざまなスクレイピングニーズに利用できます。例えば：
- **製品情報のスクレイピング**
  Eコマースウェブサイトでのスクレイピングにより、製品名、価格、ユーザー評価、およびレビュー数などの重要データを抽出します。製品モニタリングを完全にサポートし、企業が情報に基づいた意思決定を行うのに役立ちます。
  ![e-commerceサイト](https://assets.scrapeless.com/prod/posts/deep-serp-api-online/fc37187acb6e0b7a85137d753abb2b34.png)
- **フォーラム投稿のクロール**
  コミュニティディスカッションから包括的な洞察を得るために、深さと広さを正確に制御しながら、主要な投稿コンテンツとサブページのコメントをキャプチャします。
  ![フォーラム](https://assets.scrapeless.com/prod/posts/deep-serp-api-online/888db61c1084add65c445dcf5cfdbf1e.png)

## **今すぐCrawlとScrapeを楽しもう！**
***コスト効率が高く、どんなニーズにも手頃な価格：1.8ドル/GBから、ページごとではありません***

プロキシボリュームと時間単価を組み合わせた価格モデルを特徴とするChromiumベースのスクレイパーで競合他社を上回り、ページカウントモデルと比較して大規模データプロジェクトで**最大70％のコスト削減**を実現します。

[今すぐトライアルに登録](https://app.scrapeless.com/passport/login?utm_source=official&utm_medium=blog&utm_campaign=crawl-release)して、強力なWebツールキットを手に入れましょう。

> 💡ハイボリュームユーザーの方は、カスタマイズ価格についてお問い合わせください – あなたのニーズに合わせた競争力のある料金です。