Bun

Bun で Firecrawl を使い、高速な Web スクレイピングおよび検索サーバーを構築します。

前提条件

Bun 1.0+
Firecrawl APIキー — 無料で取得できます

SDKをインストール

bun add firecrawl

.envにAPI keyを追加します：

FIRECRAWL_API_KEY=fc-YOUR-API-KEY

Web を検索する

Bun には組み込みの HTTP サーバーがあります。index.ts を作成します:

import { Firecrawl } from "firecrawl";

const firecrawl = new Firecrawl({ apiKey: process.env.FIRECRAWL_API_KEY });

Bun.serve({
  port: 3000,
  async fetch(req) {
    const url = new URL(req.url);

    if (req.method === "POST" && url.pathname === "/search") {
      const { query } = await req.json();
      const results = await firecrawl.search(query, { limit: 5 });
      return Response.json(results);
    }

    return new Response("Not found", { status: 404 });
  },
});

console.log("Server running on port 3000");

実行:

bun run index.ts

ページをスクレイピングする

同じサーバーに /scrape ルートを追加します:

if (req.method === "POST" && url.pathname === "/scrape") {
  const { url: targetUrl } = await req.json();
  const result = await firecrawl.scrape(targetUrl);
  return Response.json(result);
}

Interact でページを操作する

Interact を使うと、ライブのブラウザセッションを操作して、ボタンのクリック、フォームへの入力、動的コンテンツの抽出を行えます。

if (req.method === "POST" && url.pathname === "/interact") {
  const { url: targetUrl } = await req.json();

  const result = await firecrawl.scrape(targetUrl, { formats: ['markdown'] });
  const scrapeId = result.metadata?.scrapeId;

  await firecrawl.interact(scrapeId, { prompt: 'Search for iPhone 16 Pro Max' });
  const response = await firecrawl.interact(scrapeId, { prompt: 'Click on the first result and tell me the price' });

  await firecrawl.stopInteraction(scrapeId);

  return Response.json({ output: response.output });
}

スクリプトでの使用

スタンドアロンのBunスクリプトでFirecrawlを使うには、次のようにします。

import { Firecrawl } from "firecrawl";

const app = new Firecrawl({ apiKey: process.env.FIRECRAWL_API_KEY });
const results = await app.search("firecrawl web scraping", { limit: 5 });
console.log(results);

bun run search.ts

次のステップ

スクレイピングドキュメント

フォーマット、アクション、プロキシを含む、スクレイピングのオプション全般

Search ドキュメント

Web を検索してページ全体のコンテンツを取得

Interact ドキュメント

クリックやフォーム入力を行い、動的コンテンツを抽出

Node SDK リファレンス

クロール、map、バッチスクレイプなどを含む SDK の完全なリファレンス